之所以叫霍山佛子岭，是因为传说古时有一行者在此用瓦片垒成一小浮屠，念经拜佛，故后改为佛子岭。

佛子岭位于安徽天柱山风景区，茶庄东南约4公里，海拔330米。俗称父子岭。民间传说古时有一行者在此用瓦片垒成一小浮屠，念经拜佛，故后改为佛子岭。今野（寨）天（柱山）公路穿岭而过。

当时这里不叫霍山，因为地貌怪异而叫怪石山。楚汉时期，天下大乱，著名学者霍龙随祖先自吴国南下，避乱龙川。

汉高祖在位时，曾请霍龙任职，但霍龙无心官场，婉言谢绝，一心在此讲学，传播中原文化，后人为了纪念他，才将这里称为“霍山”。