三祖寺，坐落在野人寨北面的谷口凤形山上，这里是天柱山的南大门。公元505年梁都健康（今江苏南京）道林寺高僧宝志在这里选地建寺，梁武帝萧衍赐名山谷寺。公元509年中国佛教禅宗第三代祖师僧璨驻锡山谷寺，并在此传衣四祖道信。公元745年为僧璨舍利塑像建塔，公元772年唐肃宗李亨赐塔名“觉寂”。

在三祖寺西边山谷溪涧中有一巨石酷似牛的全身，头、背、腹、腿，线条分明，跪卧溪畔，如饱饮清泉之后，昂首北向，谛听古刹钟鼓之声。 前人在此牛背大书“天下奇观”。 石牛北侧山崖有一处突出如台，相传为宋代名家黄庭坚读书台。与此台相对的南侧山崖原亦有突出如檐的岩石，两崖相接，植被填补了其间空隙，构成了不是洞门的动门，因有石牛古洞之称。这里不但景色优美，更因摩崖石刻的繁密、古老、名家手迹多而远近驰名。

不远处还有一座应梦井，传说唐代天宝年间，明皇曾梦游于此，早上起来后叫人记下来，命中使王越宾依梦境四寻，果然在此处找着，唐明皇遂赐名“应梦井”。此井虽位于高岗之上，却不盈不涸，潜水清则井水清，潜水浊则井水也浊。当年中使王越宾来井边致祭时，曾为此事赋诗一首：“碧坞烟霞昼未开，游人到此尽徘徊。凭谁借问岩前叟，曾托吾皇一梦来。”

野人寨原名谷口，谷口改名野寨，缘自宋末刘源兴兵抗元而得名。南宋末，江北地区大都沦入元蒙手中。据史书记载，刘源字叔清，别号野人，潜山梅城人。元至元十二年，元蒙军队进攻安庆，知府范文虎投降，引起军民极大愤恨。至元十四年（1277）智勇双全的刘源在天柱山倡议起兵，扎营结寨，从谷口到西关，五里一营，十里一堡，兵马往来，不绝于道。他与宋安抚史张德兴等联络，屡败元兵，保护了十多万群众免遭蹂躏。后因叛徒出卖，致使山寨被攻破，刘源血染沙场。明宣宗朱瞻基，为彰显刘源卫国有功，封他为护地大王，并把他当年建寨起兵的地方叫做“野人寨”。另外在群众的口碑上，传说古时这里常有野人出没，伤人害畜，县令用烈酒诱野人入洞，同归于尽，故称这里为“野人寨”。