在高平、長子、長治三縣交界處，山巔有兩座石雕方形塔，塔側(cè)石雕伏羊佛龕造像，頭尾清晰，由此山狀為羊頭，故名。
羊頭山梵剎，名曰清化寺，據(jù)記載始建于北魏孝文帝太和年間（四七七——四九九年），原名定國寺，北齊時改名宏福寺，隋末寺廢，唐武則天天授二年（六九一年）重建，并改額清化。今清化寺建筑已不存，尚留石佛三尊、明碑一通和殿堂遺址，但寺周北魏至隋唐時期窟龕造像和石塔仍依然如故。
羊頭山正面高峰凸起，左右山脈前伸，形如箕掌，石刻造像即分布于其間。
羊頭山石刻造像和石塔，是羊頭山歷史遺物中的精華所在。它的分布，有的在山巔，有的在山腰，有的為窟，有的為龕，原有規(guī)模及順序已不可考，現(xiàn)狀可分為九區(qū)。較大窟龕二十二個，小型佛龕八十多個，窟洞平面多為方形。還有千佛碑一通，皆魏至唐物。山巔山腰雕石塔六座，唐制，高度4─6米不等，平面方圓兩種，高者七層，密檐式，低者兩層，樓閣式，形制古樸，手法簡潔，為他處所少見。
主峰極頂列為首區(qū)，有石塔兩座，佛龕一區(qū)，龕為三塊巨石疊成，下為臥羊，中為佛龕，上為瓦隴式屋頂，龕內(nèi)內(nèi)置一佛二菩薩，佛像結(jié)跏而坐，面型衣飾皆屬北魏風格。
