羊公石室在华山主峰西北的白羊峰上，与壶公石室毗邻，是春秋战国时天下杨姓先祖晋公子羊舌氏隐居避难的地方。
史载："白羊峰在岳西北五里，层岩晃朗，洞室空漾。昔有隐此峰者，莫知姓名，当乘白羊往来，因以名峰。每至三元八节，即有神灯或三或五现于崖端。"《列仙传》记述得更为神奇。说战国时有修羊公者隐于石室，每日以黄精为食，以藤萝为榻，眼看吊榻的藤索就要断裂。他依然睡卧不动。到西汉年间，景帝曾慕名以礼请修羊公入朝廷讲道，但修羊公就是不答话，使景帝求仙的愿望数年得不到实现。景帝下诏问他何时开口讲道，修羊公不语，忽然变化成一只石羊，羊腿上有"修羊公谢天子"六字。景帝命侍从把石羊置于通灵台，羊却不知去向。因此汉刘向有诗赞曰：
卓兮修羊，韬奇含灵。
枕石太华，餐茹黄精。
汉礼虽隆，道非所经。
应变多质，忽而变形。
《唐书》记载："杨硕，字太初，晋叔向之后，祁盈之难，其先祖逃居华山仙谷。及硕，隐居不仕，洞习天文。生子八，俱从沛公征战。第八子喜击杀项羽有功，封赤泉侯。"《杨氏族谱》记载："杨氏之先避祸逃于阴晋，筑室华山之麓，名晋公子宫，故址在今县治东南三里小涨村北人称墙口的地方。"王处一《西岳华山志》载："白羊真人有《禁山录》及《制虎豹狼熊符七十道》行于世。"唐初，被称为诗坛四杰之一的杨炯，也曾领群僚来石室追寻先祖遗迹，并写下数篇诗文，在诗序中记载了访寻先祖隐居处的经过和感慨。文中说："太华千仞，长河万里，则吾土之山泽，壮于域中；西汉十轮，东京四代，则吾宗之人物，盛于天下。……塞山四绝，烟雾苍苍，古树千年，藤萝漠漠，诛茅作室，挂席为门，石隐磷而环阶，水潺潺而匝彻，乃相与旁求胜景，遍窥灵迹。论其八洞，实唯明月之宫。相其五山，即是交风之地。仙台可望，石室犹存……"由此可见，华山白羊峰的羊公石室即是当年杨氏先祖避难处无疑。白杨硕子杨喜被汉高祖刘邦封侯始，杨氏后世名人辈出，其后裔四时八节石室祭祖，于是产生了神灯的传说。杨硕子孙中也有继承杨硕遗志，隐居山林不愿出仕者，这便有了修羊公的传说和后世文人的赞诗等。至东汉时期的杨统、杨厚父子在天文地理方面的研究已形成较大影响。
羊公石室年代久远，伴随岁月流逝，地质地貌改变，当年通往石室的小径，已湮没在草石之中，今只能遥望，而很少有人能攀人洞内。1994年华山管理局在仙峪白羊峰西侧崖上镌刻石碑一通，上凿"杨氏先祖避难处"七个大字。
