人们为了纪念五位仙人，建造了五仙观，塑五仙骑羊像，奉祀观内。五仙观还保留有宋代至清代的碑刻14块，石麒麟一对。原有五仙塑像，年幼的在中间，手里拿着稻穗，年长的四位在左右，手里分别拿着黍、稷等谷穗。 五仙像下面的五头羊，大小相交，毛色斑驳。
行往后殿东侧，可见裸露的红砂岩层上面有一巨大的脚印状凹穴，古人以为是仙人足迹。其实在晋代以前，这里还是江边，人称“坡山古渡头”，凹穴是古时珠江洪水期的急流冲蚀而成的。明清两代，分别以“穗石洞天”和“五仙霞洞”列入“羊城八景”。
中国古代文字中“羊”通“祥”，“吉祥”也可写作“吉羊”。中国传统的美学观念是“羊大”为“美”。在亚洲许多国家的传统文化中，“羊”也是吉祥之物，能给人带来幸运。千年前的“五羊衔谷”传说，使得“五羊”成为广州城市最为知名的一个标识。