五凤楼有一个古老而又美丽的传说：古时候玉皇大帝生了五个姑娘依次起名金凤、银凤、玉凤、彩凤、翠凤。这姐妹五人一个个如花似玉。她们不甘心过天庭那种寡淡无聊的神仙生活就相约下凡与凡人共居。当她们走到此处时被守天神发觉，立即报告给玉皇大帝。玉皇大帝传令要她们五姐妹立即返回天宫。五凤抗令不从。玉皇大帝恼羞成怒，传令天兵天将强迫她们回天。五姐妹相抱成团宁死不返。玉皇大帝传令，以天庭律条治罪派出雷神霹雷闪电将五姐妹击死于此。五凤姐妹当即化作一架山脉故称凤凰山，五凤之魂就居于山首又因其父是玉皇大帝，后人为纪念五凤姐妹故在此处建筑五凤楼，把大殿叫做玉皇观表示吉祥。据说，象这样结构错综复杂，形体壮伟高大的五凤楼，世界上只有三座。其余两座在中国的北京和日本的东都。至于一般的五凤楼，全国也只有十多个。