五鳳樓由“三堂兩落”組成，前低後高，層次分明，巍峨壯觀，富麗堂皇。關於五鳳樓的來歷，永定城鄉流傳着一個美麗動人的故事。

　　相傳明朝萬曆年間，永定縣城東門外名叫墩上的地方出了位貌若天仙的餘娘娘。餘娘娘的小名叫四娘。她自幼父母雙亡，和一個比她小兩歲的弟弟相依爲命，靠替人割草、放牛來維持生計，過着衣不蔽體、食不果腹的生活，還經常無端地受到有錢人家子弟和地痞流氓的欺負。

　　日子一天天地過去了，餘四娘也在痛苦的煎熬中一天天地長大，昔日的黄毛丫頭出落成一個亭亭玉立、丰姿綽約的大妹子。在她16歲那年，皇上下詔選天下美女進宫，規定所有妙齡女子都必須接受挑選，任何人不得私藏，否則就是欺君之罪。天底下哪個父母願意讓自己的女兒進宫侍奉皇上？因爲女兒一旦進宫，那簡直就是生離死别，猴年馬月也難得見上一面。再説，内宫鬥争激烈，被選入宫的人有幾個能得善終？田舍之家尚且奢望享受天倫之樂，更何况是有錢人家呢？因此有錢的人家都在忙着選女婿嫁女兒，到處都在上演一幕幕令人啼笑皆非的“拉郎配”鬧劇。

　　欽差大臣來到永定之後，嚴飭地方官員限期選送美女。地方官員和鄉紳一合計，便把無依無靠孤苦伶仃的餘四娘“舉薦”上去。誰知吉人自有天相，當衣衫襤褸、面有菜色的餘四娘前去應選時，欽差大臣眼前突然一亮，被她那傾國傾城之貌驚呆了。眼前這個絶色女子，正是他們苦苦追尋的上上人選。於是立即命畫師爲她畫像，並差人星夜持畫像進京供皇上過目。皇上一見，心中大喜，馬上傳旨護送民女餘四娘進宫。

　　俗話説：三分人材，七分打扮。經過一番梳妝打扮之後的餘四娘像一朵剛出水的芙蓉，更加楚楚動人，真如“沉魚落雁”、“閉月羞花”。加上她福至心靈，聰慧過人，一路上刻苦習禮應對，因而一進宫便博得皇上的歡心，以至於“三千寵愛在一身”，不久便被册封爲貴妃娘娘。

　　然而時隔不久，皇上就發現餘娘娘經常雙眉緊鎖，眼露憂傷，便忍不住詢問起來。餘娘娘趕忙俯伏地上道：“臣妾有位胞弟仍住在鄉間。懇求皇上格外開恩宣他進京，俾使臣妾能見上兄弟一面。”皇上愛屋及烏，頓生惻隱之心，馬上降旨讓地方官員護送國舅進京，又安置他住在宫外的一處空房裏。可是時間一長，這位山野村夫雖然每天錦衣玉食，享盡榮華富貴，但是總感到很不自在，很不開心。一來他和姐姐雖然近在咫尺，然而宫禁森嚴，要想見面談何容易？二來見面時動輒要行國禮，更讓他覺得彆扭而承受不了。再説，來京城已經三個多月，怎麽老是見不到姐夫呢？不過話又説回來，假使能够見面，那又該説些什麽呢，總不能説些鄉下抓泥鰍的事吧。他越想越傷心，越想越無聊，最後終於下定决心：還是回到鄉下去和窮哥們在一起厮混吧。

　　餘娘娘得知弟弟的想法，對弟弟的選擇很是無奈，又不便强留，只好聽憑他的心意。臨行前，皇上賞賜給他無數的金銀財寶。豈料這位國舅臨出宫門仍頻頻回首，皇上見狀很是不解，垂詢之後才知他家中居室簡陋破敗，對宫室建築十分羡慕。皇上看在餘娘娘的面上，立即敕令永定地方官員依照宫室的模樣，火速爲國舅在家鄉蓋一座五鳳樓。此時，泪眼婆娑、一直站在皇上身後的餘娘娘乘機請求皇上讓其鄉下所有的親戚和有財力的人都能分享殊榮，仿建五鳳樓。皇上也就順水推舟，滿口答應。從此以後，在永定城鄉一座座氣宇軒昂、具有皇家宫室氣象的五鳳樓便如雨後春笋般拔地而起，蔚爲奇觀，而其他州縣的百姓由於没有得到皇上的恩準，不敢“僭越”，只好仍住在矮低的平房裏。