話說明朝弘治年間，方獻夫任史部尚書時，壹天四更起床，盥洗完畢，準備用早點，豈料仆人遲遲沒拿上來。他到廚房壹看，廚子正心急火燎地在那裏搓手，原來廚子遲了起床來不及做點心。方獻夫見案板上有已發酵好的面團，便急中生智，叫廚子在面團中加上雞蛋和糖揉勻，做成壹個大餅子，放在爐子上烤。壹會兒餅子烤好，方獻夫用包袱布包好，命轎夫起轎，匆匆上朝去了。
方獻夫來到朝房，見還有時間，便拿餅子就著清茶吃了起來，餅子松軟甘香，十分可口。同僚們聞到餅香四溢，都咽口水了，在官員還探過頭來問吃什麽餅子。方獻夫故鄉情濃，不假思索便說：“這是西樵大餅”。散朝後，方獻夫命廚子如法炮制，做了幾十個大餅子，第二天上朝時帶到朝房，分給同僚享用。同僚們邊吃邊嘖嘖稱贊餅子可口，西樵大餅便在朝中美名揚了。方獻夫也經常命廚子烤制，供自己吃或招待客人。
後來方獻夫稱病還鄉，在西樵山設石泉書院講學10年，將制餅方法教給山民。好方法加上西樵山好泉水，制出來的西樵大餅更可口了，又因為餅子形如滿月寓花好月圓的好意頭，因此西樵人嫁娶喜慶、探親和過年過節，都以此作禮品送人。
到了清末民初，西樵大餅做得最好的是離西樵山不遠的民樂圩壹餅家，它制出來的西樵大餅除了甘香、松軟、清甜外，還有刀切不掉渣，暑天在桌上放上10天半月不變質的特點，廣州、佛山的商人紛仿制，但色、香、味均無法與地道的西樵大餅媲美。