弘農楊氏在歷史上出過許多名人，包括漢代有四世三公楊震、楊彪、楊賜、楊秉，唐代三相楊思遠、楊再思、楊國忠，宋代名將楊繼業，明代陜西巡撫兼三邊總制楊壹清、內閣大學士楊邦佐，當然，還包括楊貴妃。
四知堂的名稱來自楊震面對學生王密的賄賂時的名言：“天知、地知、子我知，何謂無知？”