在李時珍的《本草綱目·田邊》卷二十四《蠶豆》中，說蠶豆的別稱是“胡豆”，他解釋說:胡豆形似老蠶的豆莢，故名。王鎮的《農書》中提到它的名字是因為它在還是蠶的時候就開始成熟了，而且還知道這種豆也是西湖產的。雖然和豌豆同名，但同時種植，形狀卻大相徑庭。《太平玉蘭》雲:“張騫使外國，豆歸。”指的就是這個。今天蜀人管這個叫胡豆，豌豆已經不叫胡豆了。
蠶豆原產於西域或歐洲，漢代張騫下西洋時傳入中原。人們稱它為胡豆或豌豆。後來豌豆指的是另壹種豆，所以胡豆單指蠶豆。關於蠶豆名字的由來，據說它的豆莢很像即將吐絲的蠶，所以叫蠶豆；另壹方面，認為蠶豆第壹次采摘時間與春蠶相似，故稱蠶豆。
新上市的蠶豆比蜂蜜甜，比蜂蜜軟，味道很棒。與櫻桃、李子同時上市，故合稱“三益友”。秦榮光註曰:“八月種壹寒豆，蠶熟，故名。”他還認為蠶豆是以春蠶第壹次吐絲的時間命名的；此外，這種豆在秋季和8月種植，第二年春末結果。它經歷了地球的寒冬，所以被稱為“冷豆”。當然，豌豆被稱為“冷豆子”也是出於同樣的原因。
上海人把本地豆稱為“本地”，所以上海產的蠶豆稱為“本地豆”。上海人很土豆，買蠶豆壹般首選土豆。本地豆和外地進口的蠶豆有明顯的區別，就是豆莢飽滿而短小。大部分豆莢只有兩個豆，而洋豆的豆莢略細而長。壹個豆莢裏往往有三顆、四顆甚至五顆豆子，上海人稱之為“客豆”。
江西人多，尤其是江西農村，痢疾比例更高。他們稱瘌痢頭為“克頭”，蠶豆在當地也被稱為“克豆”。他們認為“柯頭”是吃了“柯豆”而得的病，也叫“蠶豆病”，脫發只是蠶豆病的壹種癥狀。
蠶豆是豆類中顆粒較大的壹種，英文名為Broadbean，意為“大顆粒豆”。宋代宋祁《益都吳芳略》中說:佛豆很大很結實，農民種的不多，只以為園中有利可圖。加鹽吃才是小孩子喜歡的。
作者沒有說明這種產於南方的“佛豆”是不是蠶豆，但明代學者方以智認為書中提到的“佛豆”是蠶豆；清代對植物名稱、谷類、蠶豆的考證中，直接說:(蠶豆)明代的最大最好，雲南是佛國，名“佛豆”。然而作者在後面拖了壹句:“是基於這個嗎？”顯然，他認為這種說法有點不靠譜。
魯迅《早晨的花》導言:曾經，我反復回憶小時候在家鄉吃的蔬果:菱角、羅漢豆、茭白、哈密瓜。他還在《喊社戲》裏說:這是桂生，說羅漢豆盛開，柴火準備好了，我們可以偷壹些來煮。不用解釋，魯迅寫的“羅漢豆”就是蠶豆。據說這是因為蠶豆長得有點像寺廟裏供奉的羅漢的大肚子。