這句話是劉備說的。劉備說這句話是有具體語境的。
劉備長阪坡大敗，撒丫子跑路，把老婆孩子都丟了，悍將趙雲冒死去救，在曹營中七進七出，終於找到了甘夫人和少主阿鬥，甘夫人跳了井，趙雲把少主阿鬥背了回來。劉備壹把扯住孩子摔在地上，說了壹句名言，妻子如衣服，兄弟如手足。衣服破可以換，手足斷不能續。
劉備說的妻子，是指老婆孩子，並非單指老婆。劉備是當著壹幫心腹說的，其實就是收買人心，因為大家夥提著腦袋跟他恢復漢室，都是拋妻棄子，所以劉備也不能表示出對自己的老婆孩子太過關懷，容易失去人心。
秦末劉邦跟項羽幹仗，彭城壹戰被打的屁滾尿流，爬上馬車就跑，把老婆呂後丟掉了。跑到半路，恰好遇到兩個孩子，趕車的夏侯嬰就把兩個孩子扶上了車。劉邦嫌棄馬車跑不快，兩腳就把兩孩子踹下了車。夏侯嬰停住馬車，跳下來把兩個孩子扶上了車，如是者三。劉邦怒了，拔出刀子架在夏侯嬰脖子上，讓他趕緊趕車，不要多管閑事。夏侯嬰說，兩個孩子也不占多大地方，沒有多少重量，影響不了多少速度。如果追兵真的上來了，兩個孩子能礙多大事呢？劉邦這才消停了，帶上了兩個孩子。
明末李自成帶著壹幫小弟造反，被明軍圍困在大山裏，眼看出不去，李自成就把小弟們帶到廟裏，對神發誓之後，壹刀把老婆殺了。小弟們紛紛效仿，也把老婆拉到廟裏殺掉了。這幫亡命之徒沒了牽掛，輕裝上陣，突出了重圍。
劉邦和李自成的做法可能就是對劉備“妻子如衣服”的最好註解。