徒： 只，仅。壁： 墙。意思是家里只有四面立着的墙壁。出自《史记·司马相如列传》：“文君夜亡奔相如，相如乃与驰归成都，家居徒四壁立。”
西汉景帝时，蜀郡(今四川省)成都辞赋家司马相如在京城长安(即今陕西西安市)任武骑常侍。汉景帝不喜欢辞赋，司马相如借病辞了武骑常侍官，投到喜爱文人学士的梁孝王门下。几年后，梁孝王驾崩，司马相如回到老家成都。因家贫，没有能养活自己的事业。而在成都西南的临邛(今四川邛崃市)做县令的王吉，素与司马相如有交情，于是邀请他到临邛去，临邛巨富卓王孙特设宴款待司马相如。司马相如风雅潇洒，使满座高朋为之倾倒。当酒兴正浓之时，王吉上前奏琴说：“听说你喜欢弹奏，就弹奏几曲吧。”相如辞谢再三，弹奏了几曲。当时，卓王孙的女儿卓文君刚刚死了丈夫寡居在家，她很喜欢音乐。相如也早闻文君才貌之名，故在弹奏之中，慎选曲调，以琴心诉说心意。文君听琴音，从窗外偷看，心中非常高兴，对相如产生了爱慕之情。宴会后，相如暗中派人以重礼送文君身边的侍者，以向文君献殷勤。文君知道相如和自己心相通，便与相如乘夜色急忙赶回成都。卓王孙知道后，大发脾气道：“女儿不成器，我不忍心杀她，但我的财产一分也不给她。”
文君到成都后，“家居徒四壁立”。时间长了，文君很不高兴，对相如说道：“我们将家搬往临邛吧，从弟弟那借点钱做个小生意，就足以为生，何必在此这么受苦呢!”相如答应了，便与文君一同前往临邛，卖掉车骑，开了一家小酒馆。文君当垆卖酒，相如身着短裤帮着打杂、洗碗筷。
“家徒壁立”即由“家居徒四壁立”变化而来，形容家中十分贫穷，一无所有。
又作“家徒四壁”。