《史记·司马相如列传》中记载：“文君夜亡奔相如，相如乃与驰归成都，家居徒四壁立。”故事是这样的：汉朝时期，蜀郡临邛县的富豪卓王孙家举办了一场盛大的酒宴。酒宴上，县令递给才子司马相如一把琴，请他展示琴艺，相如接过琴，心中却有另一番打算：他对卓王孙家的女儿卓文君心生敬仰，决定借琴传情。他弹奏时，乐声悠扬，曲调中充满了对文君的爱慕之情。卓文君听出了其中的情感，当晚便与司马相如私奔。他们一同驾车回家，打开家门，只见四面灰墙，家中空无一物，但卓文君觉得他们的心是紧紧相连的，这比任何财富都珍贵。成语“家徒四壁”便源于此，形容穷得一无所有。该成语也被称作“家徒壁立”、“家四壁立”等。