隋朝的窦威，对文史情有独钟，以至于被家中的兄弟们戏谑地称作“书痴”。他的才华被内史令李德林所赏识，因此被举荐为皇家图书馆的秘书郎。在这个充满典籍的宝库中，窦威辛勤耕耘了十年，他的学识得到了极大的丰富和深化。后来，蜀王杨秀向他伸出了橄榄枝，邀请他入蜀参政。然而，当杨秀因故被废黜，那些曾经与他同流合污的官员们也纷纷遭受了牵连，唯有窦威，因为他一直保持清廉自守，没有参与任何不当行为，所以能够安然无恙地返回京城。窦威的兄弟们见他归来，带着一丝讥讽的口吻问道：“你从蜀王府里应该带了不少金银财宝回来吧？”窦威却平静地回答道：“蜀地虽有富饶，但并无我所钟爱之物。我真正带回来的，不过是几箱心爱的书籍而已。”与此同时，窦家的其他兄弟在陈国灭亡之后，纷纷飞黄腾达，家中宾客络绎不绝，
门庭若市。而窦威的府邸则显得冷清许多，车马稀少，与兄弟们的热闹景象形成了鲜明对比。因此，在京城之中，便有了“富贵窦府”与“寒素窦府”之分。
