《红楼梦》作者曹雪芹的祖父曹寅，曾经是康熙的侍读，据说他就是《鹿鼎记》中韦小宝的原型，这使得康熙对曹寅极为信任，所以才让他去当江宁织造任职。
因为祖父与康熙帝的这一层关系，曹家当时也算得上是当地的名门望族。可以说，曹雪芹早年间也过着锦衣玉食的生活，是一位名副本来的纨绔子弟。
但是好景不长，雍正六年，因曹雪芹的父亲曹顒任江宁织造期间的亏空问题，雍正帝下令将曹氏抄家，曹雪芹也不得不随家人迁回北京老宅。家道中落后，他不得不“举家食粥酒常赊”。可以说，这一突发事件彻底改变了他的命运。
大多数人认为，曹顒之所以会在任江宁织造期间造下巨额亏空，与康熙南巡期间他频繁的接驾经历有关。正是因为在招待康熙时的巨额消耗，曹顒才不得不挪用江宁织造府内的库银。
那么，对曹氏一族照拂有加的康熙，为何会屡次住在曹家，难道没有预见曹家可能会因为这个真相出事么?
事实可能恰恰相反，对于康熙而言，住在曹家，由自己这位伴读的儿子为自己接驾，非但不是一种负担，而是一种格外的荣宠。
先来说一下曹家的渊源。
曹家的一位先祖曾是明朝军官，在一次交战中，这位先祖被清军所俘虏。不过，清军并没有处死他，而是将他充作了皇族包衣(即家奴)。包衣地位虽低，但满清入主中原后，曹家的待遇也算是水涨船高。
更巧的是，曹雪芹的太祖母孙氏成了皇子玄烨(后来的康熙帝)的奶妈，如此一来他的祖父曹寅也得到机会入宫，成为小皇子的侍读。侍读听上去没什么地位，但却是实打实的天子近臣，曹家就借着这一丝与皇帝的关系开始了发迹之路。
康熙亲政后，曹玺(曹雪芹的曾祖父)被派往南京任“驻扎江南织造郎中”。明面上看，这只是内务府设在南京专门负责采买绸缎服装及各种御用物品的机构，但实际上它还有着充当天子耳目的职责。正因如此，它不仅在地位上仅次于两江总督，还更受皇帝的信任。
也正是因为这个真相，康熙六次南巡，有四次都住在曹寅府中。可对于曹家而言，这种信任也暗含着很大的代价，为了做好接驾一事，曹家搬空了三代家主60年内所积累的财富不说，还不惜挪用江南织造府库中数十万的银两。
本来康熙的南巡活动在现在看来本来也蛮无聊的，无论是到哪里去可以归纳为十个字：“题字、宴请、赏银、封官、看戏”。但这种“无聊且枯燥”的方式，代价可一点也不小。
比如看戏，在当时有一种说法叫做“能养千军，不养一戏”，讲的就是这些戏班子所花的财力和精力。有不少专家学者认为，《红楼梦》中不少段落都在影射康熙南巡时的奢靡花费，尤其是《豪宴》、《乞巧》、《仙缘》、《离魂》这几章节，更是如此。
无论是当时的康熙也好，还是后来的雍正也罢，两位皇帝真的未必会将这几十万两的花费看在眼中。尤其是康熙，刚刚享受完自己包衣奴才的热情招待转眼就翻脸不认人，他可做不出来。因此，当有人向康熙汇报说曹寅挪用府库银两时，康熙不但不以为意，反而直接为曹家开脱，称“曹寅李煦用银之处甚多，朕知其中情由”。
说的直白一点，如果圣眷不衰，曹家根本不会因府库亏空而获罪。可是，等到康熙死后，继位的雍正与曹家就没有那么多感情了。这位“日夜忧勤”的世宗皇帝，根本看不上曹家这种依靠裙带关系上位的家族。
后世对雍正除了刻薄寡恩这种纯粹的负面评价以外，往往还会提及他的勤勉，史书称他“毫无土木、声色之娱”。这样一位将勤勉和节俭作为座右铭的皇帝，如何能允许自己的家奴们浪费自家钱粮呢?
另外，还有一点让雍正对曹家失去了好感。在九龙夺嫡的过程中，曹家押错了宝，站到了九阿哥胤禟一边。因此，与雍正其实也算不上多么亲近的曹家自然就失去了他的青睐。
在这种情况下，这些亏空虽然和自己老爹有关，但脸厚心黑的雍正又如何会注意这一点，于是，原来被康熙搁置下的“府库亏空”问题，又被雍正提了出来。
当然了，苍蝇不叮无缝的蛋，如果曹家自身真的没什么问题，雍正也不会一直捏着曹家这个小辫子不放。但可惜的是，与忠实勤奋、办事麻利的曹玺不同，他的这些子孙后代们一个赛一个的不争气。
他儿子曹寅还算是能文能武，但也曾经在任期因为倒卖黄铜亏了内务府几万两银子，而到了曹雪芹他爹曹顒，和他四伯曹頫掌管江宁织造时，织造府内更是乌烟瘴气。
尤其是曹頫，他平日里嚣张跋扈，公然贪污公款，索要贿赂，就连雍正本人交办的差事也是一点也不利索。最让雍正气愤的是，有一次他穿的石青缎团龙袍竟然褪色了，感到脸面大失的雍正一查，得，这布料又是曹家督造的。
想想看，这种和主子既不亲近，办事又无能的奴才，雍正难道还留着过年么?于是，雍正六年，曹頫终因经济亏空、骚扰驿站、转移财产等罪革职抄家。而原来煊赫一时的曹家，也就此败落了。