公元1684年~1707年，康熙皇帝曾六次下江南，一方面是为了视察江南一带的各项工程，另外一方面则是拜谒孔庙、笼络江南知识分子，其根本仍然是为了维护清朝的统治。

在他六次下江南的过程中，其中四次都住在江宁织造曹寅家里，这就非常有意思了！

曹寅的父亲曹玺是内廷二等侍卫，所以有机会可以接触到皇室的人。另外，在康熙皇帝出生后，挑选了曹玺的妻夫人孙氏为保姆，这就令两家人的关系更加的紧密了。

康熙二年（1663年），曹玺被派往南京担任江宁织造，一方面负责织办宫廷里和朝廷官用的绸缎布匹，另外一方面则是充当康熙皇帝的耳目，为他收集情报。

曹玺死后，曹寅“子承父业”，也做起了江宁织造。这个职位虽然不算特别高，但是油水却是非常多的，曹家也成为了金陵一带的富豪。另外，自康熙四十二年（1703年癸未年）起，曹寅与李煦奉旨十年轮管两淮盐课，这进一步助推了曹家的财富积累，曹家盛极一时！

不过，纵使曹寅家中有金山银山也经不起康熙皇帝多次折腾啊！在康熙六下江南时，因为十分宠信曹寅，所以四次都住在他家里，由其负责南巡接驾大典。这其中的花费是巨大的，而且内务府只给报销一些，剩下了就由曹寅补上，这压力可以说是非常大。

曹寅家里毕竟不是开金矿的，这可怎么办呢？曹寅便打起了挪用公款的主意，亏空了两淮盐课银、织造库银等公款300万两，被两江总督噶礼在1709年告到康熙皇帝那里去了，希望能够公开弹劾他，不过康熙皇帝并没有允许，因为他已经把曹寅当做“家人”了，只负责给钱的“家人”。

为了平息事态，康熙还是私下告诫曹寅和他的大舅子李煦要想办法补回来，但这又不是小数目，曹寅陷入了困境之中，曹家的衰败已经无可避免了。

康熙五十一年，曹寅因痢疾病逝于扬州，他的大舅子李煦在给康熙的奏折中说道：在曹寅弥留之际，核算出仍有库银二十三万两亏空的，而曹寅家里已经没有办法补得上了。“身虽死而目未暝”

看在曹玺和曹寅的情分上，康熙让曹寅的儿子曹頫继任江宁织造的位置，但是对曹家的情分已经非常淡了，甚至对曹頫说：“念尔父出力年久，故特恩至此。”至于曹家后来查出来的亏空，康熙都下令让曹寅的大舅子李煦等人想办法偿还了，也算是对他的一份报答吧！

雍正登基继位为帝后，下令在全国大力彻查官员亏空一事，并且表示绝不会像其父亲康熙那样留情面，曹寅的大舅子李煦和儿子曹頫相继被查出亏空。不过，雍正还算是对曹家留有情面的，为了防止他人故意敲诈勒索曹家，他特意下令告诫曹頫要安分守己，不要病急乱投医，否则就是自讨苦吃。但这份告诫还是救不了曹頫，更救不了曹家。

雍正六年（1728年），曹寅嗣子曹頫终因经济亏空、骚扰驿站、转移财产等罪被革职抄家，两手空空回了老家北京，盛极一时的曹家彻底衰败了。