自从曹家任职冮宁织造以来,康熙六次下江南,其中4次就住在江宁织造府,因当时孙夫人就居住在江宁织造府,康熙便为曹家提了一个《萱瑞堂》的匾,萱草就是黄花菜,江南人常把这种花草比作母亲,意思就是把孙夫人比作母亲,瑞是母亲大人吉祥之意,可见这块牌匾含金量有多大。纵观满清一朝,能得到这样泼天的荣华与富贵,基本上是寥寥无几,曹家也由此达到了鼎盛阶段。为了讨康熙欢心,康熙住在曹家时,曹家在安排皇帝一行人马上,各个方面极尽奢侈,资金花费巨大,甚至不惜多次向国库借款,这为曹家最终的衰败埋下了祸根。
曹寅死后,他的儿子曹颙接任江宁制造,只在任上二年就病逝了,以后江宁制造一职由曹頫继任,曹頫就是曹雪芹的父亲,至曹玺发迹开始,到曹寅把曹家打造出一个钟鸣鼎盛之家之时,几代人的辉煌也便走向盛极必衰的规律。
康熙死后,雍正继位,因曹家是太子胤礽的支持者,由此曹家便被卷入一场政治斗争的漩涡。待雍正继位以后,先收拾了几位与自己夺嫡的兄弟 ,收拾完了兄弟后就开始剪除羽翼,曹家首当其中。
公元1728年,曹頫被雍正定下了三宗大罪,尤以亏空巨款最为严重,以这些罪名抄了曹家,为报复曹家支持废太子,被抄家后的房产,变卖的钱财及家中珠宝玉器一律充公,不得用于抵债。当时曹家100多号人就四处逃亡,连皇恩浩荡的孙夫人也转眼烟消云散。最后十来个人居无定所,这时曹雪芹也就是四五岁的年龄,与家中大人暂住在江宁织制府旁边一个寺院里,在一间破旧偏房里遮风避雨,苟且偷生。一个年幼的孩子面对一夜之间从繁华到衰落,从锦衣玉食到贫无立锥,家族的衰败,亲人的离散,这种落差,这种恐怖对曹雪芹一定是刻骨铭心的,是一生中永远的阴影存在。
曹家被抄的第二年春天,曹家人奉雍正的旨意,北迁到京城,曹頫每天挂着牌子,在京城闹市以罪臣的身份示众。曹雪芹这时真正体会到了世态的冷暖,人间的炎凉,曹雪芹这个年龄正是入学读书的年龄,可他没有读书上学的地方,一家人在屈辱、凄凉、困顿当中度日,这个状况一直持续到雍正暴病而亡。
乾隆继位后,一开始实行了温和政策,先后平反了不少被雍正打压的兄弟们,很多皇家兄弟都恢复了爵位,有些受牵连的官员开始复职,曹家也因此受益,好像一个短暂的季节回暖到来了,因曹家原是内务府包衣,曹雪芹与这些八旗弟子可以在皇宫办的贵族学校读书了。这时他耳濡目染了皇宫奢华和繁华,接触到了很多奇异珍宝,学习到不少皇宫戒律与礼教,他有了这段特殊环境的经历,为后来创作提供了丰富的素材,才有了以后《红楼梦》中很多奢华场面的内容的呈现。