官吏带着卢生回到家门口，突然将他逮捕。卢生惊恐不已，对妻子说：“我们家在山东有五顷良田，足以御寒充饥。我何必追求官禄，如今却落到这个地步，我想要穿着短褐衣服，骑着青色马，在邯郸道上行走，却已经不可能了。”

他拔出刀想要自刎，幸好被妻子救下，得以幸免。其他受到牵连的人都死了，只有卢生因为中官的保护，被减免了死罪，流放到州。几年后，皇帝得知了真相，重新任命他为中书令，封他为燕国公，对他恩宠有加。卢生有五个儿子，都有才能。大儿子卢俭考中进士，成为考功员外郎；二儿子卢传成为侍御史；三儿子卢位成为太常丞；四儿子卢倜成为万年尉；五儿子卢倚最有才能，二十八岁时成为左襄。他们的姻亲都是天下的名门望族。卢生还有十多个孙子。

卢生两次被流放到边远地区，但两次都重新回到朝廷，担任要职。他在朝廷内外往返，职位变迁，五十多年来，地位显赫，声势浩大。他的性格奢侈放纵，非常喜欢享乐。他的后宫中，声色犬马，都是最华丽的。他先后被赐予许多良田、豪宅、美女、名马，数不胜数。随着年龄的增长，他渐渐衰老，多次请求退职，但未被允许。生病时，宫中使者前来问候，道路上络绎不绝。名医和良药，都一一送到。临终前，他上书说：“我本是一个山东的读书人，以耕田为乐。偶然遇到了圣明的时代，得以列入官员行列。我受到了过分的奖励，职位很高。我出外时带着节旌，入宫时成为台辅。我在朝廷内外周旋，经历了许多年。我感念天恩，但没有做出什么圣明的贡献。我背着负担，招来了灾难，脚下的路很薄，增加了忧虑。日子一天天过去，我不知不觉中老去。如今我已经年过八十，职位达到了极限，时间已经不多了，我的身体已经衰老。我在临终前沉痛地思考，等待时机的到来，但我没有取得什么成效，无法回报圣明的时代。我空负了深厚的恩情，现在要永远离开这个圣明的时代。我深感遗憾和留恋，谨此上表陈述我的谢意。”

皇帝下诏说：“你以卓越的品德，成为我的首席辅助大臣。你出外时掌握重兵，入宫时辅佐政务，国家太平两纪，实在是你所依赖的。近期你疾病缠身，本以为日渐康复。怎料到病情如此沉重，我深感同情。现在命令骠骑大将军高力士到你家中探望，希望你能加强治疗，为了我，珍惜自己的生命。我仍然希望能看到你康复。”

那天晚上，卢生去世。

卢生打了个哈欠，醒来，发现自己还躺在旅店的床上，吕翁坐在他旁边，店主蒸的黍还没有熟，一切还是原来的样子。卢生突然坐起来，说：“难道这只是个梦吗？”

吕翁对他说：“人生的适意，也就像这样。”

卢生愣了很久，然后感谢说：“我明白了宠辱之道、穷达之运、得失之理、生死之情。这是先生用来遏制我的欲望的方法。我愿意接受教诲。”

他向吕翁磕头两次，然后离去。