可是，他留下那张纸又是什么意思呢？
迷迷糊糊熬到天蒙蒙亮，突听到府门前一阵喧闹。
严嵩一激灵，莫非灰鼠将白兔骑死了，这是朝廷派人请自己去主持大局？
想到这，他一跃而起，喜滋滋刚出卧室，就见府中涌进一队甲兵。
带队的将领宣旨道：“奉天承运皇帝诏曰：严嵩辜负圣恩，意欲不轨，着军卫派兵抄革拿下。钦此！”
严嵩一翻白眼，瘫在了地上。
嘉靖免去严嵩一切职务，勒令他回乡反省。
两年后，他的儿子严世藩被斩首，严嵩也被削职为民，所有家产被查抄。
这时，严嵩已是八十多岁的老人，无家可归，只好在祖坟旁搭了间茅屋，靠吃坟地里的供品为生。
尽管这样，他还深信堪舆之说。
他为自己寻了块墓地，正是道人所说的涌出灰鼠骑兔的油坊旧址。
他坚信自己死后若葬在这里，后世子孙必能东山再起官拜宰相。
可他叫人一挖，竟挖出两块墓碑，分别是他的高祖和曾祖的。
当地乡佬们告诉他，当年，严嵩的高祖乐善好施，造福一方；而他的曾祖却凶暴蛮横，为害乡里。
后来曾祖败光了家产，死后竟无葬身之地。
家人无奈，只好将他埋在高祖的坟下，形成了两人共用一坟的上下铺。