顺，倒也如了他的猜想，待得他做得承恩公世子，不上三十就位居三品之后，就有些自以为是。只以为当年武皇尚且离不得武氏族人，何况玉娘一弱小女子。不想他忘了，谢逢春可不止他一个儿子，就在他夫妇逆了玉娘意思之后，玉娘就转而抬举起谢怀德夫妇来，凭他们夫妇如何殷勤小心，总归无用。正因着处境艰难，谢显荣只想求稳，不想弄巧反拙，断起案来连着才满七岁的太子也不如，丢了这样大一个人，他哪里还有脸上朝，只称病不出。
乾元帝从前待谢显荣亲切，不过是看在他是玉娘哥哥份上，哪里是看重他的才能，看他躲羞不出，反倒觉着谢显荣上不得台面，只与玉娘道：“谢显荣报病，他既身子虚弱，就叫他仔细修养着，等好全了再出来，也免得误了事。”玉娘听说，眉头也未动下，微笑答应。当着乾元帝的面唤了金盛来，使他往承恩公府走了一趟，赏了两支人参与谢显荣，叫他好好养病。
谢显荣收着人参，再听了金盛转述玉娘意思，哪能不明白自家失了帝后欢心。乾元帝还罢了，帝心本就难测，更何况乾元帝本性又是个无情的。可玉娘是为着甚，便是还有谢怀德在，莫非她不知道独木难支的道理？
谢显荣这里告病不久，谢怀德又高升了一步，却是礼部尚书聂飏乞讨