在睿元帝弥留之际，大概是他人生之中做最后一件事了，所以格外清明，遗言将太子秦翎托孤给文婴而不是谢回，本来因为提议让太子监国而被训斥的郁闷在那一刻烟消云散，遂下了不惜一身死扶持新帝来报答睿元帝知遇之恩的决心。
可是太子秦翎登基之后，一开始还能听进去他的劝谏，渐渐地就听不进去文婴的忠言逆耳了，愈发重用起谢回来，虽还没有正式下诏，但已让谢回参与内阁的事务了，想来右丞相的位子非谢回莫属了。
谢回权焰熏天，文婴为暂避其锋芒，故意在新帝秦翎面前犯了个小错，惹他大怒，于是罢了文婴的左丞相，命他到柳州任知府去了。