遭人陷害下了诏狱，举家流放三千里。

那些阉人对顾家的人怀恨在心，收买押送的官差肆意磋磨顾家人，使得顾老太爷一病不起，撒手人寰。顾家好些族人死的死，残的残，活下来的不到十分之一。

顾晏亦被折磨得奄奄一息，是路过的楚夫人母女看不下去，使了银子又请大夫，这才保住了他一条命。

那时候的顾晏已经病得神志不清，只记得救下他的夫人姓楚。