难以再为陛下效力，乞骸骨回乡养老。稀奇的是，跟着告老折子一同传过来的，是一封请婚折子，为他的内侄卢枫请婚废太子长女朝阳，为他的儿子虞敬请婚废太子次女青阳。虞祭酒很坦白，说他寒窗苦读多年，直到三十多岁才中了举人，中举之后，连考两回，都没通过会试。最后，甲子年唐阁老被任命为会试总裁，他抱着一丝希望又去参加，居然出了贡。出了贡就是稳稳的进士、同进士，虞祭酒对于唐阁老，虞祭酒打心眼儿里感激，一直事之甚恭。后来唐阁老病故，虞祭酒曾经几回哭昏过去，十分哀伤。如今虞祭酒要告老还乡了，别的没什么牵挂，就只挂念唐阁老的两名亲外女，愿为儿子和内侄求娶。
虞祭酒老家在浙江，殷实淳朴，耕读传家这是可以想像的，家里若不殷实，他怎能一直读书到四十多岁？若是家境差一些，早供不起他了。
他和妻子卢氏是表兄妹，夫妻感情很好，几十年来没有红过脸。卢氏成亲头些年总也没怀上孩子，就想给虞祭酒纳个二房，虞祭酒拒绝了，“四十无子，再作商议。娘子，我和你都是乐善好施的，不曾做过恶事，上天有眼，不该让咱们无子。”卢氏含着一包眼泪，点了点头。
到了他快四十岁的时候，卢氏先是生下一个女儿，过两年又生一