私自怀孕，这是不忠，往大了说，徐五在妻子怀孕期间让通房怀孕，这是伤害了妻子和岳家的脸面，再往大了说，如果丹阳生女，晓兰生子，就有了一个庶长子，古代最重嫡庶之分，庶长子的存在可能会给家庭造成麻烦。

事情既然如此麻烦，身为家族内外之主的徐令宜和太夫人自然要大光其火，晓兰不过是个通房，又是隐瞒主人，自然罪责最重，徐五虽然不知情，但是既然孩子是他的，当然要承担责任，至于丹阳，勉强可以说是治家不严