曾昭燏出生时，曾家虽失了往日的辉煌，但豪门显宦的余晖仍照耀着这座标志着梦想与荣光的巨宅深院。万宜堂为当年曾国藩所筹划取定之名，取“万代千秋”“宜室宜家”“万事咸宜”等寓意。房院规模宏大，具有明式风格，由曾国潢主持建造，并于同治十二年（1873年）建成。此时曾国藩去世已近一年，曾国潢一支移居于此。国潢死后，两个儿子曾纪梁、曾纪湘分家，各居一头，这种格局一直延续到曾昭燏成长的时代。