曾国藩故居坐落在湖南省双峰县荷叶镇富乇村的鳌鱼山脚，与湘乡市、湘潭县、衡山县、衡阳县毗邻。全宅占地60余亩，建筑面积1万余平方米。它由思云馆、毅勇侯第前门、宅东门、宅西门、全宅围墙、宅南藏书楼、宅北芳记书楼、八本堂、缉园十景等组成富厚堂建筑群，当地百姓称之为“宰相府”。
曾国藩先后晋升为两江总督、直隶总督，诏加“太子太保”，封“一等毅勇候”，授“英武殿大学士”，升“光禄大夫”，溢称“曾文正公”。同治4年（1865年）秋，素无终身官场打算的曾国藩，准备先动员家眷回籍“立家作业”，自己以后再作引退，因夫人欧阳氏对旧居黄金堂门前“塘中有溺人之事，素不以为安”，即令其子曾纪泽，“回湘禀商两叔”，移兑富托庄屋，由曾国潢、曾国荃、曾纪泽经手主持，依照候府规模，花十年功夫营造了富厚堂。
富厚堂占地四万余平方米，建筑面积9202．86平方米，为土石砖木结构，回廊式风格，内外群有八本堂、求厥斋、旧朴斋、艺芳馆、思云馆。八宝台、辑园、凫藻轩、棋亭、藏书楼等各种建筑，当年正门上悬挂着“毅勇侯第”朱地金字直匾，门前花岗石月台上飘扬着大清龙凤旗、湘军帅旗、万人伞等，景象颇为壮观。整个建筑虽具侯府规模却古朴大方，虽有雕梁画栋却不显富丽堂皇，基本体现了曾国藩对建宅“屋宇不肖华美，却须多种竹柏，多留菜园，即占去四亩，亦自无妨”的意旨。 1866年秋，主楼竣工，曾国藩夫人、子女和儿媳即回籍住进了富托新屋。
富厚堂原称八本堂，取曾国藩“读书以训诂为本，诗文以声调为本，事条以得欢心为本，养生以少恼怒为本，立身以不忘语为本，居家以不晏起为本，作官以不要钱为本，行军以不扰民为本”的家训，后曾纪泽据《后汉书》“富厚如之”而改现名。富厚堂虽不胜豪华，然曾国藩得知修屋花钱七千串而为之骇叹，他在同治六年二月初九日的日记中写道：“接腊月甘十五日家信，知修整富厚堂屋宇用钱共七千串之多，不知何以浩费如此，深为骇叹！余生平以起屋买因为仕宦之恶习，誓不为之。不料奢靡若此，何颜见人！平日所说之话全不践言，可羞孰甚！屋既如此，以后诸事奢侈，不问可知。大官之家子弟，无不骄奢淫逸者，忧灼曷已！”