胡雪岩故居建于同治十一年(1872年),历时3年,耗银数十万两,占地10余亩,落成时有主要建筑二十余座,建筑构思巧妙,恢宏繁丽,建筑大量用紫檀、酸枝、楠木、银杏、南洋彬和中国榉等木材,砖雕、木雕、石雕无品不精,使这所宅院堪称清末江南巨商第一宅。