整座古宅分十三楼宇、芝园等，亭台楼阁，水榭通幽。从建筑到家具都精心布置，运用大量名贵木材精雕细刻。
    故居内还有董其昌、郑板桥、唐伯虎、文征明等名家的书法石刻作品，以及两顶为胡雪岩度身制作的红木轿子，坐在其中，宛如置身小亭。
    整座古宅文物荟萃，犹如一座民间工艺珍宝馆。内中还有朱镕基长篇题词：“胡雪岩故居见雕梁砖刻重楼叠嶂极江南园林之妙，尽吴越文化之巧，富埒王侯财倾半壁。古云富不过三代，以红顶商人之老谋深算竟不过十载，骄奢淫靡忘乎所以有以致之可不戒乎。”