湘峪古城堡始建于明万历年间,完成于1634年。古城墙体足有25米高,4米宽,据说原来有2000多米长,可以将整个村子严严实实地围住。如今虽然已有多处断残,但仍能感觉到它那铜墙铁壁的气势。古城墙有东、西、南三座城门,因北面靠山,故而没有北门。原本是个普通的村落,由于明代后期战乱较多,于是出自湘峪村的名宦孙氏三兄弟为防御外敌,保卫家园,带领村民们修筑了这座坚固的城堡。
这座城堡不仅城墙高大厚重,城内生活设施齐全,而且还有防御系统,能够村自为战。孙氏三兄弟同朝为相,这是历史上罕见的:孙居相官至户部尚书,孙可相升到御史都堂,而孙鼎相则官居四部首司。孙鼎相在孙氏兄弟中排行第三,曾担任过都察院右副都御史,他的府第便以“三都堂”为名,湘峪古城因此也称“三都古城”。