文治年間(1185～90年)､この周辺の地頭であった板垣冠者兼信が築いた屋敷とされる。場所は唯称寺の北側辺りとされる。現在、唯称寺東側に石碑が立っている。十二城の名の由来は12の棟をもつ豪勢な館であったということらしい。唯称寺の南にある池は堀の名残とみられるが、昔から龍伝説が残る。