築城年は定かではないが、応永年間(1394～1428年)後期には祖父江五郎左衛門の居城であったとされる。
　1600(慶長5)年の関ヶ原の戦いでは、祖父江五郎左衛門信勝は福島正則に属して戦功を挙げ、竹腰･西島を与えられた。1608(慶長13)年頃、信勝は祖父江芳斉と号して西島城南の旧恵日寺に隠居するが、1614(慶長19)年の大坂冬の陣の際に豊臣方と内通した廉で、翌1615(元和元)年、伏見にて切腹を命じられ、御家断絶となった。
　城跡は光円寺北西辺りとされるが、現在は住宅･田畑となり、遺構は残されていない。