築城年代は定かではないが、15世紀後半に奥平2代貞久の二男･弾正久勝(近辺の地名にちなみ石橋氏を称した)が最初の城主となり、3代貞昌に仕えた。しかし、1537(天文6)年､久勝の子・石橋繁昌の謀反が露見し、4代奥平貞勝の命を受けた土佐定雄によって郎党40余人とともに討取られてしまう。死骸は一穴に埋められ奥平弾正宮と呼ばれている。後年、弾正屋敷跡の委譲を亀山城主･貞勝に願い出た徳岩明和尚によって、ここに石橋山慈昌院が建てられた。
　寺院の周辺には土塁、そして曲輪跡や堀跡と思われる遺構を確認することができる。