1362(貞治元/正平17)年、長野城主の工藤氏祐の三男・家所祐歳によって築かれ、家所氏が8代(三河守祐蔵,飛騨守祐房,弾正祐長,玄蕃祐則,刑部祐友,三河守祐藤,隼人正藤實,三河守藤安)約200年にわたって居城し家所周辺24ヶ村を領していた。1572(元亀3)年、8代目の三河守藤安は織田信長との戦いで戦死し、城も荒廃廃城となった。
　家所城は家所盆地の中心に位置する独立丘陵に築かれており、南の侍屋敷跡から登ると大手門跡に達し、つぶて石と大手門跡の石垣がある。ここが主郭で長方形を呈し周囲には土塁が巡らされている。主郭の北側中央の櫓台には祠が祀られ、その東隣に抜け穴跡と見張台跡がある。また、主郭北側にはかつての家所氏菩提寺である什心寺跡がある。