桓武平氏秩父氏支流河崎氏庶流渋谷氏流.薩摩渋谷氏の一族.宝治2[1248]年の宝治合戦の戦功により渋谷光重が薩摩国の高城郡・東郷別府・入来院・祁答院を得る.渋谷光重の子・吉岡重保が薩摩国伊佐郡祁答院を本貫地としたのが祁答院氏の始まり.
入部当初は在地郡司の大前氏[おおくま]と対立.大前氏を駆逐していくことで勢力圏を確立していった.
室町時代に,薩摩国守護職・島津氏が総州家と奥州家とに分かれて対立すると,薩摩渋谷氏一族のうち東郷氏・入来院氏・高城氏と祁答院氏は総州島津氏に与し,鶴田氏は奥州島津氏に与して互いに戦うこととなる.やがて,鶴田氏は衰退.残りの薩摩渋谷一族は総州島津氏と奥州島津氏との間を揺れ動く.奥州家が勝利した後は,時に争いつつも島津氏の配下に組み入れられていった.
家紋は重ね扇など.