清和源氏流足利氏支族の一色兵部少輔範貞の七代の孫にあたる一色昌恒が称したことに始まる。一色昌恒は武田信玄に仕官したが、土屋はその家老の苗字。家紋は九曜。