天之手力男尊を祀るとされているが、鎮座している沼間は源 義朝の邸宅の近くなので、この五霊神社は鎌倉党の五氏族の祖霊を祀る御霊神社ではないかと考えられる。実際、天保12年編の新編相模風土記に「御霊社、牛頭天王を合祀す」とある。