1596年 - 1615年（慶長）年間、将軍徳川秀忠が鷹狩りの際、この地に休息のため立寄ったと伝えられる。1698年（元禄11年）3月28日、徳川将軍家の別荘「富士見御殿」の落成とともに勧請された。
拝殿天井には龍が描かれており、これは日本洋画家の先駆、高橋由一の日本画最後の作で、港区指定文化財となっている。