第六番壷坂寺からマイカーでわずか１０分ほど北へ走ったところにある。のどかな田園風景が広がる飛鳥の中心付近、岡地区はこの明日香村の中心地で、この古く小さい町並みを通り抜けた山手に岡寺はある。
下の売店前の駐車場から明日香村を眺めながら急な坂を登ると、左正面に朱塗りの仁王門が見えてくる。
門の手前で入山料を払い、仁王門を潜ると、正面の一段高いところに三重宝塔、その奥に本堂が見えてくる。

６６３年天智天皇の時代に、義淵により岡宮旧跡に建立されたことから通称「岡寺」の方が有名となっている。
この年、草壁皇子が自分の住んでいた岡の宮を仏教道場に改め、当時の仏教の指導者であった義淵に寺を開かせ、創建１３００有余年の歴史を持っている。
義淵僧正は、近くの農地を荒らす悪龍を法力により小池に封じ込め、大石で蓋をした。この伝説がこの寺の正式名称「龍蓋寺（りゅうがいじ）」の原点であり、今でも本堂前に「龍蓋池」がある。

本尊の如意輪観世音菩薩（重要文化財）は、現存するものでは日本最大の塑像で、如意輪観音像としては最古の作品である。がっちりと肉付きの良い顔が印象的で、奈良時代の仏像の特徴を示している。土で造形する塑像は、大きくなりすぎると自重で崩壊してしまう。この像が限界に近い大きさなのであろう。如意輪観音は六臂の像が多いが、この像はニ臂で右手を施無畏印（せむいいん）、左手を与願印（よがんいん）としている。
体部は後世にかなり修復されており、特に脚部は制作当初の半跏（はんか）から現在では結跏趺坐（けっかふざ）に改められている。