祭神は三十六歌仙の一人、柿本人麻呂で、島根県益田市にある柿本神社本社の摂社にあたる。万葉の歌人、柿本人麻呂の生地ともいわれ、各地に散在する人麻呂伝説の一つとなっている。石見国で没した人麻呂を宝亀元(770)年に改葬して、社殿を建てたのが始まりという。柿本人麻呂は宮廷歌人であり、格調高い作風で万葉集中随一の叙情歌人と言われた。後世、歌聖と称される。社殿左側にある墓は江戸時代の造営、また神社隣の影現寺は別寺で、通称柿本寺と呼ばれている。本堂には、紀僧正真済作といわれる木造の人麻呂像が安置されているが、非公開とされている。奈良の柿本神社は、人麻呂死後数年で創建された、由緒ある神社である。数えられ、松島の富山・石巻の牧山と並んで奥州三観音の一つでもある。光仁天皇の勅願により宝亀元(770)年に草創され、延暦二〇(802)年、坂上田村麻呂が蝦夷討伐の後に観音堂を建立した。最初、この山は非常に霧が深いことから霧岳山正福寺(むがくさんしょうふくじ)と呼ばれていた。その後嘉祥二(849)年、慈覚大師が布教のためこの地に来たとき、堂宇を増建し、無夷山箟峯寺(むいざんこんぽうじ)と改称した。境内の石段を登ると八脚門の山門がある。山門の中にある朱塗りの仁王像が笑みを浮かべている。本尊は十一面観音で、観音堂は二度焼失したが、現在の建物は嘉永四(1851)年に再建されたものである。