創立年代不詳。『日本三代実録』貞観15年（873）7月の条に「授因幡國従五位上多神正五位下」とある多神は、巨濃郡の式内社「大神社」（美取神社）とする説（『旧神社誌』） もあるが、当社とする説（『因幡誌』『岩美郡誌』）もある。

『延喜式』神明帳（927）に「多居乃上神社」として載っている式内社である。

和名抄廣西郷の中心をなし、因幡国府からも1㎞の地にあり、社名から古代渡来人集団の祀る神とする説（川上貞夫著『赤脚子』）もある。

大正6年に法花寺の今衣神社（菅原道真公）、庁の廳村神社（須佐之男尊、現在大伴家持の歌碑がある）、町屋の小早神社（速佐須良比売神）と町屋神社（須佐之男尊）、境内の笹井神社（少彦名神）を合祀した。

氏子区域は、広西、法花寺、庁、町屋の四ヵ村からなり、古代因幡国府の中心に位置する。

昭和14年境内を拡張し、社務所を改築した。

『稲場民談記』に「此氏子章魚（たこ）ヲ不食、若食ヘハ祟ヲナスト云ヘリ」とある。