創立年代不詳。近世まで厳島大明神と称していたが、明治元年、摂社であった句句廼知命以下の神を合祀し厳島社と改め、同7年厳島神社と改称した。 旧神社誌は「当郡に厳島を祀ることは、下榎村の長谷部氏の勧請を倣っているようだが、当社は、往古、夏日山城主夏日 重郎左衛門永豊が出身地（安芸）の厳島明神を勧請したものであり、故に其の地を「永豊」と云ったと伝えられている（年紀不詳）。（意訳）」という『伯耆誌』の記事を載せている。古棟札は享保4年（1719）。