創建は458（雄略天皇2）年で1355（正平10）年に菅原道真公を祀り、1478（文明3）年に太田道灌により再建。総檜造りの社殿は1995（平成7）年に造営された。境内には天神様おつかいの動物・牛の石･･･

1704（宝永元）年、平戸藩が海を外濠にして、日本唯一の山鹿流兵法で築城した城。平戸市街地の丘の上に建つ城で、平戸市のシンボル的存在である。天守閣からは、平戸瀬戸の急潮や黒子島の原生林、遠くは壱岐の島･･･