Après avoir été baptisé, Omura Sumitada a donné l’ordre en 1574 de détruire les temples bouddhistes dans tout le domaine. Le temple Hojo-ji a toutefois été épargné et réaménagé en presbytère pour les prêtres catholiques. Une grande église a été construite juste à côté de ce presbytère. Sumitada avait été enterré sur ce site avant que sa tombe ne soit déplacée. On raconte qu’une pierre appelée Takibisuyama édifiée en mémoire de son ancienne sépulture s’y trouvait encore jusqu’au début de la Seconde Guerre mondiale.