En 1619, après l'effondrement du château de Mugishima suite à un tremblement de terre majeur, le château de Yatsushiro fut construit par Masakata Kato. A cette époque, le donjon principal était constitué d'une grande tour du château de 4 à 5 étages, d'une petite tour du château de 2 étages et de 7 tourelles. Le calcaire est utilisé pour les murs en pierre de tout le château. Hosokawa Tadaoki entra dans le château en 1632 et Matsui Okinaga entra dans le château en 1646. Le clan Matsui dirigea le château jusqu'à son abandon en 1870. En 1672, le donjon principal fut détruit par la foudre. Les ruines du château ont été aménagées en parc, et les murs en pierre et les douves de la tour du château et de l'enceinte principale subsistent. C'est aussi un endroit célèbre pour les cerisiers en fleurs.