Karatsu Castle is een hirayamajiro, een kasteel gebouwd op een vlakte in plaats van een heuvel of een berg. Terasawa Hirotaka werd heer van Karatsu in 1595 en na de Slag bij Sekigahara in 1600 werd hij beloond met nog meer land rond Karatsu. In 1598 verliet hij Nagoya Castle, zijn oorspronkelijke kasteel, en begon hij van 1602 tot 1608 te bouwen aan een nieuw kasteel in Karatsu, met behulp van materiaal uit zijn voormalige kasteel. In juni 1869 werd het kasteel gesloopt en in de plaats werd Maizuru Park opgericht in 1877. De huidige donjon en een aantal andere structuren van het kasteel werden gereconstrueerd in 1966 om het lokale toerisme te stimuleren en om te functioneren als een lokaal museum. De huidige donjon beschikt over vijf verdiepingen.