Honmaru Goten, que significa "el palacio en el círculo más interno de la defensa", es el único edificio sobreviviente del antiguo Castillo de Kawagoe. Solía servir como residencia y oficinas del señor.
El Castillo de Kawagoe fue construido originalmente en 1457. Cuando Tokugawa Ieyasu se hizo cargo de su gobierno, instaló a un importante súbdito leal como su señor, debido a la importancia de Kawagoe como ciudad comercial y punto estratégico de defensa al norte de la capital. Durante todo el período Edo, 21 señores, todos ellos estrechamente aliados con el Shogunato Tokugawa, residían en el Castillo de Kawagoe.
La estructura actual fue añadida al castillo en 1848, poco antes del final de la era feudal. Recientemente renovado y reabierto al público en 2011, tiene amplias salas de tatami, un jardín y cuadros del patrimonio cultural que se exhiben.