Este edificio era una casa auxiliar que pertenecía a la familia Abe, que eran ricos comerciantes de Yamaguchi. Situada en una esquina de la propiedad de los Abe, se utilizaba como alojamiento del señor del feudo de Choshu (que equivalía aproximadamente al territorio de la actual prefectura de Yamaguchi), cuando estaba en camino de ida o de vuelta de la capital durante el periodo Edo (que duró del año 1603 al 1868).
Hacia el final del periodo Edo, los samuráis del feudo de Satsuma y del feudo de Choshu unieron sus fuerzas para derrocar al régimen militar del país y restaurar el dominio imperial. Con anterioridad, los dos feudos habían sido enemigos encarnizados, pero la mediación de personajes como Sakamoto Ryoma, del feudo de Tosa, los llevó a formar una alianza.
En septiembre de 1867, jóvenes líderes del feudo de Satsuma, entre los que estaban Saigo Takamori y Okubo Toshimichi, vinieron a Yamaguchi para reunirse con Kido Takayoshi y Ito Hirobumi en representación de Choshu. Éste último llegaría a ser más tarde la primera persona en la historia en ocupar el cargo de primer ministro de Japón. Fue en el piso superior de Chinryutei donde estos personajes se reunieron en secreto para establecer una alianza, y se comprometieron a formar un ejército de coalición para derrocar al régimen del Shogun.
Estos trascendentales acontecimientos llevarían a la Restauración Meiji y al nacimiento del Japón moderno. Y esto tuvo lugar aquí, en Chinryutei. Posteriormente, el edificio fue trasladado dos o tres veces hasta ser instalado en su actual ubicación en 1960.