Конгобудзи был первоначально построен в 1593 году Тоётоми Хидэёси в память о смерти его матери. Позже он был объединен с соседним храмом и реорганизован в главный храм буддизма Сингон, секты, введенной в Японию монахом Кобо Дайси в 805 году со штаб-квартирой на Коясан. Войдя в здание, сняв обувь и заплатив за вход, посетители сначала увидят комнату Охирома, которая использовалась для важных ритуалов и религиозных церемоний. Позолоченные раздвижные двери комнаты (фусума) украшены журавлями. Рядом с комнатой Охирома находятся комнаты сливы и ивы, названные в честь картин на их раздвижных дверях. Тоётоми Хидэцугу совершил ритуальное самоубийство в Ивовой комнате по приказу своего дяди Хидэёси.