Otrzymał on rekompensatę w postaci obecnej ziemi, która należała wcześniej do klanu OwariOwari-Tokugawa (Owari Tokugawa-ke) → jedna z „trzech szanownych rodzin” (gosanke), które wywodziły się od najmłodszych synów Ieyasu Tokugawy, a więc należały do shimpan-daimyō. Ze względu na to, że była ona porośnięta wieloma kolorowymi kwiatami, uważa się, że od tego czasu pochodzi nazwa Hanazono, co tłumaczy się jako Ogród Kwiatowy.
Opis Chram poświęcony jest kami bogactwa i płodności Inari, strzeże okolicy, jej mieszkańców, kupców, rzemieślników i artystów.
W przeszłości chram reprezentował synkretyzm shintō-buddyjski. Był bowiem połączony ze świątynią buddyjską szkoły shingon, a główny kapłan tej świątyni był jednocześnie głównym kapłanem chramu. W 1868 roku usunięto budynki buddyjskie z terenu chramu i przeznaczono go wyłącznie dla kultu sintoistycznego.
Festiwale Chram jest miejscem comiesięcznych festiwali. Jednym z nich jest Festiwal Koguta (酉の市, Tori-no-ichi, Koguci Jarmark), który odbywa się w listopadzie i jest rodzajem japońskiego święta dziękczynienia. Jest wówczas udekorowany setkami lampionów.