Le sanctuaire Atago a été construit en 1603, bien qu'il ait été presque entièrement reconstruit en 1958. Situé sur une colline de 26 mètres de haut, on y accède par de grands et raides escaliers (ou pour les moins courageux, par un ascenseur). De par sa position en hauteur, le site du temple était jadis utilisé pour repérer les débuts d'incendie. C'est donc naturellement qu'on y vient aujourd'hui encore prier plusieurs divinités comme Homusubi no mikoto, le Dieu du feu, et d'autres comme le Dieu de l'eau, des montagnes ou des militaires.

Une légende rapporte qu'un jeune samouraï osa gravir ces "sacrés" escaliers à cheval. Il y serait parvenu en moins d'une minute. En revanche, la descente parut bien plus ardue si l'on s'en réfère aux 45 minutes qu'il leur a fallu pour rejoindre leur point initial. La légende se termine en disant que le cheval était épuisé. Ça, on veut bien le croire !