Le temple, tel que nous le connaissons actuellement, a été construit sous l'empereur Hadrien, entre 118 et 125, à la place d'un précédent temple, construit par Agrippa, détruit par le feu.