Algunas inscripciones en el templo indican que fue construido hacia el 27 a.C.Sin embargo, tras investigaciones efectuadas en el siglo XIX se supo que en realidad, el templo de Agripa fue destruido, y que el existente actualmente es una reconstrucción realizada en tiempos de Adriano (entre los años 123-125).
Este panteón es la única construcción del Imperio Romano bien conservada hasta la fecha, cuya edificación comenzó en los años 27-25 antes de nuestra era, bajo el mando de Agripa, yerno de Julio César Octavio Augusto. El panteón, consagrado a los dioses del monte Olimpo, es una obra arquitectónica clásica del período de Augusto.