Depuis le début des années 80, il s'agit d'un ensemble immobilier d'habitation, les "Résidences du Panthéon". Cet ensemble est formé par les bâtiments sis :
- 29, 31 et 33 rue Lhomond
- 3 rue Amyot
-16, 18/18 bis et 20 rue Tournefort
- 24 rue du Pot de Fer
dont une partie est classée à l'inventaire supplémentaire des Monuments Historiques (29 rue Lhomond : Façade et toiture sur rue - Façades et toitures des immeubles 24 rue du Pot-de-fer, 16 et 18 rue Tournefort et 20 rue Tournefort avec son retour rue du Pot-de-fer - L'escalier intérieur des immeubles 16 et 20 rue Tournefort et 24 rue du Pot-de-fer - inscription par arrêté du 7-7-1975)
C'est à dire que l'ensemble occupe, au Sud-Sud-Est, une grande partie de l'ilot formé par les 4 rues mentionnées ci-dessus.