Cerca de la antigua catedral de San Isidro, se encontraba al COLEGIO IMPERIAL, que recibia este nombre al encontrarse bajo en patrocinio de la Emperatriz Doña María, hija de carlos V. 

De aquel Colegio Imperial queda hoy el patio que pertenece al Instituto de bachillerato de San Isidro.

Claustro del Colegio Imperial, hoy patio del I. B. "San Isidro". C/ Toledo

El Colegio Imperial se fundo ante la necesidad de dotar a Madrid de un centro de enseñanza de prestigio, objetivo que se logro. Y todo ello apesar de que por presiones de las Universidades de Salamanca y Alcala ( gestionadas por otras ordenes religiosas) no fue posible que se otorgaran titulaciones superiores oficiales.

En estas Aulas se formaron los hijos de una gran parte de la nobleza española. Entre sus alumnos más ilustres se encuentran Lope de Vega, Francisco Quevedo y Calderón de la Barca.

Hasta el S. XVIII fue la biblioteca más importante de la ciudad. Hoy sus fondos documentales se encuentran en la Universidad Complutense de Madrid y la Real Academia de la Historia.