Este edificio era el de la Universidad de Valencia, donde había algunas facultades hasta hace unos años. Originario de finales del siglo XV, alcanza su actual configuración con la reforma de 1839, realizada por Timoteo Calvo tras los destrozos de la Guerra de la Independencia, y otras posteriores; hasta que se realiza el proyecto de Luis Carratalá y Antonio Escario (1997-1999). En 1840 se reconstruyó la fachada exterior siguiendo el modelo neoclásico proyectado por Antonio Martorell en el año 1793.
El auditorio de la universidad data del siglo XVII. También destacan la capilla neoclásica, del siglo XVIII, y la biblioteca.
El patio de la rectoría data de 1842, y también fue diseñado por el arquitecto Timoteo Calvo.
En 1954, Javier Goerlich derriba casas que dominaban la plaza del Colegio del Patriarca, dejando el edificio ocupando todo el bloque.
