El Colegio de Nuestra Señora de la Antigua es también conocido como el Colegio del Cardenal (por su fundador) o Colegio de la Compañía (por sus regidores hasta 1776) y apodado popularmente como el Escorial gallego por la magnitud del edificio. Fue construido entre finales del siglo XVI y principios del XVII, bajo el patrocinio del cardenal Rodrigo de Castro para que, regentado por la Compañía de Jesús, había servido para la educación de la comarca y de toda Galicia. Desde el año 1873 el colegio es dirigido por los Padres Escolapios, aunque recientemente se rehabilitó su antiguo título de Real Colegio de Nuestra Señora de la Antigua.