Fundado por el Arzobispo de Toledo Don Alonso de Fonseca en 1521, fue declarado bien de interés cultural en 1931.