La casa de los abades probablemente ocupó este lugar desde el siglo XI, pero los restos más antiguos pertenecen al siglo XV.
Tuvo este papel hasta que el Consejo fue abolido en 1641.
Tras la Guerra Civil, el edificio fue alquilado a unos inquilinos particulares hasta el siglo XIX, cuando pasó a manos de la Escuela de Yorkshire para Ciegos, que amplió el edificio.
La Universidad se trasladó más tarde al Campus Heslington, pero aún mantiene King's Manor, para su Departamento de Arqueología, el Centro de Estudios Medievales, y el Centro de Estudios del siglo XVIII.
Los estudiantes del King's Manor pueden escoger entre quedarse en la habitaciones de la Universidad en el campus, o en una de las residencias de la Universidad que están fuera del campus, como Walmgate o Constantine House.