Su primera base era una pequeña casa, usada por un sacerdote católico durante los dos años anteriores, que tenía una habitación como capilla.
Los orígenes del edificio actual datan de 1840 cuando el primer obispo de Northampton, William Wareing, encargó a Augustus Welby Northmore Pugin diseñar una capilla colegial dedicada a San Félix.
La capilla de San Andrés era demasiado pequeña para una congregación más grande.
El número de adoradores católicos pronto superó el tamaño del edificio y el hijo de Pugin Edward Welby Pugin fue elegido por el sucesor del obispo Wareing, Francis Amherst para diseñar una extensión y hacer el edificio en una catedral.
Esta ampliación vino en forma de la actual nave que se abrió en 1864, dedicada a Nuestra Señora Inmaculada y Santo Tomás de Canterbury.