Establecido como el primer museo de Southampton en 1912, la casa fue cerrada durante nueve años entre 2002 y 2011 mientras se llevaba a cabo una vasta restauración.
En el siglo XIV el comerciante y alcalde de Southampton John Whytegod vivió en la propiedad.
Tras el ataque francés en 1338 sus muros fueron convertidos en lo que sería posteriormente la muralla defensiva de Southampton.
El dinero fue también destinado a la construcción, equipamiento y aprovisionamiento de naves-incluyendo el Mary Rose.
[8] Durante una gran parte del siglo la casa fue dividida en propiedades de arrendamiento.
En ésta también se llevaron a cabo negocios, relacionados con la tintorería, la encuadernación o la sombrerería; así como también funcionó como la oficina de un arquitecto.
Debido a esto toda la zona, incluida la Casa Tudor, fue programada para demolición.
[9] En 1886, cuando la casa se encontraba amenazada por la demolición, el filántropo local William Spranger la compró, reconociendo su significado como un lugar de gran importancia histórica.
[15] El jardín fue inicialmente creado en el siglo XVI, y fue visto como una extensión de la misma casa.