El pueblo se encuentra a 9 km al norte de Middelburg.
Está conectado a la isla de Noord-Beveland por la presa Veerse Gatdam.
Vrouwenpolder era un municipio autónomo hasta 19661, cuando se unió a Veere.
En el siglo XIV, el área fue polderizada y una capilla dedicada a la Virgen María (Onze-Lieve-Vrouw, Nuestra Señora), de ahí el nombre Vrouwenpolder, el pólder de la Dama.
Durante la Expedición inglesa de 1809, el pueblo y el fuerte fueron destruidos por soldados británicos.