Samantha Cameron nació en Paddington, Londres,[2] es la hija mayor de Sir Reginald Sheffield, octavo barón[3] y Annabel Lucy Veronica Jones.
La pareja se divorció en 1974 y Annabel se volvió a casar más tarde con William Waldorf Astor III, sobrino de su propio padrastro Michael Langhorne Astor, con quien tuvo tres hijos más.
[4] Su padre también tuvo tres hijos más con su segunda esposa, Victoria Penelope Walker.
Sus bisabuelos también incluyen a la escritora Enid Bagnold y su esposo Sir Roderick Jones, director de Reuters.
La familia de Samantha Cameron también posee una gran finca en Yorkshire llamada Sutton Park.