Era hijo del vicario y luego obispo Pehr Thyselius y de Christina Margareta Bergsten.
Entre otros cargos, fue integrante de la Corte Suprema de Justicia en 1856-1860, ministro de la Iglesia (equivalente a Educación) en 1860-1863, presidente del Kammarkollegium en 1864-1875 y ministro del Departamento Civil (responsable del comercio, la industria y el transporte marítimo) en 1875-1880.
De esta manera, se convirtió en el primer siervo en llegar a ser primer ministro de Suecia.
Fue además el de mayor edad en aquel momento, ya que tenía 72 años al acceder al cargo.
Casado en 1848 con Charlotta Melart, tuvo una hija.