Fue seleccionado como primer ministro en el acuerdo de coalición entre el Partido del Pueblo Unido y de los miembros independientes del Parlamento Cornelio Weever y Leona Marlin-Romeo.
En ese mismo año, se postula a sí mismo para la elección del Consejo insular, pero no obtuvo los votos suficientes para ser elegido.
En el 1985 en las elecciones parlamentarias Gumbs recibió 218 votos y fue elegido al parlamento para su primer mandato.
En 1990, cuando el líder del DP Claude Wathey se negó a aceptar su escaño parlamentario, Gumbs habiendo recibido la siguiente votación más alta, juro en su segunda legislatura.
Para las elecciones parlamentarias de 1994, Gumbs lideró el DP y fue elegido para un tercer mandato con un récord personal de 919 votos.