Los datos del nacimiento de Broughton son poco claros, se ha descrito que nació en Londres o en Gloucestershire.
Utilizó el dinero que ganó en las luchas, junto con la ayuda de algunos patrocinadores ricos, para abrir su propio coliseo en 1743.
A pesar de ser mucho mayor que su oponente, Broughton era el claro favorito.
Sin embargo, aunque tuvo un comienzo fuerte, la pelea no se condujo a su manera y sufrió una humillante derrota (destruyendo su récord perfecto), cuando después de 14 minutos Slack le dio un puñetazo entre los ojos y esto le causó tanta inflamación que ya no pudo ver y por lo tanto tuvo que retirarse de la pelea.
Esto llevó a la clausura definitiva del coliseo, según se reporta en 1753 o 1754.
Su código de 7 reglas formó las directrices para el deporte hasta que las London Prize Ring Rules las ampliaron en 1838.