Fue uno de los primeros pioneros de la guitarra amplificada en el jazz en Francia y actuó durante años con un instrumento hecho por sí mismo.
Joseph fue un miembro original del Quintette du Hot Club de France, que comenzó a grabar en 1934 y duró de esa forma, hasta el estallido de la Segunda Guerra Mundial en 1939.
Tras la temprana muerte de Django en 1953, Joseph guardó su guitarra por un tiempo, pero apareció para actuar en el documental corto de Paul Paviot Django Reinhardt (1957), que también contó con Stéphane Grappelli, Henri Crolla y otros antiguos socios de Django.
[2] A finales de los años 1960, Joseph fue fotografiado actuando en el Django Reinhardt Festival de 1978, celebrado en Samois-sur-Seine, que también contó con su sobrino y el primer hijo de Django, Lousson, tocando una guitarra eléctrica Gibson archtop.
Está enterrado en el cementerio de Samois-sur-Seine junto a Django.