Yosef Dov era el bisabuelo del famoso Rabino Joseph B.
Sin embargo, ambos eran incompatibles y después de estar diez años trabajando juntos, Soloveitchik decidió irse.
Después de asumir esta posición, fue a visitar el jéder donde los jóvenes alumnos recibían educación.
Yosef Dov se marchó a Varsovia donde vivió sumido en la pobreza.
Yosef Dov compuso una obra literaria sobre la ley judía y diversos comentarios de responsa rabínica, llamada Shut Beis Halevi, así como un comentario sobre el primer libro y parte del segundo libro de la Biblia hebrea llamado Beis Halevi al HaTorah.