Contrajo su matrimonio el 13/01/1695 con María-Victoria Abarca López-Fernández de Heredia, Baronesa de Gavín, nacida en Huesca y bautizada en su Catedral el 11/10/1670, de la que nació su sucesor Antonio Blanco y Abarca.
Caballero noble domiciliado en la ciudad de Huesca.
Era vecino de Villafranca y residía en Zaragoza.
Casó con Ana Iñiguez y Villanueva, no teniendo descendencia, por lo que el título paso a su hermano José, que se convertiría así en el IV Marqués.
De este matrimonio nacieron: María Joaquina (1756-1766), Antonio Joaquín (1758-1766), Manuel Melchor (1760-1760), Ramón Mariano (1760-1760), María Pilar (1763), Rafaela Tadea (1765), Clara Joaquina (1767), Maria Francisca Benita (1769-1770), Manuela Ramona (1770-1772), Joaquín Mariano (1773-1843), María Ana Florentina (1775), Timoteo José (1777) y Mariano Remigio (1780).
Solicita al Rey la Real Carta de Sucesión que le es otorgado, convirtiéndose en el VI Marqués de Villasegura.
De este matrimonio sólo hubo un hijo, Joaquín Ferrer y Latorre.
Contrajo matrimonio el 25/05/1905 con María Dolores Sostoa y Erostarbe en San Fernando (Cádiz), llegando en su carrera militar a Teniente Coronel de Infantería de Marina.