Nació en Montevideo en 1933, demostrando su inclinación artística desde muy pequeño. Escribía versos, obras para títeres y milongas.
Sus primeros tangos surgieron a comienzos de los '50, apareciendo en ellos la temática y el estilo por momentos surrealista de sus obras posteriores.
Abandonó sus estudios de arquitectura e ingresó como redactor de los suplementos del diario de Montevideo “El Día", y por pedido de Troilo escribió "La última grela", tango con el que iniciara su trayectoria de letrista consagrado.
Entre un extenso número de obras, presentaciones y premios en varios países, Ferrer colaboró con importantes artistas del género, como Roberto Grela, Leopoldo Federico, Raúl Garello y Horacio Salgán, con quien en 1975 compuso el Oratorio Carlos Gardel. Al año siguiente escribió con figuras ya míticas del tango, como Julio De Caro, Pedro Laurenz, Armando Pontier, Osvaldo Pugliese y Aníbal Troilo.
Distinguido como Ciudadano Ilustre de Buenos Aires en 1992, Ferrer recibió numerosos reconocimientos locales e internacionales a lo largo de su trayectoria.
En 1998 recibió la Medalla de Honor de La Sorbona, de París. Obtuvo el Gran Premio de la Sociedad de Autores y Compositores de la Argentina. En 1999 le fue otorgado el premio Trayectoria del Fondo Nacional de las Artes.
Entre sus múltiples obras se destacan: "Balada para un loco", "Chiquilín de Bachín", "La bicicleta blanca" o "Balada para mi muerte" y el más reciente "El Gran Troilo". Con Piazzolla creó la opereta María de Buenos Aires, por la que fue nominado al Grammy en EE UU.
Estrenó unos doscientos tangos y canciones y creó una serie de obras escénicas en colaboración con diferentes músicos.
Es el creador y presidente de la Academia Nacional del Tango (fundada en 1990) y de otras quince academias dedicadas a la difusión y el estudio del tango en diversos países americanos y europeos.