Coney Island Baby foi a resposta de Lou Reed ao escândalo de Metal Machine Music: um álbum caloroso, direto e nostálgico que o reconciliou com seu público. O disco abandona a provocação radical de seu predecessor para retornar a um rock acessível, impregnado de doo-wop e soul, os gêneros que Reed amou em sua adolescência em Long Island.
O álbum tem um tom confessional e vulnerável que raramente apareceu na obra de Reed. A canção que dá título ao álbum é uma declaração de amor explícita — dedicada à sua então parceira Rachel — que resulta surpreendentemente emotiva vindo de um artista conhecido por seu distanciamento irônico. 'Kicks' e 'She's My Best Friend' mostram seu lado mais direto e rockeiro.
Coney Island Baby marcou o retorno de Reed às raízes: a música de sua infância nova-iorquina, o calor humano que Metal Machine Music havia apagado. É um álbum que surpreende por sua ternura e permanece como um dos mais queridos de sua discografia entre seus seguidores mais fiéis.