A música abre com um solo de órgão similar a um velório, no qual Prince pronuncia uma "elogia" para "essa coisa chamada vida", e os vocais de introdução se sobrepõem na versão em single.

A letra é interpretada como um apelo para seguir a ética cristã, utilizando coloquialmente o "De-elevator" como metáfora para o Diabo.

A bateria foi programada com uma máquina de bateria Linn LM-1, um instrumento frequentemente utilizado em muitas composições de Prince.

Prince lançou duas músicas no top 10 da Billboard Hot 100 simultaneamente por uma única semana em setembro de 1984, com "Let's Go Crazy" e "When Doves Cry".

"Let's Go Crazy" chegou ao número 1 nas paradas, derrotando "Missing You" do John Waite, e manteve essa posição por duas semanas consecutivas até ser superado pelo hit de Stevie Wonder.

A versão original estendida da música foi reduzida para o álbum após a adição da faixa "Take Me With U" à lista de músicas, removendo a seção instrumental mais longa que incluía um riff de guitarra e um solo de piano atonal.