“Hearts of Stone” foi escrita por Eddie Ray e Rudy Jackson, integrantes do grupo de R&B The Jewels, que gravaram a canção pela primeira vez em 1954.

Antes de se tornar um grupo de R&B, The Jewels começou como um coral gospel, e segundo o líder Johnny Torrence, a melodia de “Hearts of Stone” foi adaptada de uma música que gravaram nessa fase religiosa.

A versão de 1954 do grupo da Costa Leste The Charms levou a canção ao topo da parada R&B Best Sellers e alcançou a 15ª posição nas paradas pop, eclipsando a gravação original dos Jewels.

O sucesso de The Charms fez com que muitos escritores e DJs acreditassem que a versão deles era a original, deixando a participação dos Jewels praticamente esquecida nos registros históricos.