High-tone betyr 'fornem' eller 'elegant', og brukes for å beskrive steder eller mennesker som er preget av høy sosial status og raffinement.
I sangen synger Nina Simone at hennes kjæreste ikke bryr seg om "high-tone places", altså fancy eller eksklusive steder. Det er et litt uvanlig, men veldig beskrivende uttrykk som gir et klart bilde av kjærestens enkle preferanser.
I «My Baby Just Cares For Me» synger Nina Simone om en kjæreste som er helt og holdent fokusert på henne. Han bryr seg ikke om overfladiske ting som «shows» [show] eller «clothes» [klær]. Det er ganske søtt, ikke sant?
Han er heller ikke interessert i «cars and races» [biler og billøp] eller «high-tone places» [fine steder]. Selv kjendiser som Liz Taylor og Lana Turner (eller Liberace i en annen versjon) fanger ikke hans oppmerksomhet. Det er bare hun som gjelder! Nina lurer til og med på «I wonder what's wrong with baby» [jeg lurer på hva som er galt med kjæresten min] – en morsom liten linje som viser at hun kanskje synes det er litt for bra til å være sant. Det er en herlig sang om å føle seg dypt elsket og verdsatt!