Elusive significa 'elusivo', 'difícil de alcançar' ou 'escorregadio'. É uma palavra que descreve algo ou alguém que é difícil de capturar, encontrar ou entender, como se estivesse sempre escapando.
Na canção, Alessia Cara canta: "You're elusive and it kills me" (Você é elusivo e isso me mata). Ela usa essa palavra para expressar a frustração e a dor de ter um relacionamento ou uma pessoa que nunca se compromete totalmente, que está sempre fora de alcance, tornando a conexão impossível de manter.
Já alguma vez sentiu que ama alguém, mas que essa pessoa o dececionou profundamente? É exatamente sobre este sentimento agridoce que a artista canadiana Alessia Cara canta em “You Let Me Down”. A canção explora a dor de ter de deixar para trás um amor que se tornou um obstáculo, um "fogo no passado" que nos impede de seguir em frente. O refrão é direto e poderoso, resumindo todo o conflito: “I love you but you let me down” (Eu amo-te, mas tu dececionaste-me).
Nesta balada emotiva, Alessia Cara descreve a difícil decisão de escolher o seu próprio bem-estar, mesmo que isso signifique partir. Ela canta sobre a necessidade de fugir “o mais rápido que puder” desta situação dolorosa, mostrando a dificuldade em cortar os laços por completo, como na parte em que imagina ligar no aniversário da pessoa e não conseguir dizer a verdade. É uma canção sobre a coragem de dizer adeus a algo que amamos, mas que já não nos faz bem.