Hostage significa 'refém'. É uma palavra forte e dramática que não se ouve com frequência em canções pop, o que a torna bastante impactante.
Nesta canção, Ariana Grande usa-a metaforicamente para descrever como se sentia presa ou controlada pelas suas próprias lágrimas e medos, como se fosse refém das suas emoções. Esta utilização poética e intensa torna a palavra muito memorável e expressiva no contexto da música.
Em "Bye", Ariana Grande oferece-nos um hino de despedida e empoderamento. A letra narra o momento final de uma relação, com a cantora a declarar de forma clara e repetida que está tudo acabado: "Bye-bye / Boy, bye / It's over, it's over, yeah" (Adeusinho / Rapaz, adeus / Acabou, acabou, sim). Não é uma decisão impulsiva; ela reflete sobre as lágrimas passadas e a coragem que finalmente encontrou para superar os seus medos, cantando: "I can't believe I'm finally movin' through my fears" (Nem acredito que estou finalmente a superar os meus medos).
A canção capta na perfeição o sentimento agridoce de um fim necessário. Apesar de admitir que a despedida é difícil — "This hook feels too hard to sing" (Este refrão parece demasiado difícil de cantar) —, ela sabe que é a decisão certa para quebrar um ciclo de infelicidade. Com uma amiga à espera no carro para a ajudar na partida, a letra pinta uma imagem vívida de alguém que está a recuperar o controlo da sua vida, a reconhecer a sua própria força e a seguir em frente com esperança, mesmo que com um toque de tristeza.