Payroll se doslovno prevodi kao 'platni spisak' ili 'lista zaposlenih'. Iako se čini kao obična riječ, u kontekstu pjesme
U pjesmi "Karma Police" Radiohead nas vodi u svijet gdje se osjećamo kao da nas netko promatra i sudi. Glavni likovi su pod lupom "Karma policije" zbog stvari koje nam se čine pomalo čudne, ali i prepoznatljive. Zamisli nekoga tko "talks in maths" [priča u matematici] i "buzzes like a fridge" [zuji kao hladnjak] – to je kao da opisuješ nekoga tko je jednostavno… drugačiji. Ili djevojku s "Hitler hairdo" [Hitler frizurom] koja izaziva nelagodu. To je kao da se bend sprda s našim predrasudama i brzim osuđivanjem drugih.
Pjesma se razvija u osjećaj nemoći i frustracije. Pjevač kaže: "I've given all I can / It's not enough" [Dao sam sve što mogu / Nije dovoljno], što zvuči kao da se trudi, ali ne uspijeva zadovoljiti nečije standarde. Na kraju, ponavljajuća fraza "For a minute there / I lost myself" [Na minutu sam se izgubio] savršeno opisuje onaj osjećaj kad se na trenutak prepustimo kaosu i izgubimo dodir sa stvarnošću. Pjesma je super podsjetnik da se ponekad svi osjećamo malo izgubljeno u svijetu koji nas stalno procjenjuje.