Wilderness se refiere a un lugar natural, amplio y sin habitantes, como un desierto o una región salvaje. En la canción se usa de forma metafórica: sin una mujer o una niña, el hombre está perdido y solo, como si estuviera en medio de un lugar desconocido.
James Brown presenta una idea deliberadamente exagerada y provocadora: «This is a man's world» [Este es el mundo de los hombres]. Luego enumera inventos y tareas asociadas con los hombres: «Man made the cars / To take us over the road» [El hombre fabricó los coches para llevarnos por la carretera], «Man made the train / To carry the heavy load» [El hombre fabricó el tren para transportar cargas pesadas] y «Man made the electric light / To take us out of the dark» [El hombre fabricó la luz eléctrica para sacarnos de la oscuridad]. Incluso menciona el arca de Noé: «Man made the boat for the water / Like Noah made the ark» [El hombre fabricó el barco para el agua, como Noé fabricó el arca]. La lista suena orgullosa, casi como una demostración de poder, pero el estribillo le pone un límite muy claro: «But it wouldn't be nothing / Without a woman or a girl» [Pero no sería nada sin una mujer o una niña].
La canción también baja de las grandes máquinas a la vida familiar: los hombres hacen juguetes para alegrar a sus hijos y ganan dinero para comprar cosas hechas por otros hombres. Ahí aparece una idea sencilla y repetida: construir cosas no basta para darles valor. La frase «Without a woman or a girl» [Sin una mujer o una niña] vuelve una y otra vez, como una corrección al título. Al final, el hombre que parecía capaz de hacerlo todo queda «lost in the wilderness» [perdido en la naturaleza] y «lost in bitterness» [perdido en la amargura]. Es una conclusión bastante dura, y también un poco irónica: el supuesto mundo de los hombres se queda vacío sin la presencia de las mujeres.