Les paroles de la chanson dressent un tableau saisissant de la vie de cet homme. Il est décrit comme « l’ombre d’un homme » et le « fantôme d’un homme », et il est constamment à la recherche de nourriture et d’un abri. Il est également hanté par les souvenirs de son passé et il est incapable d'échapper au sentiment de solitude et d'isolement qui accompagne le fait d'être sans abri.
Le titre de la chanson, « Brown Arms in Houston », est significatif dans la mesure où il met l'accent sur la couleur de la peau de l'homme. Dans une ville à forte population hispanique, les bras marron de l'homme rappellent son statut d'étranger et la discrimination à laquelle il est confronté.
En fin de compte, la chanson « Brown Arms in Houston » est un portrait puissant et émouvant des luttes auxquelles sont confrontés les sans-abri aux États-Unis. La chanson met en lumière un problème souvent négligé et encourage les auditeurs à considérer l’humanité et la dignité de ceux qui sont moins fortunés.