Après la guerre, il eut du mal à s'adapter à la vie en temps de paix. Comme le dit la chanson "Il ne supportait pas d'être avec les gens alors il est parti seul dans le Kentucky. Il passait presque toutes ses heures d'éveil dans un petit bateau sur un lac. En été, il pêchait toute la nuit quand il pouvait voir son propre appât. "
Finalement, après avoir passé des années à errer d'un État à l'autre, le fils de Wilson l'a retrouvé et l'a ramené chez lui en Alabama.