A origem do ditado é em relação ao instrumento, a pá. Quando a pá está virada pra baixo, voltada pro solo, está inútil, abandonada, que foi logo associada ao homem vagabundo, irresponsável, parasita.
Conheço muitos “pás viradas” que nem pensam em desvirar.