よく自分で気付いたね。ご褒美をあげよう。
xargs への入力もクォーティングできるよ。つまり、xargs はクォーティングを解釈する。
解釈しないでほしいならそれも可能だけど。
そういうニーズがあるなら bash の組み込みコマンドの read も調べてみたらいいよ。