他のアプリに切り替えてから戻ろうとするとXが落ちてるのが
面倒で実用にまで後1歩2歩という感じ。

x11vncとかXRDPとか使ってAndroidのVNC/RDPクライアント
から触れればいいのかな?