私の書き方が分かりにくかったですね。質問の内容は、

(dmm, V6プラス)
↓
ONU
↓
ルータ→(V6プラス)→PCなど
↓
(ルータでv4 PPPoEをパススルー)
↓
2台目のルータ(もし必要なら)
↓
PS4

というv4, v6の分岐による併用が可能なのでしょうか、です。