【PVE】Proxmox VE【KVM, LXC】NODE-2

Proxmox VEについて語りましょう！

Proxmox VEは、Debianをベースとしたオープンソースのサーバー仮想化プラットフォームです
仮想マシンとコンテナの管理を、統合されたWebインターフェイスを通じて直感的に行うことができます

【公式サイト】
http://www.proxmox.com/
【公式ドキュメント】
https://pve.proxmox.com/pve-docs/

【特徴】
・オープンソース: コスト効率が良く、広範なコミュニティサポートが利用可能
・仮想マシンとコンテナの統合: KVMとLXCのサポートにより、柔軟な仮想化ソリューションを提供
・クラスタリングによる高可用性: 複数サーバの統合管理で、負荷分散や冗長性を実現
・Web GUIによる簡単管理: 直感的なインターフェースで専門知識がなくても管理可能
・多様なストレージサポート: NFS、iSCSI、Cephなど複数のオプション対応
・統合バックアップとレプリケーション: 簡単設定でデータ保護と災害復旧をサポート
・ライブマイグレーション: 稼働中のVMをダウンタイムなしで移動可能

【前スレ】
【PVE】Proxmox VE【KVM, OpenVZ】
https://mao.5ch.net/test/read.cgi/linux/1381916363/

>>825

一番無難に思えるところが罠だよな

PVEに限らんけどデフォで有効なのやめて欲しい

Proxmox Virtual Environment 9.0 released!
https://forum.proxmox.com/threads/proxmox-virtual-environment-9-0-released.169258/

>>828
arpa派

ついに来たな

>>832
ありが㌧。

読んでないけど ver 9 にするの面倒いのか？

再インストールは必須だな

カーネル一緒だから大丈夫か

蟹が死んだわ
戻したら使えるからハードが原因ではないな
NIC関連弱すぎねーか？
USB-NICも7.Xの頃使えていたのが使えんくなってるし

pve8to9を使えばいいんじゃね

>>839
RTL何番の話なのかちゃんと書けよ

iSCSI起動させているPVE8環境を更新したら
https://bugs.debian.org/cgi-bin/bugreport.cgi?bug=1103644
で引っかかったけど、それ以外は動いているっぽい
trixieの正式リリースまで待ったほうが良かったかも

ドライバ周りはDebianを調べたほうがいいよ
Proxmoxはそこ干渉してないから

自動にしてるんだけど地味に8.4も高速でアップデートされていくな。。。

9への移行はちょっと待つかな
あとP2Vはみんなどうしてるのさ

>>845
物心がついた頃から Proxmox VE だったから移行する物理マシンがなかった

>>846
物理マシンを破棄する前にP2Vしておいてバックアップにしたくならない？

>>846
物理マシンを破棄する前にP2Vしておいてバックアップにしたくならない？

>>847
3ノードのPVEクラスターでストレージはceph、PBSとNASに定期バックアップ
今のところこれで不安はない
シングルノードのPVEならP2V後の物理マシンをバックアップとして管理するのもいいのでは？

>>845
Linux なら ttps://wiki.archlinux.org/title/System_backup

Windows ならこのあたりかな
(自分はいつもクリアインストールなので動作未確認)ttps://pve.proxmox.com/wiki/Advanced_Migration_Techniques_to_Proxmox_VE
ttps://www.qnap.com/ja-jp/how-to/tutorial/article/windows-%E3%83%99%E3%83%BC%E3%82%B9%E4%BB%AE%E6%83%B3%E3%83%9E%E3%82%B7%E3%83%B3%E3%82%92-virtualization-station-%E3%81%A8%E3%81%AE%E9%96%93%E3%81%A7%E7%A7%BB%E5%8B%95%E3%81%95%E3%81%9B%E3%82%8B%E6%96%B9%E6%B3%95
ttps://www.virtualbox.org/wiki/Migrate_Windows

>>850
どうもです
Clonezilla の方法は見てましたが、やっぱりVMware converter のほうが簡単だよなーと思い、ESXi にP2V して、ESXi上では一度も立ち上げずにproxmox に吸い出して対応してました

ESXi が有料になるというのでシャットダウンしたホストをP2V のためだけに立ち上げているというこの矛盾
まあ、無料ESXi が再リリースされたから悪くない話ではあるんですけど

あれ、書いてて思ったんですが、ESXi を proxmox 上にインストールすればいいんじゃね？

条件があるけど、無償版esxi復活したの知らないのだろうか。

Converter使いたいならVMwareを素直に使うべきだわな
わざわざPVE使う意味がない
PVE使うのが目的ならあれだが

また有料になるかもよ

くだらない
Proxmoxも有料になるかもよ
使わない方がいいんじゃない

ESXiが有償化された経緯を考えると懸念は分かる
それに使えないデバイス多すぎて気軽に乗換できるものではない
ヘビーユーザーは1VMあたり最大8CPUの制限にも注意

ProxmoxはOSSで配布されてるだろ
ESXiとはまったく違うんだが

そもそもKVMのGUIフロントエンドでしかないんだから使えなくなっても直接叩けばいいだけ

なら最初からKVM使えばよくね？

Proxmoxは最初からKVM使ってるが

GUIフロントエンドを使わずにって事だろ

そうなったらoVirtとか使うだけなんだよな

欲しいのはhypervisorよりmanagerなのよな

9に上げてみたけどゲストのFreeBSDがなんか変だな
元々1%位だったCPU使用率が常時10%超えてるし、2GB割当で1.5GB位しか使用していなかったメモリは割当増やしても100%まで使い切るようになってしまった
でもFreeBSDにログインしてメモリ使用量を確認しても相変わらず1.4GBしか使ってない
同じくゲストのUbuntuは特に変わってるようには見えないんだけどね…
9にしても変化なく使えてる人いる？

メモリ使用率については本家ドキュメントのKnown Upgrade IssuesにVM Memory Consumption Shown is Higherってそのまんまのが書いてあったわ…
この件についてはゲストOS側の問題で正しく表示できてないだけなので気にする必要は無さそうだけど、CPU使用率についてはまだ不明
とりあえずVM追加して新規にインストールしてみるか

>>865
新規インストールや他のバージョンも試したけどCPU使用率は変わらず
ただフォーラム検索したら昔から同じような現象の報告があったようで、同じ対策(VMのオプション→ポインタ用にタブレットを使うを[いいえ]に変更)を行ったらCPU使用率が以前と同レベルまで改善しました！
https://forum.proxmox.com/threads/high-proxmox-ve-cpu-usage-from-idle-vm.136396/
これで改善しなかった人もいるようだけど参考まで

PVE入れたままでVM載せてないけど不具合あるなら9にするか迷うな

特になくない?ある？

あれ直ったの？
geforceのっけてると、インストール失敗すんだっけ？

Proxmox Virtual Environment 9.1 available!
https://forum.proxmox.com/threads/proxmox-virtual-environment-9-1-available.176255/

ついに来たな

VE 9.1のハイライトは次のとおりです。
-OCIイメージからLXCコンテナを作成する
-qcow2 形式での TPM 状態のサポート
-ネストされた仮想化をきめ細かく制御するための新しい vCPU フラグ
-強化されたSDNステータスレポート
-その他多数

いい感じですね

LXCが使いやすくなってる

現在アップデート中
このリリースはゲームチェンジャーになるね
docker混在になった時のネットワーク周りがどうなってるか興味津々だわ

>>874
自分もKVMとdockerの共存で散々躓いて調べたけど
あれdockerの方の問題だからな
共存するにはdockerサービスをdisableにするしかない

試しにjellyfin動かしてみたけど普通に動く
だが正直わけわからん
yaml書き替えたいけどproxmox上ではそういう項目ないから
どうしようもない
環境変数は書き換えできるからここでやるんだろか

nfsマウントしたいんだけどどうすりゃいいんだろ
proxmoxレベルでやるのかコンテナレベルでやるのか
どのレベルでマウントさせるべきか悩む
ここら辺のベストプラクティスはこれから判明してくんだろな

今までproxmoxのvm立ててそこでk8s動かしてその上でコンテナ動かしてたけど
これがproxmoxで全部完結する夢の様なアップデート
だからかなり期待してたんだけど
まだまだ色々問題多そう
移行するのはもうちょい先かな
だけど移行準備しといた方が良さげ

longhorn使ってたけどproxmoxで完結させるならcephとかzfsになるのがちょっと嫌だな
貧乏だからあんまリソース食わせたくない

なるほどね
dockerコンテナを動かしてるってよりlxcに変換してるって感じなのか
だったらansibleで最初からlxc作った方が楽な気がしないでもない

もしかしたら意外と使い所が難しいかも
テスト的にdockerコンテナ使う分にはお手軽ではあるけど
本番ではちょっと難しい

VMとコンテナどちらも利用したい場合、k8sクラスタにKubevirtインストールしてVM立てるのと差別化がわからんようになってきた

dockerの内部ネットワークはlinuxのあらゆる仮想ネットワークに干渉するけど
podmanとかmicrok8sなら基本その辺は問題なかったな

dockerコンテナを動かしたいだけなのに
lxcに変換せんとあかんのか

どうして📞😿

でもコンテナたくさん使いたいならk8sの方が多分楽なんだよな
lxcは併用では行けそうだけど

9.1になって地味に良いのはusbのnic使いやすくなった
名前がnic1とかになるから書き換える必要無くなった
でもnvidiaは相変わらずだな
はよ直してほしい

昨晩9.1に上げたが、携帯電話で操作してたせいか結構苦労した。もう少し楽にできるよう作ってくんないかな。

どのエンタープライズ向けサーバープロダクトでもスマートフォンでの操作は想定されていないと思うが

端末だけならWi-Fi経由の携帯で十分なんだ。寝ながらできるし（汗）

pve8.1から9.1に上げたり、BIOS+MBRのwin10をUEFI+GPTにしたり、10年以上前のReadyNASに置いてるVMを新しいQNAPに移したりするたびにいろいろ引っかかったりVMが立ち上がらなくなったりした。

でもChatGPTに聞きながらひとつひとつやってくと直る。
qm config 101
の結果貼って
とか言われて貼ると
次は～とか。

Linuxは基本オペレーションもおぼつかないんでめっちゃ助かる。
今なにが起きてるのかと指示されたコマンドでなにをするのかも説明してくれるんで理解も進む。
いちいちググりながら試行錯誤してたんと比べて捗る捗る。

ちょっと調子がいいのがムカつくけどw

copilotやgeminiでもやってみたけど、ChatoGPTが一番こなれてる感じはする。ちょっとムカつくけどw

専門外のことを調べたり学ぶ能力が低いんでAI助かるって言ってるだけやな

そうだよ。
学習コストめっちゃ下がった。

変な先入観なく聞きたいことにちゃんと答えてくれるから有能だよね。

systemdだのLVMだのもわからん浦島太郎状態でやってるので、そっちの勉強も同時進行できるのがめっちゃ捗るんよ。
大前提の基礎知識がないまま試行錯誤しても効率悪いし、基礎から勉強しなおしもまずどこがどれくらいわかってないかもわからんのでなぁ。
人間相手に教わると「えっ、そんなことも知らんのか」ってなるものも遠慮なく聞ける。

とりあえず安定稼働状態になったんであとは放置～。

VMwareのクソ化でProxmoxが注目されてるけどLTSみたいなサポート出来ないと日本での展開は難しいんじゃないかな
数年ごとのDebianのリリースサイクルでメジャーVer.upで運用するのは厳しいでしょう

>892
安定版が必要ならサブスクリプションでエンタープライズリポジトリ使うと思うけどそういう意味じゃない？

サポート欲しいところはRHEL使うんじゃねえの

RHELで仮想化基盤ってコンテナ基盤とのセットのOpenShift Virtualizationくらいしかなくないか？ OpenStackは難しすぎるし

>>889
雰囲気で世は事もなしで誤魔化せる事が増えてるだけでそれ以外は昔と何も変わってないで

8から9に上げるのって難しいの？
3台でクラスター組んでるので、一台ずつゲストを空にしてクリーンインストールしてやれば一番楽かなと思ってみたけど

PBS は先行して3から4にしてみた

>>897
次のとおりで慌てすにやれば難しくはない
https://pve.proxmox.com/wiki/Upgrade_from_8_to_9

慌てずにやる事が出来ない人間は少なくないのでそのアドバイスはあまり適切ではない
目が滑る人はドキュメントが読めない

>>898
ゴミが残りそうで、できればノードごとにクリーンインストールしたいです

>>900
自分ならVM3台でクラスタ作って試してみるけどなぁ
手間はかかるけどどっちが楽か難しいかも確認できる

>>900
自分ならVM3台でクラスタ作って試してみるけどなぁ
手間はかかるけどどっちが楽か難しいかも確認できる

>>895
OpenShift Virtualizationってk8sコンテナ環境にKubeVirtでVMを動かしているのでk8sのオーバーヘッドが大きい様に感じるなぁ……

k8sってオーバーヘッドあるの？
コンテナを管理してるだけのツールでは

k8sの上に立てたコントローラーからqemu叩いてKVMのVM動かしてるだけだからオーバーヘッドは仮想NICとソフトウェアスイッチ位のものだよ

k8s+KubeVirt、こんなイメージだったわ

+---------------------+
| KubeVirt |
~~+---------------------+~~
| Orchestration (K8s) |
+---------------------+
| Scheduling (K8s) |
+---------------------+
| Container Runtime |
~~+---------------------+~~
| Operating System |
~~+---------------------+~~
| Physical |
+---------------------+

>>902
基本的にはdist-upgrade の実行だけなんだろうけど、pve8to9 を実行したら error だったか warning だったかがドバッと出たのでめんどくさくなりました　ハードウエア依存のエラーだと仮想環境のテストとは条件が違うでしょうし（エラーの中身はちゃんと読んで無い）

できれば SATA SSD なのを PCIe SSD に置き換える作業も同時にやりたいのだけど、いまSSDも爆上がりだから、こっちは据え置きかなあ

>>907
面倒かもしれないけれどノードの電源を落としてクラスタから削除して新規インストールしてクラスタに参加する手順も試してみたほうが無難かと
https://pve.proxmox.com/wiki/Cluster_Manager#_remove_a_cluster_node
VM のスナップショットを残しているだろうから何度でもやり直せるでしょう

PVEに限らず差分アップデートって信用できねーよなw

windows11載せたらいつの間にかDNSで名前解決できんくなってて1日いろいろやってたけど、windowsのNICのオフロード offで解決した。
こんなハマり方する人いるかわからんけど一応残しとく。

Proxmox9.1上のwindows11 VMで

・DNSサーバに
pingは通るしsshも繋がる
・nslookupではtimeout
・NICはvirtioでもE1000でも同じ
・DNSサーバがdebianに載せたbind9でもルータ(HGW)でも同じ
・powershellで Resolve-DnsName -TcpOnlyは成功 (要はTCP/53は通るけどUDP/53はダメ)
対処方:

PowerShell（管理者）で以下を実行 ※"イーサネット"は環境に応じて
Disable-NetAdapterChecksumOffload -Name "イーサネット" -IPv4

Disable-NetAdapterChecksumOffload -Name "イーサネット" -IPv6

chatGPTに言わすと

---
UDP/53 の戻りパケットだけを Windows が受理していない

原因は「Large Send Offload / Checksum Offload 系 + virtio + Windows 11」

これは Proxmox 8以降 + Windows 11 で割と報告が増えてるやつです。

DNS UDP 応答は：
・小さく見えて
・実際は オフロード前提のフレーム
・それを Windows 側が「壊れてる」と判断して捨てる

TCP は再構成されるから生き残る
UDP は 一発勝負なので死ぬ

---

だそうで。
報告増えてるのか。探し方悪いのか全然見つからんかった。

そんなことがあるんだ

全部発生するわけでもないしちゃんと動いてたのがおかしくなったので、windowsやらVMやらとあっちこっち設定いじくりまわしたけどどれも無駄だったわw
問題の切り分け大事ねー。

pve8から9に上げるのに再インストールしたらインストーラー起動しなくて
グラボがnvidiaだった事思い出した
これまだ治らんの？

これで、治るかな？
Linux 6.19-rc5 は、新しい NVIDIA GPU、Logitech HID++ For Anywhere 3S などの修正プログラムを導入
https://www.phoronix.com/news/Linux-6.19-rc5-Released

ポンコツNICの場合Offload系はオフにするのが定石だからな

現代のCPUはネットワークの処理任せても大した負荷にならんしな

proxmoxを触ってみて
うお～すげ～と思ったが
使い道がない
32コア128GBマシンがあるから
それで何かに活かしたいがやることない
悲しい

>>908

8系ノードをコマンドラインでクラスタから削除
念のためネットワークケーブルを引っこ抜いてから9系をクリーンインストール
9系を最新版にアップデートしてからノードに参加

あっさり終わりました

ところで、proxmox datacenter manager をインストールしてみたのだが、なんだこれ？
vCenter server みたいなのをイメージしてたのだけど、クラスタ組んで管理してるとあんまり意味なかったりする？

>>918
N100 32GBにProxmoxを入れ、ドメコン2台とNAS2台を動かしてる。
他は同じくあまり使い道がないかな。

高負荷の鯖構築ならPVEのメリットありそうだが一般的のはもて余すよねw皆が何に活用してるか気になる
N100で大容量メモリは先にCPUがボトルネックになりそうだなw

自宅にk8sを動かして色々サービス展開したりansibleとかを常に回したり 後はAIで常にトラフィックモニタリングさせて色々制御させたりするのをやりたい

>>922
NASがリソース食わないOMVというのもあるが、非常に軽快に動作してるよ。

>>918
自宅か、会社かにもよるけど、OSSでいろいろと便利なツールがあるのでそれを動かすのが良いんじゃないかな？
このスレッドの人に、Proxmoxを何を使っているか、聞けば、いろいろと出てくると思うよ。

ただし、32コア128GB。会社であれば、検証環境にもってこいだけど、自宅なら電気代の無駄だなぁ。

>>925
ここの住人なら（12コア24スレッド・64GBメモリ）x 3ノード とか自宅でも普通にありそう

Zabbix、PostgreSQL、Plesanter、GitBucketあたりが動いとる
付随してDNSとかもか

GitBucket以外は無駄に冗長化させてる
ぶっちゃけ止まっても困らんからいいんだが、何する？ってなった時にやったわ

PVEのバックアップ機能で保存先をWindowsサーバの共有にしてたのだけど、頻繁にバックアップ失敗してた。

Copilotに相談したら「WindowsのCIFS共有をバックアップ先にするのは正気の沙汰ではない」ってバカにされたｗ