Proxmox VEについて語りましょう!
Proxmox VEは、Debianをベースとしたオープンソースのサーバー仮想化プラットフォームです
仮想マシンとコンテナの管理を、統合されたWebインターフェイスを通じて直感的に行うことができます
【公式サイト】
http://www.proxmox.com/
【公式ドキュメント】
https://pve.proxmox.com/pve-docs/
【特徴】
・オープンソース: コスト効率が良く、広範なコミュニティサポートが利用可能
・仮想マシンとコンテナの統合: KVMとLXCのサポートにより、柔軟な仮想化ソリューションを提供
・クラスタリングによる高可用性: 複数サーバの統合管理で、負荷分散や冗長性を実現
・Web GUIによる簡単管理: 直感的なインターフェースで専門知識がなくても管理可能
・多様なストレージサポート: NFS、iSCSI、Cephなど複数のオプション対応
・統合バックアップとレプリケーション: 簡単設定でデータ保護と災害復旧をサポート
・ライブマイグレーション: 稼働中のVMをダウンタイムなしで移動可能
【前スレ】
【PVE】Proxmox VE【KVM, OpenVZ】
https://mao.5ch.net/test/read.cgi/linux/1381916363/
【PVE】Proxmox VE【KVM, LXC】NODE-2
■ このスレッドは過去ログ倉庫に格納されています
2024/04/11(木) 10:49:45.45ID:8tgVZdvA
2024/08/19(月) 19:49:16.99ID:rGBsJPoK
昔はN100のミニPCに入れようとしたら一手間掛かったけどすぐに対応されたし、本当にオープンソース様々。
2024/08/19(月) 20:00:38.67ID:rGBsJPoK
>>401
あと、Proxmoxは外付けSSDにインストールできるので、注意すればPCの既存環境を残したまま仮想環境を構築できる。余っているPCで一時的に試したい時はお薦め。
あと、Proxmoxは外付けSSDにインストールできるので、注意すればPCの既存環境を残したまま仮想環境を構築できる。余っているPCで一時的に試したい時はお薦め。
405login:Penguin
2024/08/19(月) 20:21:39.73ID:eMcA18kz 一手間と言えばなんかefiがどうのっていう謎のエラーでインストーラーが起動直後に止まって進めなくて
一回Ubuntuをインストールした後に上書き起動したらインストールがスムーズに進んだっていう謎の現象あったな
一回Ubuntuをインストールした後に上書き起動したらインストールがスムーズに進んだっていう謎の現象あったな
406login:Penguin
2024/08/19(月) 22:39:38.96ID:ivgWSsdU Alderlakeのグラフィックドライバの件じゃなくて?
407login:Penguin
2024/08/20(火) 02:55:56.15ID:39dpViJh 「proxmox efi boot mode detected」とかでググればヒットする現象
408login:Penguin
2024/08/20(火) 07:25:59.29ID:Lvw+69hd そういえば、lvm 作成3% のところで止まる現象、うちでも発生した
ググったらありがちな現象らしく、もう一回やってみたら進んだ
よくわからん
ググったらありがちな現象らしく、もう一回やってみたら進んだ
よくわからん
2024/08/20(火) 07:54:44.97ID:KjXfux3Y
HDDに中途半端にパーティション情報が残ってるとうまくいかないことはあったな
ddで先頭あたりを掃除してやるといけたり
ddで先頭あたりを掃除してやるといけたり
410login:Penguin
2024/08/20(火) 10:44:51.77ID:CXO9kQhO >>378
返事が遅れてすみません。現在揃えたのは元々持っていたものも含めて
1. Beelink EQ12 N100 32GB DDR5 500GB SSD
2. BEelink s12pro N100 32GB DDR4 500GB SSD
3. Trigkey G4 N95 32GB DDR4 500GB SSD
4. Aoostar MN58 5800u 16GB(変更予定)DDR4 500GB
で、あと1~2台、5xxx シリーズの導入を考えています。
一応、
1~4のどれも proxmox インストール出来て動いているようです。
なお、1のマシンで
>>188
の症状がおきました。
インストール後は特に問題ないように見えます。
ご参考になると幸いです。
返事が遅れてすみません。現在揃えたのは元々持っていたものも含めて
1. Beelink EQ12 N100 32GB DDR5 500GB SSD
2. BEelink s12pro N100 32GB DDR4 500GB SSD
3. Trigkey G4 N95 32GB DDR4 500GB SSD
4. Aoostar MN58 5800u 16GB(変更予定)DDR4 500GB
で、あと1~2台、5xxx シリーズの導入を考えています。
一応、
1~4のどれも proxmox インストール出来て動いているようです。
なお、1のマシンで
>>188
の症状がおきました。
インストール後は特に問題ないように見えます。
ご参考になると幸いです。
411login:Penguin
2024/08/20(火) 13:37:39.75ID:pFsU0jMH 5800u を積んでるやつ良さげですね
確かRAMスロットのサポートがそもそも2スロットまでだったはずなのが惜しいなあ
128GB載るならまじ欲しい
確かRAMスロットのサポートがそもそも2スロットまでだったはずなのが惜しいなあ
128GB載るならまじ欲しい
2024/08/20(火) 16:26:47.56ID:5wAlpZw4
GMKTecM5Proでもええんちゃう?
413login:Penguin
2024/08/20(火) 17:53:50.80ID:CXO9kQhO >>410
ちなみに、N100 と 5800u は windows の cinebench などでみると、シングルで1.5倍、マルチで3倍くらい 5800u が性能が上です。
proxmox 上の VM ですが、当然ですが 5800u の方が明らかに快適で、明確に N100 との差が感じられます。
N100 だけ使っているときはそんなに気にならないんですが、やはり予算が許すなら N100 より 5xxx のほうが幸せになれそうです。
ちょっとした懸念として、最近の ryzen CPU の脆弱性対応の BIOS が中華ミニPCに提供されるかという不安です。
ryzen CPU の脆弱性はかなり条件が揃わなければならないのであまり気にする必要はないと言う意見もあるようですが。。。
どうなんだろう。
ちなみに、N100 と 5800u は windows の cinebench などでみると、シングルで1.5倍、マルチで3倍くらい 5800u が性能が上です。
proxmox 上の VM ですが、当然ですが 5800u の方が明らかに快適で、明確に N100 との差が感じられます。
N100 だけ使っているときはそんなに気にならないんですが、やはり予算が許すなら N100 より 5xxx のほうが幸せになれそうです。
ちょっとした懸念として、最近の ryzen CPU の脆弱性対応の BIOS が中華ミニPCに提供されるかという不安です。
ryzen CPU の脆弱性はかなり条件が揃わなければならないのであまり気にする必要はないと言う意見もあるようですが。。。
どうなんだろう。
414login:Penguin
2024/08/20(火) 18:23:36.88ID:pFsU0jMH そりゃまあ、5800u のほうが速いわな
色々調べてましたが、5800u に128GB載せた例はなさそうですね
メモリチャネルが2で、ddr4の最大メモリモジュールが32GBなので、当たり前なんですが
色々調べてましたが、5800u に128GB載せた例はなさそうですね
メモリチャネルが2で、ddr4の最大メモリモジュールが32GBなので、当たり前なんですが
2024/08/20(火) 18:52:42.95ID:5wAlpZw4
RyzenAI世代位になったら128GBサポートとかなるんかな?
2024/08/21(水) 10:55:56.44ID:rhhPEFt0
Cephのネットワーク構成なんだけど、仮想環境で試したら
5台規模のノードだとLANx4をECMP(L4)で束ねるより、フルメッシュで構築したほうが良好なパフォーマンスが得られる
冗長化構成でLACP対応のHUBとか消費電力考えたら、このぐらいの規模だとフルメッシュの方がコスパいい気がする
5台規模のノードだとLANx4をECMP(L4)で束ねるより、フルメッシュで構築したほうが良好なパフォーマンスが得られる
冗長化構成でLACP対応のHUBとか消費電力考えたら、このぐらいの規模だとフルメッシュの方がコスパいい気がする
417login:Penguin
2024/08/21(水) 14:26:08.25ID:Z6o2Kf88 スイッチ挟まずにNIC間を直結すればええやん、とかそういう話?
418login:Penguin
2024/08/21(水) 14:27:08.94ID:Z6o2Kf88 性能検証を仮想環境でやってどれだけ意味あんだろ
419login:Penguin
2024/08/22(木) 15:42:11.75ID:gnBLXZwc >>418
意味あるでしょ
意味あるでしょ
2024/08/22(木) 23:05:17.18ID:+0phNCJG
421login:Penguin
2024/08/23(金) 12:49:43.63ID:dIQS6uC2 一回世論操作バレたウジサンケイグループまだ懲りてないだろうし、
評価しない限り自動更新の自動引き落としの場合は早速グッズも手掛けてるから?
評価しない限り自動更新の自動引き落としの場合は早速グッズも手掛けてるから?
422login:Penguin
2024/08/26(月) 14:02:21.94ID:eofeorUB >>410
興味がある人少なそうだけど、アリエクのセールでミニPC、 GMKtec 5825u ベアボーンが約24500円、Trigkey 5700u 32GB 500GBSSD が約27000円でセールしてる。
更にmoppy 経由で購入すると6%のポイントが付く模様。まぁ、アリエクなのでトラブルの際は苦労しそうだけどこの値段なら勝負?してもよいかもw
1005007046616921
1005006629018520
私は勝負してみました。w
どうなることやらw
興味がある人少なそうだけど、アリエクのセールでミニPC、 GMKtec 5825u ベアボーンが約24500円、Trigkey 5700u 32GB 500GBSSD が約27000円でセールしてる。
更にmoppy 経由で購入すると6%のポイントが付く模様。まぁ、アリエクなのでトラブルの際は苦労しそうだけどこの値段なら勝負?してもよいかもw
1005007046616921
1005006629018520
私は勝負してみました。w
どうなることやらw
2024/08/26(月) 17:54:47.89ID:lxWNMsC3
Proxmox用にミニPCを探している人は、こちらのスレも覗いて見ると良い。
小型、超小型PC総合スレPart26
https://mevius.5ch.net/test/read.cgi/hard/1721189218/
小型、超小型PC総合スレPart26
https://mevius.5ch.net/test/read.cgi/hard/1721189218/
2024/08/27(火) 08:49:51.07ID:dpumMi8C
GMKのM5もインストールできたけど色々癖があったな
BIOSのNXモード変えたり一回別のLinux入れてefi書き換えたり
BIOSのNXモード変えたり一回別のLinux入れてefi書き換えたり
2024/08/27(火) 15:39:56.62ID:fmvlfS7Z
最初は余ったパソコン1台にproxmox入れて
そこにvm5台構成でk8s動かしてこりゃ便利、と思ったんだけど
調子に乗ってパソコンを1台、また1台と増やして
今じゃパソコン5台にproxmox入れてそこにvm15台構成でk8s入れてる
だが、結局k8s動かすなら一般家庭用途じゃ5台あれば必要充分
逆に物理5台の上でvm15台動かすとか管理が面倒になるだけ
なので5台のpcを1台OMV入れてファイルサーバーにして
1台にproxmoxいれてvm5台構成のテスト環境
残り3台にubuntu+k3s入れた本番環境にした
闇雲に増やせば良いってもんじゃないね
そこにvm5台構成でk8s動かしてこりゃ便利、と思ったんだけど
調子に乗ってパソコンを1台、また1台と増やして
今じゃパソコン5台にproxmox入れてそこにvm15台構成でk8s入れてる
だが、結局k8s動かすなら一般家庭用途じゃ5台あれば必要充分
逆に物理5台の上でvm15台動かすとか管理が面倒になるだけ
なので5台のpcを1台OMV入れてファイルサーバーにして
1台にproxmoxいれてvm5台構成のテスト環境
残り3台にubuntu+k3s入れた本番環境にした
闇雲に増やせば良いってもんじゃないね
2024/08/27(火) 17:05:32.55ID:dpumMi8C
そもそも家庭で動かすならmicrok8sとかminikubeでいい気が
427あぼーん
NGNGあぼーん
428login:Penguin
2024/08/27(火) 19:23:57.57ID:KmK63Bw32024/08/27(火) 20:09:23.06ID:ngInE608
>>427
やるしか無いだろこれ
やるしか無いだろこれ
430login:Penguin
2024/08/27(火) 22:51:43.52ID:GVxdJ6bF 生還
9950xに入れ替えたからかBIOS更新からかマザーと2枚目のLANカードが新しいものとして認識されたようで再設定しないといけなかった模様。
よく見たらノードのネットワークが5本増えてるのですがそれに気づかず結構な遠回り。
余計なことして戻るのに一苦労。
LANが光ってないのはホラーでした。
ssdの非アクティブ化はコンソールではうまくいかないので起動失敗のエマージェンシーモードからnano /etc/fstab をいじって何とか。
そもそもパスワード要求されても何の文字も打てないところでずっとはまってたんですが、見えないだけで打ててたんですね。
地獄のフルコースでした
9950xに入れ替えたからかBIOS更新からかマザーと2枚目のLANカードが新しいものとして認識されたようで再設定しないといけなかった模様。
よく見たらノードのネットワークが5本増えてるのですがそれに気づかず結構な遠回り。
余計なことして戻るのに一苦労。
LANが光ってないのはホラーでした。
ssdの非アクティブ化はコンソールではうまくいかないので起動失敗のエマージェンシーモードからnano /etc/fstab をいじって何とか。
そもそもパスワード要求されても何の文字も打てないところでずっとはまってたんですが、見えないだけで打ててたんですね。
地獄のフルコースでした
431login:Penguin
2024/08/27(火) 22:58:11.37ID:GVxdJ6bF ネットワークのゴーストって消しておいたほうがいいですよね、どうやったものか
432login:Penguin
2024/08/27(火) 23:00:44.08ID:GVxdJ6bF ゴーストになってるLAN消しておいたほうがいいのですよね。
そもそも今のままで再起動してちゃんと動くかも未知数で
そもそも今のままで再起動してちゃんと動くかも未知数で
433login:Penguin
2024/08/27(火) 23:51:51.98ID:GVxdJ6bF おかしなことにRAMの使用が186の140ほどの使用でSWAPが絶えず8gマックスになってしまいました。ネットワークのゴーストのせいか、それとも一斉に更新作業でもしてるのか
2024/08/28(水) 00:26:35.43ID:JBXtZeo5
435login:Penguin
2024/08/28(水) 01:27:17.19ID:AG6JGczx CPU入れ替えの際のBIOSS更新で、マザーとLANカード1が新しい)機器として認識されてしまい、(LANカード2は無事)何とか移行は終了したがゴーストになってる過去のLANポートの認識はどう処理したものかということと。
メモリを128から192にしてスワップは8gの10パーセント程度だったはずが、6割を常駐しています。これはSSDの寿命などを考えて対策しなければいけない状態でしょうか?
スワップが怖いのでなるべく仮想マシンにメモリを割り振りましたが、10g割り振ってサマリーに使用率が92のマシンのタスクマネージャを見るとメモリの使用率が33で頭が痛くなります。
スワップが大きいことの危険性と対策に置いてアドバイスいただけると幸いです。
メモリを128から192にしてスワップは8gの10パーセント程度だったはずが、6割を常駐しています。これはSSDの寿命などを考えて対策しなければいけない状態でしょうか?
スワップが怖いのでなるべく仮想マシンにメモリを割り振りましたが、10g割り振ってサマリーに使用率が92のマシンのタスクマネージャを見るとメモリの使用率が33で頭が痛くなります。
スワップが大きいことの危険性と対策に置いてアドバイスいただけると幸いです。
436login:Penguin
2024/08/28(水) 01:40:57.76ID:AG6JGczx BIOS、CPU交換で別のマシンになったと思ってシステムディスクの再インストールが良いでしょうか
結構すさまじいことになってる感じで
GPTさん
今回の vmstat コマンドの出力を基に、ディスクへの書き込み量を再度確認します。bo 列がディスクに書き込まれたブロック数を示しています。
1日の書き込み量の推定
もしこの書き込みペースが1日中続いたと仮定すると、1秒あたり約10.95MBのデータが書き込まれていることになります。これを1日(86400秒)に換算する
10.95MB/秒×86400秒/日=946,080MB≈924GB/日
結論
1日あたり約924GBの書き込みが発生するペースで、これはSSDに非常に高い負荷をかける量です。仮にこのペースが毎日続く場合、1年間で約337TBのデータが書き込まれることになり、一般的なSSDの寿命(100TBW〜300TBW程度)を超える可能性があります。
結構すさまじいことになってる感じで
GPTさん
今回の vmstat コマンドの出力を基に、ディスクへの書き込み量を再度確認します。bo 列がディスクに書き込まれたブロック数を示しています。
1日の書き込み量の推定
もしこの書き込みペースが1日中続いたと仮定すると、1秒あたり約10.95MBのデータが書き込まれていることになります。これを1日(86400秒)に換算する
10.95MB/秒×86400秒/日=946,080MB≈924GB/日
結論
1日あたり約924GBの書き込みが発生するペースで、これはSSDに非常に高い負荷をかける量です。仮にこのペースが毎日続く場合、1年間で約337TBのデータが書き込まれることになり、一般的なSSDの寿命(100TBW〜300TBW程度)を超える可能性があります。
437login:Penguin
2024/08/28(水) 02:19:03.51ID:AG6JGczx ネットワークのゴーストを消してディスク書き込みは1日38gと許容できる範囲になりました
SWApは4gのままですが
RAM 使用状況 77.95% (186.31 GiBの 145.22 GiB)
KSM sharing 56.90 GiB
/ HDスペース 13.78% (93.93 GiBの 12.94 GiB)
SWApは4gのままですが
RAM 使用状況 77.95% (186.31 GiBの 145.22 GiB)
KSM sharing 56.90 GiB
/ HDスペース 13.78% (93.93 GiBの 12.94 GiB)
2024/08/28(水) 02:21:27.88ID:JBXtZeo5
>>435
SWAPファイル(ホスト、ゲスト)について
ある程度設定で使用状況をコントロールできるけど「swappiness」で検索
基本的にはアクセスの少ない範囲がSWAPに移動する仕組みだから、極端な状況でなければ気にしないほうが良いと思う
SSDの寿命も、SMART情報を基準にして書き込みでの劣化が一定の状況を超えたら交換すればいいと思う
SWAPファイル(ホスト、ゲスト)について
ある程度設定で使用状況をコントロールできるけど「swappiness」で検索
基本的にはアクセスの少ない範囲がSWAPに移動する仕組みだから、極端な状況でなければ気にしないほうが良いと思う
SSDの寿命も、SMART情報を基準にして書き込みでの劣化が一定の状況を超えたら交換すればいいと思う
439login:Penguin
2024/08/28(水) 03:23:52.11ID:AG6JGczx 当初9本中4本だけ問題だったのが回復した後にnano /etc/network/interfaces
でゴーストを消したらすべてのネットワークがつながらなくなって無駄に格闘しましたが、再起動一発で治りました、こういう時変に持って回ったところに誘導するGPTさんには振り回される
でゴーストを消したらすべてのネットワークがつながらなくなって無駄に格闘しましたが、再起動一発で治りました、こういう時変に持って回ったところに誘導するGPTさんには振り回される
440login:Penguin
2024/08/28(水) 03:37:54.89ID:AG6JGczx そしてメモリの消費量が140gから170gに増え、SWAPが10パーセントに低下
元に戻りました
GPTさんも偉大ですが、困ったら再起動が結構有効なんですね
ただ、慣れないうちは再起動なんてしたら戻ってこれる気がしないからしたくないんだよね
多分今度こそ解決 後ほど9950のレポいたします。ぱっと見7950より負荷率だいぶ少ないな
元に戻りました
GPTさんも偉大ですが、困ったら再起動が結構有効なんですね
ただ、慣れないうちは再起動なんてしたら戻ってこれる気がしないからしたくないんだよね
多分今度こそ解決 後ほど9950のレポいたします。ぱっと見7950より負荷率だいぶ少ないな
441login:Penguin
2024/08/28(水) 09:54:23.40ID:AG6JGczx 9950x導入
【NH-U12A)で70度制限で使ってます
22の仮想マシン 全部2コア
7950のとき70%だった使用率は50になり、IO遅延も大体0.05
思った以上にゆとりが出ました
【NH-U12A)で70度制限で使ってます
22の仮想マシン 全部2コア
7950のとき70%だった使用率は50になり、IO遅延も大体0.05
思った以上にゆとりが出ました
442login:Penguin
2024/08/28(水) 10:35:10.73ID:AG6JGczx 温度が71から52になったのはすごいな
443login:Penguin
2024/08/28(水) 11:35:17.77ID:AG6JGczx 一見すべてが正常になったのですが、vmstat 1 10
ででるboの数字がディスク書き込みらしく、それの総書き込み量をGPTに計算してもらってますが、
SWAPは25%2Gなのにディスク書き込みが287Gといわれ困ってます。
外部PCの共有フォルダRAMDISKへの書き込みは多いのですがそれは除外したのがBOの値を説明を受けています。
単位違ったりするのでしょうか
r b swpd free buff cache si so bi bo in cs us sy id wa st
10 0 2070972 59994512 53476 309316 2 11 2555 238 2675 3613 1 2 70 0 0
6 0 2070972 59994512 53476 309316 0 0 70989 2045 77735 106082 0 1 74 0 0
18 0 2070972 59994512 53476 309316 0 0 136755 1284 81998 108340 1 2 66 0 0
11 0 2070972 59994512 53476 309316 0 0 21997 1851 87067 113449 1 1 54 0 0
18 0 2070972 59994512 53476 309316 0 0 1772 4508 84878 127186 1 2 64 0 0
18 0 2070972 59994512 53476 309316 0 0 134 4861 106256 122234 1 3 51 0 0
18 0 2070972 59994512 53476 309316 0 0 3597 6868 101892 117661 2 3 42 0 0
14 0 2070972 59994512 53476 309316 8 0 3495 2420 116713 134881 1 3 58 0 0
14 0 2070972 59994512 53476 309316 4 0 57 2442 117551 135777 1 3 63 0 0
7 0 2070972 59994512 53476 309316 0 0 9 3790 96718 121060 1 3 68 0 0
平均boの計算
(238 + 2045 + 1284 + 1851 + 4508 + 4861 + 6868 + 2420 + 2442 + 3790) / 10 ≈ 3330.7
1日の総書き込み量の推定
仮に1秒ごとにこの量が書き込まれると仮定すると、
3330.7ブロック/秒 × 60秒 × 60分 × 24時間 ≈ 287,853,120ブロック/日
このブロック数を具体的なデータ量に変換するためには、システムでのブロックサイズ(通常は512バイトか1KB)を考慮する必要があります。たとえば、ブロックサイズが1KBであれば、
コードをコピーする
287,853,120ブロック × 1KB ≈ 287,853,120KB ≈ 287.9GB/日
結論
このシステムでは、1日あたりの書き込み量は約287.9GBとなります。
ででるboの数字がディスク書き込みらしく、それの総書き込み量をGPTに計算してもらってますが、
SWAPは25%2Gなのにディスク書き込みが287Gといわれ困ってます。
外部PCの共有フォルダRAMDISKへの書き込みは多いのですがそれは除外したのがBOの値を説明を受けています。
単位違ったりするのでしょうか
r b swpd free buff cache si so bi bo in cs us sy id wa st
10 0 2070972 59994512 53476 309316 2 11 2555 238 2675 3613 1 2 70 0 0
6 0 2070972 59994512 53476 309316 0 0 70989 2045 77735 106082 0 1 74 0 0
18 0 2070972 59994512 53476 309316 0 0 136755 1284 81998 108340 1 2 66 0 0
11 0 2070972 59994512 53476 309316 0 0 21997 1851 87067 113449 1 1 54 0 0
18 0 2070972 59994512 53476 309316 0 0 1772 4508 84878 127186 1 2 64 0 0
18 0 2070972 59994512 53476 309316 0 0 134 4861 106256 122234 1 3 51 0 0
18 0 2070972 59994512 53476 309316 0 0 3597 6868 101892 117661 2 3 42 0 0
14 0 2070972 59994512 53476 309316 8 0 3495 2420 116713 134881 1 3 58 0 0
14 0 2070972 59994512 53476 309316 4 0 57 2442 117551 135777 1 3 63 0 0
7 0 2070972 59994512 53476 309316 0 0 9 3790 96718 121060 1 3 68 0 0
平均boの計算
(238 + 2045 + 1284 + 1851 + 4508 + 4861 + 6868 + 2420 + 2442 + 3790) / 10 ≈ 3330.7
1日の総書き込み量の推定
仮に1秒ごとにこの量が書き込まれると仮定すると、
3330.7ブロック/秒 × 60秒 × 60分 × 24時間 ≈ 287,853,120ブロック/日
このブロック数を具体的なデータ量に変換するためには、システムでのブロックサイズ(通常は512バイトか1KB)を考慮する必要があります。たとえば、ブロックサイズが1KBであれば、
コードをコピーする
287,853,120ブロック × 1KB ≈ 287,853,120KB ≈ 287.9GB/日
結論
このシステムでは、1日あたりの書き込み量は約287.9GBとなります。
444login:Penguin
2024/08/28(水) 12:18:29.54ID:zJDmShyM proxmox にはデフォルトで memtext86+ が付いています。
幸運なのかもしれませんが、今までエラーメモリにあったことがありませんでしたが、先日始めてエラーに遭遇しました。
何か不幸?があったのかもともう一度走らせると pass しました。
あれ?って更にもう一度走らせると fail が、、、、
当然なのかもしれませんが1度パスした位ではよろしくないのかも?と思い始めております。
確実など無いと思いますが、皆様 memtest86+ を使う場合、何周くらい回されていますか?
また、memtest86+ 以外にこれいいよ!ってテストがありましたらご教示頂けると幸いです。
なお、ECC メモリは使えない環境です。
幸運なのかもしれませんが、今までエラーメモリにあったことがありませんでしたが、先日始めてエラーに遭遇しました。
何か不幸?があったのかもともう一度走らせると pass しました。
あれ?って更にもう一度走らせると fail が、、、、
当然なのかもしれませんが1度パスした位ではよろしくないのかも?と思い始めております。
確実など無いと思いますが、皆様 memtest86+ を使う場合、何周くらい回されていますか?
また、memtest86+ 以外にこれいいよ!ってテストがありましたらご教示頂けると幸いです。
なお、ECC メモリは使えない環境です。
2024/08/28(水) 14:18:48.87ID:T8S7S8yC
446login:Penguin
2024/08/29(木) 08:38:12.93ID:w7tfsRPl 仮想環境にはECCはあった方がいいよねと思ってる
Memtest86+って、フルバージョンは有料になってなかったっけ?
Memtest86+って、フルバージョンは有料になってなかったっけ?
2024/08/29(木) 15:20:33.34ID:38JreCqb
Memtest86+はフリーウェアで、PassMarkのMemtest86が無料版だと機能が限定されますね。
448login:Penguin
2024/08/30(金) 23:39:54.72ID:gUptiahO 仮想マシンがフリーズしたのでHARDリセットすると、ロックアウトされましたと出て30分どころか半日は再ログインできないのですが、こうならないかなっても何とかする方法はないでしょうか。
GPTの言うこと聞いてもほぼ役に立ちませんでした。
GPTの言うこと聞いてもほぼ役に立ちませんでした。
2024/08/31(土) 03:47:07.03ID:wYhbLD7A
450login:Penguin
2024/08/31(土) 06:43:30.03ID:RJAj1CcG VMwareの問題があってから良くも悪くも賑わっているねえ...
451login:Penguin
2024/09/01(日) 18:48:36.79ID:qvihDX5I >>424
GMKtec M5 plus が到着し、早速 proxmox FreeBSD のインストールをしてみましたが、ネットワークがうまく繋がりません。
一応、 up しているみたいなのですが。。
よくわからないまま BIOS の NX を disable にしたりしましたが解決しません
アドバイスを頂けないでしょうか?
よろしくお願いします。
GMKtec M5 plus が到着し、早速 proxmox FreeBSD のインストールをしてみましたが、ネットワークがうまく繋がりません。
一応、 up しているみたいなのですが。。
よくわからないまま BIOS の NX を disable にしたりしましたが解決しません
アドバイスを頂けないでしょうか?
よろしくお願いします。
2024/09/01(日) 19:57:00.83ID:RrkLhoEJ
何がホストで何がゲストか。使った仮想化ソフトはとか
何も書いてないからエスパー以外答えることができない
何も書いてないからエスパー以外答えることができない
453login:Penguin
2024/09/01(日) 20:14:06.39ID:Aj2M9yOT ZFSのRAIDZ2でファイルシステム組んでるんだけど、カーネルパニックになって中身が読み取れなくなった。どうしたら復旧ができますでしょうか?
454 警備員[Lv.27]
2024/09/01(日) 20:52:01.61ID:qvihDX5I2024/09/01(日) 21:23:08.36ID:8SK7FPXq
>>453
カーネルパニックになった原因にもよると思うけど
そのZFSはPROXMOXホストで構築して使用してたって認識でOK?
中身が読み取れないってことはプールは認識してる?
パニック前にZFSの空き容量は十分にあった?
状況に応じた復旧方法は提示できるが、どのぐらい慎重に行うかで回答が・・・
まずはコマンド入力の「zpool status」で表示される内容を書いて
カーネルパニックになった原因にもよると思うけど
そのZFSはPROXMOXホストで構築して使用してたって認識でOK?
中身が読み取れないってことはプールは認識してる?
パニック前にZFSの空き容量は十分にあった?
状況に応じた復旧方法は提示できるが、どのぐらい慎重に行うかで回答が・・・
まずはコマンド入力の「zpool status」で表示される内容を書いて
2024/09/01(日) 21:28:49.66ID:8SK7FPXq
カーネルで思い出した、ちょっとKFC行ってくる
457login:Penguin
2024/09/02(月) 00:12:35.61ID:xESF4ACC proxmoxのkernel/FreeBSD版なんてあるの?初めてきいたけど
458login:Penguin
2024/09/02(月) 00:18:13.42ID:xESF4ACC >>454
LANポートが複数あるminiPCは配置移動する時とかポート気を付けないと繋がらなくなるのはあるあるだな
LANポートが複数あるminiPCは配置移動する時とかポート気を付けないと繋がらなくなるのはあるあるだな
459 警備員[Lv.27]
2024/09/02(月) 06:09:57.19ID:BmGfCkOi460 警備員[Lv.27]
2024/09/02(月) 17:44:31.77ID:BmGfCkOi 皆様、アドバイスありがとうございました。
以下ご報告しておきます。ご笑覧ください。
https://www.aliexpress.com:443/item/1005006629018520.html
GMKtec M5 Plus 5825U ベアボーン
良い点
1.5825U 搭載で先日のアリエクセールで24500円+モッピー経由で1500円ほどのポイントが付く
11月の独身の日あたりに円高に触れていれば更に安くなるかも(現在は33000円ほど)。
2.2.5GLAN がふたつある
3.M.2 スロットが2つある
4.GMKtec M5 や M5 pro が proxmox のインストールに苦労したというブログを見つけたが
この M5 Plus は proxmox 最新版が特に問題なくインストール出来てその後も今のところ問題なく動作している(ように見える)。
5.ベアボーンなので proxmox する人が希望する構成に出来る。Windows 代金払わずに済む(大した事ないと思うけど)。
悪い点
1.アリエクなので万一のトラブル時が心配。頑張れば売り主と交渉できるけど覚悟が必要。
ただ、トラブルになる確率はそう高くはないと思う。
以下ご報告しておきます。ご笑覧ください。
https://www.aliexpress.com:443/item/1005006629018520.html
GMKtec M5 Plus 5825U ベアボーン
良い点
1.5825U 搭載で先日のアリエクセールで24500円+モッピー経由で1500円ほどのポイントが付く
11月の独身の日あたりに円高に触れていれば更に安くなるかも(現在は33000円ほど)。
2.2.5GLAN がふたつある
3.M.2 スロットが2つある
4.GMKtec M5 や M5 pro が proxmox のインストールに苦労したというブログを見つけたが
この M5 Plus は proxmox 最新版が特に問題なくインストール出来てその後も今のところ問題なく動作している(ように見える)。
5.ベアボーンなので proxmox する人が希望する構成に出来る。Windows 代金払わずに済む(大した事ないと思うけど)。
悪い点
1.アリエクなので万一のトラブル時が心配。頑張れば売り主と交渉できるけど覚悟が必要。
ただ、トラブルになる確率はそう高くはないと思う。
461 警備員[Lv.27]
2024/09/02(月) 17:48:03.89ID:BmGfCkOi >>460 追記 8/26 注文 9/1 着でした。
2024/09/02(月) 18:03:47.10ID:1YJ3ncnv
16コア以上、メモリ64GB、欲を言えば128GB以上はほしいな……
2024/09/02(月) 20:19:53.13ID:lWkfp8Uo
>>462
少し安くなった3950XをMicro-ATXで組めば良い。
少し安くなった3950XをMicro-ATXで組めば良い。
2024/09/03(火) 10:27:39.56ID:mFV2ZM3v
465login:Penguin
2024/09/03(火) 13:59:35.27ID:MQAopXaG Proxmoxはクラスタで組みたいから6-8コアのPC3台の方が16コアのPC1台より楽しい。3950Xだとグラボも刺さないといけないから、ちょっと無駄感がある
466 警備員[Lv.29]
2024/09/03(火) 14:32:18.47ID:VCfc+y1y 最近のCPU は内蔵グラフィック性能向上に力を入れているように見える。
その分をCPU性能向上に割り振ったCPUを望むのは世の流れに反しているんだろうなぁ。
その分をCPU性能向上に割り振ったCPUを望むのは世の流れに反しているんだろうなぁ。
2024/09/03(火) 14:44:13.53ID:7zehfBVC
ryzenとかiGPU入ってないんちゃうの?
グラボなんか別に挿すから、無駄なiGPU消えてほしい
グラボなんか別に挿すから、無駄なiGPU消えてほしい
2024/09/03(火) 15:42:30.60ID:7zehfBVC
リーナスがrust好きじゃからな
2024/09/03(火) 22:41:04.45ID:0Ky487i2
グラボか・・・
CPUに内蔵グラフィック無い・・・
そんな私は Matrox MGA G200e Pilot ServerEngines !
みんなはPROXMOXホストでグラボなに使ってる?
CPUに内蔵グラフィック無い・・・
そんな私は Matrox MGA G200e Pilot ServerEngines !
みんなはPROXMOXホストでグラボなに使ってる?
2024/09/03(火) 22:47:21.62ID:RzxBPg8t
NVIDIAのグラボ使うとインストールでハングするの相変わらずなのかな?
あれ初心者殺しだろ
あれ初心者殺しだろ
2024/09/03(火) 23:05:54.63ID:0Ky487i2
>>470
最近(二カ月以内)PROXMOXのインストールにGT710使ったらハングアップした
ストレージ類をすべてテストして、BIOS設定初期化して、BIOS最新に書き換えて、メモリ検査して、ほぼ最後にグラボにたどり着いた
結局内蔵グラボでインストールした(内蔵グラボの存在を忘れてた・・・)
あれ、罠すぎるよな( ;∀;)
最近(二カ月以内)PROXMOXのインストールにGT710使ったらハングアップした
ストレージ類をすべてテストして、BIOS設定初期化して、BIOS最新に書き換えて、メモリ検査して、ほぼ最後にグラボにたどり着いた
結局内蔵グラボでインストールした(内蔵グラボの存在を忘れてた・・・)
あれ、罠すぎるよな( ;∀;)
2024/09/03(火) 23:18:51.48ID:YY+IJgBJ
>>468
リーナス氏は慎重派じゃなかったかい?
リーナス氏は慎重派じゃなかったかい?
2024/09/04(水) 01:03:08.45ID:oSCeqcYM
474login:Penguin
2024/09/04(水) 20:04:45.70ID:M7lSjk2Y ESXi から移行中だけど、安定性はESXi のほうがずっと上かねえ
ホストマシン一台で使ってると安定してるけど、migration や restore で凄いI/O 負荷がかかってゲスト全体がおかしくなって大変だったわ
Migration を途中で止めたらゴミが残ってゲストが起動しなくなるし‥
ホストのNVMeは必須かも
ホストマシン一台で使ってると安定してるけど、migration や restore で凄いI/O 負荷がかかってゲスト全体がおかしくなって大変だったわ
Migration を途中で止めたらゴミが残ってゲストが起動しなくなるし‥
ホストのNVMeは必須かも
2024/09/04(水) 22:43:25.36ID:HE2mZT5Q
ESXiと全く同じスペック?
2024/09/04(水) 23:28:29.56ID:6SdpDWY4
>>473
情報サンクス!
次は「Serial Console Redirection」とかで操作できるように頑張る!
https://i.imgur.com/skLwgPi.png ←IPMI無いって言ったらこの反応 ( ;∀;)
しかし、一度はモニターに接続しないと厳しいかも
画面見ないでキーの操作回数で該当の箇所を変更するって方法も有か・・・
情報サンクス!
次は「Serial Console Redirection」とかで操作できるように頑張る!
https://i.imgur.com/skLwgPi.png ←IPMI無いって言ったらこの反応 ( ;∀;)
しかし、一度はモニターに接続しないと厳しいかも
画面見ないでキーの操作回数で該当の箇所を変更するって方法も有か・・・
2024/09/04(水) 23:37:35.46ID:6SdpDWY4
>>474
GUIからでもDatecenter -> Options -> Bandwidth Limitsの項目で
各種帯域制限かけられるから変更してみたら?
あと、ネットワークは内・外向用、cluster用、Migration用を分けられると理想的
(なんだかんだで、LAN6〜10ポートは欲しい・・・)
GUIからでもDatecenter -> Options -> Bandwidth Limitsの項目で
各種帯域制限かけられるから変更してみたら?
あと、ネットワークは内・外向用、cluster用、Migration用を分けられると理想的
(なんだかんだで、LAN6〜10ポートは欲しい・・・)
478login:Penguin
2024/09/05(木) 07:49:07.49ID:h2BJEr+3 >>475
おんなじですね
ESXi が三台あったので、一台ずつ入れ替えてました
Storage migration でストレージ構成が変更できず、Live migration だと出来るってのも、???です
おんなじですね
ESXi が三台あったので、一台ずつ入れ替えてました
Storage migration でストレージ構成が変更できず、Live migration だと出来るってのも、???です
479login:Penguin
2024/09/05(木) 07:50:56.89ID:h2BJEr+3 >>477
LANポートの数の理想はそうですね
帯域は、そもそも1Gbなので、絞る必要はないかなと思ってました
ゲストのwebコンソールを複数開くと急に負荷が上がったりとか、よくわからんなあと思ってます
LANポートの数の理想はそうですね
帯域は、そもそも1Gbなので、絞る必要はないかなと思ってました
ゲストのwebコンソールを複数開くと急に負荷が上がったりとか、よくわからんなあと思ってます
2024/09/08(日) 03:30:01.69ID:51DZMKit
インストール時にlocalとlocal-lvmのサイズって決められないんか
local100G近くもいらないんだが
local100G近くもいらないんだが
481login:Penguin
2024/09/08(日) 18:08:23.64ID:gFYpbU87 LVM組まれちゃうのが嫌だ。
複雑すぎてよーわからん。
なのでKVM+Cockpit
複雑すぎてよーわからん。
なのでKVM+Cockpit
482 警備員[Lv.32]
2024/09/10(火) 05:56:39.08ID:/ZGeq9Lj ここの方が詳しそうなので質問させてください。
あるメモリを
Aマシンは Memtest86+ をクリア
Bマシンにいれると Fail
ってよくあることですか?それとも稀?
あった場合これは相性問題?それともメモリ不良?どちらの可能性が高いでしょうか?
あと、最近2回連続で Memtest86+ 1回目通過、2回目 Fail のメモリに遭遇し
メモリ異常は稀ではなく結構な頻度であるのかも?と認識を改めつつあります。
あるメモリを
Aマシンは Memtest86+ をクリア
Bマシンにいれると Fail
ってよくあることですか?それとも稀?
あった場合これは相性問題?それともメモリ不良?どちらの可能性が高いでしょうか?
あと、最近2回連続で Memtest86+ 1回目通過、2回目 Fail のメモリに遭遇し
メモリ異常は稀ではなく結構な頻度であるのかも?と認識を改めつつあります。
2024/09/10(火) 07:38:19.73ID:kLaRPgf1
>>482
まずMemtest86は、メモリーからCPU(メモリコントローラ)までだから、疑うべきところは、メモリだけじゃないよ。
頻度は稀だと思うけど、メモリエラーが発生する事はあるよ。いやならECCメモリかDDR5にするといいですよ。
まずMemtest86は、メモリーからCPU(メモリコントローラ)までだから、疑うべきところは、メモリだけじゃないよ。
頻度は稀だと思うけど、メモリエラーが発生する事はあるよ。いやならECCメモリかDDR5にするといいですよ。
2024/09/10(火) 21:55:42.06ID:nu/PjJE3
>>482
2台の違いが解らないが、手持ちのOCメモリーで第8世代なら問題ないのに第12世代だと動かないのは実際に経験している。
2台の違いが解らないが、手持ちのOCメモリーで第8世代なら問題ないのに第12世代だと動かないのは実際に経験している。
2024/09/11(水) 03:47:23.57ID:ulrp1RYN
>>482
メモリのデータエラーはメモリチップの故障以外でも起こりうる可能性がある
CPUのピンからメモリチップまでの伝送経路(電気的な)の影響も大きい
設計上の品質の悪いMBやメモリの基盤だとチップに問題がなくても正しく伝送できない可能性もある
チップの品質が悪くても信号の認識の許容範囲が狭い可能性がある
つまり、品質の悪いもの同士が組み合わさることで今回のようなことが起こる可能性が考えられる
結局、ある程度の値段出して、品質の良い本体とメモリを組み合わせるのがコスパいい
日本で働いて真っ当な収入あるなら、ECC対応の本体(まともなメーカー製サーバー)にMicron 、Samsung、sk hynixのチップを使った信頼の高いメーカーのメモリを使うのがいいと思う
メモリのデータエラーはメモリチップの故障以外でも起こりうる可能性がある
CPUのピンからメモリチップまでの伝送経路(電気的な)の影響も大きい
設計上の品質の悪いMBやメモリの基盤だとチップに問題がなくても正しく伝送できない可能性もある
チップの品質が悪くても信号の認識の許容範囲が狭い可能性がある
つまり、品質の悪いもの同士が組み合わさることで今回のようなことが起こる可能性が考えられる
結局、ある程度の値段出して、品質の良い本体とメモリを組み合わせるのがコスパいい
日本で働いて真っ当な収入あるなら、ECC対応の本体(まともなメーカー製サーバー)にMicron 、Samsung、sk hynixのチップを使った信頼の高いメーカーのメモリを使うのがいいと思う
486login:Penguin
2024/09/11(水) 12:03:20.64ID:iggimDly Live マイグレーションだと問題ないけど、offline マイグレーションだとI/O の凄まじい遅延が出てる人いる?
フォーラムだと報告出てるみたいだけど、解決方法がなくて困ってる
フォーラムだと報告出てるみたいだけど、解決方法がなくて困ってる
2024/09/11(水) 17:41:31.31ID:0xwqBgO0
>>482
BMCがこいつ壊れてます報告して再現性もあるメモリが別のマシンでmemtest86が通るって例を経験したことがある
DIMMは信号品質が限界に近いのでユーザー環境では正確な試験はできないと考えた方がいいのかも
BMCがこいつ壊れてます報告して再現性もあるメモリが別のマシンでmemtest86が通るって例を経験したことがある
DIMMは信号品質が限界に近いのでユーザー環境では正確な試験はできないと考えた方がいいのかも
488 警備員[Lv.33]
2024/09/12(木) 06:26:06.00ID:F4CI7R4x2024/09/12(木) 11:46:30.71ID:GsSLCQ9S
>>486
ストレージIOに負荷が掛かるから表示上IO Delay増えて(表示上50%超えることも)
結果、仮想マシンのIOに対して僅かにlatency増えるけど、具体的な不具合は無いなぁ・・・
HDDなら深刻な遅延が出るかもしれないが、SSDとかなら問題ない範囲に収まるはず
ストレージIOに負荷が掛かるから表示上IO Delay増えて(表示上50%超えることも)
結果、仮想マシンのIOに対して僅かにlatency増えるけど、具体的な不具合は無いなぁ・・・
HDDなら深刻な遅延が出るかもしれないが、SSDとかなら問題ない範囲に収まるはず
490login:Penguin
2024/09/12(木) 12:00:37.03ID:tIe8vvwt >>489
SSDだけど、オフラインマイグレーションすると、動いてるマシンに影響しまくってしまい、ブルースクリーンになったりしますよ
なので、わざわざ立ち上げてからオンラインマイグレーションしてます
なんでやねん、と思ってます
SSDだけど、オフラインマイグレーションすると、動いてるマシンに影響しまくってしまい、ブルースクリーンになったりしますよ
なので、わざわざ立ち上げてからオンラインマイグレーションしてます
なんでやねん、と思ってます
491login:Penguin
2024/09/12(木) 13:19:33.05ID:4XoyUOCs 帯域制限しても改善しないの?
492login:Penguin
2024/09/12(木) 16:14:43.26ID:7/Z/PIV42024/09/12(木) 17:35:38.83ID:mjNvAOX0
>>492
そこは既存技術と独自開発の差だから諦メロン。
そこは既存技術と独自開発の差だから諦メロン。
494login:Penguin
2024/09/12(木) 17:58:29.38ID:4XoyUOCs495login:Penguin
2024/09/12(木) 18:59:53.47ID:c++RLIjt >>490
手元にスマホしかなくて、育成が忙しいから手短に書くけど
ブルスクって事はWindowsゲストマシンだとして
メモリ割り当てが動的(可変)なら固定に変えてみて
(Ballooningを無効にする)
もしこの方法で不具合が解決できたら
予想される原因と他の対策を書く
手元にスマホしかなくて、育成が忙しいから手短に書くけど
ブルスクって事はWindowsゲストマシンだとして
メモリ割り当てが動的(可変)なら固定に変えてみて
(Ballooningを無効にする)
もしこの方法で不具合が解決できたら
予想される原因と他の対策を書く
496login:Penguin
2024/09/13(金) 11:08:38.27ID:PnexeS2u これは助かります
確認したら、デフォで ballooning がチェックになってました
いまサービス落とせないので、夜中にでも切り替えてみます
あとはLANの帯域制限ですかねえ
なおご察しの通り、ローカルストレージのLAN一口構成です
確認したら、デフォで ballooning がチェックになってました
いまサービス落とせないので、夜中にでも切り替えてみます
あとはLANの帯域制限ですかねえ
なおご察しの通り、ローカルストレージのLAN一口構成です
497login:Penguin
2024/09/13(金) 17:03:13.63ID:CI4j9gEk >>496
すまん、メモリ管理あたり疑ってballooningかな?って発言したけど、テスト環境で試した限り違かった
あとは、ESXI由来の拡張機能を(入れてれば)削除してみては?
それと、仮想ディクスの管理方法を変えても同じ症状でるか試してみるのも原因追及の手段として有効だと思う
すまん、メモリ管理あたり疑ってballooningかな?って発言したけど、テスト環境で試した限り違かった
あとは、ESXI由来の拡張機能を(入れてれば)削除してみては?
それと、仮想ディクスの管理方法を変えても同じ症状でるか試してみるのも原因追及の手段として有効だと思う
498login:Penguin
2024/09/13(金) 17:08:00.68ID:CI4j9gEk >>496
SSDの接続方法も疑った方がいいかも
INTEL系でINTELチップセット直のSATAとかだと不具合出にくいけど、それ以外なら接続方法変えてみるといいと思う
他には、コマンドでSSDのライトバックキャッシュOFFにしてみる
SSDの接続方法も疑った方がいいかも
INTEL系でINTELチップセット直のSATAとかだと不具合出にくいけど、それ以外なら接続方法変えてみるといいと思う
他には、コマンドでSSDのライトバックキャッシュOFFにしてみる
2024/09/13(金) 17:14:59.28ID:9gxJJvIK
素直に仮想マシンじゃなく、PCでやったら解決すんじゃねえの?
500login:Penguin
2024/09/13(金) 22:04:58.14ID:h3O+tvpT >>497
ありゃ、いま頑張って数十台のゲストのバルーンニングをオフにしてしまいました
SSD はSATAのsandisk なんですけど、なんとなく特定のハードウェアやドライバで出るんじゃないかと勝手に考えてましたです
ありゃ、いま頑張って数十台のゲストのバルーンニングをオフにしてしまいました
SSD はSATAのsandisk なんですけど、なんとなく特定のハードウェアやドライバで出るんじゃないかと勝手に考えてましたです
501login:Penguin
2024/09/13(金) 22:06:09.48ID:h3O+tvpT Thin-LVM で出るという話もあるようで、ちょっとよくわからんです
2024/09/13(金) 22:16:12.09ID:T2ukrBvy
まずはゲストのOSとかブルスクのコードとか詳細出して見たら?
503login:Penguin
2024/09/14(土) 06:18:32.95ID:GW0r8XVH >>502
原因はoffline migration なのが明らかでキャプチャしてなかったし、もう一回出そうとは思わんです すんません
他に影響していたマシンで I/O関係のエラーが出てましたね ubuntu だったかなあ
原因はoffline migration なのが明らかでキャプチャしてなかったし、もう一回出そうとは思わんです すんません
他に影響していたマシンで I/O関係のエラーが出てましたね ubuntu だったかなあ
■ このスレッドは過去ログ倉庫に格納されています
ニュース
- 【話題】「おでんで白米」は、あり?なし? 「おでんだけ食べたい」派と「ご飯ぶっ込む」派で意見割れる [ひぃぃ★]
- 【速報】ロシア大統領はJT資産の接収を命じた [蚤の市★]
- 高市総理「これからもトランプ大統領と協力していきたい」 [少考さん★]
- 中国メーカー、出荷前130万台のAndroid端末に犯罪用バックドア設置、Google調査、端末画面キャプチャ遠隔操作、1000万台以上感染も ★2 [お断り★]
- 【企業】内外出版社が破産申請へ 「ヤングマシン」「月刊自家用車」などを発行 [シャチ★]
- 【速報】 イギリス発表 「中国が日常的にAIサイバー攻撃を行い、インフラを攻撃する可能性非常に高い」 [お断り★]
- 北京のレアアース切り札が威力発揮!対日酸化イットリウム輸出が98%急減、日本半導体サプライチェーンに警報 [245325974]
- 高市早苗総理「中間選挙は関係ない。トランプ大統領と協力したい」 [245325974]
- 【速報】嫌 儲 の 住 民 の 殆 ど は オ ル グ に 引 っ 越 し ま し た 。 [156586975]
- ★★★ケンモメン引っ越しのお知らせ★★★ [156586975]
- 【実況】博衣こよりのえちえちホロ鯖ARK🧪★5
- 【重要】ケ ン モ メ ン は お 引 越 し し ま し た 。 [578873235]