探検


ファイルシステム総合スレ その19

■ このスレッドは過去ログ倉庫に格納されています
2020/06/13(土) 14:45:47.76ID:Qx8FdC0t
● 前スレ
ファイルシステム総合スレ その18
https://mao.5ch.net/test/read.cgi/linux/1514472651/l50

● 関連スレ
ジャーナリングファイルシステム
https://mevius.5ch.net/test/read.cgi/unix/979408065/l50

OpenSolaris/Illumos (OpenIndiana, etc.) 6
https://mevius.5ch.net/test/read.cgi/unix/1337411922/l50

FS関連スレ
https://medaka.5ch.net/test/read.cgi/os/1137387538/l50
過去スレ, 関連リンクは >>2-10 あたりで.
2023/07/03(月) 08:30:03.69ID:uA4NxAHI
Btrfsはカーネル上げてもいいけど戻すのはリスキーだから
公式で新しいカーネルを提供しているディストリのほうがいいよ
2023/07/03(月) 09:50:48.58ID:RRoYTlzt
最近バニラカーネル触ってないから知らんけど、BuildPreReq情報は同梱ドキュメントに必ず書かれてたぜ
外す理由がないから、今もあるはず
2023/07/03(月) 09:55:08.11ID:zIlPSEd4
>>792
aptならholdしておけば良い

sudo dnf exclude <パッケージ名>
でどうにか出来るみたい
arch系は知らん
2023/07/03(月) 14:26:54.52ID:89+QS2OW
btrfsの話ならディスク上の基本フォーマットは長らく変わってないし
カーネルバージョン間での非互換機能はあるけどそれも使うと個別に非互換検出ビットが立つから
古いボリューム相手でも(後から操作できる物なら)新機能は問題なく使えるし
もし新しいカーネルのみの機能を持つボリューム相手に
古いカーネルでマウントしようとしてもroのみあるいはマウント不可になるので安全

実際にzstd圧縮やspace_cache=v2が入る以前の4.4(ルーター)と6.3(PC)の間で
compress=lzo,space_cache=v1で双方にマウントしたり戻したりしてるけど何の問題もないよ
2023/07/03(月) 19:00:31.26ID:HL82Z5Qd
最近のTwitterで顕著だけど故意にフェイクニュース流してる奴結構いるよな
『騙されてやんの~』という◯ナ二―の一種なんかね
2023/07/17(月) 22:40:10.74ID:Je/0Hij9
あとはオンボロSSDやSDカードでssdオプション有効にすると動作怪しくなるのと
ライトホール問題絡んでくるRAIDが怖いがそれらの点以外は便利なんだよなbtrfs
VMゲストしたときの性能についてはあきらめてLVM等使うかvirtiofsの今後に期待するって話で落ち着きそうだし

でもサブボリューム単位で透過圧縮やCoWの有無切り替えられないのは誰か何とかしてほしい
(ボリューム分けるって方法もあるが単一ボリュームで気軽にマルチデバイスできるのが本来の強みなのだし)
2023/08/03(木) 11:45:45.74ID:dhkK29LG
www.phoronix.com/news/XFS-Maintainer-Steps-Down

> XFS File-System Maintainer Stepping Down

XFSのメンテナが辞任

> Nowadays, people working on XFS seem to spend most of their time
> on distro kernel backports and dealing with AI-generated corner
> case bug reports that aren't user reports. Reviewing has become a
> nightmare...

AI生成のバグレポに延々対処する仕事か
まさに悪夢
2023/08/03(木) 17:02:05.88ID:q/P9l3yV
疲れただけにも読めるけどAIが悪い?
2023/08/07(月) 03:43:34.79ID:sl53biTi
AIがバグレポって何だろね
有意義なレポートじゃないなら選別AIで対抗だ
2023/08/07(月) 16:11:58.52ID:kx1CvaiP
ランダムに変な負荷かけたり
1秒間に1000回マウントとアンマウントを繰り返したりするんだろう多分
時代はBtrfsなのにやってられんよな
2023/08/07(月) 17:10:45.37ID:UfPJft9p
スタックトレースで分類したら実質数個じゃないのかね
2023/08/08(火) 18:58:58.54ID:p601nbQW
ファジングテストの事でしょ…と思ったが多少違うっぽいな
AIが生成しまくるコーナーケースのバグレポートに疲弊したって話っぽい
まぁXFSは赤帽の生命線なんだから問題起きても赤帽がなんとかしてくれるんじゃない?
2023/08/08(火) 19:01:17.00ID:TS/nSBMX
修正パッチもAI生成出来るようになるまであと一歩
2023/08/08(火) 19:17:01.15ID:3W4UAIfD
>>803
なんかJFSがいいよ、っという神の声が聞こえた気がした。
ext4 と比較して利点も欠点もないはずたが、Linux での採用例が少ないという大きな欠点。
2023/08/08(火) 22:12:53.38ID:RPAYsqMe
ext4でいいがな
2023/08/09(水) 15:45:58.33ID:CzBgG1A0
>>805
Linux Developers Eye Orphaning The JFS File-System

www.phoronix.com/news/Linux-Possible-Orphan-JFS

もう使ってる人いないしJFS捨てようみたいな話が出てる
2023/08/09(水) 16:06:10.92ID:t3DTDYXA
マイナーなファイルシステムってマトモにメンテされてないし不具合あっても報告されないし使わないほうがいいよ
2023/08/09(水) 16:18:32.46ID:M/z4SoOm
AIX, OS/2 では動いていて30年前はいいもの感もあったはず...
2023/08/09(水) 17:19:22.43ID:xh6A1oH/
RHELで採用されてないということはメンテされていないということに等しい
2023/08/09(水) 18:13:24.21ID:+nr5wDrM
FacebookってCentOSで動いてるらしいけどファイルシステムはbtrfsなんだよな
2023/08/09(水) 18:54:14.67ID:BKxgttZ4
ext4もオワコンなのTT
2023/08/09(水) 19:31:12.63ID:M/z4SoOm
>>810
そう考えるとRHは凄いんだな、と思いました。
2023/08/09(水) 19:49:45.32ID:xh6A1oH/
Btrfsは事実上facebookがメンテしてるからね
自社でメンテしてるファイルシステムだから採用しやすい
2023/08/09(水) 20:20:43.57ID:MStot6iX
>>812
オワコンというよりいい具合に枯れきった
ファイルシステムになった感じ
先進性より安定性が必要な用途でお呼びがかかる
老兵っぽいイメージ
2023/08/09(水) 21:06:48.18ID:t3DTDYXA
SUSEもbtrfs使ってるぞ
2023/08/09(水) 22:04:09.03ID:9gexIL31
もちろん頼もしいのが第一だが、
逆に言えば現メタ(だけじゃないが)の使用してるユースケースに沿わない使い方に関しては中々進歩しないのが弱点だと思う
RAID56が長い間ダメダメだったのやFS単品での暗号化や階層キャッシュが望めないのもDCでbtrfs使ってる処がそういう機能に興味もってないからだろうし
2023/08/11(金) 07:10:18.88ID:PKaGesv1
RAID5/6 でのバグは直ったのか?
家庭用では無い構成だから関係ないと思ってはいたけど。
2023/08/11(金) 15:02:10.75ID:gMoSz8Vl
治るもクソも根本的なライトホール問題があって、ディスク追加の扱いが悪い意味で柔軟なBtrfsは対処が難しいからメンテ側が乗り気じゃないって話じゃないかな
現状は最新カーネルかつメタデータのraid構成を別にすれば良いけど実績も脳死で使える安心感も皆無だし

とはいえ主流のハードウェアraidはデータ化けに弱いんだからチェックサム有りfsで安心して使えるraidがもっと一般化してほしいお気持ちもある
2023/08/11(金) 18:09:59.08ID:sG2VRRL/
Btrfsのディスク構成の緩さは異常。なんでもかんでもストレージプールに合体できる
2023/08/11(金) 20:00:03.37ID:I1R13U0l
自分はbtrfs嫌いじゃないから不満はないがSSD最適化とか将来的なZonedStorage対応考えるとほかに選択肢なくなっていきそうなのは真剣にどうかと思う
2023/08/11(金) 20:41:36.59ID:R8sdUFxz
ストレージプール使うと遅くならない?
5400rpm のHDDが悪いのかもしれんし、比較で測定もしてないけど。
2023/08/11(金) 20:51:25.84ID:TQtB6JMZ
bcachefs
824login:Penguin
垢版 |
2023/08/11(金) 20:59:56.03ID:TYuMCrmq
HAMMERって広まらないな。
2023/08/11(金) 21:06:57.89ID:sG2VRRL/
bcachefsの作者を毎月支援してたんだけど、Btrfsがすっかり良くなって支援止めちゃった
2023/08/11(金) 21:13:25.37ID:LiM6QNme
OSSって上位互換が登場すると一瞬で廃れるから辛いよね
VSCodeが登場してエディタ系が全滅しちゃったような事がいつでも起こり得る
有料製品みたいに価格で対抗することもできないし
2023/08/12(土) 02:11:14.13ID:CUhGvmvA
bcachefsは機能的にはBtrfsと差別化できてると思うが
これからメインライン入りしてガンガン開発者集めて安定させないといけないのにlinux6.5マージ失敗のMLのレスバからして雲行き怪しいからどうなるやら
2023/08/23(水) 10:17:38.29ID:Z1oeJl5c
プロプラに言うのはアホだと分かってはいるが
それでもGPFSがフリーで使えたらなあって思う
あれクラスタリングがメインだから勘違いしてる人多いけど
CephやRustreと違ってローカル使いにも適してると思うんだよなあ
使ってるZFS全部捨ててGPFSに乗り換えたいと思うぐらいには
2023/08/23(水) 13:29:05.81ID:r3sixzFM
juicefsとか使ってみたら
現代技術の分散ファイルシステムって感じだ
830login:Penguin
垢版 |
2023/08/26(土) 23:56:49.75ID:si6bfGjt
GlusterFS面白いな。
簡単な手順で組める。
我が家のはストライピング構成だから怖いけどw
2023/08/27(日) 00:05:46.78ID:pseOgDNm
特殊なRAIDを組まない限りは全部Btrfsで成立する時代になった
832login:Penguin
垢版 |
2023/08/27(日) 11:11:37.95ID:uktDXYY0
Redhatがまたbtrfsに戻ってくるってある?
2023/08/27(日) 12:18:39.13ID:PR/CoOyy
Fedoraでbtrfs使ってるしRHEL10のデフォルトに採用しても驚かない
2023/08/27(日) 14:35:23.84ID:pseOgDNm
顧客の要望があれば導入するでしょ
RHELにとっての一番の顧客ってどこなのか知らんが
2023/08/27(日) 16:27:11.11ID:YnC5/bGq
RHELも将来的にはcow/cor対応のFS導入するだろうけど
自前の製品群がXFSに特化してそうだから簡単には変えられないだろうしまずはGPLの取り扱いの件何とかすべきだろうなあ
836login:Penguin
垢版 |
2023/08/28(月) 20:03:29.10ID:G62eI9B5
今の Red Hat は Spectrum Scale (GPFS) 販売している IBM が上にいるから
フリーのファイルシステムに積極的には投資はしないでしょ。
メンテに金のかかる多機能なFSじゃなくてXFSを細々とメンテするだけじゃないかな。
837login:Penguin
垢版 |
2023/08/28(月) 21:03:25.04ID:iZDgPe4W
IBMがJFS押し付けてきたりして
838login:Penguin
垢版 |
2023/08/28(月) 22:34:50.78ID:0S8N8ier
Btrfsはパフォーマンスがちょっとね。
現状BtrfsはZFSにもボロ負けだからな。
Linux6.5でどの程度改善されるか。
あと、暗号化機能がずっと先送りされたまま。
2023/08/28(月) 22:44:42.41ID:qK84yeuR
暗号化は導入するだけでなく高度なセキュリティ検証が必要だからハードルは高いよ
ZFSの暗号化は第三者機関でセキュリティ検証してるのかな
840login:Penguin
垢版 |
2023/08/28(月) 23:13:08.33ID:AtYIGZfm
GFS入れたけど遅いw
設定は簡単だからVM置き場ではなく普通のストレージにしたよ。
やっぱ専用機が一番だな。
2023/08/28(月) 23:52:08.72ID:VOEduRz2
一口に暗号化っつーてもh/w込みなのかデバイス単位なのかボリューム単位なのかで勝手違うからこういうのは特定の製品持ってる企業がガンガン進めないときついところある
しかし今時ノートpcみたいな要件だと流石に外せない要素になりつつあるからぼくのかんがえたさいきょうのソリューションが欲しいんだよ
2023/08/29(火) 00:15:49.10ID:plGc1vmm
暗号化LVM使えば暗号化自体は可能だし
セキュリティ関係で厳密なテストが必要な重い作業の割には
新規に何かを実現できるわけでもないから優先順位は低いでしょう

一度導入したら最後、脆弱性がでるたびに最優先で修正が必要になるし
2023/08/29(火) 10:06:23.79ID:MCVzj3AF
ZFS mirror、SATAケーブルの差し込み不良でエラー出たけどちゃんと一基で動作して再起動も無停止。
ケーブル直したら変更分だけresilverしてすぐ復旧。今更だけど感動。
2023/09/01(金) 09:42:36.11ID:mxVVj1pR
ReiserFS Officially Declared "Obsolete"

www.phoronix.com/news/ReiserFS-Obsolete

R.I.P.
2023/09/07(木) 16:11:28.79ID:7YbGerrn
再インストールの機会があったのでここ見てcompress-force=zstd:1にしてみた
だいたい良好だけども、m属性やproperty set compression noneも無視して圧縮するかどうかはzstdの判断のみなんだな
2023/09/08(金) 12:28:17.09ID:NWED9HrM
bcachefsメインライン入り諦めたっぽい?
作者も開発リソース不足や取り巻きの礼賛で冷静さ失ってそうだし、10年とは言わず数年後くらいに平穏な形で再チャレンジ出来るといいなぁ
2023/09/08(金) 14:44:51.39ID:3VYxIX8d
TPM-backed Full Disk Encryption is coming to Ubuntu

https://ubuntu.com/blog/tpm-backed-full-disk-encryption-is-coming-to-ubuntu

UbuntuがWindowsのbitlockerみたいなTPM使ったディスク暗号化やるみたい
848login:Penguin
垢版 |
2023/09/08(金) 17:32:16.74ID:PGoi6aw5
TPMはプロ相手にはセキュリティ上の追加効果は殆どないのに
一般のユーザーはデータを救出不可能になるリスクが増すというデメリットばかりの代物だぞ
2023/09/08(金) 21:12:29.39ID:vmuHLOjm
パフォーマンスの問題が解決するんとちゃうの?ソフト暗号複合が遅いから暗号化しないユーザーたち
850login:Penguin
垢版 |
2023/09/09(土) 01:07:26.32ID:PNSm0HJB
この場合はパスワード入力不要でTPMだけでディスク暗号化する機能が追加されるという話のようだ。
外部から自分でデータを救出したいときにトラブルになる未来しか見えないが。
851login:Penguin
垢版 |
2023/09/09(土) 01:43:47.21ID:vYEfIx3n
結局俺は次もext4+lvmにしてしまいそうだ orZ
852login:Penguin
垢版 |
2023/09/09(土) 02:09:12.37ID:5+XaQjmS
Btrfs+zstd:1にしようぜ
容量が想像以上に圧縮できて驚くよ
2023/09/09(土) 04:46:22.67ID:hrjGdPZn
今時容量不足で苦しむことなんてそんなに無いでしょ。
2023/09/09(土) 11:29:43.96ID:OSz4dSUY
一般的なpcとディストリで気軽に使えてプロ相手にも十分通用する暗号化ってなんだろう・・・
855login:Penguin
垢版 |
2023/09/09(土) 11:44:53.10ID:WW7jheGz
>>852
zstd安定してる?
2023/09/09(土) 11:46:05.74ID:2Ydxc51k
>>851
スナップショットのあるファイルシステムいいよ
いつでも全ファイルの差分が見えるし、バックアップ取るときもまずスナップショットを取ってそっちを対象にすれば
メインボリューム側では整合性期にせず作業続けられるし
857login:Penguin
垢版 |
2023/09/10(日) 20:15:54.59ID:qbFiXkWo
>>855
Fedoraのデフォルトになって数年が経過しているから安心していいよ
2023/09/11(月) 02:37:28.23ID:wx5vSnGw
Btrfsの透過圧縮でわざわざ標準外のレベル設定するのってだいぶ特殊用途なんでは…?
859login:Penguin
垢版 |
2023/09/11(月) 03:42:15.33ID:MkIBph5P
Fedoraチームがベンチマークを取ってzstd:1がベストと導き出したんだよ
2023/09/11(月) 13:07:53.88ID:/MP3rsEl
5年以上 zstd で btrfs使ってたけど自分は問題無かった。
今はZFSでzstd使ってるけどこっちも問題ないよ。
861login:Penguin
垢版 |
2023/09/11(月) 19:21:26.09ID:ZukU+m1D
>>860
btrfsからzfsにした理由とかある?
2023/09/12(火) 12:34:20.20ID:oWjnH80A
>>861
理由はproxmoxに移行したため。
2023/09/12(火) 12:45:23.11ID:DJarWrt9
純粋なストレージプールが欲しいならzfsやcephあたりで良いんだろうが
仮想化ゲストならvirtiofsが主流になって使いやすくなってほしいなぁ
864login:Penguin
垢版 |
2023/09/12(火) 18:21:03.24ID:0x45b9Fv
>>862
サンクス
2023/09/14(木) 09:22:53.20ID:WI6q0tm8
Ubuntu 23.10 Restores ZFS File-System Support In Its Installer

https://www.phoronix.com/news/Ubuntu-23.10-ZFS-Install

UbuntuはZFSを見棄てたわけではなかったみたい
次世代FSはbtrfsなのかZFSなのか……
2023/09/14(木) 10:19:35.59ID:jRzDDQU8
ZFSはライセンス問題がある限りスタンダードにはなれんのだ
2023/09/15(金) 07:17:41.88ID:9NGXdfca
CDやBDだったら中がぐちゃぐちゃでもそれ片付ければ済むんだよ
焼くこともできない惨状
868login:Penguin
垢版 |
2023/09/17(日) 15:12:43.80ID:FJ1uJcgU
VDOつこうてる人おる?
2023/09/18(月) 15:45:48.07ID:L7KGNN8O
あなるせっくす
870login:Penguin
垢版 |
2023/09/21(木) 00:41:07.75ID:1UlvRSU1
結局またext4+lvmにしてしもうた
2023/09/21(木) 05:23:38.17ID:ANmRMBlW
xfs+lvmでおk
2023/09/21(木) 05:49:42.91ID:WSpKvFxh
もはやBtrfs以外は使わない理由を説明する必要があるレベル
2023/09/21(木) 06:44:23.64ID:JX0mQUyS
btrfs難しいよ
どういう使い方が標準なん?
874login:Penguin
垢版 |
2023/09/21(木) 06:46:05.83ID:WSpKvFxh
zstd:1で圧縮して時々スナップショットを取る使い方が標準だよ
バックアップを一瞬で取れるから派手にファイルを扱える
875login:Penguin
垢版 |
2023/09/21(木) 08:27:56.37ID:d6nf5QMj
>>874
いうても同じボリュームにスナップショット取ってるんやろ?
2023/09/21(木) 09:00:06.23ID:XANLv9rm
スナップショットとバージョン管理は根本的に似てるような気もする
gitとbtrfsで何かfusionできないかな
2023/09/25(月) 09:30:13.85ID:QR7gQC+U
言われてみると rsybc の差分バックアップで間に合うような気もする
2023/09/25(月) 09:30:23.93ID:QR7gQC+U
rsync
2023/09/25(月) 11:47:16.97ID:zugjyJ6O
俺は2005年くらいから毎日差分バックアップしたhomeディレクトリがある
当初はpdumpfsで途中からrsyncを使ってとったもの
つまりファイルに差分がなかったらハードリンクにして容量増加が抑えられる
ファイルとかハードリンクとかは当時から何も変わらないからまだ使えるんだけど
その下のストレージもfilesystemも開始した当時とは全く変わってしまった
2023/09/25(月) 12:27:36.70ID:VredknRB
普通の差分バックアップとBtrfsなどのスナップショットの違いは
ゴミ箱に放り込んだ後の挙動だね。
普通の差分バックアップは一応次のバックアップまでは容量が回復するけど
Btrfsのスナップショットだと、一度でもバックアップをすると
以降はファイル削除で逆に空き容量が減ったりという奇怪な挙動になる。
2023/09/25(月) 20:33:53.95ID:Dj8vE3f6
言いたい事は分かるがワケワカメ
2023/09/25(月) 20:39:38.85ID:Vkv0J98F
スナップショットそのものをバックアップとして運用するんじゃなくて
スナップショットで瞬間を固定したものを別の物理ドライブにバックアップするんやで
使用中のデータをバックアップするよりも整合性の心配をしなくてよくなる
883login:Penguin
垢版 |
2023/09/25(月) 22:01:01.77ID:LfNnJKFD
>>882
それ、スナップショットを別の物理ドライブに取ればええんでないの?
2023/09/25(月) 23:48:55.49ID:ism+fxM1
スナップショットの仕組みがわかっていない奴だな
885login:Penguin
垢版 |
2023/09/26(火) 08:02:57.35ID:KG56oHdj
昔使ってたストレージを思い出した。
データベース停止→同期ディスク切り離し→データベース起動→切り離したディスクからバックアップ→ディスク同期
データベース停止から起動まで5分だけど、バックアップは10時間とか。
2023/09/26(火) 10:11:45.59ID:xrfmLA6d
スナップショットはバックアップではないと何度言えば解るのか
2023/09/26(火) 14:50:45.20ID:VjKOh95q
RAIDだってバックアップじゃないぞ!>昔の俺
2023/09/26(火) 16:02:18.97ID:rwEhTV2J
スナップショットも全部別ボリュームにバックアップや
2023/09/26(火) 16:33:00.89ID:ConcCYWM
俺はスナップショットを使ったことないんだけど
スナップショットってある時点のファイルシステムの状態を
保存できるというので良いのかな?
スナップショットってのは何回も取れると思うんだけど
するとこれらをバックアップしようと思ったら
他のストレージに複製する必要がある
それはフィルシステム階層でやるのかな? 複製されるのはフィルシステムのイメージ?
それともその上のcpコマンドとかrsyncでファイルとして複製するのかな?
2023/09/26(火) 16:59:03.54ID:UEtMMw78
バックアップ=一世代保管
の人には何でもよくね?
2023/09/26(火) 17:08:21.03ID:ConcCYWM
複数世代保管する場合は?
2023/09/26(火) 17:24:21.77ID:eeSFYOQt
物理的な破損に対する対策をしたいのかデータ的な破損に対する対策がした以下によるでしょ。
よほどのことがない限りは通常利用でSSDが物理的に破損するなんて無いからスナップショットで十分だよ。
■ このスレッドは過去ログ倉庫に格納されています

ニューススポーツなんでも実況