Linux iSCSI 友の会

貧乏人でもiSCSIが使用可能なLinux-iSCSIについて語ろう。

FreeNASよりも高速、クラスタ対応のファイルシステムを使えば共有も可能。
NFSよりも圧倒的に高速です。

The iSCSI Enterprise Target Project
http://iscsitarget.sourceforge.net/

せっかくなので貼り付けておく
server:linux2.6.24-x86_64 X3360 hwRAID6
client:linux2.6.24-x86_64 X3360 iSCSI

# dd if=/dev/sda bs=65536 count=15258 of=/dev/null
15258+0 records in
15258+0 records out
999948288 bytes (1.0 GB) copied, 39.6692 s, 25.2 MB/s
# dd if=/dev/sda bs=65536 count=15259 of=/dev/null
15259+0 records in
15259+0 records out
1000013824 bytes (1.0 GB) copied, 10.6491 s, 93.9 MB/s
# dd if=/dev/sda bs=65536 count=15259 of=/dev/null
15259+0 records in
15259+0 records out
1000013824 bytes (1.0 GB) copied, 0.279964 s, 3.6 GB/s
# dd if=/dev/sda bs=65536 count=15259 of=/dev/null
15259+0 records in
15259+0 records out
1000013824 bytes (1.0 GB) copied, 0.273612 s, 3.7 GB/s
# dd if=/dev/sda bs=65536 count=15259 of=/dev/null
15259+0 records in
15259+0 records out
1000013824 bytes (1.0 GB) copied, 0.270295 s, 3.7 GB/s

1GBでもキャッシュに載っちまうようで

AoEを使ってみた。

Target: Linux(Debian lenny, Memory 8GB)
Initiator: Windows XP + WinAoE driver

で、Linuxの方で1GBのファイルを作ってそれをAoEでドライブとした。
接続は1Gigabit Ethernetで、安物ハブ経由。

--------------------------------------------------
CrystalDiskMark 2.2 (C) 2007-2008 hiyohiyo
Crystal Dew World : http://crystalmark.info/
--------------------------------------------------

Sequential Read : 76.216 MB/s
Sequential Write : 59.867 MB/s
Random Read 512KB : 65.129 MB/s
Random Write 512KB : 76.348 MB/s
Random Read 4KB : 23.841 MB/s
Random Write 4KB : 17.450 MB/s

何故か、512KBのランダムライトが逆転してるけど…

ついでにnbdも頼む。

>>359
商品だけど、
QNAPとか調べてみるといいかも。

汎用CPU（セレロン、ATOM）によるNAS/iSCSI箱。
409、509あたりが汎用CPUです。

ATOMだったらMINI-ITXだけど、小型のリムーバブル付きITXケースって
ES34069くらいしかないから、できあい買った方が安いかも。

RAID無くていいなら何でもいいかもしれんけど。

ああそうだ、
3wareの9550で、RAID5のSeqRead400MBくらい出るやつあるんだけど、
GbE飽和する。

FCも10GbEも高いんだけど速くしたいときは何でつなげばいい？

Bondingはセッション多数張らないと意味ないよね？（モードによるけど、
2本束ねても、2倍速度が出る訳じゃなくて2セッションの時にスケジューリングで
交互にGbEを使うから遅くなりにくいってだけだよね？）

>>364
iSCSIに拘らなければ、NFSはbondingで速くなるらしいぞ。

iSCSIって１つのターゲットに複数のイニシエータが接続できるのが普通ですか？

普通

vista標準のイニシエータで複数のターゲットに接続できないのですが
方法ありましたら教えてください。

>>368
板違い

>>366-367 と >>368 は方向が違う

初日にして沼にはまっているド素人にHELP
-----------------------------------
Lun 0 Path=/dev/hdc,Type=fileio
Lun 1 Path=/dev/sda9,Type=fileio
-----------------------------------
↓
-----------------------------------
Feb 15 00:21:58 aohdev kernel: iSCSI Enterprise Target Software - version 0.4.17
Feb 15 00:21:58 aovdev kernel: iscsi_trgt: Registered io type fileio
Feb 15 00:21:58 aohdev kernel: iscsi_trgt: Registered io type blockio
Feb 15 00:21:58 aohdev kernel: iscsi_trgt: Registered io type nullio
Feb 15 00:21:58 aohdev kernel: iscsi_trgt: open_path(119) Can't open /dev/hdc -30
Feb 15 00:21:58 aohdev kernel: iscsi_trgt: fileio_attach(283) -30
Feb 15 00:21:58 aohdev ietd: Can't create a logical unit 30 1 0 Path=/dev/hdc,Type=fileio
-----------------------------------

HDDはあっさり認識するのですが、物理CDドライブをTargetにするばあいどうすりゃいいのでしょうか？
コマンドラインから/dev/hdcはmount可能なんですが・・・

blockioにする必要があるんじゃないか？

>>372
変わらず・・・
こんなところで躓くやつはオランようで、類似事例が出てこないでつ

ということは、removableに起因する問題かな
未対応ってオチがあるかも・・・・・

>>374
よろしければ、remoｖａｂｌｅ問題について一席。

それと未対応というのは、ドライブが？OSが？　IETのバージョンが新しすぎる？　などでしょうか
いまのところFC4とFC10でやってますIETは同じverであります

removableだと、対応必要なSCSIコマンドが増えるし、処理も増える。
なので、IETが未対応ってオチがあるんじゃないかな　と。
確か、HDDとremovableで対応必須なコマンドが違ってた筈

google様に聞いてみても、removableは非対応っぽい雰囲気が・・・・

自分の所では、iSCSIbootさせてしまっているので、全部止めないと試せないんだ。ゴメン

>>376
いやいや感謝
removableという概念がなかったので目から鱗でした

で、そこらへんのキーワードで調べてみたのですが
ttp://plaza.rakuten.co.jp/ftechworks/diary/200712250000/

これを参考に0.4.17のソースを書き換えてみたのですが
WindowsXPのディスクの管理でリムーバブルとして「正常」認識されるも
エクスプローラーからアクセスすると「ディスク構造が壊れています」と・・・（DVD-Rの場合）

IETじゃないやつで対応しているのを探してしまった方がはやいのかもしれませんが、駆け出しなので気長にやってみます

イニシエータにWindowsは鬼門か…('A`)

DELL鯖でwindows2003のiSCSIbootやってみた(BCM5708、iBFT使用)
結論から言うと、「できるにはできるが、素直にintelNIC買うのが楽」
手順通りにやっても何か問題が残ってるようでうまくいかない。
設定いじりながら何回もインストールやりなおしてやっと成功。

intelNICだと、インストール時にSCSIアダプタとしてドライバの追加ができるらしく
たぶん、苦労することはない。対応OSなら。

iSCSIとVLAN併用する方法もわかんないし、windows鬼門すぎる
linuxだと簡単なのに・・・・

Windowsで安価に使えるクラスターファイルシステム マダー（・∀・ ）っ/凵 ⌒☆ﾁﾝ

クラスターFSってどんなのがあります？

ocfs

>>382
THX
ocfs2とかgfsというのがあるのは分かった。
インスコ方法まとまっているのがあまりないなぁ・・・・

コツコツやってみるか

>>383
OCFS2はインストールとかほとんど考えることがない位に簡単。
GFSルートは艱難辛苦を乗り越える人生の苦い思い出を作るのに最適。

WindowsからもOCFS2読めるといいんだがなぁ

Linux、BSD、Mac、Winで共通して使える
オープンソースのクラスタファイルシステム出ないかねー。

そこからブート可能となると、いろいろ各OSの都合があって難しいだろうけど、
データ用としてなら十分に可能だと思うんだけどなー。

ZFSあたりがクラスタファイルシステムに対応してくれると一番良さそうだけど。

GFSだとLinux、BSD、MacOSXまでは使える…のか…？
やっぱWindowsが難しいか…

ocfs2 簡単だったけど、その上に vmware server 2 の
vm 置いて立ち上げたらなぜか panic 起こすんだよなぁ...

>>388
つ http://communities.vmware.com/thread/76811

ocfs2を使うときに、o2cbを設定しなかったらどうなるの？

>>388
まあ、その手のことをしたいのならESXiでVMFS使えって感じだしなぁ

iscsiのイニシエーターが壊れた場合、iscsiで運用していたSATAのディスクを
取り外してUSBの外付けHDDケースに入れ替えて接続したりすると、
そのまま問題なく読めるのかな？

ターゲット側の実装によるだろうけど、open-iscsiなら読めたかな。

それはすごい便利だね。
iSCSI Enterprize でも出来るかな？

SunOS sxce113 5.11 snv_113 i86pc i386 i86pc
でiSCSI Targetやってるんですが、
同じハードでCIFSだと40MB/sくらい出るんですが
iSCSIだと10MB/sくらいしか出ません。

どなたかチューニングのやり方などご教授いただけませんか？

Linux側をtargetにしてクライアントPCにWin7を入れたんだけど、
NICのBIOSでtargetを認識さえさせておけば、
その後はOSメディア1枚だけで何一つ問題なく入った。
便利な時代ですな。

そんなのvistaのころからできてますけど

vistaなんてつかうわけないじゃんｗ

買ってないんだろ？必死だな
頼むからRC拾ってきて目新しいことできたように言わないでくれｗ

情シスなら評価くらいしてるだろ。
開発者とかならMSDNあるし、運用でもTechnetとかあるし。
ノートPC買えばVista入ってるし。

ここは安鯖で遊んでる人間が多そうだから自作板みたいな
煽りも出てくるんだろうな。

というか、そもそもここLinux板だから、Windowsなんか使わねえよ、ってことか。

そりゃごもっとも。

ほう、Win7をiSCSIインストールできるのか
XPとか2003とか、一度HDDに入れてイメージ作ってとか面倒だったからなぁ

7はVHDからブートできるようになったのが面白くて

>>403
LDのライバルだったあれか!

Fedoraのnetbsd-iscsi試したら2TB制限有ったわ

>403-404
むかし展示品のVHDプレイヤーを電気屋からタダで貰ったけど、ソフトなくて捨てたの思い出した

VHD=バンテック・グループ・ホールディングス
LD=ライブドア
特にライバルではなかった。

ﾂﾏﾝﾈ

>>407
ここまで拾いようのない真面目ボケは初めて見た

iSCSIの利点って何なんでしょ。
WikiPedia見てきたけどいまいちわからんす…。
iSCSI - Wikipedia
http://ja.wikipedia.org/wiki/ISCSI

昔、PC98時代は、外付けHDDでSCSI使ってましたが、
外付けHDDみたいに使えるだけなのでしょうか？
>>1でFreeNASより高速とありますが、スレ読む限りファイル共有のプロトコル(といかNAS)というわけではないようですし…。

また、eSATAじゃなくて、iSCSI使う理由は何なのでしょうか？

こちらでiSCSIでサーバー構築とかやっておられる方みて気になってはいるのですが…。
ゆーすけべー日記: 「ボケて」ガンマ版リリース - 技術的新しい試みまとめ
http://yusukebe.com/archives/09/05/02/212113.html

ぶっちゃけ、劣化・安価なファイバチャネル

>410
イーサを纏めてボンディングしたり
VPN越しにストレージを置いたら災害対策とか

iSCSI越しにテープが使えるのがよかったなぁ。
あと、Linux関係ないけどWindowsでMSCSが簡単・安価に組める。

まぁ、安価なファイバーチャネルって意見は同意。

Windowsでネットワークドライブだと制限かかるような時とか。
ネットワーク越しにハードウェアとして認識してくれるのは助かる。
まあ、スイッチがへぼかったらあんまり業務で使いたいと思わないけど。

VMware ESXi用のストレージとして活躍してます。

安価なFCというより、FCが高価すぎるというか。だからFCoEとか出てくるわけで。

NASと違ってブートできる
eSATAと違って共有ディスクでも使える

うちの場合、常時稼動ファイルサーバが既にあるから、
それをターゲットにしてクライアントPCをディスクレスにしたよ。

そもそもSANの利点がわからないって事じゃない？
iSCSIはIP-SANとか言われてたような気がするが、SANについて調べてくれれば利点はわかると思う。

まだクラスタfsが弱いというのもありそう。

>>415
>>410のリンク先の人と同じですね

> eSATAと違って共有ディスクでも使える
マジ？何かWindowsだとダメダメみたいな情報しかないんだけど。
サーバーはLinuxなんだが、クライアントは全部Windowsなんだよね・・・

>>421
俺の書き方が悪かったかもしれないが、
eSATAみたいに「それ専用のディスクドライブ」を1本用意しなくてもいいって意味だよ。
俺はLinuxでファイルシステム上に置いたイメージファイルを
iSCSI越しにクライアントPCのディスクとして使わせてる。
なんとか.img みたいなやつをね。
Win7を入れて1ヶ月ぐらい、ほぼ毎日起動して使ってるけど、まったく問題ないよ。

> eSATAみたいに「それ専用のディスクドライブ」を1本用意しなくてもいいって意味だよ。
ああ！なるほど、それはなかなかにいい利点ですね。

>>410のサイトの人も、VMのイメージにしてますよね。合点がいきました。

コンソリとかVMに興味が無い奴は使わない方がいい

理想を言えばiSCSIドライブからOSごと起動＋データもiSCSIドライブへ保存
ローカルはディスクレス・・・
だけどGbE以上必須になるだろうし、Winは起動もファイルシステムも厳しい('A`)

早く10GbEにな〜ぁれ

こんんにちは。

iSCSIストレージをDASのように単体サーバのみへの接続で使用する場合、
iSCSI＠1Gポートx3なバスはUltra320SCSIバスの代替えになりますでしょうか？

EquallogicPS5000VX検討中なんですが、Dellの営業担当者の
歯切れが異様に悪いです。単体だと全然性能でないとか、なんか問題あるんでしょうか？

データはサーバ上のPhotoshop画像データ動画の編集や3Dレンダリング用途がメインです。
クライアントは普通にGbのワークステーションが40台くらいで接続です。

こんにちわ

>>428
ゆとり乙

PS5000X使ってる。複数サーバだけど。
ランダムアクセスだとGbEx3 で十分すぎる感じ。
心配なら PS6500 にするか、10Gのが出るのを待つか。
PS4000 で十分じゃないかって気がするけど。

いいなぁ
16Tで100万以内くらいになれば即買うんだけどなぁ

>>427
DELLがEqualLogicを買ったわけだけど、今のところは「EqualLogic事業部」になってて
製造・セールス・サポート等全て鯖部署と別だという話だった。
なので、鯖部署に聞いても情報持ってないオチ。
何年かかけて統合だそうで。

>430、>431
アク規制でﾚｽが（ｒｙでしたm_ _m

>ランダムアクセスだとGbEx3 で十分すぎる感じ。
結果報告ですが、PS5000XVx2にしました。6Gbpsあれば当面は十二分です。
ちなみに、もう少しするとPS6000系は10Gbpsｺﾝﾄﾛｰﾗがでるそうで、
更に少し間をおいてPS5000系でも使えるようになるとの事でした…あと10年戦える。

>16Tで100万以内くらいになれば即買うんだけどなぁ
私なら、SAS15kｘ16で1x0万くらいのキャンペーンなら即買います。
10Gbpsｺﾝﾄﾛｰﾗで将来の帯域も安堵されたりしたら
２台目以降、標準価格への特例割引で2x0万であっても
買っておいて損はないと判断しました。

>何年かかけて統合だそうで。
ぁぁああ、なんか近くでそんなお話を聞いたことがｗｗｗｗ

>>432
EqualLogiciいいなあ。
うちは金がないからMD3000iさ。ファイルサーバーと軽めのVMメインだからそんなに問題ないけど。

陰茎が硬くなって上を向いたよ

ほ

そ

く

ないもんっ！

細くないから恥ずかしくないもん！

えーっと、"ほしゅ"したかったんじゃね?
結果all rightだが。。

iSCSIのターゲットって何を使ってる？？

iSCSI Enterprise Target使うのが普通なのかな？

Windows Storage Server

CentOSのyumで入るtgtdって、MS iSCSI Boot イニシエータでマウント出来無くね？
起動出来ないイニシエータは出来るけど。

iSCSI Enterprise Target 1.4.18出てた。

http://sourceforge.net/projects/iscsitarget/files/

IETでiSER出来ている人いる？

IB?

Infinibandで

それにしても、LinuxのiSCSIっていまいち盛り上がっていない気が。
FreeBSDのiSCSIはFreeNASのiSCSI対応だとか、Solarisのように
ZFSとiSCSIとの連動とかで、それなりに盛り上がっているのに。

環境がイマイチだからじゃないか。
俺もFreeNASとかSolarisは弄ったけど、Linuxはやる気しない。
って、スレ違いか。

>>449
OpenFilerというiSCSIのターゲットになれるNASアプライアンスな
ディストロがあるけど、たしかにあまり話題に上らない。
俺も一度ダウンロードしてみたけど、仮想マシンでターゲットを作ったら満足してしまった。

個人的にはDebianベースで似たようなのないかな〜と思ってるんだけど。

個人だけど、NASはvmachineのbackup用という位置づけなので
必要なときだけNASを立ち上げNFSでつなげている

個人でどのようにiSCSIを有効活用しているのか教えて欲しい

鯖にSASでHDD30本接続
接続したHDDをiSCSIで開放
他の子鯖がiSCSIbootで起動
Windows含め、ディスクレスクライアント化

vmwareとかだと、hddをイメージファイル化するけど、
仮想マシン使わずに、リアルマシンでイメージファイル化したhddが使える

>>452
PCのケースを変えたらスロットの位置関係で使ってたRAIDカードが入らなくなってしまった。
仕方なく別のPCにそのRAIDカードを挿し、
そっちをiSCSIターゲットにして iSCSI経由で接続することにした。
こりゃ便利。

同じようなパターンで、家の中に一台だけ大きいのがあれば
他の小型orノートPCで簡単に大容量ストレージが使用可能になるってのは
個人レベルでも大きなメリットになるのでは。
設置コストが安いしWinからでも使えるし。

ただ、便利だけど速くはないんだよなー
サーバがLinuxに7200rpmの1.5Tx4でRAID5、クライアントがWin7RTMだけど
クライアントから見たディスクの速度はほぼローカルディスク単発程度。
可もなく不可もなく。

まあそんなもんだろ。
ギガイーサとコアオンリーなdebianにietdのみのサーバーなら結構いけるけどな。

GbEの理論最大値で125MB/secだから、そういう点では速くない
それ以上望むなら10GbEかFCかな

体感ではターゲット側のキャッシュの量でシークタイムが結構相殺されるので
HDD単発を直接繋ぐよりはいいと思うけど。

>>452

クラスタの共有ディスクに使ってる。
検証環境作る時には非常に便利。

SANは高くて買えないし、NASはSCSI Diskとして認識しないので使えない。

10GbE高いばっかりでレイテンシ大きくて遅いから
そこそこ安くなりつつあるInfinibandのがいいんじゃないかな。
ターゲット1台にイニシエータ2〜4台位なら、スイッチレス
で構成すれば高いスイッチ買わないで済む。
>>446 にある、IETでiSERだけど、サポートはされている
みたいだけど実際にやったことはない。