[次世代] ZFS Part2 [ファイルシステム]
■ このスレッドは過去ログ倉庫に格納されています
0001名無しさん@お腹いっぱい。
2007/06/13(水) 15:28:31スナップショット、ストレージプールなどの豊富な機能を備え、
次世代のファイルシステムとして期待されるZFSについて語るスレです。
○前スレ
[次世代] ZFS [ファイルシステム]
http://pc11.2ch.net/test/read.cgi/unix/1146631270/
○関連スレ
/**ファイルシステム総合スレ その7**/
http://pc11.2ch.net/test/read.cgi/linux/1173530292/
○関連リンク
Solaris ZFS
ttp://www.sun.com/software/solaris/zfs.jsp
OpenSolaris
ttp://www.opensolaris.org/os/
ソース
ttp://opensolaris.org/os/community/zfs/source/
0238名無しさん@お腹いっぱい。
2007/07/13(金) 17:55:59これも勝手に結論付けてない?
やっぱりめでたい?
0239名無しさん@お腹いっぱい。
2007/07/13(金) 18:01:380240名無しさん@お腹いっぱい。
2007/07/13(金) 18:07:24核戦争で地球全土で人類が滅亡しない限りはいつでもデータを取り出せるよ。
0241名無しさん@お腹いっぱい。
2007/07/13(金) 18:30:14最高どのくらいでるもん?
0242名無しさん@お腹いっぱい。
2007/07/13(金) 19:26:23肝はメモリ量な
0243名無しさん@お腹いっぱい。
2007/07/13(金) 19:38:47前スレにbonnie++でのベンチ結果が載ってる。
基本的に大量のファイルやディレクトリを読込、作成、変更、削除しない限りは
どのFSでも速度は変わらない。HDDやRAIDの速度に比例する。
Maildirを使うようなサーバだと、FSで速度が変わってくるけど、
前スレの結果だと、ZFSは他のFSと同等かちょっと早いぐらいのパフォーマンスだった。
0244名無しさん@お腹いっぱい。
2007/07/14(土) 00:44:06CVCF が原因といえば、こんなこともあったしなぁ・・・Yahoo が珍しく落ちた事件。
ttp://ir.bbtower.co.jp/ja/PressRelease/PressRelease-8781465334010784382.html
ここのデータセンタ使ってた他の客も落ちてて、がんばって fsck かなんかしたらしい。
0245名無しさん@お腹いっぱい。
2007/07/14(土) 03:40:32一部のアホ儲が使っているだけです。流行っていません。
0246名無しさん@お腹いっぱい。
2007/07/14(土) 07:51:30その膨大なファイルの中からファイルを一つ検索すると言うことをやる場合
超高速に検索できるFSってある?
そういうのは今後も別途アプリレベルでインデックス作ってやるしかないのかね。
0247名無しさん@お腹いっぱい。
2007/07/14(土) 08:23:030248名無しさん@お腹いっぱい。
2007/07/14(土) 08:28:23インデクスの更新やウィルス監査に便利かも。ファイルシステムというよりOSの機能だけど。
0249名無しさん@お腹いっぱい。
2007/07/14(土) 09:35:18プール作った後にデバイス名が変わった場合でも追いかけてくれるのかな
もしくは別のデバイスとデバイス名が入れ替わった場合は壊れてると判断されるんだろうか
今度試してみよう
0250名無しさん@お腹いっぱい。
2007/07/14(土) 10:02:40未だにSolaris+ZFSベースのNASがないのは何故なんだぜ?
0251名無しさん@お腹いっぱい。
2007/07/14(土) 10:03:37これってFS何使ってるの?
ext3とかだったら怖くて使えないな。
0252名無しさん@お腹いっぱい。
2007/07/14(土) 10:57:13当然ext3
0253名無しさん@お腹いっぱい。
2007/07/14(土) 11:28:200254名無しさん@お腹いっぱい。
2007/07/14(土) 15:48:560255名無しさん@お腹いっぱい。
2007/07/14(土) 16:27:13論外。話にならん
0256名無しさん@お腹いっぱい。
2007/07/14(土) 16:34:560257名無しさん@お腹いっぱい。
2007/07/14(土) 20:50:01ファイルサーバー使ったことあるやつの発言とは思えんが
ってか、数十TBぐらいなら別になんでもいいか
0258名無しさん@お腹いっぱい。
2007/07/14(土) 22:13:290259名無しさん@お腹いっぱい。
2007/07/14(土) 22:27:290260名無しさん@お腹いっぱい。
2007/07/14(土) 23:07:55シーケンシャルアクセスやバックアップデバイス用途(D2D)には最適なんだがな。
X4500だと、ソフトウェアRAID6+SATA Diskなのにも関わらずwriteで400MB/sの
性能を叩きだしていた。
インテリジェントな先読みのせいか、findで更新ファイル抽出すんのも異常に
速い。1000万ファイルの差分バックアップもあまり心配いらない感じだ。
# おれはsnapshot+send/recvで差分同期させているが
もちろん、ZFSにも向かない分野はある。OracleでHA構成みたいなやつだ。
VCSがZFSサポートしていないんだよな。SunClusterならZFSを共有Diskに
設定できるんだけどさ。
0261名無しさん@お腹いっぱい。
2007/07/15(日) 00:05:071000台ぐらいHDD並べて最低一ヶ月は負荷テストやってから言ってくれ。
ファイルシステムの堅牢性以前にX4500なんてハードウェアの信頼性がどうなのよ。
そこで使ってるSATAはSAS並みの保証がある品物なのか?
FCや10Gのネットワーク接続の保証はあるのか?
故障したら原因まで調べてレポート出してくれるのか?
そのあたり専業ディスクアレイ屋並みにやってくれなきゃ、怖くて使えねえ。
0262名無しさん@お腹いっぱい。
2007/07/15(日) 00:09:070263名無しさん@お腹いっぱい。
2007/07/15(日) 00:17:450264名無しさん@お腹いっぱい。
2007/07/15(日) 00:22:380265名無しさん@お腹いっぱい。
2007/07/15(日) 01:12:36技術が云々とわめくわりに、本人まるで技術的知識どころかそれ以前に
知能がまったくないキチガイさんでしょ。放置推奨。
0266名無しさん@お腹いっぱい。
2007/07/15(日) 01:19:030267名無しさん@お腹いっぱい。
2007/07/15(日) 01:20:520268名無しさん@お腹いっぱい。
2007/07/15(日) 01:48:310269名無しさん@お腹いっぱい。
2007/07/15(日) 03:32:59「いつもの人」が一人いるという妄想乙
by いつもの人
0270名無しさん@お腹いっぱい。
2007/07/15(日) 04:47:060271名無しさん@お腹いっぱい。
2007/07/15(日) 05:56:010272名無しさん@お腹いっぱい。
2007/07/15(日) 06:36:491000台ぐらいHDD並べて最低一ヶ月は負荷テストやってから言ってくれ。
0273名無しさん@お腹いっぱい。
2007/07/15(日) 09:44:22発狂するのってどんな気分?
0274名無しさん@お腹いっぱい。
2007/07/15(日) 10:08:510275名無しさん@お腹いっぱい。
2007/07/15(日) 10:13:39NTFSも上位だろうね
それが何か
0276名無しさん@お腹いっぱい。
2007/07/15(日) 13:10:16くらい使っている。
いくつか小さなはあったけどトラブルちゃんと動いている。
これまでLinux+XFS/ReiserFSだったけど今後はZFSにしそう。
0277名無しさん@お腹いっぱい。
2007/07/15(日) 13:23:200278名無しさん@お腹いっぱい。
2007/07/15(日) 15:13:22>ファイルシステムの堅牢性以前にX4500なんてハードウェアの信頼性が
X4500をプライマリストレージとして使う事は、メーカだって推奨していない。
それなりの用途に使うって事だ。良くあるのはファイルサーバのレプリ
ケーション先やD2Dのバックアップストレージ。
>FCや10Gのネットワーク接続の保証はあるのか?
X4500になんでFCつなげるの?
それはともかくとして、X4500は単なるPCサーバ(X4100がベース)であり
10Gも普通に使える。InfinibandもLinuxでは使われているね(TSUBAME)
>故障したら原因まで調べてレポート出してくれるのか?
Sunがそれを行わないとでも?
>そのあたり専業ディスクアレイ屋並みにやってくれなきゃ、怖くて使えねえ。
X4500はサーバだからねぇ。でも、ストレージもやっているんで、対応は可能。
ちなみに、専業ディスクアレイ屋って何?
IBM、hp、日立、NEC、富士通、東芝はダメって事かな?
EMC、NetAppくらいしか認めないって意味?
0279名無しさん@お腹いっぱい。
2007/07/15(日) 15:23:26メーカーでは普通にやっているだろう。OEM/SIerレベルでは、ここまでは
やらんのではないか? 1000台の基準も良く分からん。
通常は、Diskシェルフ1-2本分(Disk 14-28本位)で動作検証・機能検証・
負荷試験だわな。それくらいなら、ZFSに限らず、新製品出るたびに
1ヶ月はやっているぞ。
0280名無しさん@お腹いっぱい。
2007/07/15(日) 15:38:520281名無しさん@お腹いっぱい。
2007/07/15(日) 17:59:49やってるようでやってない。特に非国産メーカー。
しかもSunのIAじゃねえ。
0282名無しさん@お腹いっぱい。
2007/07/15(日) 20:25:05開発→リリースまでの間には入念な試験をしているよ?
0283名無しさん@お腹いっぱい。
2007/07/17(火) 11:42:58まるで Google が採用する FS 全部知ってるようないい草だなwww
バカまるだしw
0284名無しさん@お腹いっぱい。
2007/07/17(火) 15:35:140285名無しさん@お腹いっぱい。
2007/07/17(火) 22:16:36ext3が優れているから使うって言うメーカやユーザなんて皆無に近いだろう。
ちなみに、LinuxのソフトウェアRAID5の書き込み。どの位の性能?
VxVMやSVMなんかは、単体Diskの1/5以下。使い物にならなかった。
ZFSだとRAID6でも、Disk数によっては単体Diskの数倍の性能が出る。
意外と性能劣化少ないんだよな。何が違うんだろう。
0286名無しさん@お腹いっぱい。
2007/07/17(火) 23:29:000287名無しさん@お腹いっぱい。
2007/07/17(火) 23:41:33まあ、たとえリファクタリングしたところで、いままでのLinuxのアレっぷりを
見せつけられていると、どうにも信用できないけど。
0288名無しさん@お腹いっぱい。
2007/07/18(水) 00:10:35他のスレや板に迷惑かけるのはやめてくれ。
0289名無しさん@お腹いっぱい。
2007/07/18(水) 00:24:55オレが知ってる限りで既に 5回は根本的な見直しをかけてる。悪化してるだろ。
そういうのは大勢でやることじゃないんだよ。もう抜け出すことはないだろね。
0290名無しさん@お腹いっぱい。
2007/07/18(水) 01:19:005回の変更点を軽くまとめてくれないか?
0291名無しさん@お腹いっぱい。
2007/07/18(水) 09:04:011.0 の時もそう言ってたかも。本質的にはなんも直っとらん。
0292名無しさん@お腹いっぱい。
2007/07/18(水) 09:17:34ごちゃごちゃだったり、そもそもコンポーネント多すぎで見通しは悪いままなんだよね。
0293名無しさん@お腹いっぱい。
2007/07/18(水) 10:02:08中身のない報告するなって言われなかったか?
0294名無しさん@お腹いっぱい。
2007/07/18(水) 10:21:230295名無しさん@お腹いっぱい。
2007/07/18(水) 10:25:480296名無しさん@お腹いっぱい。
2007/07/18(水) 19:46:43linuxのsoftware raid5、 玉10発で read=630,write=460くらい
0297名無しさん@お腹いっぱい。
2007/07/18(水) 22:18:190298名無しさん@お腹いっぱい。
2007/07/19(木) 00:05:520299名無しさん@お腹いっぱい。
2007/07/19(木) 00:37:490300名無しさん@お腹いっぱい。
2007/07/19(木) 01:16:28vmwareのfreebsd current(x64)にimportしようとしたんだが
zpool importしても候補にすら出てこない
これはvmwareだからなのかな
それともFreeBSD←→Solarisは元々できない?
試せる実機がないからわからん
0301名無しさん@お腹いっぱい。
2007/07/19(木) 19:57:39誰かやったことある人がいたら教えて欲しいなぁ、と思うこと。
zfs creat e-V ほげほげ で、emulated volumeを使えますが
これって、実際の生のraw(?)デバイスに比べてどれくらいのオーバーヘッドがあるんでしょう?
0302名無しさん@お腹いっぱい。
2007/07/21(土) 22:54:39おすすめベンチ教えろ。
もちlinuxでも動く香具師な。
0303名無しさん@お腹いっぱい。
2007/07/21(土) 22:59:01bonnie++, iozone, dd
0304名無しさん@お腹いっぱい。
2007/07/22(日) 14:39:40で適当にサイズでかくしてやってくれw
0305名無しさん@お腹いっぱい。
2007/07/23(月) 02:15:14bs=1だと劇遅だった
0306名無しさん@お腹いっぱい。
2007/07/23(月) 18:22:400307名無しさん@お腹いっぱい。
2007/07/25(水) 08:25:06UFSと比較して数倍遅い
なんで?
0308名無しさん@お腹いっぱい。
2007/07/25(水) 10:44:27オーバーヘッドのほうが多いのかもね!
0309名無しさん@お腹いっぱい。
2007/07/26(木) 15:04:10遅くても何のデメリットもないだろう、常識的に考えて。
0310名無しさん@お腹いっぱい。
2007/07/27(金) 21:33:090311名無しさん@お腹いっぱい。
2007/08/13(月) 02:37:59どういう状況で差が出るんだろう。
0312名無しさん@お腹いっぱい。
2007/08/26(日) 01:12:39明日新しいマシンがくるんですけど新しいマシンでzfs使いたいんす。
が、今までLinuxしか使ったことが無いためにSolarisは不安で
FreeBSDならまだ敷居は低いかな、とヘタレな考えにとらわれてます。
実際にFreeBSDで使われてる方、使用感などいかがでしょうか。
LinuxのFUSE実装はまだ個人ユースでも実用的ではなさそうですし。。
0313名無しさん@お腹いっぱい。
2007/08/26(日) 01:28:420314312
2007/08/26(日) 01:50:39ありがとうございます。
ファイルサーバを立ち上げるのですが、クライアントにMacがいるので
AFPで提供したいと思ってます。ファイル名に日本語が入るので
システム側のデフォルトの文字コ−ドとWindowsクライアントから見た場合の
文字コードの整合性をうまく保てるか、とか
メールサーバも移行するので今溜まってるスプールがうまく移行できるか、とかです。
やってみたら意外とすんなりうまくいったりするんですかね。。。
ついでに仮想化もやりたいです。
今ちょっと調べてたら Nexenta がかなりいい感じで心揺れてます。
zfsでインストール/ブートもできるようですし。
0315名無しさん@お腹いっぱい。
2007/08/26(日) 02:23:320316312
2007/08/26(日) 02:35:50いえ、ほとんど自分でメールのみ数人で使ってるという
影響範囲のちっさいサーバです。
HDDがこの夏の暑さが原因かエラーを吐き出したので
この際マシンごと買い替えて、ついでに前から気になってたzfsを試したい、
という流れです。
0317名無しさん@お腹いっぱい。
2007/08/26(日) 22:35:27そんだけ大規模に変えるなら
Linux→FreeBSD も Linux→Solaris も移行の手間はたいして変わらんと思う。
で、zfsが主目的ならSolarisにした方がいいだろな。
なんにしろ今のマシンを延命させてからの方が。
#Solarisでのzfsについては、「zfsにしたから〜」的なトラブルがないので
#つまらないと思います(苦笑
#ブートデバイスまでzfsにしたことはないので、その辺はわかりませんが。
0318312
2007/08/28(火) 00:37:25返事が遅くなりました。すみません。
アドバイス含めいろいろ考えてSolarisに挑戦してみることにしました。
afpを提供するnetatalkも動きそうですし、文字コードの変換問題も
Linuxでの経験を生かしつつ試行錯誤してみようと思います。
http://www003.upp.so-net.ne.jp/hat/netatalk/solaris10.html
LinusはSunに対してzfsのGPL化をツンデレ風味の素直じゃない熱烈なラブコールを送っていますが
もし実現することになったらLinuxユーザはこぞって移行するんでしょうね。
自分は早漏なんで待てませんでしたがw
じゃあ新しいマシンも届いたんで早速試してみたいと思います。
0319名無しさん@お腹いっぱい。
2007/08/28(火) 01:39:240320名無しさん@お腹いっぱい。
2007/08/28(火) 09:35:18kwsk
0321名無しさん@お腹いっぱい。
2007/08/29(水) 21:25:19いや、むしろSolarisに使いやすいパッケージ管理システムが載るのを待っている。
0322名無しさん@お腹いっぱい。
2007/08/29(水) 22:36:05結局、Solarisを捨てたくなる最大の理由ってそれなんだよなぁ。
0323321
2007/08/29(水) 23:55:48ttp://japan.internet.com/busnews/20070713/11.html
これに期待している。
0324名無しさん@お腹いっぱい。
2007/08/30(木) 00:48:12rpmやdebとかが前者、up2dateやaptが後者。
で、配布システムはともかく、管理システムはそんなに使いにくいか?
0325名無しさん@お腹いっぱい。
2007/08/30(木) 01:24:23>>324
ユーザーインターフェースがなぁ。
0326名無しさん@お腹いっぱい。
2007/08/30(木) 12:35:40aptないしyum=smpatch
synapticなど=アップデートマネージャ
アップデートがjarなんで時間がかかることがあるのが難点かなw
それにrpmはsolaris10で使えたはず(メインには出来ないけど)
0327名無しさん@お腹いっぱい。
2007/08/31(金) 00:50:36dpkgやdselectしかなかった時代でさえDebianのパッケージングシステムは高く評価されていたわけで、
UIの使いやすさはまた別の尺度じゃないかなあ。
0328名無しさん@お腹いっぱい。
2007/08/31(金) 00:55:12ZIL自体、O_DSYNCでopenしたりしないと書かれないし、
DBとかで使ったりしない限りほとんど効果は無いと思う。
あと、Bug Database見ると、Make ZIL use NVRAM when available.ってのがあるから、
たとえば、i-ramみたいなのを使うとか。
0329名無しさん@お腹いっぱい。
2007/09/03(月) 11:45:31ZFS, XFS, and EXT4 filesystems compared
http://tastic.brillig.org/~jwb/zfs-xfs-ext4.html
0330名無しさん@お腹いっぱい。
2007/09/03(月) 11:49:49ZFS+postmarkは最適なベンチマークということが分かった。
0331名無しさん@お腹いっぱい。
2007/09/06(木) 10:00:23http://www.netapp.com/news/press/news_rel_20070905
0332名無しさん@お腹いっぱい。
2007/09/06(木) 11:50:53ホントはIP訴訟なんかやりたくないけど、Sunが先に仕掛けてきたんだよ〜
ってな事が書いてあるな。
0333名無しさん@お腹いっぱい。
2007/09/06(木) 12:37:28ramdiskadm で試してみたんだけどほとんど効果なかった。
そもそもそういう効果を期待しちゃいけなかったのかなあ。
0334名無しさん@お腹いっぱい。
2007/09/06(木) 15:56:59特定のファイルで突然I/Oエラーが発生したのでscrubをやってみたところCKSUMエラーが発生していました
修復は無理そうなのであきらめていますがSolaris自体にも慣れていないので
他に影響の出ているファイルがあるのかどうか?それをどう調べるのか?
ディスクを交換すべきかどうか
が、わかりません
そのあたりどうかご教示お願いします
zpool status -vの結果を貼ります
0335名無しさん@お腹いっぱい。
2007/09/06(木) 15:59:34状態: ONLINE
状態: 1 つまたは複数のデバイスでエラーが発生し、
データが壊れました。アプリケーションがこの影響を受ける可能性があります。
アクション: 復元できる場合は、問題の発生したファイルを復元します。復元できない場合は、バックアップから
プール全体を復元します。
次のサイトを参照してください: http://www.sun.com/msg/ZFS-8000-8A
スクラブ: scrub completed: Thu Sep 6 12:47:04 2007
で 4 のエラー構成:
-----------------------------------------------
改行大杉で怒られたので省略、mirrorが複数ある構成です
-----------------------------------------------
errors: The following persistent errors have been detected:
DATASET OBJECT RANGE
5 53aa lvl=0 blkid=96
251 40 lvl=0 blkid=635
251 55 lvl=0 blkid=627
0336名無しさん@お腹いっぱい。
2007/09/06(木) 16:20:18NAME STATE READ WRITE CKSUM
pool ONLINE 0 0 34
mirror ONLINE 0 0 0
c2d0p1 ONLINE 0 0 0
c3d0p1 ONLINE 0 0 0
mirror ONLINE 0 0 0
c4d0p1 ONLINE 0 0 0
c5d0p1 ONLINE 0 0 0
mirror ONLINE 0 0 0
c6t0d0p1 ONLINE 0 0 35
c6t1d0p1 ONLINE 0 0 31
mirror ONLINE 0 0 0
c6t2d0p1 ONLINE 0 0 21
c6t3d0p1 ONLINE 0 0 46
mirror ONLINE 0 0 2
c7t0d0p1 ONLINE 0 0 270
c7t1d0p1 ONLINE 0 0 233
mirror ONLINE 0 0 32
c7t2d0p1 ONLINE 0 0 448
c7t3d0p1 ONLINE 0 0 419
こんなんです
0337名無しさん@お腹いっぱい。
2007/09/06(木) 18:46:39■ このスレッドは過去ログ倉庫に格納されています