RAIDカードあれかこれか 52枚目
■ このスレッドは過去ログ倉庫に格納されています
ちょっと週末いろいろ遊んでみた。 持ち弾は ・HDD 2台 ・SSD 1台 これらを駆使して高速ストレージを作ってみた。 ・まず素のHDD(1台)のアクセス速度 https://dotup.org/uploda/dotup.org2179850.png ・これを2台にして列数2のシンプル記憶域を作ってみると NTFS: https://dotup.org/uploda/dotup.org2179853.png ReFS: https://dotup.org/uploda/dotup.org2179856.png まあ連続書き込みは2倍になる。 ただランダム書き込みの速度はほとんど向上せず。 ・そこでさらにSSD1台を追加してHDD階層とSSD階層の2層の記憶域を作ってみた HDD階層は列数2のシンプル、SSD階層は列数1のシンプル、ライトキャッシュはゼロ NTFS: https://dotup.org/uploda/dotup.org2179861.png ReFS: https://dotup.org/uploda/dotup.org2179864.png 面白いことにNTFSとReFSで明暗が分かれた。 NTFSはSSD階層が狙い通りキャッシュの役割を果たしてくれたことでランダム書き込みの読み書き速度が大幅に向上 対してReFSはなぜかSSD階層が無いときと読み書き速度はほとんど変わらず、SSD階層を入れた意味が見いだせなかった。 個人的にはロバスト性があるReFSの方が好みなんでこっちのランダムアクセス速度を上げたかったんだけどなかなか難しいね。 eBayで9361-8i買った 開封品だけど、Broadcom茶箱で未使用品のよう 9361-8iとASR-8805でどっち買うか悩むな。 質問 Consistency CheckとかBackground Initializeとかいうのは SSDだと早く終わるというわけでもないんですか? highpoint SSD7103 のドライバ― WINDOWS10 Build1803以降だと認識しないようだから注意な。 AMAZONのレビューに書いてあった。 MegaRAID 9380−4e4i 4TBx12 RAID6 にLinuxを入れて運用していたのですが、Storage manager で整合性チェック中にsuspendしたままOS再起動をかけたら、起動できなくなりました。 Boot processではAdapter BIOS Disabled.となり、レスキューモードで起動してもデバイスとして認識されないようです。 該当のRAIDカードを抜いてレスキューモードで起動すると、別のRAIDカードに接続しているデバイスはRAIDも中身も無事確認できます。 これは該当のRAIDカードが故障ということでしょうか? >>358 たいていは RAID0運用だから悲惨だな >>359 >>Boot processではAdapter BIOS Disabled.となり、レスキューモードで起動してもデバイスとして認識されないようです。 ええ、アレイが死んでいる場合はそうなります。 構成がわからんので何とも言えない(構成が分からないので下手にアドバイスができないし、誤った構成で伝えるとアレイがとぶので レイド1,5ならテキトーなナスに入れた方が楽ちん。 テキトーなNASは電源もファンも冗長化されてないから嫌 どんだけ対障害に対応させるかですよね。 テキトーな茄子もいいけど、UPSはいれたいなぁ。 まぁオレは過去苦い経験があり RAID6に、バックアップ、RAID5してる 更に6のカードには、電池を後付け出来るオプションあったから それも、接続済み >>364 んー? まさかとは思うけど、 RAID6アレイのバックアップにRAID5アレイを利用してる とか言わないよな・・・? >>367 と言う事は、 RAID5アレイのバックアップにRAID6アレイを利用してる って事? あーあ・・・。 RAID5機の方が昔からあって、バックアップ用に追加したのがRAID6機 ということだろうけど、RAID5は流石に古そう ダメかい? まー、二個同時に壊れる事はないけど、まぁ絶対はないからぬ〜 >>370 おすすめは、そもそも整合性に複雑さをなくせるRAID10をお勧めするけどね。 (IO速度RAIDの中では最速だし) あと、RAID4/5/6/7ってコントローラが優秀なので大昔見たいな大事故はないけど ストレージ側はしょっちゅうパリティデータがボケたりするので定期的に整合性 チェックをしないと論理的にデータがおかしくなるので、最悪アレイ障害時に 復帰できなくなる。 >>372 Thanks 1+0って事だよぬ〜 容量が総容量の半分になっちゃうのが(・・;)トホホだけど 最近では、大容量も安くなってきたし ちょいと考えてみる。 サンガト >>370 あるとしてら雷、HDDなら地震もヤバイ。 >>373 容量重視ではなく、速度も加味したいってひとはRAID1+0をお勧めします(スペア有) >>375 速度は、そんなに必要じゃないっす。 とか、言いながら矛盾しててww 10Gbeのファイバーで組んだりして >>374 落雷は、サージかまして、UPSの二段 地震だけは、ムリポ 一度だけバックアップ中に中々の揺れた時あって ビビったわ(>_<) >>377 3.11のころはHDDだろうしサーバ室ヤバめだな。 >>378 311のアレは、ヤバかったっすね〜 偶々、あの時は、オフにしており 帰宅したら、PC とかひっくり返ってた(笑) >>379 そんなんいってたら、次くる10.11なんて どう評価すればいいのか、、、、、、、、 いや、東京タワーが健在で、スカイツリーが倒壊って どんなんやねんと。 軽く10年は使ったPCI接続の3ware 9500s-8から LSI 9267i-8に乗り換えました。よろしくねw >>383 バッテリーを積んでライトキャッシュモードにしないと おせーぞ。 そんなものは無い。 でもキャッシュ効いてそうよ コピーとかすると先頭の1GBくらいはスゴい早くて、 そのあと一気に低速になる。 >>385 >コピーとかすると先頭の1GBくらいはスゴい早くて、 ん−、、経験上はなしなので違うかもしれないけど その動きは確かにキャッシュぽいがドライブキャッシュの動きにみえますね アレイのキャッシュだと、そういう動きはしないです LSI系のアレイコントローラの設定レシピとしては ドライブキャッシュを無効にして、アレイコントローラ上のキャッシュを有効(ライトバックキャッシュ) が一般的 強制writebackにしても同じ状態 そもそもの転送が遅いのは、テスト用にsata2仕様のHDD(RAID1)だからかな? そりゃRAID1のWriteじゃそうなるやろ Readならもうちょっと稼げんじゃね RAID初心者です。 ブートドライブをRAID10に出来てる人いますか? RAIDカードはRocketRAIDの予定です。 マザボはX58です。 RocketRAIDですなんて言う奴には無理だから諦めれば? 型番ですらない >>394 まぁマイナーではあるが、個人で安く買えるので それなりに売れているメーカーではある。。 なんちゃってRAIDよりかはマシ程度ではあるが、、、 RAID組み始めて以来、システムブートドライブレベルで構成 不安ならグローバルホットスペアを何個か用意すればいいし SASのコンシューマ用がほぼ消えたのでSATAで十分でしょ コンシューマ用RAIDはHDD単体が安くてナンボのはず RAID5って3台で組むとアクセスが極端に遅くなったりしますか? ゴミみたいなカードだと書き込みが下呂遅になる ちゃんとしたハードウェアRAIDでライトバックならむしろ早くなる ASR-71605で今まで4台でRAID5を組んでたのですが、1台当たりの容量増やして3台構成にしたらファイル操作のレスポンスがやたら遅くなったのです CrystalMarkの結果もランダム遅すぎだし、4台にしてみるかなぁ TOSHIBAの14TBなんでCMRです かなり振動が大きい個体があってRVセンサーとやらが悪さしてる気がしなくもない RVセンサー自体はRAID向け機能っぽいから問題なさそうだけどね。 3台のうち1台が初期不良で極端に速度低下してたりとかしない? WD REDの価格が高止まりしてるから、東芝のMNシリーズに興味湧いた。 16TBはまだ割高だけど14TBならコスパ良さげ。 余りパーツを利用したバックアップPCを組んでいるのですが、 RAIDカード周りで嵌ってしまったので、だれか助言下さい・・・。 RAID BIOSの起動後に、 Attached Enclosure doesn’t support in controller’s Direct mapping mode Please contact your system support. System has halted due to unsupported configuration. のエラーメッセージが出て先に進めません。 Direct mapping mode(そもそもこれの意味も良く分かりません。SAS ROCとSAS HDDの直接接続モードということですか?) の設定を変えてやる必要があるようですが、どの用に設定するのがよいでしょうか。 構成 CPU : intel Xeon X3430@2.40GHz TB@2.53-2.80GHz P4C M/B : GIGABYTE GA-6FASV MEM : hynix DDR3-SDRAM-ECC-REG 2GB HMT125R7TFR8C-H9 *4 RCA : LSI MegaRAID SAS 9264-8i RAID Adapter SEC : IBM ServeRAID Expansion Adapter 46M0997 NIC : intel Gigabit ET Dual Port Server Adapter HDD : HGST Deskstar 7K1000.C HDS721050CLA362 HDD : HGST Ultrastar 7K4000 HUS724040ALS640 *16 よろしくお願いします。 エラーメッセージでググったらトップにでてくるっぽいけど >>408 エラーメッセージを信じるなら、 LSI MegaRAID SAS 9264-8i が、IBM ServeRAID Expansion Adapter 46M0997 に対応してないんじゃね。 メーカー製サーバー取り外し品とか、同じメーカーの特定パーツしかサポートしてないのとかあるし。 >>408 どっちのコントローラで表示されているかわからんけど Direct mapping modeって所謂RAIDコントローラが載ったボードなのに RAIDコントローラの機能を無効にして Enhanced HBAモードにするって 意味 お騒がせしました。 RAIDカードを手持ちのIBM ServeRAID M5015(LSI 9260 OEM)に変更したところ、無事SASエキスパンダとHDDを認識しました。 WebBIOS上でRAID6の構築をしてみましたが、問題ないようです。 同じLSIのOEMでRoCも同じなのでてっきりNEC版でも大丈夫だと思ったのですが・・・。 >>412 同じボードやチップを使てってもOEMの場合利用用途が決定しているのと カスタムファームを採用しているので、柔軟には対応しにくいと思う HPのP430を使用したいのですが、SATAx8のファンアウトケーブルって存在するかご存じですか? https://www.oliospec.com/shopdetail/000000005294/ct876/page1/order/ これ2本で良いんじゃねーの? この手のものは取りあえずオリオ見とけばどんな物有るか分かるんだが、 コネクタ規格とかで検索しないんだろうか? その程度調べられないと嵌まったときにどうにもならなんと思うんだが。 特にこの手の業務用使うなら。 なんだこのコネクタ?と思ったけどminiSAS 68pinなんてあるんだな 2x SFF-8087なコネクタでmini wide sas 68pinとか言われてる。 ttps://www.datastoragecables.com/sas/internal/minisas68-satax8/ こんなケーブル探すくらいならカード投げ捨てた方がよくね? 今時RAIDカードなんていらんだろATA66の頃じゃないんだし 内蔵の方かよ。 774615-001これから変換かますな。 っていうかなんでこんな変態ポートのカードを選んだのか。 無理して使うほどの性能でも無いし、上の言うとおり投げ捨て案件だな。 >>417 それなら、そもそももう内蔵も外付けもディスクいらないじゃん。 ネットブートできるんだから 容量や速度の問題は別にすると、8台のRAID5と16台のRAID6ではどちらが安全ですか? 計算すりゃいいことすら聞いてくるのは脳みそ足りてないのか >>420 x16 RAID6 の方が安全。 負荷掛かるリビルド中にもう一台死ぬ確率が普段より高くなるからRAID5はやめとけ。 どうやって計算すればいい? よく、raidで1台壊れると他のディスクも弱ってるから連鎖的に壊れるって聞くから、そのへんも踏まえた計算方法が知りたい 俺は421じゃないけど 個人的に、raid6を8台で組んでるから興味ある内容になってきました ちょいと、ググって調べているけど 中々出てこないね〜 ここいらあたり? http://www.google.com/url?q=http ://ocw.kyushu-u.ac.jp/menu/faculty/16/1/2.pdf&sa=U&ved=2ahUKEwimuNXFwqHsAhUFs54KHaNdBK4QFjAFegQICBAB&usg=AOvVaw3IgLASwndLs2dF9SOmxdpA RAIDの信頼性を左右する要因 の ページからかな? >>420 >容量や速度の問題は別にすると、 >8台のRAID5と16台のRAID6ではどちらが安全ですか? どっちもやぶあい RAID6で16台ならスペアディスクは2本必要 故に14台でRAID6が最強 ん? 俺は10台で構築してるけど、2台分取られるから8台分の容量だが 14台にしても、12台分の容量になり、16台からの最強の意味が わからんのだが、誰か分かり易く三行で説明もとむ >>423 は自分です。 >>427 そんなにヤバいっすかね・・? それとホットスペアはそんなに重要でしょうか? 自宅設置の個人の倉庫用途で、問題発生時にはシステムを止めても構わないのです。 交換用の同型のディスクを6台確保してあるので、縮退時には手動にてディスク交換をすればよいと考えています。 使用している機材の関係で16台以上のHDDを接続できないので、できれば14台分の容量を確保したいです。 恐らく手動でのディスク交換時の電源オフ等のリスクを考慮してのことだと思いますが、 このあたりの故障確率等も踏まえて信頼性を計算できたらと思います。 話が前後しますが、現在稼働中のファイル倉庫を更新する予定で、いろいろ考えているところなのです。 HDD 16台搭載可能PCが1台、HDD 8台搭載可能PCが2台あり、 HGST 4TB HDDが22台、 HGST 8TB HDDが10台、 東芝 8TB HDDが10台あるので、 4TBを16台のRAID6、8TBを8台のRAID5を2セットとすれば、全てのアレイの容量が揃うので都合が良いです。 そこで、一台を常時起動の常用、二台をバックアップ(設置場所が違う)とする予定なので、 16台PCと8台PCのどちらを常用とするかで悩んでいます。 >>428 16台で組むなら16台全てをRAID6アレイにせず、 2台をホットスペアにして、 残りの14台でアレイを組んだ方が良いよ・・と。 この場合は16台で12台分の容量なので、容量効率があまり良くないのが個人的に引っかかります。 8台常時稼働させるのと16台となら8台の方がよっぽどいいと思うが 稼働してるHDDが増えればその分故障が発生しやすくなるんだし、消費電力的にも >>429 そーいうことか。 ホットスペアを用意するって事ね 39〜 遠隔地にあるサーバーならともかく、自宅設置ならホットスペア要らんだろ。 自分ですぐ差し替え出来るし。 うちは自宅でx16台RAID6のデスクトップとx12台RAID6のNAS使ってるがホットスペア何て使った事無い。 エンクロージャー高いし、HDD Bayもったいないし。 同じアレイ容量ならディスク容量が大きいとエラー率も上がるのではないか 確か容量が変わっても同モデルならエラーレート、同じだった気がする >>432 同意 そもそもホットスペア運用だと一回リビルドが走るからリスクもあがる コピーバックするとまたリビルド後にまた負荷がかかるし、しないとホットスペアがどのスロットがわかりにくくなるし ホットスペアの利点は自動で縮退から復帰できることはオプションでそれよりも ドライブがホットスタンバイだからディスクの抜き差し無しで縮退状態から復帰できることだと思うんだけど >>432 そりゃ、俺もスワッフなんて用意してないよ だから、なんでかなぁって理解に苦しんだ(笑) 自宅で、16と12台とか?もしや自宅ラックの会の方?( ̄。 ̄;) WINDOW10でブートシステムパーティションがraid 0でRaidカードがいかれたら、 レジストリが壊れて起動不可にw。 レジストリバックアップは必要とあらためて思い知らされた。 アレカraid6おじさんだけど 安定しすぎてしばらくここ忘れてたわ 一年後にまた来るわあばよ 以前、SASエキスパンダの件でお騒がせしました。 あの後、RAID6で運用を始めましたがアレイからHDDの脱落が相次いでいます。 MSMのログをチェックすると、どうもHDDがリセットしてしまい、 タイムアウトでアレイから切り離されているようです。 ただ、該当HDDのSMARTを読み出しても故障しているわけではない様なので、 電源電圧の不安定などを疑ってみました。 画像のように、一番下の5本のHDDは電源ユニットから遠いので電源ケーブルが長く、 アレイからの脱落はこの5台だけで起こっています。 対策として、ケーブルの分岐部分に電解コンデンサを追加してみると、 全く症状が出なくなりましたが、取り付けたコンデンサの容量等が適切なのか、 そもそもこの対策で良いのか等の不安が残ります。 メーカー製のSASバックプレーン基板を見ると、必ずドライブ毎に100uF程度のコンデンサが付いているので、 これを参考に、サン電子工業 ME-CZの470uF/25Vを5Vと12Vラインの2、3分岐毎に取り付けました。 上記のようにHDD 2、3台で470uFは適切ですか? オシロスコープを持っているので電源の波形も取れるのですが、 リプルの限度等が分からないのでまだ計測はしていません。 波形の画像をはればコンデンサ容量が足りてるか等の判断は可能ですか? https://jisaku.155cm.com/src/1602501524_b164157fca1d44f04a8c131d1ac94f21ee10f507 https://jisaku.155cm.com/src/1602501534_859a234189d8d39e3d0b9d3454b559080d78cc49 ちなみにサーキットテスター計測では アイドル時に5Vが5.0〜5.1V程度、12Vが11.9〜12.0V程度です。 HDD起動時はそれぞれ4.9V、11.7V程度でした。 WebBIOS上でスタッガードスピンアップ有効にしましたが、実際に機能しているのか不明です。 あんまり長いと電源管理ICのフィードバックに遅延が生じるからそれで電力不足になってんだろうけど、その場合に中間にキャパシタを挟む対策は皆どこも普通にやってるよ SilverStoneのSATA電源分岐とかにも入ってるしな 気になるなら既製品バラして同じモノ入れるか移植すればいいんじゃない 自分の5-6台のMegaRAID環境ではそんなトラブル起きた事もないので勉強になるなぁ バックプレーンにはそんな意味合いもあったのか すんません、全然アドバイスにはなってないですが >>439 これはいかんわ、ここまで物理ディスクが多いと不安定になる。 コンデンサ投入もいいけど、可能であれば、エンクロージャで 経由で接続した方が良いともう 亀レスで申し訳ありません。 >>415 情報不足で申し訳ないです。416さんのおっしゃるとおり内部コネクタの方なんです。 >>416 まさにこういったケーブルを探していたのですが、自分では見つけることができなかった感謝です。 とはいえ、いい値段しますね。。 >>441 ありがとうございます、やはり、そういう事ですか。 対策の方向性は間違っていないようで安心しました。 >>442 こういう分岐ケーブルも既製品として売られているんですね。 具体的に2200uFという容量が分かったのは非常にありがたいです。 現状の470uFという容量が構成上の安定度ギリギリだった場合、 温度等の条件変化によりまた症状が出るかもしれません。 出来れば余裕を持った容量に変更したいのですが、 あまりに大きいと起動時の突入電流で電源の保護回路が作動する懸念がありました。 汎用品として2200uFの容量を持つ製品が売られているという事は、 もう少し大きなものにしても大丈夫なんですかね? 現状は5V、12Vそれぞれに470uF*6で2820uFとなっています。 >>446 そうですね・・。 過去にも16台搭載は経験があるんですが、今回こんな問題が出るとは思ってもいませんでした。 ただ、SASエンクロージャの手持ち等ありませんし、 元々引退パーツの再雇用が目的なので、この構成にもう少し手を入れていきたいと思います。 >>447 SST-CP06って、1000円位じゃない? 高い? >>451 0.3vもドロップしちゃダメでしょうねぇ・・・。 スパイクノイズ状の所のVppが0.3V程度なので電圧のドロップは0.15V程度です。 ドロップだけじゃなくて振れてるのが問題ですか? ■ このスレッドは過去ログ倉庫に格納されています
read.cgi ver 07.5.5 2024/06/08 Walang Kapalit ★ | Donguri System Team 5ちゃんねる