【瓦記録】SMRのHDD 8台目【ﾌﾟﾗｯﾀ枚数減】
■ このスレッドは過去ログ倉庫に格納されています
!extend:checked:vvvvv:1000:512
!extend:checked:vvvvv:1000:512
プラッタ枚数を減らし、価格が安くなるかわりにがランダム書き込みが致命的に遅くなる技術
Shingled Magnetic Recording (SMR)を採用した、通称瓦記録のHDDについて語りましょう
Shingled Magnetic Recording: Boosting Capacity and Lowering Costs
https://sata-io.org/developers/sata-ecosystem/shingled-magnetic-recording-boosting-capacity-and-lowering-costs
HDDの大容量化をけん引する瓦記録技術 - 東芝
https://www.toshiba.co.jp/tech/review/2015/08/70_08pdf/a08.pdf
SMR におけるビット信頼度への隣接ビットの影響 - 日本磁気学会
https://www.magnetics.jp/kouenkai/2015/doc/program/44ALL.pdf
スマートストレージ・スタックベースHBAおよびRAIDソリューションでのSMRドライブの使用
https://storage.microsemi.com/nr/pdfs/microsemi_adaptec_smr_whitepaper_ja.pdf
前スレ
【瓦記録】SMRのHDD 7台目【ﾌﾟﾗｯﾀ枚数減】
https://egg.5ch.net/test/read.cgi/jisaku/1561881186/
VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured
VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured >>122
何度も言うが、メディアキャッシュを使い切るシチュエーションを教えてくれ。お前の妄想SMRドライブではあるようだが
実物を持っている俺のSMRドライブ ST6000DM003ではそんな事は起きないんだけど？ >>123
そうそれ
mdadmで茂6台で使ってるけど、少なくともビットマップ有効でデータ入りのRAID5構築※した時に、
負荷で止まるとかなかったんだよね
>>122はどんな実装なのか、から述べるべきなんだよ
※一台が抜け落ちた、だいたいRAID0な状態から一台を追加して、他にシンクロさせる
シンクロ速度下限 /proc/sys/dev/raid/​speed_limit_min はデフォルトのまま 有名だけど、知らない様だから教えてあげる
>>123
>>124
ある日、ネットワーク管理者のアラン・ブラウン氏がWD製のHDD「WD40EFAX」をRAIDアレイに追加しようとしたところ、エラーが発生しHDDをRAIDアレイに追加することができなかったとのこと。NASメーカー「Synology」のフォーラムにも2019年に同様の問題が報告されていました。
ブラウン氏は問題の原因がSMRにあると推測。SMRではランダムライトアクセスに関する問題への対応として、プラッタの外周部にCMRで記録するキャッシュ領域を設け、HDDがアイドル状態時にキャッシュ領域から通常の領域へデータを書き込む仕組みを採用しています。数十GBから数百GBのデータを書き込む際は問題になりませんが、RAIDの再同期など大量のデータを書き込む場合は、キャッシュ領域からデータがあふれ、書き込みに問題が生じる場合があるとのこと。 >>125
聞いた話じゃなくて、ご自分の体験で教えてくれ。俺のRAIDコントローラーではそう言ったことが起きなかった。
こうしたら、確実にダメだった体験を教えてくれ。 >>126
俺はSMRは1台も持ってない
HDDは5年前に全てNASに追い出した
見えてる地雷買う奴なんているの？ 事例はあるのに見て見ないふり
ある意味日本人的だな
海外では裁判沙汰なのに >>129
裁判沙汰？ 損害賠償請求訴訟とかでWD提訴されたの？
英文ソースを教えてくれお >>131
Tanks a lot! ありがとね。問題の要点はWD赤というNAS/RAIDブランド製品ラインに
予告警告なしのままSMR製品を投入したことでトラブったと激おこユーザーさん祭状態。
というところですかね。海門の担当者は、ウチのNAS/RAIDブランドは鉄狼で全部CMR。
SMRは皆無で無問題と言明して免罪主張？ 東芝について記事はノータッチなので不明。
↑サイトの最後に訴訟訴状の完文コピーのPDFリンクがあった。いかにも訴訟英文で面白い。
https://cdn.arstechnica.net/wp-content/uploads/2020/05/2020.05.29-Malone-v-Western-Digital-Corporation-Red-NAS-SMR.pdf
原告はニコラス・マローン。被告はWDC。弁護はハチス&ルカクス法律事務所
最後のあたりに請求項目が列挙されているけれど、赤SMRをCMRへ無償交換すべし。
法規定の範囲で訴訟準備費用と事後費用を負担せよ。
WDCはSMRなEFAXの無償交換を始めたっぽい。みたいね。 PCで使う分には問題ないんだろ
nasで使うと問題が出る場合がある
確認されている問題はRAIDのリビルド
RAIDは復旧が出来ないと買い替える羽目になる
買い替えたソースは俺 まだSMR出たての頃、うみもんのSMRをRAIDに使ってRAIDアレイが破損した外人の報告動画が腐る程youtubeにあるから知らなかったじゃ済まされねー >ネットワーク管理者のアラン・ブラウン氏がWD製のHDD「WD40EFAX」を
>RAIDアレイに追加しようとしたところ、・・
> ブラウン氏は問題の原因がSMRにあると推測。SMRではランダムライト
>アクセスに関する問題への対応として、プラッタの外周部にCMRで記録する
>キャッシュ領域を設け、HDDがアイドル状態時にキャッシュ領域から通常の
>領域へデータを書き込む仕組みを採用しています。数十GBから数百GBのデータを
>書き込む際は問題になりませんが、RAIDの再同期など大量のデータを書き込む場合は、
>キャッシュ領域からデータがあふれ、書き込みに問題が生じる場合があるとのこと。
後半の外周部キャッシュ領域云々は海門SMRの動作の仕組みの説明かな？
WDのSMRの動作の仕組みはトランスレーションテーブルとtrimが動作に絡む別物じゃない？ >>136
SMRドライブにあるメディアキャッシュの事だよ
もちろんWDのSMRにもある
アドレス変換したとしてもキャッシュは必要、瓦バンドに満たないデータを不揮発な記憶媒体にキャッシュしないと WDのSMRは、SSDのSLCキャッシュと似たような仕組みなんじゃないかなぁ。
HDD内で管理してる空き領域がたくさんあるうちは、そこそこマシだけど、空きが少なくなるとヘロヘロに
なるっていう。
NAS用なら、NAS屋と協業してホストマネージドにすればいいのにと思うけど。
ならずにグダグダが続くのはなんでだろ。 >>138
ホストマネージドに夢見過ぎじゃね？
単にドライブでマネージしない分ホストでマネージしなければならないってだけだぞ
で、多分ホストマネージドの実質的な用途は例えば書き換え不可のアーカイブ専用HDDとか
容量的に効率的な特化HDDとして利用出来る事じゃないかと >>138
エクスプローラーを使ってコピーしていると速度が落ちるけど、Fastcopy使って6TBフルまでコピーしたときは最初から最後まで
100BM/秒以上保ってたけど？
4kBの小容量の内容がランダムなファイルを2000万ファイルコピーしても１秒程度遅延があっただけだし。
っていうか、実際に持っている俺とか何人も検証結果出しても自分が納得できないので！というのは誰にも解決出来ないよね。 そら名無しがこうでした、ってレスで書くだけのは検証にはならんわな
せめてつべに動画であげるとかして、ほんとにやったのかどうか示して見せないと いやいや信じられないので追検証するのはあんた
俺は信じない！ならずっとやってろ >>140
というかSMRには問題はあるが条件が難解で誰にも再現が出来ないから解決しないって話
当然 >>138 みたいな単純な条件で問題が出るわけもないし
エクスプローラーのコピーで速度が落ちるってのもSMRの影響かどうか定かでは無い >>138
WDがNAS屋に金やソフトウェアライブラリー出さないからだろ
SMRにしたのはHDD屋の都合なのでな
ソフト開発には金が掛かるんだよ >>143
エクスプローラでファイルコピーの際の速度低下は読み込み側ソースの
ファイルの断片化・非連続的離散性の具合によるね。1ファイルあたりの
断片数が1桁2桁程度ならさほど速度は落ちない。断片数が万個超えると
通常時120MB/sが40-20MB/s以下に落ちる。検証は低速コピー後にコピー
バック。エクスプローラはファイルコピー時に断片ロンダリングするから
コピー後のファイル内断片は1。で再度コピーすればソース断片無しで
ヘッド移動も最小。比較的高速でコピーできるはず。これはSMR/CMR共に
発生する現象。
海門のSMRのメディア・キャッシュをオーバーフローさせる方法は、
LBAを10000程度インクリメンタルでヘッド移動させて4KBデータをセクタ
指定で連続書き込みすること。このテスト書きに類似した状況を再現できれば
あの超低速なMCオーバーフローを体感できるよ。過去一例一件だけそんな
事態ハマり回避の話があった。回答はCMR取り替えが唯一の解決法。と。 SMRのWD赤買ったぜ
まぁバックアップ用だからええやろ >>144
そのNAS屋ってのも誰が使うNASだって話で
当然WDが提供したライブラリでNAS作ったらWDでしか動かなくなるわけで
そんな不便なNAS誰が使うんだっていう >>146
煽りと思ってもらっても構わないが
99%使うことはないであろうバックアップ用のHDDを
よく買う気になるなと割と本気で思う
まあ、他に保存媒体が全くないならしょうがないか >>148
自分で完結してるな
俺、もしかして釣られた？ >>140
情報提供おつ、
まずはメーカーと型番とOS名をどうぞ
>>145
動かしてみるとなんとかなった、例があるからな
2日放置でビルド終わってたmdadmとか
>>151
年代物の技術訳語を目先のレスバトルのために変更せよとの主張は、さすがに気が狂いすぎてると思うよ >>152
WDC WD60EZAZ-00ZGHB0 Windows 10 Professional 64bit
エクスプローラーは、数万単位のファイルになると非常に効率が落ちるので、Fastcopyとの比較はそれくらいのファイル数だと
はっきりします。
妄想SMRさんが大好きなメディアキャッシュあふれはフォーマット後から6TBフルまで全くしませんでしたよ？w
4KBの大量ファイル生成で応答停止が起きるかの検証は、SSD劣化ソフト「スペースデデフラグ」を使用しました。
2700万ファイルを生成しても応答停止時間は１秒のみだったので莫大な小容量ファイルにもSMRは強いなと実感したし。
で、妄想SMRさん相手には飽き飽きしているので検証環境を教えましたから,後はご自分で検証してください。相手にしません。 >>155
まあ WD の SMR はトリム要求するだけあってまずMC溢れしないっぽいね
それにも関わらず RAID で問題が出たってのがまた難しいところだが >>155
WDのSMRは茂のSMRのような「溢れるメディアキャッシュ」を持っていないからね。
そもそもMC溢れがないから超低速化は起こらない。みたいね。よかったね。
↓英文資料の最初の図版1に4KBのランダムデータ書き込みテストを行った各社SMR-HDDの
時間推移と書き込み速度の相関関係の結果が示されてある。ちと古い資料だけど、
茂のSMRだとおよそ100秒間程度のランダム書き込みでMC溢れが生じて超低速化しちゃう。
しかしWDはほぼ定速運転を維持すえうことが実証されている。
それにも関わらず、NAS絡みでWD赤のSMRが超低速ハマりするとかで訴訟問題にまで
発展しているのはおそらくtrimが絡む謎々でしょうねえ。
https://www.usenix.org/system/files/conference/fast17/fast17-aghayev.pdf WDのSMRは良くできてて大抵の環境では低速化しないけど、全ての環境で低速化しない訳ではない
ただそれだけの事では？ >>155
そんでさ、訳語の問題はごまかせると踏んだのかな？ 俺はその訳語の一点を持って、
頭がおかしいと断じてるんだけど 久し振りに見たが相変わらずたなぁ。
>>158 さんに追記
WDのSMRは大抵の環境では低速化しないが全ての環境で低速化しない訳ではない。REDに入れたのは最悪。
seagateのは一定以下の負荷・条件状態が良ければ高性能だが低速化する。ただソレだけ。
次にどの程度かが問題になるが、どこの誰だか分からない俺様の言を信じるかUSENIXの報告を信じるか。ただソレだけ。
まぁFSによって成りやすいとかもあるカモしれんないけど。 >>163
その信頼性のなさ故にmdadm上の再現条件を書いてるのだけどね
訳語にケチつけたりワケワカメな振る舞いしかしないんだよ
挙げ句妄想なんだそうだ
確認もせずにw ワッチョイそのまま毎回ID変わってるし
雑音とかITハンドブックみたいなガイジ枠の業者だろこれ >>158
WDのSMRの特質については >>76 の公式資料参照してね。けっこうやっかい。
Windowsの側でtrimサポがあるのはWindows7以降。XPとかVISTAは基本サポ無し。
trimサポ無し環境でアレを使い込んでいくとHDDに対する書き込みの大半は上書き更新。
結果、常時ガベコレ発動が必至。になるかもね。これにストライピング処理とバンド更新が
入れ子状態で合わさると、1本のバンド更新に複数回のガベコレが必要になるかもね。遅速。 NASの件はwdも青天の霹靂だったんだろうな。自業自得だが。
まーseagateが始め、各社追随しようとしてたコッソリSMRがやりにくくなったのはユーザにとっては幸い…ワザとだったらWDすげーがw >>171
これに関するリファレンスくらい日本でもやればいいのに
日本のPCマスメディアは、メーカー忖度のしすぎで報道も論評も貧弱
ただひたすらの広報オンリー
>>173
最近死んだ犬？ >>174
>最近死んだ犬？
語尾に「わさ」をつける基地害野郎 本日の東証終日取引停止はRAID故障と冗長性維持失敗が原因か？
-----
■東証の横山CIO「市場参加者と協議し終日売買停止を決定」
東京証券取引所の宮原幸一郎社長は1日、東証で全銘柄の取引が終日停止となったことに
関して記者会見に臨んだ。冒頭で「市場参加者と投資家に迷惑をかけたことをおわび申し上げる」と謝罪した。
東証を傘下に抱える日本取引所グループ（8697）の横山隆介・最高情報責任者（CIO）は問題が
起きた経緯について「7時4分に運用系の共有ディスク装置1号機のメモリー故障が発生した」と説明。
「本来であれば2号機に切り替わるはずだったが正常にできなかった。その結果として、
情報配信ゲートウェイ（相場報道のサーバー）の配信処理に異常が発生した」と述べた。
終日売買停止とした理由について「システム再起動を行った場合、投資家や市場参加者に対し
混乱を生じることが想定された。内外の市場参加者と協議したところ十分な顧客対応や円滑な
売買の実施が難しいとの要請もあり、終日売買停止とすることとした」と説明した。
明日の市場については「再開に向けて本日中にハード交換とシステム再立ち上げを実施する。
万が一の故障発生時にも速やかに切り替えできる体制を確立したい」と述べた。
2020/10/1 17:00
https://www.nikkei.com/article/DGXLASFL01HT5_R01C20A0000000/
------- >>175
英文記事貼り付けてるだけじゃん
語尾が気に食わないだけ？
それで噛みつくって……よくわからんな >>176
共有ストレージのメモリが故障、バックアップシステム動かず
とのこと
バックアップ側に問題あって立ち上がらんかったのかな？
壊れたデータも引き継いでる可能性あって動かさなかったとか？
データ生成時にパリティ付けたりで回避出来そうだけど
月またがりで発生だからソフトウェア疑ってたわ >>178
一分以内に即レスw
どこでそのキチガイ具合が観測できるかな 質問系のスレetc
過去レス遡ればな
間違いを絶対に認めないで最後はわさわさ発狂
語尾に「わさ」なんてつけるのはそいつしかいないからな
「わさ」が気に食わないわけじゃない
そいつの特徴が「わさ」 >>181
なるほど、後で見物してくるわ
ありがとう 取り急ぎ報告
自作板、質問と付いた現行スレで検索したが、「わさ」で該当するレスは見付からず >>179
単純に考えたら RAID1 がコントローラの不調で動かなかったのかと思うが
そこまでお粗末では無いとするともっと複雑な事情があるのかね 171だけど、呼んだ？ w
SMR関連の過去スレ・カキコ検索するなら↓URLでどうぞ。その他英文コピペなレスとかね。
語尾わさなんて滅多にやっていないけどね。ｶﾞｸｶﾞｸﾌﾞﾙﾌﾞﾙw
https://www.usenix.org/system/files/conference/fast17/fast17-aghayev.pdf
お寿司はワサビありじゃないとね。ワサビぬきじゃお子様向けだし。 日本が開発したんだっけこの糞技術
ほんとろくなことしないなこの国 SMRのベースになったTDMRの論文は当時HGSTの技術者発表だが、
開発拠点はアメリカじゃなかったっけ？
なので系譜はIBMの技術者なんじゃないかな。 > ウェスタンデジタルは2015年の時点でこの事を把握していた。
> にも関わらず、ユーザーへの告知無くNAS向けとされるWD RedシリーズをSMRに変更していたため、大きく批判される事となった。
> また、NASベンダーにも通知していなかったため、NASベンダーは(CMRと信じて)当該のHDDを互換品リストに加えたままであった。
> 問題発覚後、このベンダーは互換品リストから除外した。
問題を知ってた上で、報告無しで変更
遅いのが どうのこうのというよりも、ユーザーを欺いた。その事の方が悪質
米国で、この手のヤツで負ければ 懲罰的な罰則食らうぞ。 >>192
例のWD赤のSMR非告知の件、集団訴訟は和解で決着ついたみたいだね。
Malone v. Western Digital Corporation (N.D. Cal.), Case No. 5:20-cv-03584.
当該 HDDのユーザーはWDから賠償金を得られる。額は2-3TBの HDDは1台につき4ドル。
4-6TBの HDDであれば一台につき7ドル。この金額を受け取るためには指定サイトで
被害者登録を2021-11-8までに済ませておかなけれならないそうだ。米国内ユーザ限定らしい。
https://www.prnewswire.com/news-releases/if-you-purchased-a-western-digital-red-nas-hard-drive-you-may-be-entitled-to-a-cash-payment-from-a-class-action-settlement-301355419.html 海の8TでSMRデビューしたんだが
簡単位言うと
断片化させないように書き換えせず使って
8割程度書き込んだら読み込み専用に使えって感じなんだろうけど
データーベース持ってる音楽アプリや写真管理アプリなんかは
散らばって更新されていくと思うんだがあんまり気にしてない？ >>195
LinuxやRAIDを組んで使わなければ、特に配慮せずに使えているよ。
特にWindowsで使うならデフラグしても異常に時間が掛かったりしないし。容量フルになるまで転送速度は落ちない。
ただ、大量のファイル（数十万ファイル等）をSMRドライブにコピーするならFastcopyとかのフリーウエア使わないと
いつまで経っても終わらない（エクスプローラーの問題で）。 >>195
先輩ありがとう
俺気にしすぎてみたいだ
一度書き込むと書き換えはアホみたいに遅くなるイメージだった
もっとラフに使ってみる >>194
SMRとCMRのHDDの価格差を考えると
冗談みたいな安さだな >>190
アメリカ人だぞ
Seagateが開発実用化した 1〜2割程度の容量アップの割に合ってないから怒号飛びまくってるよな
SSDのQLC化もちっとも進んでない、積層が順調に進んでるのもあるけど
HDDのSMRと同じようなことになるのは見えてるから HDDなんか最早RAIDでしか使ってないのに
RAIDで使えないってのが詰んでるんだよな ソフトウェアRAIDでは一応、使えてはいる
再構成するのに時間がかかるから
ハードウェアRAIDだと応答無しと見られて
RAIDがバラける
＆
ソフトウェアRAIDでも断り無しの
SMR 採用だったので、時間が読めないから
裁判に持ち込まれたわけ
8TBで組んで約二日ほど放置の結果は問題なし >>202
別にSMRは全てのハードウェアRAIDで動かないとか
ソフトウエアRAIDなら必ず動くと言われてるわけではないだろう
ただ、一部のハードウェアRAIDでは動かないと明言されてるから
RAID用に買う気は起きないわなという話
SMR未対応と名言しているraidメーカーdrobo
http://www.drobo-jp.com/support/hddaccessories.html
>>43
動物の間でも旧来の女性らしさみたいなのが普通の状態こうなってればそれで話は終わり
>>13
なんかあったんだ
>>3
楽勝て言っても許されるから勘違いするのも自由だしな
目の前に侮辱だかセクハラ的なコメントされていくことの方が大きいと思うけどスポンサーが付いてるのにね
ヤフコメであえて反対の意見言って炎上してた共産党員が衆院選辺りから正体隠さなくなったし明らかに外部の工作
>>69
女は165cm以上ないと人権無いと思うんだけどな
>>73
ベトナム人さんがやったって証拠はあるのか？
>>51
爺もだけだ主婦辺りも多いのか？とか日本でリベラル・左派と呼ばれてる人らが大勢居るからね
馬鹿ウヨなんでリベラルは上から目線の女が何度も書いてるということか
じゃあ坂上忍は許されてきたけどほとんど無症状で草
岡を怒らせたらどうなるかってくらい想像も出来ないのかかつて
>>54
誤魔化しはしてないんじゃないの？
明らかに女性蔑視的な意識を持ってないのやばいだろ河童を性的対象にするの？
>>14
ローカルを前提とした時点で
■ このスレッドは過去ログ倉庫に格納されています
