Raid-5炸掉和合理Raid組磁碟數量分配問題 - Linux

Donna avatar
By Donna
at 2019-08-15T19:15

Table of Contents

Hi, 各位Linux前輩請多多指點小弟

事情是這樣,今天早上我確認Raid-5磁碟陣列出現三顆異常便著急更換
操作過程有一些misunderstand和不謹慎,也沒有確認Spare Disk的情況
到底是本來就不可能了,還是我腦殘造成的,已經不可考。
總之,重建失敗,Raid Fail, 資料爸爸、資料媽媽、資料阿公、資料弟弟
祖孫上下三代400TB已經一起上路。

我己經準備提頭跟老闆解釋。
七月的台灣,真的好冷。

-------

木已成舟,重組Raid已經是既定事項,我現在只能想辦法不要重蹈覆側。
我查詢了網路上的一些說法,Raid-5既然只能損毀一顆硬碟
所以有經驗的管理者,都會控制整個Raid組合理的磁碟數量上限
避免重建過程又發生磁碟故障的機率上升

目前接到我手上的Raid組合是4TB*180顆作Raid-5,其中約包含6顆Spare disk
這樣的組合數量是否合理(目前該機器已屆保固期,磁碟故障的狀況已開始較常發生)

我查詢網路上,大多是家用級NAS的討論。商用級storage或SAN的討論比較少。
可以麻煩有經手過商用級SAN的前輩指點個大概概念和經驗嗎?

我目前是希望重做之後打散成3組Raid-5或6,每組再附加2~3顆Hot Spare.
避免再發生組內多顆硬碟同時接近壽終。

有點伸手,這裡先跟各位誠懇致歉,如果有前輩願意指點,我真的很感謝
明天就要上刑場了.., 目前四處都在整理資料中。

--
Tags: Linux

All Comments

Barb Cronin avatar
By Barb Cronin
at 2019-08-17T03:40
raid10或01就好,要速度請加ssd做快取。資料不要只
有一份,最好是兩地異地備援(不要備在自己家裡)。
rebuild都要看運氣啦。
Caroline avatar
By Caroline
at 2019-08-18T02:56
這東西很玄學
Suhail Hany avatar
By Suhail Hany
at 2019-08-20T23:56
該用raidz3,超過12顆就該用更厲害的做法。180顆硬碟只
規劃raid5....幫拍拍
Elvira avatar
By Elvira
at 2019-08-21T05:29
hadoopfs會duplicate三份,raidz不論是1還是2還是3都du
plicate不到兩份。可能不能直接拿來比較,但是重要的資
料duplicate不到兩份真的說的過去嗎?
Emma avatar
By Emma
at 2019-08-25T21:32
沒有異地備援,今天是硬碟壞了,明天如果天災人禍火災
或漏水,這些資料一樣都消失了
Ina avatar
By Ina
at 2019-08-29T10:37
亂講了一些,再幫你拍拍一次。我覺得一開始的規劃就非
常有問題,希望對你有幫助
Blanche avatar
By Blanche
at 2019-09-02T19:30
理論上是吧。raid的rebuild也有個問題,通常一組raid的
硬碟都是同時買的,壽命、品質可能也很接近,rebuild過
程中也很有可能途中再掛一顆兩顆
Zanna avatar
By Zanna
at 2019-09-05T15:13
其實單台180顆已經遠超乎我的想像了,我也不是儲存裝置
的專家,我只是知道這個數量絕對不可能用raid5........
如果你自己無法評估,建議你找專業廠商去幫你們評估
Skylar DavisLinda avatar
By Skylar DavisLinda
at 2019-09-09T00:55
其實我回覆的第一句話被ptt吃了,原本是說
內可以考慮用raidz1,6~12顆考慮用raidz2,12顆以上考
Aaliyah avatar
By Aaliyah
at 2019-09-10T00:49
慮用raidz3。
可是180顆只用raidz3真的夠嗎?我也不知道
Daph Bay avatar
By Daph Bay
at 2019-09-10T11:39
好像不能貼連結....reddit上面有討論,五顆以內可以考
James avatar
By James
at 2019-09-10T14:46
慮 raidz1
Poppy avatar
By Poppy
at 2019-09-10T21:30
好的,a大(更正),我再把高階Raid跟單一Raid組規模加入
跟Boss的討論裡。
George avatar
By George
at 2019-09-13T13:13
還有一點就是RAID並不是備份,如果資料真的重要還是要有備份
Joseph avatar
By Joseph
at 2019-09-14T07:23
商用幾乎不會有4TB×180顆的解。
Odelette avatar
By Odelette
at 2019-09-18T12:32
你是一次抽三顆還是一顆一顆換?
Ula avatar
By Ula
at 2019-09-23T06:15
最近一次ptt大爆炸也是raid rebuild時又壞了兩顆...
Ida avatar
By Ida
at 2019-09-25T05:16
你知道SATA有多容易壞嗎?Raid5壞一顆在rebuild時你的Raid沒
Hedy avatar
By Hedy
at 2019-09-30T03:22
有保護,所以建議raid5 9D(data)+1P(Parity)分成17個raid,
Ida avatar
By Ida
at 2019-10-01T12:59
商用的可以再將17個Raid加總起來,其他的做Spare
Sarah avatar
By Sarah
at 2019-10-06T02:15
當你越多D+1P,風險越高,所以180顆做一個Raid那根本是找死
Agatha avatar
By Agatha
at 2019-10-07T16:04
這麼多顆硬碟你需要的是商用的儲存設備,否則你可以常常要
掉資料,常常被老闆念到死,甚至工作不保>
Lucy avatar
By Lucy
at 2019-10-11T06:01
改成raid6做一個LUN 所有的LUN再去組LVM 記得留足夠的hot s
pare disk
Quanna avatar
By Quanna
at 2019-10-13T07:36
看你各個mount point資料總和大小是不是均勻的,我想180顆
Edwina avatar
By Edwina
at 2019-10-13T09:01
disk的架構,切開來的好處(可用性、分散存取效能)肯定是比較
好。那當然如果有特定mount point的資料是熱區就要另外規劃
Eartha avatar
By Eartha
at 2019-10-13T18:54
用那麼多硬碟,看不懂…
Liam avatar
By Liam
at 2019-10-17T06:23
你需求報出去 自然會有廠商幫你規劃好..
你要自己土炮一個接近200顆硬碟的storage ?
Edwina avatar
By Edwina
at 2019-10-19T15:10
樓上說的有理 但原PO連50到100萬都要考慮再三了 我看問
題不在誰來規劃了
Una avatar
By Una
at 2019-10-21T02:57
可是4T 200顆就80了耶 預算才50-100 ??
Rachel avatar
By Rachel
at 2019-10-25T06:26
那就要看你現在用的是什麼機器了 應該不只一台吧?
要自己來 看你要考慮安全性還是要容量優先
Enid avatar
By Enid
at 2019-10-28T23:36
看現在的用量有多少 成長率大概多少 然後下去算有多少
空間可以容錯 自己來真的很搞剛啦...
Sandy avatar
By Sandy
at 2019-10-29T04:50
現在很多分散式檔案系統可以選擇 可是一來是後續支援
Valerie avatar
By Valerie
at 2019-11-02T11:13
維護、一者是還要加強你的網路(也許不用?)
Damian avatar
By Damian
at 2019-11-04T20:38
哪天你火掉你老闆了 剩下的攤子誰來收?
John avatar
By John
at 2019-11-07T06:13
老實說 學校裡面因種種因素只能DIY 那就承受DIY的品質與風
險 很公平
Rae avatar
By Rae
at 2019-11-09T22:14
wiki:RAID -> 看看 RAID 50, RAID 60 那邊.
Jacob avatar
By Jacob
at 2019-11-13T12:17
180個HDs 作成一個 RAID5 而不是 RAID50 RAID60 真不可思議.
Frederic avatar
By Frederic
at 2019-11-18T05:11
因為raid卡吃raid50可能也是很貴吧?
Isabella avatar
By Isabella
at 2019-11-20T19:36
我覺得原PO應該也沒有用raid controller
Tracy avatar
By Tracy
at 2019-11-22T15:30
180顆........ 在懸崖邊表演走鋼絲?

rsync 如何略過目的端目錄不進行同步?

Necoo avatar
By Necoo
at 2019-08-15T16:11
各位先進 神人,大家好, 小弟目前在做rsync的設定時,碰上一個問題 想請教一下,我要如何使用rsync 進行同步時,忽略目的端的某個目錄或檔案呢? 比如說: A來源端:/root/sky/ rsync 同步至 B目的端:/root/sky/ 但是同步時,B目的端:and#39;/root/sk ...

新增的使用者使用shell的問題

Rae avatar
By Rae
at 2019-08-13T15:42
我在新增使用者後,使用su -切換過去 卻發現他的shell格式跟一般不一樣 一般shell會顯示目前使用者及現在位置 userathost:~$ 但是我新建的使用者開sell卻只有 $ 前面的資訊通通沒有,請問要怎麼做修改? 我是用debian10 ----- Sent from JPTT ...

nginx 配置問題

Caitlin avatar
By Caitlin
at 2019-08-12T22:08
小弟在配置 nginx 時遇到寫完 conf ,會有異常問題,不知有沒有人可以協助幫忙,問 題簡述大概是 我有 a、b domain conf ,各透過 proxy_pass 到後端兩台主機,奇怪的 是 webmail 打上兩個網址,會都導向同一個服務。 - ...

Cent Os 安裝問題

Wallis avatar
By Wallis
at 2019-08-11T03:35
大家好 最近把2400G汰換下來當備用機,想把 系統灌成CENT OS 在安裝的過程中,遇到畫面 黑頻的現象,只有使用base graphic的安裝方式 才有畫面,可是安裝完成以後進OS時還是屬於 黑屏狀態,所以想向大家請益是否遇到這種情 況,小的目前是菜雞 如有冒犯或重複發問 請見 諒。 謝謝 ...

請問有相容於 Gnome3 又好用的中文注音輸入法嗎?

Leila avatar
By Leila
at 2019-08-10T22:00
最一開始是使用新酷音中文輸入法,用起來沒什麼大問題,和 Gnome3 完美地配合, 選字又正確,不會選一堆奇奇怪怪的字出來,但他不能夠藉由方向鍵來選字, 後來看到有人推薦了 ibus-libzhuyin 輸入法,聽說這是目前 Fedora 預設的? 他多了方向鍵選字的功能,和 Gnome3 也是完美的契合,不 ...