HPC的 I/O drawer 通常是用來做什麼的? - Linux

Suhail Hany avatar
By Suhail Hany
at 2016-11-09T08:37

Table of Contents



_
我不是HPC專家,所以我只能提供我不負責任的猜測..

supercomputer裏會把純計算跟I/O分開,提高效率

計算的node單純負責計算,當遇到需要I/O時,會把I/O的task丟給I/O node

所以我猜IO drawer的computing card是用來處理硬碟I/O相關的task

而不是用來進行主要的計算task

譬如這個訓練課程的投影片的第10及18頁

http://0rz.tw/nXm3G

可以看到computing node, I/O forwarding node, storage node是分開的

然後我猜PCIe expansion slot可以用來插網絡介面,

這樣猜是因爲不同的interconnection pattern會用到不同數量的網路界面

至於我這些猜測可信度有多高我也不知道,因爲我只是單純的使用者

對我來說電腦能用,程式能在deadline前跑出結果就滿足了

※ 引述《vic750314 (都一人)》之銘言:
: 小弟最近在看IBM blue gene/Q的硬體資料,
: 發現有個蠢問題想請問一下。
: HPC每個機櫃(Rack)除了各種多核心處理器和內存記憶體組成的計算節點(compute node)
: ;
: 計算節點會有網路連結處理器,
: 並用各種不同拓撲結構連結節點;
: 然後再搭配空氣冷卻、水冷系統。
: 機櫃中除了以上所說的,
: 還會有一組IO drawer,
: 以IBM為例,
: 每個IO drawer搭配 8 Computer cards、
: 8 PCIe expansion slot。
: 通常這個IO drawer在HPC裡可用來做什麼呢?
: 我能理解成如個人PC的PCIe slot吧?
: 可是HPC如果要增加計算速度或是增加容量不都是再增加計算節點嗎?
: 不知道這個問題能不能在這發問,
: 因為是硬體問題...
: 如有打擾小弟先說聲抱歉,
: 謝謝。

--
Tags: Linux

All Comments

Tom avatar
By Tom
at 2016-11-10T01:04
謝謝大大回覆,我覺得你推測的沒錯。I/O node有配八組c
omputer card,如果之間只有bridge接,傳輸速度是不夠
的。最近看了一些現行server board,很多除了內建1G, 1
0G, 100G LAN,還會有Infiniband card(約20G)。過沒多
久甚至會有CPU長出金手指,然後金手指直接連infiniband
card,直接將計算結果傳出去的板子出現。

Mac還是Linux?

Margaret avatar
By Margaret
at 2016-11-08T22:43
看到 Facebook 上有人分享此文章,故貼來供各位參考 Apple’s great GPL purge http://meta.ath0.com/2012/02/05/apples-great-gpl-purge/ 雖然 Linux kernel 本身還是 GPL v2 授權 但圍繞在 kernel ...

花魁異色錧怎麼用pcmanx@linux ssh 連線

Regina avatar
By Regina
at 2016-11-08T17:49
※ [本文轉錄自 ask 看板 #1O8Pzghu ] 作者: newwords (bombastic) 看板: ask 標題: [請問] 花魁異色錧怎麼用pcmanxatlinux ssh 連線 時間: Tue Nov 8 17:48:24 2016 google了 libido ssh 22 lin ...

Samba分享至windows server網域

Mason avatar
By Mason
at 2016-11-08T11:54
想請問各位,有人曾在公司的windows server網域下開啟samba檔案分享成功嗎? 我現在測試在windows底下看得到資料夾,也可以讀出但是在寫入的時候會發生存取被拒 在windows底下我也加了帳號 [myshare] path = /home/ubuntu-server public = yes ...

RTL8139網卡開機一陣會變慢

Rae avatar
By Rae
at 2016-11-08T11:13
系統是debian+cinema 除了主機版上的內建網卡之外,又插了一張pci的rt8139網卡 我本來是用kernel自帶的驅動,結果速度超慢,只有1、200kb/s 後來去github找到別人寫的驅動,抓下來自己編之後,開機有跑到滿速 但過一陣子又變成1、200kb/s的龜速... 有人知道是什麼原因嗎? ...

Mac還是Linux?

Faithe avatar
By Faithe
at 2016-11-07T22:58
※ 引述《jnana0812 (Dvorak大法好)》之銘言: : 情境: : Java Web Developer : 非本科背景,但對電腦作業系統有熱情,所以花不少業餘時間在學習和使用 Linux : 曾經在工作上短暫的使用 Linux 做開發,但因為最近案子的公司內網綁 ie , : 所以並沒有 ...