国产91免费_国产精品电影一区_日本s色大片在线观看_中文在线免费看视频

您現(xiàn)在的位置: 通信界 >> 數(shù)據(jù)通信 >> 技術正文  
 
集群系統(tǒng)中的自適應信息交換技術研究
[ 通信界 / 彭勁杰 / m.6611o.com / 2006/1/18 19:51:27 ]
 

中共湖南省委黨校湖南行政學院彭勁杰 (原名彭孟良)

  1引言

    通過高性能互連系統(tǒng)將多個CPU構成并行計算機集群系統(tǒng),是獲得高性能計算的有效途徑。為了提高互連系統(tǒng)的性能,人們從許多方面進行了大量研究,如互連硬件設備性能、并行系統(tǒng)的網(wǎng)絡拓撲結構和路由算法等等。由于硬件性能受限于當前的工藝水平,且網(wǎng)絡拓撲結構的研究非常成熟,路由算法就成了研究熱點。

    在路由的實現(xiàn)過程中,互連網(wǎng)絡所采用的信息交換技術決定了信息可以沿著路徑傳輸?shù)难訒r和帶寬。因此信息交換技術是反映互聯(lián)網(wǎng)性能的一個重要因素。最基本的信息交換技術有電路交換(CircuitSwitch)和報文交換(PacketSwitch)兩種,其他許多改進方法都是針對這兩種技術的性能改善方法,比如蟲孔交換(WormholeSwitch)是對報文交換中有的路徑上信息單元不足一個報文;虛跨步交換(Virtual Cut-through Switch)是鑒于電路交換與報文交換之間的技術。這些技術的改進是針對物理鏈路的要求而來的,而不是針對應用特點的延時與帶寬需求進行的。

    從應用的角度來看,一個集群系統(tǒng)上往往運行了多種應用程序。不同應用的數(shù)據(jù)有不同的特點,對信息交換的性能有不同的要求,比如有的要求是低延時,而有的要求高帶寬,這就要求有與之相適應的信息交換技術。電路交換與報文交換二者有不同的特點,任何一種方法都不能同時滿足所有應用。為此,需要研究與多種應用需求相適應的信息交換技術。

    為了提高信息交換對應用需求的適應性,文獻[2]提出了一種基于高性能輸入隊列的交換技術。該技術通過改進鏈路上設備的緩沖區(qū)來提高系統(tǒng)的交換性能,其優(yōu)點是能適應一定范圍內的信息提供高帶寬低延時的服務,其缺點是需要增設緩沖區(qū),對底層進行修改。但是不同應用的QoS標準不同,其方法只能針對應用的低延時或高帶寬的多種要求同時進行優(yōu)化。本文提出自適應信息交換技術的思想,是為了提高網(wǎng)絡的信息交換性能并且可以滿足不同應用的多種需求。

    2傳統(tǒng)的信息交換技術

    2.1電路交換

    在數(shù)據(jù)傳輸前要在源和目的之間首先建立一條物理路徑,然后在這條路徑上一次將數(shù)據(jù)傳送完,再釋放該物理路徑。

    其中物理路徑的建立是通過向網(wǎng)絡注入路由頭微片來實現(xiàn)的(這個路由頭微片包括目的地址和其他控制信息,路由探測頭向目的前進,在通過中間路由器傳輸?shù)耐瑫r保留物理鏈路。當探測頭到達目的時,就建立了一條完整的路徑,并向源結點返回應答)。路徑建立后,消息內容就可以以硬件路徑的整個帶寬傳送。

    電路交換的優(yōu)點是:①簡單,就類似于源與目的之間建立一條物理專線;②傳送帶寬高,因為其傳送可以占領整個帶寬性能。當應用中需要傳送的消息很長時(消息傳輸時間遠遠大于路徑建立時間),這種交換技術非常有效。

    電路交換的缺點是:①路徑建立延時很長。路徑的建立要求路徑的每個器件都空閑;②整個消息發(fā)送期間都要占領該物理路徑,有可能阻塞其他的消息,影響網(wǎng)絡的整體利用率。

    2.2報文交換

    針對電路交換要占用整個路徑的缺點,是將消息劃分成固定長度的許多報文,每個報文從源結點到目的結點獨立路由,報文在向下一個結點轉發(fā)之前完全緩沖在每個中間結點,不需要占領獨立的物理通道。為了便于控制,每個報文的前幾個字節(jié)包含路由和控制信息,稱作報文頭。中間路由器析取頭信息,確定報文轉發(fā)的輸出鏈路。

    報文交換的優(yōu)點是:①不需要建立物理路徑,消息傳送的延時小,對消息較短和延時受限的應用來說很有意義;②在報文交換中,只要某段預留路徑空閑有效的時間段,有數(shù)據(jù)需要傳輸時通信鏈路就可以充分利用,器件的并行性較好,網(wǎng)絡的利用率高。

    報文交換的缺點是:①消息需要進行分片,會帶來額外開銷;②由于每個消息片獨立路由,一條消息的多個報文會出現(xiàn)亂序等現(xiàn)象,整個傳送的完成需要等待傳送最慢的消息片;③消息傳送需要有超時機制對是否傳送完成進行判斷,和報文重復丟棄等復雜情況進行管理。

    3.自適應信息交換

    不同的應用對消息交換有不同的要求。比如在集群系統(tǒng)上運行科學計算中的障礙同步操作(Barrie),消息較短,操作的延時直接決定了多機并發(fā)工作的性能。這種情況就是延時受限。而對于數(shù)據(jù)挖掘應用,數(shù)據(jù)庫服務器需要將某一維的所有數(shù)據(jù)進行傳送,數(shù)據(jù)量大,傳送的及時完成對應用服務性能有直接影響。這種需要高帶寬的應用就是帶寬受限。一個集群系統(tǒng)同時運行這些應用,就要求網(wǎng)絡交換技術具有一定的適應性。

    3.1兩種交換方式的互補性

    經(jīng)分析,電路交換的優(yōu)點是帶寬高,但是建立鏈路時間太長時,同樣會影響數(shù)據(jù)傳遞的效果;在報文交換機制中,每個片會帶來額外的數(shù)據(jù)包處理開銷等,如果這些開銷太大,同樣會引起系統(tǒng)的整體性能。二者結合起來,則有較理想的效果。

    電路交換與報文交換相互補的方法是指對于一個消息,如果能很快建立一條物理鏈路,則可以選擇進行電路交換;如果在鏈路上的某幾個結點之間能很快建立一條物理鏈路,則這些結點間能進行電路交換,而路徑上的其余結點間采用報文交換。

    互補交換是自適應交換中的一種交換方式。在互補交換中,只需要少量的鏈路建立時間。

    3.2自適應信息交換思想

    所謂自適應信息交換技術就是根據(jù)實際應用的需要,自適應地選擇數(shù)據(jù)交換方法,如算法一所示。算法一中,對有延時要求的短消息,自適應信息交換會選擇報文交換機制進行數(shù)據(jù)傳遞;而對有帶寬要求的長消息且比較易于建立鏈路,自適應信息交換會選擇電路交換;對鏈路建立時間很長的,自適應信息交換會選擇電路交換與報文交換互補的方式。

    輸入:目的結點T、源結點S、數(shù)據(jù)信息M、網(wǎng)絡拓撲結構、各結點間鏈路建立的統(tǒng)計時間信息交換的延時

    輸出:信息交換方法

    算法開始:如果M短且有 要求延時短, 則輸出 報文交換 如果 T與S間的鏈路建立時間 ≤ 閾值, 則 輸出 電路交換 輸出 互補交換

    算法結束

    算法一信息交換機制的選擇算法

    在算法一中,需要直到各結點之間路由鏈路的建立時間統(tǒng)計情況。這些統(tǒng)計情況是一些歷史信息,并且根據(jù)每次鏈路的建立情況進行修改。

    3.3自適應信息交換機制

    分別設置數(shù)據(jù)信息量的信息交換下閥值x1和上閥值x2;

    分別設置數(shù)據(jù)信息量的信息交換下閥值y1和上閥值y2。

    設置數(shù)據(jù)記憶長度N。

    近期歷史記錄中采用電路交換的N個數(shù)據(jù)信息,記為n1i(i=1,2,…,N),其信息量大小為s1i,完成信息交換的延時為t1i。

    近期歷史記錄中提取采用電路交換的N個數(shù)據(jù)信息,記為n2j(j=1,2,…,N),其信息量大小為s2j,完成信息交換的延時為t2j。

    具體算法實現(xiàn)方式如下:

    如果數(shù)據(jù)信息位于灰色區(qū)域,采用電路交換;

    否則,

    如果數(shù)據(jù)信息位于綠色區(qū)域,采用報文交換

    否則,

    如果可接受延時/數(shù)據(jù)信息量,采用報文交換

    否則,采用電路交換

    具體算法計算公式:(略)

    4結束語

    針對當今信息交換不能滿足集群中多種應用需求,本文研究提出了自適應交換的思想。在研究中提出了互補交換的思想,并給出了自適應交換選擇的算法。今后的工作需要將該思想進行工程實現(xiàn)和驗證。

 

 

作者:彭勁杰 合作媒體:通信市場 編輯:顧北

 

 

 
 熱點技術
普通技術 “5G”,真的來了!牛在哪里?
普通技術 5G,是偽命題嗎?
普通技術 云視頻會議關鍵技術淺析
普通技術 運營商語音能力開放集中管理方案分析
普通技術 5G網(wǎng)絡商用需要“無憂”心
普通技術 面向5G應運而生的邊緣計算
普通技術 簡析5G時代四大關鍵趨勢
普通技術 國家網(wǎng)信辦就《數(shù)據(jù)安全管理辦法》公開征求意見
普通技術 《車聯(lián)網(wǎng)(智能網(wǎng)聯(lián)汽車)直連通信使用5905-5925MHz頻段管理規(guī)定(
普通技術 中興通訊混合云解決方案,滿足5G多元業(yè)務需求
普通技術 大規(guī)模MIMO將帶來更多無線信道,但也使無線信道易受攻擊
普通技術 蜂窩車聯(lián)網(wǎng)的標準及關鍵技術及網(wǎng)絡架構的研究
普通技術 4G與5G融合組網(wǎng)及互操作技術研究
普通技術 5G中CU-DU架構、設備實現(xiàn)及應用探討
普通技術 無源光網(wǎng)絡承載5G前傳信號可行性的研究概述
普通技術 面向5G中傳和回傳網(wǎng)絡承載解決方案
普通技術 數(shù)據(jù)中心布線系統(tǒng)可靠性探討
普通技術 家庭互聯(lián)網(wǎng)終端價值研究
普通技術 鎏信科技CEO劉舟:從連接層構建IoT云生態(tài),聚焦CMP是關鍵
普通技術 SCEF引入需求分析及部署應用
  版權與免責聲明: ① 凡本網(wǎng)注明“合作媒體:通信界”的所有作品,版權均屬于通信界,未經(jīng)本網(wǎng)授權不得轉載、摘編或利用其它方式使用。已經(jīng)本網(wǎng)授權使用作品的,應在授權范圍內使用,并注明“來源:通信界”。違反上述聲明者,本網(wǎng)將追究其相關法律責任。 ② 凡本網(wǎng)注明“合作媒體:XXX(非通信界)”的作品,均轉載自其它媒體,轉載目的在于傳遞更多信息,并不代表本網(wǎng)贊同其觀點和對其真實性負責。 ③ 如因作品內容、版權和其它問題需要同本網(wǎng)聯(lián)系的,請在一月內進行。
通信視界
華為余承東:Mate30總體銷量將會超過兩千萬部
趙隨意:媒體融合需積極求變
普通對話 苗圩:建設新一代信息基礎設施 加快制造業(yè)數(shù)字
普通對話 華為余承東:Mate30總體銷量將會超過兩千萬部
普通對話 趙隨意:媒體融合需積極求變
普通對話 韋樂平:5G給光纖、光模塊、WDM光器件帶來新機
普通對話 安筱鵬:工業(yè)互聯(lián)網(wǎng)——通向知識分工2.0之路
普通對話 庫克:蘋果不是壟斷者
普通對話 華為何剛:挑戰(zhàn)越大,成就越大
普通對話 華為董事長梁華:盡管遇到外部壓力,5G在商業(yè)
普通對話 網(wǎng)易董事局主席丁磊:中國正在引領全球消費趨
普通對話 李彥宏:無人乘用車時代即將到來 智能交通前景
普通對話 中國聯(lián)通研究院院長張云勇:雙輪驅動下,工業(yè)
普通對話 “段子手”楊元慶:人工智能金句頻出,他能否
普通對話 高通任命克里斯蒂安諾·阿蒙為公司總裁
普通對話 保利威視謝曉昉:深耕視頻技術 助力在線教育
普通對話 九州云副總裁李開:幫助客戶構建自己的云平臺
通信前瞻
楊元慶:中國制造高質量發(fā)展的未來是智能制造
對話亞信科技CTO歐陽曄博士:甘為橋梁,攜"電
普通對話 楊元慶:中國制造高質量發(fā)展的未來是智能制造
普通對話 對話亞信科技CTO歐陽曄博士:甘為橋梁,攜"電
普通對話 對話倪光南:“中國芯”突圍要發(fā)揮綜合優(yōu)勢
普通對話 黃宇紅:5G給運營商帶來新價值
普通對話 雷軍:小米所有OLED屏幕手機均已支持息屏顯示
普通對話 馬云:我挑戰(zhàn)失敗心服口服,他們才是雙11背后
普通對話 2018年大數(shù)據(jù)產(chǎn)業(yè)發(fā)展試點示范項目名單出爐 2
普通對話 陳志剛:提速又降費,中國移動的兩面精彩
普通對話 專訪華為終端何剛:第三代nova已成為爭奪全球
普通對話 中國普天陶雄強:物聯(lián)網(wǎng)等新經(jīng)濟是最大機遇
普通對話 人人車李健:今年發(fā)力金融 拓展汽車后市場
普通對話 華為萬飚:三代出貴族,PC產(chǎn)品已走在正確道路
普通對話 共享退潮單車入冬 智享單車卻走向盈利
普通對話 Achronix發(fā)布新品單元塊 推動eFPGA升級
普通對話 金柚網(wǎng)COO邱燕:天吳系統(tǒng)2.0真正形成了社保管