鄔賀銓：大數(shù)據(jù)時代的發(fā)展趨勢

2013-09-29 09:53:59 EP電力信息化網(wǎng)　點擊量：評論 (0)

以從大數(shù)據(jù)中挖掘大價值為主題的第二屆中國大數(shù)據(jù)應用論壇于2013年7月21日在北京大學英杰交流中心陽光大廳隆重舉辦。本次活動由北京大學信息化與信息管理研究中心和北京大學CIO班教務辦公室主辦，北達軟

因此干脆直接租用你的軟件，這是SaaS。比如說現(xiàn)在談大數(shù)據(jù)分析，哪個企業(yè)都希望大數(shù)據(jù)分析，但是每個企業(yè)去買這些數(shù)據(jù)分析軟件是很不劃算的，因此租用第三方的分析軟件可能是一個方向。當然更進一步的有Business，有能力的企業(yè)可以在上面更多的開發(fā)。所以云計算并不是為大數(shù)據(jù)而誕生的，但云計算正好適應了大數(shù)據(jù)的需要。

另外一點，網(wǎng)絡節(jié)點位置要從信源中心向能源中心擴展。我國有20個省市制定云計算規(guī)劃，大規(guī)模數(shù)據(jù)中心建設成為各地發(fā)展熱點，11個省市云計算投資均超過100億元。內蒙要建云計算中心、他說他那里有煤、能源，而且氣侯比較好;重慶市長說，別看我這里熱，但是長江水比較冷，可以拿來降溫，而且這里沒有地震，我這里要盡云計算中心。按照工信部等八部委2013年1月14日發(fā)布的《關于數(shù)據(jù)中心建設布局的指導意見》，中國的數(shù)據(jù)中心要考慮氣候環(huán)境、能源供應，建議我們國家的云計算中心向高緯度地區(qū)集中，也就是內蒙、西北這些地區(qū)。過去的數(shù)據(jù)中心放在上海、北京、廣州這些地方，而將來數(shù)據(jù)中心一半是云計算中心，而它們更多要放到內蒙、西北，也就是說網(wǎng)絡結點位置會從信源中心往能源中心拓展，實際上云計算會改變互聯(lián)網(wǎng)的流量和流向。

另外，由于數(shù)據(jù)量非常大，過去運營商并不是每個省線路都互相直聯(lián)的，往往通過北京互聯(lián)，有些通過上海、廣州?，F(xiàn)在中國電信ChinaNet網(wǎng)絡每個省之間都直聯(lián)了。為什么?因為數(shù)據(jù)量太大了，所以希望網(wǎng)絡要扁平化。過去我們都說什么東西都到IP層做交換，隨著數(shù)據(jù)發(fā)展以后我們希望的路由器容量會很大，一個純IP電的Tpbs的路由器，一個端口就一千瓦，功耗很大，如果光的類型的交換，一個端口才25瓦，而且大數(shù)據(jù)里面大量的數(shù)據(jù)是過路的，而不是落地的，因此現(xiàn)在改變了互聯(lián)網(wǎng)的格局，凡是能在光層上做的交換絕不在電層上做，凡是能在MPI(層上做的交換絕不在IP層上做。過去我們常說什么東西都在要IP上交換，現(xiàn)在IP要變成包裝，能不在IP上交換的絕不在IP上交換。你可以看到，這是大數(shù)據(jù)的發(fā)展。另外，過去的路由器本身具有轉發(fā)和控制功能，也有節(jié)點控制功能、業(yè)務控制功能，每個路由器都是獨立的，也是自我的，它根據(jù)來的數(shù)據(jù)來選路，但是這樣的方式很難適應大數(shù)據(jù)時空動態(tài)性，大數(shù)據(jù)產(chǎn)生的位置、發(fā)生時間可能是不均的，也不平衡，如果動態(tài)需求希望我們的網(wǎng)絡也是動態(tài)的，那么傳統(tǒng)路由器剛性的設計很難適應動態(tài)需求，因此現(xiàn)在提出SDN(軟件定義網(wǎng))，希望把路由器里頭操作系統(tǒng)提起來，然后把路由器控制集中，這樣造成網(wǎng)絡操作系統(tǒng)，而路由器就剩下傳輸與轉發(fā)功能，這是執(zhí)行機構，可以根據(jù)網(wǎng)絡需求來集中調用配置，可以使網(wǎng)絡變的更柔性化，這是軟件定義網(wǎng)，能實現(xiàn)轉發(fā)與控制分離。
大數(shù)據(jù)推動城域網(wǎng)體系的演變，早年我們都是大計算機連大服務器，后來常常很多時間提的是客戶服務器，計算機連到服務器。當一個熱門的節(jié)目所有終端都希望下載的時候，這個服務器就是瓶頸。因此就出來了P2P，也就是說，各個終端能力都很強，每個終端沒必要全部下載下來，每個終端只下載其中一部分，各個終端下載不同的部分然后相互交換，我們叫做Peer-to-Peer，現(xiàn)在很多發(fā)現(xiàn)這個體系架構也需要改變了，因為大數(shù)據(jù)的出現(xiàn)，一個終端到一個服務器之間很多數(shù)據(jù)不是一個服務器能裝得下的，當一個終端接入到一個服務器的時候，可能需要調用其他服務器存儲數(shù)據(jù)來支持，因此最近五年我們國家接入網(wǎng)流量帶寬增長了6倍，而城域網(wǎng)流量增長了22倍，有更大流量在服務器之間交換。也就是說，網(wǎng)絡的體系會從客戶服務器的垂直架構向服務器之間的水平架構優(yōu)化。大數(shù)據(jù)推動了城域網(wǎng)體系的演變。

另外，由于數(shù)據(jù)量很大，所以現(xiàn)在Google、雅虎、亞馬遜、騰訊、新浪、百度都紛紛的把它的數(shù)據(jù)通過CDN寫到不同地方。騰訊總部在深圳，可是它把很多服務器放在北京、廣州、上海等等，甚至分散到很多省，目的是縮短用戶接入到服務器的距離，所以內容分配網(wǎng)應用而生，最近發(fā)展得很快，內容分配網(wǎng)會對整個互聯(lián)網(wǎng)流量流向產(chǎn)生重大的影響。走了捷徑，那么省間長途流量就可以下來。所以內容分配網(wǎng)拉近了信源和用戶的距離。全球互聯(lián)網(wǎng)去