大數(shù)據(jù)很火，從今天開幕的英特爾年度盛會IDF上就能看出端倪。
與往年一樣，重磅主題演講人之一，英特爾高級副總裁兼數(shù)據(jù)中心及互聯(lián)系統(tǒng)事業(yè)部總經(jīng)理柏安娜，在介紹英特爾數(shù)據(jù)中心戰(zhàn)略時特別強調(diào)，英特爾將持續(xù)投資Hadoop，為開源社區(qū)提供代碼，面向至強優(yōu)化發(fā)行，提供硬件增強的壓縮功能。
據(jù)她介紹，早期成果已經(jīng)在中國有客戶部署Hadoop，如中國移動和中國聯(lián)通等運營商，應(yīng)對3G甚至4G系統(tǒng)啟用之后呼叫數(shù)據(jù)大幅增長導(dǎo)致傳統(tǒng)計費系統(tǒng)出現(xiàn)的難題。
“執(zhí)行Hadoop的方案背后離不開存儲設(shè)備的支持，必須有很高的性能和效率。”在中國移動的案例中，最大挑戰(zhàn)是提供實時呼叫數(shù)據(jù)記錄，每天實時檢索30天的記錄，每秒生成30萬條記錄，每秒35MB，每月計費數(shù)據(jù)達到90TB。
她提到了數(shù)據(jù)中心在交付實時信息和服務(wù)的個人計算體驗中所扮演的重要角色，以及英特爾在提供數(shù)據(jù)分析所需要的硬件及軟件、提高智能設(shè)備和數(shù)據(jù)中心基礎(chǔ)設(shè)施功能上所邁出的創(chuàng)新步伐。
隨后，英特爾副總裁兼平臺事業(yè)部總經(jīng)理Jason Waxman在演講中，介紹數(shù)據(jù)分析支持浙江智能電網(wǎng)的案例，最大挑戰(zhàn)是提高電網(wǎng)效率，內(nèi)存數(shù)據(jù)庫要支持100TB和100萬個并發(fā)請求，傳感器更是多達1億個以上，最總不僅決策速度提高了60倍，而且減少了電力浪費和碳排放。
2013年底之前英特爾加速擴展基于22納米制程工藝的數(shù)據(jù)中心處理器產(chǎn)品線計劃，支持擁有更高成本效益和更高能效的數(shù)據(jù)中心基礎(chǔ)設(shè)施。在數(shù)據(jù)中心產(chǎn)品組合中，面向微型服務(wù)器的英特爾凌動S1200處理器發(fā)布4個月后，全新專為存儲設(shè)備定制的英特爾凌動S12x9處理器也隨之亮相
談到所謂的數(shù)據(jù)中心機架“重塑”，目前騰訊和百度都十分關(guān)注提高機架密度和降低運營成本。在數(shù)據(jù)中心內(nèi)機架方面，可以將散熱和供電等系統(tǒng)進行整合，甚至未來能夠把存儲和計算等核心資源聚合到一起，提高效能和降低成本。
基于這個設(shè)想，騰訊、阿里巴巴、百度和中國電信發(fā)起了名為“天蝎”（Scorpio）項目，英特爾擔(dān)任技術(shù)顧問。整機柜的理念把服務(wù)器的功能放入機架中，例如把風(fēng)扇從機柜中移走，做成風(fēng)扇墻提高效率和加強散熱，通過重新設(shè)計機架機械尺寸整個機架密度提升一倍甚至更高，從進一步推動標(biāo)準(zhǔn)化。
為什么在數(shù)據(jù)中心機架重塑這個項目上互聯(lián)網(wǎng)公司和運營商走在了前面？天蝎項目輪席主席Eric Chen解釋說，之前廠商各自有不同的標(biāo)準(zhǔn)，用戶之間沒有合作，所以提出的需求不同，不僅有多套整機柜，而且國外通用產(chǎn)品無法拿來直接運行。
正式啟動天蝎項目之后，廠商和運營商整合各自需求，開發(fā)一套通用產(chǎn)品。“2012年是天蝎的元年。去年底，百度采用200個整機柜，天蝎技術(shù)每年節(jié)省4200萬運營費用。今年和明年將有更多整機貴落地。未來的天蝎2.0將充分利用風(fēng)火水電，從服務(wù)器轉(zhuǎn)移到數(shù)據(jù)中心機架，這個高級階段中解耦（Disaggregation）是關(guān)鍵技術(shù)。”
他表示：“隨著整機柜成為主流技術(shù)，如Facebook OCP的OpenRack項目，我們非常愿意和Facebook一起合作推動標(biāo)準(zhǔn)化。”
在下午的IDF 2013大數(shù)據(jù)專場中，記者則更為詳盡地了解到與上午主題演講相關(guān)的大數(shù)據(jù)一體機和Hadoop的信息。
在英特爾大數(shù)據(jù)一體機方面，參考設(shè)計主要針對智慧城市、智能交通、電信、金融和醫(yī)療等目標(biāo)市場，為渠道和本地OEM提供一體化的方案，包括DCSG/PEG、DSD、SSD、NSG和ISG在內(nèi)的多個英特爾部門參與，負(fù)責(zé)服務(wù)器、一體化集成、Hadoop發(fā)行版、優(yōu)化、固態(tài)盤、前端和邊緣服務(wù)器接入
下午的會場還同時發(fā)布了最新的Hadoop發(fā)行版2.3版本。演講人特別介紹了新版本在處理非結(jié)構(gòu)化數(shù)據(jù)方面的兩個應(yīng)用實例。其一，某市交通管理在線應(yīng)用中，需要實時存儲和獲取路口的實時交通狀況圖片；其二，某銀行存儲大量交易記錄備注或交易證據(jù)掃描照片，并允許柜員及客戶在線查詢這些記錄
