百度:面對海量數(shù)據(jù)的綠巨人

 作者:阮曉東    40

  自行設計,打造綠色之路


  目前,百度已經(jīng)在多個領域展開了基于公共數(shù)據(jù)的搜索服務。2013年2月,國家藥監(jiān)局三大數(shù)據(jù)庫向百度開放,包括具有18萬余種國產(chǎn)和進口藥品信息的藥品數(shù)據(jù)庫,6000余種非處方藥(OTC)化學藥品說明書范本及中藥說明書范本的藥品說明書范本數(shù)據(jù)庫,以及經(jīng)過認證的可向個人售藥的網(wǎng)站的數(shù)據(jù)庫信息。


  2013年4月末,百度知道推出了知識搜索服務,針對相關領域的關鍵詞檢索提供滿足用戶需求的特型展示,目前已上線的有口碑搜索、醫(yī)療搜索、答案聚合及數(shù)據(jù)圖譜等功能,并同時覆蓋到PC端與無線端。


  在百度已相繼引入國家藥監(jiān)局、中國家電維修協(xié)會、中國航空協(xié)會、中國銀行業(yè)協(xié)會、北京市衛(wèi)生局等權威機構的核心數(shù)據(jù)后,2013年5月,全國組織機構代碼管理中心又和百度公司達成戰(zhàn)略合作,以便為社會提供安全、準確的搜索結果。網(wǎng)友在百度搜索“組織機構代碼查詢”可以進入專業(yè)核查工具,只要輸入組織機構名稱、代碼、登記證號中的任意一項,就可以了解機構類型、地址、有效期、頒發(fā)單位等重要信息,迅速判斷這家組織機構是否真實、可靠。


  那么,這些海量的數(shù)據(jù),在云時代的背景下,百度如何通過有效的組織管理以及在設計理念上來實現(xiàn)幾十座數(shù)據(jù)中心的節(jié)能呢?在走訪中記者逐漸了解到,百度除了采用一系列節(jié)能的方法和技術,比如優(yōu)化電源結構、引入變頻技術,優(yōu)化服務器的氣流式冷水機組及使用CFD軟件等方式來實現(xiàn)服務器技術的優(yōu)化外,更通過一系列定制化、高效的部件方面的自我的創(chuàng)新來建立中國最節(jié)能高效的云計算數(shù)據(jù)中心。


  自建綠色高效數(shù)據(jù)中心


  “數(shù)據(jù)中心是百度業(yè)務的載體,它支撐著海量數(shù)據(jù)存儲、云平臺和搜索社區(qū)等,所以百度更加關注建設云數(shù)據(jù)中心,用云的核心驅動力來支撐業(yè)務規(guī)模發(fā)展?!卑俣裙炯夹g委員會理事長陳尚義介紹說,“百度的單體十萬臺服務器的數(shù)據(jù)中心,PUE每降低0.1,一年就可為百度節(jié)省上千萬的成本,所以,打造自我的綠色高效數(shù)據(jù)中心,在大數(shù)據(jù)時代將能很好應對節(jié)能環(huán)保、低碳的要求。”


  目前,面對海量的大數(shù)據(jù),百度正在通過自建數(shù)據(jù)中心,開發(fā)了自己的大數(shù)據(jù)存儲系統(tǒng),并使用了多項新技術。目前,計劃投資47.08億元的百度云計算(陽泉)中心已于2012年8月奠基,該項目預計2015年完工。建成后的百度云計算(陽泉)中心數(shù)據(jù)存儲量將超過4000PB,可存儲的信息量相當于20多萬個中國國家圖書館的藏書總量。2013年4月15日,成都市高新區(qū)與百度云簽署協(xié)議,中國最大的云開發(fā)服務平臺——“成都百度云開發(fā)者技術中心”正式入駐成都高新區(qū)移動互聯(lián)網(wǎng)大廈。此外,南京、廣州、天津的百度云數(shù)據(jù)中心也都在建設之中。


  陳尚義介紹說,百度數(shù)據(jù)中心從設計之初就開始體現(xiàn)綠色節(jié)能的理念。在解決設備散熱問題中,百度數(shù)據(jù)中心采用集中散熱、集中供電、高效部件等方法來降低能耗;在解決服務器能耗問題中,采用SSD解決服務器的瓶頸,降低服務器數(shù)量等方式來節(jié)約服務器耗電量。此外,一些數(shù)據(jù)中心采取白天以商業(yè)業(yè)務為主、數(shù)據(jù)處理為輔,夜晚側重數(shù)據(jù)處理為主的原則,來很好分配大數(shù)據(jù)量的工作時間,進而實現(xiàn)了節(jié)能高效。


  除了這些技術,百度最讓人嘆服的還有數(shù)量眾多的“看家本領”,更顯示其“自制”的能力。


  能力1:自制固態(tài)硬盤(SSD)。據(jù)估計,百度的數(shù)據(jù)中心存儲了數(shù)百PB的數(shù)據(jù),其日常的數(shù)據(jù)處理能力達到數(shù)十個PB。為了解決海量數(shù)據(jù)實時存儲的巨大挑戰(zhàn),百度自行開發(fā)了SSD產(chǎn)品,其研發(fā)的SSD的性能比SATA SSD要好六倍,而且其成本只是它的10%。在南京的云計算數(shù)據(jù)中心也進行了大規(guī)模的行業(yè)內的固態(tài)硬盤(SSD)部署。


  能力2:自行設計10Gb TOR交換機。百度自2011年開始研究和開發(fā)TOR交換機的設計,并于2012年推出第一代10Gb的TOR交換機。通過使用自行設計的硬件和軟件,設計制造模塊,以及DAC(直接連接電纜),百度的10Gb TOR的成本只相當于同樣的1GB TOR商業(yè)交換機。目前百度的10Gb TOR交換機能承載超過5000臺的服務器,部署在其云計算數(shù)據(jù)中心里。


  能力3:定制機架服務器。百度正在與Facebook合作,促進和優(yōu)化開源的機架服務器的探索,這也是中國自主設計機架服務器的開源項目。定制的機架式服務器解決了百度許多問題,如傳統(tǒng)的主機托管數(shù)據(jù)中心空間和功率密度的限制,電纜的混亂和部署的效率低下,有助于提高智能化管理和資產(chǎn)精度。在南京的云計算數(shù)據(jù)中心,百度大規(guī)模部署了ARM服務器。據(jù)百度說,基于ARM的服務器使數(shù)據(jù)中心的總擁有成本(TCO)降低了25%,提高存儲密度70%。百度已經(jīng)獲得開發(fā)基于ARM的服務器的10項專利。ARM服務器的應用,使南京的云計算數(shù)據(jù)中心能夠降低服務器總體擁有成本的10%,業(yè)務高峰時運轉效率提高近10倍。


  如今,百度已經(jīng)成為中國最具價值的品牌之一,英國《金融時報》將百度列為“中國十大世界級品牌”。目前百度已經(jīng)面向開發(fā)者全面開放了包括云存儲、大數(shù)據(jù)智能和云計算在內的核心云能力,為開發(fā)者提供強大的技術運營支持與推廣變現(xiàn)保障。作為互聯(lián)網(wǎng)搜索的入口,百度承載著數(shù)億網(wǎng)民檢索需求,滿足海量計算的數(shù)據(jù)中心規(guī)模將日益龐大。百度從軟件架構、IT設備、數(shù)據(jù)管理效率等多方面入手,致力于綠色IT建設,將對產(chǎn)業(yè)鏈上下游的參與起到良好的示范和帶動作用。

阮曉東
 百度,面對,海量,數(shù)據(jù),巨人

擴展閱讀

系列專題:2009中國營銷  在即將過去的2008年,通脹壓力下的成本上升、人民幣升值、政策調整使得以生產(chǎn)為導向的中小型企業(yè)面臨越來越多的生存壓力。白酒業(yè),自然在其影響的行業(yè)之一?! τ谌珖拙?/p>

  作者:劉濤詳情


前言:現(xiàn)代醫(yī)療市場競爭激烈,民營醫(yī)院市場更是不容樂觀,民營醫(yī)院要想在競爭中取得優(yōu)勢,必須面向市場,積極開展市場營銷,從等市場到主動找市場,了解社會需求,采取有效的營銷策略,提高醫(yī)院的社會美譽度,擴大醫(yī)

  作者:胡一夫詳情


  江浙地區(qū)一批“小巨人”近年遭遇的成長乏力和重重困境正引起廣泛關注。這些“小巨人”大體包括兩種類型:一種是“小的多元化企業(yè)”,進入產(chǎn)業(yè)五花八門,在某一區(qū)域內農(nóng)工商貿(mào)無所不涉,核心主業(yè)卻難尋其跡。一種

  作者:郭劍詳情


 由“巨”到“強”的轉型,是中小企業(yè)成長過程中脫胎換骨的鳳凰涅槃式再生,是至為根本也至為艱難的革命性一躍  江浙地區(qū)一批“小巨人”近年遭遇的成長乏力和重重困境正引起廣泛關注。這些“小巨人”大體包括兩種

  作者:郭劍詳情


目前金融海嘯導致全球經(jīng)濟的重挫,使得太陽能光熱產(chǎn)業(yè)年的發(fā)展也蒙上一層陰影,作為行業(yè)的一分子,我建議太陽能行業(yè)的同仁要“微笑”地面對這場危機。 “微笑”的第一個含義,就是面對危機要充滿信心,信心比黃金

  作者:齊冰詳情


  互聯(lián)網(wǎng)經(jīng)歷了一對一的交流,一對多的交流,多對多的交流,隨著博客網(wǎng)絡社區(qū)和播客的快速發(fā)展使中國也快速進入了Web2.0時代。中國博客05年用戶達到600萬,06年達到17520萬,予以2007年達到

  作者:王穎詳情


版權聲明:

本網(wǎng)刊登/轉載的文章,僅代表作者個人或來源機構觀點,不代表本站立場,本網(wǎng)不對其真?zhèn)涡载撠煛?br /> 本網(wǎng)部分文章來源于其他媒體,本網(wǎng)轉載此文只是為 網(wǎng)友免費提供更多的知識或資訊,傳播管理/培訓經(jīng)驗,不是直接以贏利為目的,版權歸作者或來源機構所有。
如果您有任何版權方面問題或是本網(wǎng)相關內容侵犯了您的權益,請與我們聯(lián)系,我們核實后將進行整理。


人才招聘 免責聲明 常見問題 廣告服務 聯(lián)系方式 隱私保護 積分規(guī)則 關于我們 登陸幫助 友情鏈接
COPYRIGT @ 2001-2018 HTTP://musicmediasoft.com INC. ALL RIGHTS RESERVED. 管理資源網(wǎng) 版權所有