omniture

六年親歷,見證中國大數(shù)據(jù)技術(shù)與應(yīng)用時代的到來

2013-10-08 16:40

從科學(xué)研究到技術(shù)分析再到產(chǎn)業(yè)變革,一個大規(guī)模生產(chǎn)、采集、存儲、計算、分析,并提供新商業(yè)價值的大數(shù)據(jù)時代已然開啟!由中國計算機協(xié)會(CCF)主辦,CCF大數(shù)據(jù)專家委員會協(xié)辦,中科院計算所與CSDN共同承辦的國內(nèi)最具影響、規(guī)模最大的大數(shù)據(jù)領(lǐng)域盛會——第七屆中國大數(shù)據(jù)技術(shù)大會(Big Data Technology Conference 2013,BDTC 2013)將于2013年12月5-6日在北京世紀(jì)金源大酒店舉行。

從2008年至今,六年的時光,伴隨技術(shù)大會的發(fā)展,我們親歷和見證了中國大數(shù)據(jù)技術(shù)與應(yīng)用時代的一步步到來!

回想2008年11月,寒風(fēng)凜冽阻擋不了60余位技術(shù)愛好者對“Hadoop in China第一次會議”的熱情。在國家863“中國國家網(wǎng)格軟件研究與開發(fā)”課題的支持下,F(xiàn)acebook,Yahoo!,Baidu,MySpace,Alibaba,F(xiàn)rance Stremezzo,Nortel等企業(yè)的科研人員和中科院計算所、北京航空航天大學(xué)的師生們齊聚在中科院計算所,一場關(guān)于“Hadoop在實際使用中的經(jīng)驗以及心得”掀起了大數(shù)據(jù)技術(shù)應(yīng)用的神秘面紗!

2009年5月,一個草長鶯飛,碧水如藍的黃金季節(jié),“Hadoop in China第二次會議”如期舉辦。在中科院高能物理研究所,參會人數(shù)猛增一倍,近150位參會者全程參加了討論,并對沙龍的會議形式提出很多寶貴的建設(shè)意見,為Hadoop技術(shù)沙龍(HaCS)以及Hadooper.cn開放非營利組織(NPO)打下了活躍的用戶基礎(chǔ)。

2009年11月,Hadoop技術(shù),尤其是HDFS分布式文件系統(tǒng)和MapReduce計算框架在互聯(lián)網(wǎng)服務(wù)領(lǐng)域得以廣泛的應(yīng)用,并得到研究界的普遍關(guān)注。如Yahoo!使用4000節(jié)點的機群運行Hadoop,支持廣告系統(tǒng)和Web搜索的研究;Facebook使用600節(jié)點的機群運行Hadoop,存儲內(nèi)部日志數(shù)據(jù),支持其上的數(shù)據(jù)分析和機器學(xué)習(xí);百度用Hadoop處理每周200TB的數(shù)據(jù),進行搜索日志分析和網(wǎng)頁數(shù)據(jù)挖掘工作。技術(shù)圈需要一個更大的平臺來交流和分享,“Hadoop in China 2009”(Hadoop中國2009云計算大會)應(yīng)聲而來。

2011年12月,發(fā)揚開源精神,聯(lián)合國內(nèi)外Hadoop及云計算技術(shù)應(yīng)用的成功企業(yè),引入國際研究界對于云計算及DISC(Data Intensive SuperComputing)研究方向的學(xué)術(shù)觀點,通過技術(shù)應(yīng)用和科學(xué)研究雙重視角審視云計算技術(shù)及Hadoop開源生態(tài)系統(tǒng)的現(xiàn)狀和發(fā)展趨勢,促進Hadoop及云計算開源生態(tài)系統(tǒng)發(fā)展,成為“Hadoop in China 2011”(Hadoop中國2011云計算大會)的辦會宗旨。Lucene、Nutch、Hadoop等開源軟件創(chuàng)始人、Apache軟件基金會主席兼Apache Hadoop項目負責(zé)人Doug Cutting,Condor創(chuàng)始人、University of Wisconsin–Madison的Miron Livny教授, Ohio State University計算機系主任、Robert M. Chritchfield講席教授張曉東,以及來自Google、Facebook、Yahoo!、eBay、中移動、華為、百度、騰訊、EMC等國內(nèi)外著名互聯(lián)網(wǎng)公司和IT企業(yè)的資深技術(shù)與研究人員到場演講并進行了深入交流,生態(tài)系統(tǒng)日益壯大。

2012年11月,秉承開源與分享的精神,順應(yīng)云計算與大數(shù)據(jù)發(fā)展趨勢,融合CSDN大數(shù)據(jù)技術(shù)大會,“Hadoop in China 2012”再上一個新臺階,更名為“Hadoop與大數(shù)據(jù)技術(shù)大會”(Hadoop&BigData Technology Conference 2012,HBTC 2012),由中國計算機學(xué)會(CCF)主辦,CCF大數(shù)據(jù)專家委員會協(xié)辦,CSDN承辦。以“大數(shù)據(jù)共享與開放技術(shù)”為主題,加入更多互動因素,HBTC 2012共設(shè)置五大論壇:“Hadoop生態(tài)系統(tǒng)”、“大數(shù)據(jù)行業(yè)應(yīng)用”、“大數(shù)據(jù)共享平臺與應(yīng)用”、“NoSQL與NewSQL”以及“大數(shù)據(jù)的技術(shù)挑戰(zhàn)與發(fā)展趨勢”。Hortonworks的CTO Eric Baldeschwieler、Apache HBase的PMC32名成員之一、MTS 2 at EBay的Ted Yu、雅虎北京全球研發(fā)中心資深研發(fā)總監(jiān)George Chu、MemSQL CTO&聯(lián)合創(chuàng)始人Nikita Shamgunov,Gartner公司數(shù)據(jù)中心研究部首席分析師張瑾等數(shù)十位重磅講師,激揚技術(shù)與趨勢;IBM、英特爾、Teradata、VMware、ebay、騰訊、淘寶、阿里巴巴、中國移動研究院、華為、奇虎360、網(wǎng)易等國內(nèi)外著名互聯(lián)網(wǎng)公司和IT企業(yè)的學(xué)者和資深開發(fā)人員聚焦應(yīng)用和實踐,共同為1000多名來自全國各地各行業(yè)的高水平開發(fā)者和技術(shù)管理者呈獻了一場技術(shù)盛宴。大數(shù)據(jù)技術(shù)真正走下了神壇,在傳統(tǒng)行業(yè)中扎根發(fā)芽。

中國大數(shù)據(jù)技術(shù)大會走向新階段

步入2013年,大數(shù)據(jù)應(yīng)用帶來令人矚目的成績,不僅國內(nèi)外的產(chǎn)業(yè)界與科技界,還有各國政府部門都在積極布局、制定戰(zhàn)略規(guī)劃。為了更好地迎接大數(shù)據(jù)時代的到來,并更加明確今后大會的發(fā)展方向,今年大會正式更名為中國大數(shù)據(jù)技術(shù)大會(Big Data Technology Conference,BDTC)”,主題是:“應(yīng)用驅(qū)動的架構(gòu)與技術(shù)。

大數(shù)據(jù)的內(nèi)涵應(yīng)是數(shù)據(jù)的資產(chǎn)化和服務(wù)化,而挖掘數(shù)據(jù)的內(nèi)在價值是研究大數(shù)據(jù)技術(shù)的最終目標(biāo)。在應(yīng)用數(shù)據(jù)快速增長的背景下,為了降低成本獲得更好的能效,越來越趨向?qū)S没南到y(tǒng)架構(gòu)和數(shù)據(jù)處理技術(shù)逐漸擺脫傳統(tǒng)的通用技術(shù)體系。如何解決“通用”和“專用”體系和技術(shù)的取舍,以及如何解決數(shù)據(jù)資產(chǎn)化和價值挖掘問題,將是今年大會的重點主題。

中國大數(shù)據(jù)技術(shù)大會(Big Data Technology Conference,BDTC)”大會將設(shè)立“大數(shù)據(jù)架構(gòu)與系統(tǒng)”、“大數(shù)據(jù)技術(shù)”、“大數(shù)據(jù)應(yīng)用”、“大數(shù)據(jù)的研發(fā)趨勢”,“大數(shù)據(jù)基準(zhǔn)測試(Benchmark)”,以及“智能交通與大數(shù)據(jù)” 六個分論壇。擬邀請近百位國內(nèi)外頂級的大數(shù)據(jù)學(xué)術(shù)界專家和業(yè)界技術(shù)領(lǐng)袖坐而論道,內(nèi)容涵蓋數(shù)據(jù)獲取與清理、傳輸、存儲、計算、挖掘、展現(xiàn)、開發(fā)平臺與應(yīng)用市場等方面,覆蓋了數(shù)據(jù)生產(chǎn)的全生命周期。除了Hadoop 版本2.0系統(tǒng)YARN,以及Spark等新型系統(tǒng)架構(gòu)介紹外,還將探討流式計算(Storm,Samza,Puma,S4等)、實時計算(Dremel,Impala,Drill)、圖計算(Pregel,Hama,Graphlab)、NoSQL、NewSQL和BigSQL等的最新進展。預(yù)計參會的專業(yè)人士將超過1500人,大會將通過主題演講、專題論壇、行業(yè)峰會、主題展覽等形式為與會專家代表提供交流互動、技術(shù)分享的平臺。

我們期望本次大會能夠成為大數(shù)據(jù)技術(shù)與應(yīng)用深度結(jié)合的新起點,成為產(chǎn)業(yè)界、科技界與政府部門密切合作的新平臺,最終為推動我國大數(shù)據(jù)的產(chǎn)學(xué)研用做出重大貢獻。

消息來源:CSDN