首頁  ?  科學  ?  科學探索

求是:大數據時代的機遇與挑戰

求是:大數據時代的機遇與挑戰

2013-02-16 16:59:14

  在農業領域,硅谷有個氣候公司,從美國氣象局等數據庫中獲得幾十年的天氣數據,將各地降雨、氣溫、土壤狀況與歷年農作物產量的相關度做成精密圖表,預測農場來年產量,向農戶出售個性化保險。在商業領域,沃爾瑪公司通過分析銷售數據,了解顧客購物習慣,得出適合搭配在一起出售的商品,還可從中細分顧客群體,提供個性化服務。在金融領域,華爾街“德溫特資本市場”公司分析3.4億微博賬戶留言,判斷民眾情緒,依據人們高興時買股票、焦慮時拋售股票的規律,決定公司股票的買入或賣出。阿里公司根據在淘寶網上中小企業的交易狀況篩選出財務健康和講究誠信的企業,對他們發放無需擔保的貸款。目前已放貸300多億元,壞賬率僅0.3%。

  在醫療保健領域,“谷歌流感趨勢”項目依據網民搜索內容分析全球范圍內流感等病疫傳播狀況,與美國疾病控制和預防中心提供的報告對比,追蹤疾病的精確率達到97%。社交網絡為許多慢性病患者提供臨床癥狀交流和診治經驗分享平臺,醫生借此可獲得在醫院通常得不到的臨床效果統計數據?;趯θ梭w基因的大數據分析,可以實現對癥下藥的個性化治療。在社會安全管理領域,通過對手機數據的挖掘,可以分析實時動態的流動人口來源、出行,實時交通客流信息及擁堵情況。利用短信、微博、微信和搜索引擎,可以收集熱點事件,挖掘輿情,還可以追蹤造謠信息的源頭。美國麻省理工學院通過對十萬多人手機的通話、短信和空間位置等信息進行處理,提取人們行為的時空規律性,進行犯罪預測。在科學研究領域,基于密集數據分析的科學發現成為繼實驗科學、理論科學和計算科學之后的第四個范例,基于大數據分析的材料基因組學和合成生物學等正在興起。

  麥肯錫公司2011年報告推測,如果把大數據用于美國的醫療保健,一年產生潛在價值3000億美元,用于歐洲的公共管理可獲得年度潛在價值2500億歐元;服務提供商利用個人位置數據可獲得潛在的消費者年度盈余6000億美元;利用大數據分析,零售商可增加運營利潤60%,制造業設備裝配成本會減少50%。

  大數據技術的挑戰和啟示

  目前,大數據技術的運用仍存在一些困難與挑戰,體現在大數據挖掘的四個環節中。首先在數據收集方面。要對來自網絡包括物聯網和機構信息系統的數據附上時空標志,去偽存真,盡可能收集異源甚至是異構的數據,必要時還可與歷史數據對照,多角度驗證數據的全面性和可信性。其次是數據存儲。要達到低成本、低能耗、高可靠性目標,通常要用到冗余配置、分布化和云計算技術,在存儲時要按照一定規則對數據進行分類,通過過濾和去重,減少存儲量,同時加入便于日后檢索的標簽。第三是數據處理。有些行業的數據涉及上百個參數,其復雜性不僅體現在數據樣本本身,更體現在多源異構、多實體和多空間之間的交互動態性,難以用傳統的方法描述與度量,處理的復雜度很大,需要將高維圖像等多媒體數據降維后度量與處理,利用上下文關聯進行語義分析,從大量動態而且可能是模棱兩可的數據中綜合信息,并導出可理解的內容。第四是結果的可視化呈現,使結果更直觀以便于洞察。目前,盡管計算機智能化有了很大進步,但還只能針對小規模、有結構或類結構的數據進行分析,談不上深層次的數據挖掘,現有的數據挖掘算法在不同行業中難以通用。

  大數據技術的運用前景是十分光明的。當前,我國正處在全面建成小康社會征程中,工業化、信息化、城鎮化、農業現代化任務很重,建設下一代信息基礎設施,發展現代信息技術產業體系,健全信息安全保障體系,推進信息網絡技術廣泛運用,是實現四化同步發展的保證。大數據分析對我們深刻領會世情和國情,把握規律,實現科學發展,做出科學決策具有重要意義,我們必須重新認識數據的重要價值。

  • 相關閱讀
  • 云計算大數據時代個人隱私保護刻不容緩

      隨著云計算大數據時代的到來,互聯網將時時刻刻釋放出海量數據,隨著產生、存儲、分析的數據量越來越大,無論是圍繞企業銷售,還是個人的消費習慣,身份特征等,都變成了以各種形式存儲的數據。大量數據背后隱藏...

    時間:12-20
  • 巴拉巴西教授9月來京 帶您“引爆”大數據時代

      在《紐約時報》宣布“大數據時代已經降臨”后,以前不能被測試、儲存、分析或分享的事物正在被數據化,并以數字的形式量化。決策過程中,因果關系不再是唯一的考量因素。如今數據間的相互關聯更能反映...

    時間:09-05
免責聲明:本網對文中陳述、觀點判斷保持中立,不對所包含內容的準確性、可靠性或完整性提供任何明示或暗示的保證。請讀者僅作參考,并請自行承擔全部責任。 本網站轉載圖片、文字之類版權申明,本網站無法鑒別所上傳圖片或文字的知識版權,如果侵犯,請及時通知我們,本網站將在第一時間及時刪除。
主站蜘蛛池模板: 亚洲国产精品日韩在线观看| 欧美人与动性行为网站免费| 国产精品免费_区二区三区观看| 亚洲精品成人a在线观看| 免费在线观看视频网站| 日韩亚洲翔田千里在线| 免费福利在线观看| 99久re热视频这里只有精品6| 日韩精品亚洲专区在线影视| 国产偷亚洲偷欧美偷精品| chinese乱子伦xxxx国语对白| 欧美精品亚洲一区二区在线播放| 国产精品亚洲成在人线| 中文字幕第二十页| 第四色播日韩第一页| 国产福利你懂的| 久久久久无码精品国产不卡| 羞羞漫画喷水漫画yy视| 夫妇交换性3中文字幕| 亚洲的天堂av无码| 视频一区精品自拍| 国产高清自产拍av在线| 久久av无码专区亚洲av桃花岛| 精品少妇人妻AV免费久久洗澡| 国产精品亚洲综合久久| 一级毛片直播亚洲| 最刺激黄a大片免费网站| 国产91精品在线观看| 6080私人午夜性爽快影院| 成人国产在线观看高清不卡| 亚洲va中文字幕无码久久| 男男gay做爽爽的视频免费| 国产成人亚洲精品无码av大片 | 精品乱码一区二区三区四区| 国产极品美女高潮抽搐免费网站| tube欧美69xxxx| 欧美最猛性xxxxx短视频| 四虎影视永久免费观看地址| aaa日本高清在线播放免费观看| 日本护士撒尿xxxx18| 亚洲最大成人网色香蕉|