大數據技術的發展歷程 及其演化趨勢

2020-11-30 中國大數據網

  最早提出詞彙「Big Data」的是2011年麥肯錫全球研究院發布的《大數據:下一個創新、競爭和生產力的前沿》研究報告。之後,經 Gartner技術炒作曲線和2012年維克託·舍恩伯格《大數據時代:生活、工作與思維的大變革》的宣傳推廣,大數據概念開始風靡全球。

  基於Web of Science資料庫中1994年後涉及大數據概念的4495篇文獻,採用Citespace知識圖譜工具,通過熱點關鍵詞和高被引文獻分析,能夠勾勒出大數據技術從萌芽到成熟的發展歷程。

  上世紀90年代至本世紀初,是大數據發展的萌芽期,處於數據挖掘技術階段。隨著數據挖掘理論和資料庫技術的逐步成熟,一批商業智能工具和知識管理技術開始被應用,如數據倉庫、專家系統、知識管理系統等。此時,對於大數據的研究主要集中於「Algorithms」(算法)、「Model」(模型)、 「Patterns」(模式)、「Identification」(識別)等熱點關鍵詞。

  大數據發展的突破期是2003至2006年,處於圍繞非結構化數據自由探索階段。非結構化數據的爆發帶動大數據技術的快速突破,以2004年Facebook創立為標誌,社交網絡的流行直接導致大量非結構化數據的湧現,而傳統處理方法難以應對。此時的熱點關鍵詞較為分散,包括了「Systems」(系統)、「Networks」(網絡)、 「Evolution」(演化)等,高被引文獻也很少,說明學術界、企業界正從多角度對數據處理系統、資料庫架構進行重新思考,且尚未形成共識。

  2006 至2009年,大數據技術形成並行運算與分布式系統,為大數據發展的成熟期。Jeff Dean在BigTable基礎上開發了Spanner資料庫(2009)。此階段,大數據研究的熱點關鍵詞再次趨於集中,聚焦「Performance」(性能)、「CloudComputing」(雲計算)、 「MapReduce」(大規模數據集並行運算算法)、「hadoop」(開源分布式系統基礎架構)等。

  2010年以來,隨著智慧型手機的應用日益廣泛,數據的碎片化、分布式、流媒體特徵更加明顯,移動數據急劇增長。

  近年來大數據不斷地向社會各行各業滲透,使得大數據的技術領域和行業邊界愈來愈模糊和變動不居,應用創新已超越技術本身更受到青睞。大數據技術可以為每一個領域帶來變革性影響,並且正在成為各行各業顛覆性創新的原動力和助推器。

  2013 年5月,麥肯錫全球研究所(McKinsey Global Institute)發布了一份名為《顛覆性技術:技術進步改變生活、商業和全球經濟》的研究報告。報告確認的未來12種新興技術,有望在2025年帶來14萬億至33萬億美元的經濟效益。令人驚訝的是,最為熱門的大數據技術卻未被列入其中。麥肯錫專門解釋稱,大數據已成為這些可能改變世界格局的12項技術中許多技術的基石,包括移動網際網路、知識工作自動化、物聯網、雲計算、先進機器人、自動汽車、基因組學等都少不了大數據應用。

  2014年5月,美國白宮發布了2014年全球「大數據」白皮書的研究報告《大數據:抓住機遇、守護價值》。報告鼓勵使用數據以推動社會進步,特別是在市場與現有的機構並未以其他方式來支持這種進步的領域;同時,也需要相應的框架、結構與研究,來幫助保護美國人對於保護個人隱私、確保公平或是防止歧視的堅定信仰。2014年4月,世界經濟論壇也以「大數據的回報與風險」的相近主題發布了《全球信息技術報告(第13版)》。報告認為,在未來幾年中針對各種信息通信技術的政策甚至會顯得更加重要。在接下來將對數據保密和網絡管制等議題展開積極討論。全球大數據產業的日趨活躍,技術演進和應用創新的加速發展,使各國政府逐漸認識到大數據在推動經濟發展、改善公共服務,增進人民福祉,乃至保障國家安全方面的重大意義。

相關焦點

  • 核電池發展歷程_核電池發展趨勢
    打開APP 核電池發展歷程_核電池發展趨勢 發表於 2019-08-23 10:59:00 它們在蛻變過程中會不斷以具有熱能的射線的形式,向外放出比一般物質大得多的能量。這種很大的能量有兩個令人喜愛的特點。一是蛻變時放出的能量大小、速度,不受外界環境中的溫度、化學反應、壓力、電磁場的影響,因此,核電池以抗幹擾性強和工作準確可靠而著稱。另一個特點是蛻變時間很長,這決定了放射性同位素電池可長期使用。
  • 基因組圖譜全面揭秘鳥類演化「大爆炸」歷程
    主導這項研究的國際鳥類基因組研究聯盟不久前以專刊形式集中公布了28篇首期研究成果,其中8篇刊登在《科學》雜誌鳥類專刊上,其餘20篇陸續刊登於《基因組生物學》《大數據科學》等雜誌,這些揭開了生物演化史上又一重要的篇章。   鳥綱基因組和演化生物學研究   以往的研究顯示,在白堊紀物種大滅絕事件中倖存的鳥類,經歷了一次快速的演化。
  • 從智慧型手機十年發展歷程,看未來格局演化
    也就是說,智慧型手機發展至今,已經歷經十餘年載。而在這十餘年中,智慧型手機的市場格局也是風雲變幻,它的未來又將該如何演化?正所謂鑑古而知今,預知未來,必須要先了解過去,從而預測智慧型手機未來的發展趨勢。  智慧型手機發展早期:蘋果風靡全球,中華酷聯格局初定  在智慧型手機的發展初期,蘋果憑藉著單一的iPhone手機引爆了整個全球的智慧型手機發展。
  • 2020年版中國大數據金融行業深度調研及發展趨勢分析報告
    據中國產業調研網發布的2020年版中國大數據金融行業深度調研及發展趨勢分析報告顯示,移動金融的興盛與技術的發展息息相關。近年來,大數據、雲計算等技術的出現,給包括金融業在內的幾乎所有業態都帶來不小的衝擊。
  • 基因組圖譜全面揭秘鳥類演化「大爆炸」歷程—新聞—科學網
    主導這項研究的國際鳥類基因組研究聯盟不久前以專刊形式集中公布了28篇首期研究成果,其中8篇刊登在《科學》雜誌鳥類專刊上,其餘20篇陸續刊登於《基因組生物學》《大數據科學》等雜誌,這些揭開了生物演化史上又一重要的篇章。 鳥綱基因組和演化生物學研究 以往的研究顯示,在白堊紀物種大滅絕事件中倖存的鳥類,經歷了一次快速的演化。
  • 大數據時代可視化新聞的特點及發展趨勢
    從最初英美主流媒體率先實踐,到如今全球各國媒體重視發展讓其擁有廣闊應用前景,本文總結歸納了可視化新聞一路走來的發展特點和發展趨勢。這將有利於探索大數據時代對新聞報導的影響,以及未來新聞生產方式變革的合適途徑。
  • 中國應急管理的演化歷程與當前趨勢
    二是全災種管理與全過程管理難以兼容,應急管理部的成立彌補了這個弱點,以全災種管理適度的「退」換取全過程管理真正的「進」,並將形成以下發展趨勢:應急管理的重點由信息、輿情擴展到預案、隊伍和裝備,由應急處置向前後兩端延伸,由非常態轉向常態。
  • 移動通信的發展歷程與趨勢
    移動通信的發展歷程1987年11月18日第一個TACS模擬蜂窩行動電話系統在廣東省建成並投入商用。 1994年3月26日郵電部移動通信局成立。1994年12月底廣東首先開通了GSM數字行動電話網。 1995年4月中國移動在全國15個省市也相繼建網,GSM數字行動電話網正式開通。
  • 重新認識地質歷史時期生命演化歷程
    早白堊世哺乳動物——蓋氏熱河俊獸揭示了哪些進化趨勢?國寶大熊貓的祖先在其基因中傳達了何種信息?4月7日,中國古生物學會在南京發布了「2019年度中國古生物學十大進展」(以下簡稱「十大進展」),清江生物群、熱河俊獸、大熊貓古基因組等研究入選,這些成果,作為我國2019年在古生物領域具有國際影響力的高水平研究,刷新了人類對地質歷史時期生命演化歷程的認識。
  • 基因組測序原理及其發展歷程
    本文將介紹當前的基因組測序原理及其發展歷程。
  • 觸控螢幕技術是誰發明的_觸控螢幕技術的發展歷程
    打開APP 觸控螢幕技術是誰發明的_觸控螢幕技術的發展歷程 發表於 2017-11-06 02:57:43 目前觸控螢幕已經由單點觸屏發展到實現多點觸屏了。   觸控螢幕技術的發展歷程   1971年,美國人SamHurst發明了世界上第一個觸摸傳感器。
  • 數據中心發展歷程及功能演進的四大階段
    【IT168 專稿】從功能特徵看,隨著技術的發展和應用及機構對IT認識的深入,數據中心的內涵已經發生了巨大的變化。從功能的內涵,可將數據中心可以分為四個大的階段,數據存儲中心階段、數據處理中心的階段、數據應用中心,數據運營服務中心階段。
  • ...汙泥處理處置技術的發展現狀與趨勢——基於大數據和溫室氣體...
    【能源人都在看,點擊右上角加'關注'】本期將推出哈爾濱工業大學魏亮亮副教授團隊的一篇最新綜述,內容翔實,主要是基於大數據和溫室氣體排放分析,闡述我國城鎮汙泥處理處置技術的發展、現狀以及展望未來發展趨勢,相關研究成果的獲得有助於深刻認識我國城鎮汙泥處理處置技術應用與發展的潛在規律,為未來我國城鎮汙泥處理處置技術優選提供技術支撐;此外,相關研究結果可為全球範圍相關發展中國家汙泥的可持續處置提供借鑑
  • 大族雷射陳焱:雷射金屬3D列印技術及其發展趨勢分析
    大族雷射副總裁陳燚在本次會議上發表了「雷射金屬3D列印技術及其發展趨勢分析」主題演講,主要介紹了3D列印技術原理及國內外研究現狀、大族雷射3D列印應用以及雷射金屬3D列印技術發展趨勢。  3D列印,即快速成形技術的一種,它是一種以數字模型文件為基礎,運用粉末金屬或塑料等可粘合材料,通過逐層列印的方式來構造物體的技術,國外稱為增材製造,基本原理是離散-堆積原理。
  • 2020年版中國大數據市場現狀調研與發展趨勢分析報告
    統計數據顯示,**年國內大數據產業市場規模已達1105.6億元,較**年增長44.15%。其中,大數據基礎設施建設、大數據軟體和大數據應用分別佔比64.53%、25.47%和10%。  中國產業調研網發布的2020年版中國大數據市場現狀調研與發展趨勢分析報告認為,截至**,大數據產業蓬勃發展。
  • 中國大數據行業現狀分析與發展趨勢研究報告(2020年版)
    進入**年以來,大數據受到各界廣泛關注,已滲透到金融、醫療、消費、電力、製造以及幾乎各個行業,大數據的新產品、新技術、新服務也正在不斷地湧現。  我國大數據產業集聚發展效應開始顯現,出現京津冀區域、長三角地區、珠三角地區和中西部4個集聚發展區,各具發展特色。
  • 飛機SPHM技術的演進歷程與未來發展
    因此,雖然SPHM這個術語是近年來才被提出和廣泛接納,但是其核心思想和技術進步一直與單機監控技術的發展緊密結合在一起,其演進歷程可以劃分為四個階段。 通過對SPHM技術演進歷程的分析總結,可以看出,目前需要聯合高校、專業基礎院所、飛機設計所、用戶等位於研發應用鏈條上不同位置的各種力量,針對上述不同的發展階段,有針對性的開展聯合攻關,共同致力於SPHM技術的發展。
  • 雷射加工技術的現狀與發展趨勢分析
    其中,德國Trumpf、Rofin-Sinar公司在高功率工業雷射器上稱雄天下;美國IPG公司的光纖雷射器引領世界雷射產業發展方向。歐美主要國家在大型製造產業,如機械、汽車、航空、造船、電子等行業中,基本完成了用雷射加工工藝對傳統工藝的更新換代,進入「光加工」時代。
  • 導電矽膠及其未來發展趨勢
    根據基膠品種和加工方法不同,可以製成高溫硫化導電矽橡膠和室溫硫化導電矽橡膠,以及壓敏導電矽橡膠、各向異性導電矽橡膠和低溫導電矽橡膠等。 近年來,電子技術和儀表工業的迅速發展,促進了導電矽橡膠的改進和發展,出現了許多新的工藝和品種。
  • 心理理論的發展與演化
    40多年來,來自社會心理學、認知心理學、發展心理學、臨床心理學以及人類學領域的學者嘗試從不同角度去探究和解釋心理理論的認知機制和演化淵源。這一重要的心理能力是否為人類獨有?如果不是,不同的物種在這一能力上的表現有何差異?差異具體表現在哪些方面?這樣的差異能夠揭示什麼演化秘密?到底是複雜的社會塑造了這樣的能力,還是這樣的能力導致了複雜社會的產生?