【深度】大數據時代的星環號:《三體》中的諾亞方舟成真了?

2020-12-05 IT經理世界

星環科技創始人兼CTO孫元浩

《三體》中,由於太陽系受到未知文明的打擊而降維消失,地球人類僅剩的最後兩人乘 「星環號」 曲率引擎驅動飛船離開太陽系,從而保存了地球文明。在2013年的上海,一幫研究大數據的專家攜手創辦了一家叫「星環」的公司,致力於在大數據時代打造一艘高速的航空母艦。這不是巧合,創始人兼CTO孫元浩正是因為讀了《三體》,才定下了這個名字。

星環科技的核心團隊來自於英特爾的研發團隊,是國內最早的大數據Apache Hadoop發行版團隊,從2009年起即開始致力於大數據平臺軟體的自主創新和開發;彼時,基於Apache Hadoop開源技術的數據管理及分析平臺提供商Cloudera剛成立一年,如今,Cloudera在「福布斯2016全球最佳雲計算公司100強」中排名第五。

國際舞臺新玩家

在「Gartner 2016年數據倉庫及數據管理解決方案魔力象限」中,星環科技登上最具遠見象限,且是唯一上榜的中國廠商。讓星環科技與與老大哥Cloudera並肩而立的功臣產品Transwarp Data Hub (TDH)是基於Apache Hadoop和Apache Spark的分布式內存分析引擎和實時在線大規模計算分析平臺。目前星環TDH已經在恆豐銀行等多個領域有替代傳統技術數據倉庫的落地案例。

2015年,星環科技的TDH4.0版本全面通過了TPC-DS 100T的99項測試。TPC-DS是TPC(事務處理性能委員會)評測決策支持系統的測試基準。這個測試集包含了對大數據集的統計、報表生成、聯機查詢、數據挖掘等複雜應用,與真實場景非常接近,是難度較大的一個測試集,也是目前業界公認的數據倉庫測試準則。到目前為止,能夠通過100T測試的廠商寥寥無幾。孫元浩介紹,TDH相比開源Hadoop版本有10~1000倍的性能提升,可以處理GB到PB級別的數據。

「星環號」之所以能帶著人類逃離太陽系,是因為其實現了超光速飛行;星環科技希望建立數據時代的裡程碑,則要努力突破大數據存儲、計算和管理的性能極限。事實上,較早啟用大數據技術的金融業,其數據量在100TB至1PB級別;數據量級龐大的電信業,其數據量已經達到了PB級。比起數據爆炸的速度,目前的大數據處理技術還在追趕中,即便是百倍的提升,也只是一個開端。

開闢無人區

如今舉國都在數據化,基於業務差異,不同行業對大數據分析的需求各有側重,孫元浩分析,後Hadoop時代又回到了解決大數據的4個V上,即數據量(Volume)、數據類型(Variety)、速度(Velocity)和價值(Value)。

同時TDH支持R語言無縫對接並提供圖形化界面,使得寧波風電能通過R語言進行數據挖掘,並能直接調用星環科技TranswarpR的機器學習算法庫,降低了業務人員學習時間成本。孫元浩表示,幾年前大家開始關注機器學習領域,相比傳統利用人工經驗去設定並驗證模型和規則,利用機器學習的方法分析大數據更準確。

隨著大數據應用的發展,最終各行業都會將重心放在挖掘數據背後的價值上。目前走在前列的,當屬2016年的當紅炸子雞金融業。孫元浩介紹,星環科技提供的深度學習已經在金融領域中幫助客戶利用大數據做營銷、風險分析、預測壞帳,等等。

對於大數據的未來,孫元浩認為有四個發展方向:第一,替代資料庫方面,主要是用新的引擎來處理大規模數據,大量的用戶數據仍然是結構化數據;第二,處理非結構化數據,這塊主要用到深度學習來處理圖像、語音、人機互動等;第三,實時計算,主要是流計算——如何將批處理和事件處理兩個模型融合起來,在非常短的延時內完成複雜事務處理;第四,數據挖掘和數據分析的工具,目的是將機器學習和深度學習變得普及化。這也是星環科技深挖的領域。

孫元浩介紹,大數據應用產業鏈大致可分為四層:大數據平臺基礎軟體層、工具層、應用層和專業服務層;星環科技將專注於前兩層。後兩層的行業屬性較強,他表示,目前大數據的行業應用解決方案稀缺,很適合新玩家們作為入口一展身手。

作者 | 王眾

相關焦點

  • 星環科技孫元浩:「星際迷航」之星環,打造大數據時代的甲骨文
    在科幻巨作《三體》中,最後的兩個太陽系人類程心、艾AA搭載星環科技生產的星環號宇宙飛船逃離了向二維世界跌落的太陽系,成為宇宙中最後的太陽系地球人。曾是英特爾亞太研發有限公司數據中心軟體部亞太區CTO的孫元浩,在2013年離開英特爾創辦星環科技,在致敬了《三體》這本科幻巨作和《星球大戰》的同時,也致力於從事大數據時代核心平臺資料庫軟體的研發與服務。
  • 中國大數據領導者,「星環科技」起航
    在這數據爆炸的時代,大數據技術能讓你發現隱藏於海量數據背後的商機。據公告,星環信息科技(上海)股份有限公司已與中金公司籤署上市輔導協議,擬科創板掛牌上市。星環科技是一家全球領先的大數據基礎軟體提供商,公司聚焦於企業級容器雲計算、大數據和人工智慧核心平臺的研發,打造能夠實現軟體層的國產自主可控,且擁有一站式功能的產品。
  • 尋找傳說中的諾亞方舟|諾亞方舟|諾亞|亞拉臘山_網易科技
    《聖經·創世紀》中不僅明確記載了大洪水的起因、過程和結果,還詳細說明了諾亞方舟的製作方法及最終停靠的地點和時間。「經過了一百五十日,七月十七日,方舟停在亞拉臘山上。」而在古老的印度神話中,洪水被多次提起,而避過洪水的主人公是摩奴。在古埃及的《死亡之書》中也可以找到類似記載。神話的傳說、歷史的佐證都顯示了一條驚人事實——在遙遠的古代曾有洪水襲世。停靠方舟的山峰這些傳說如此具有誘惑,以至於人們探尋諾亞方舟的熱情從未消減。想要證明諾亞方舟的存在,找到它是最好的辦法。
  • 《諾亞方舟》票房破3億 開啟「後2012」時代
    送走《2012》災難片市場的震撼謝幕,《諾亞方舟》開闢航線,破浪而來,帶領觀眾在一場視角和心靈的洗禮中,進入災難片的「後2012」時代。《諾亞方舟》視角創新,升級《2012》傳奇災難五年前,一部《2012》讓全球觀眾領略到末日災難片的巔峰境界,今年,橫空出世的《諾亞方舟》則展現出了一幕史前版的末日奇觀。
  • 尋找傳說中的諾亞方舟
    《聖經·創世紀》中不僅明確記載了大洪水的起因、過程和結果,還詳細說明了諾亞方舟的製作方法及最終停靠的地點和時間。「經過了一百五十日,七月十七日,方舟停在亞拉臘山上。」而在古老的印度神話中,洪水被多次提起,而避過洪水的主人公是摩奴。在古埃及的《死亡之書》中也可以找到類似記載。神話的傳說、歷史的佐證都顯示了一條驚人事實——在遙遠的古代曾有洪水襲世。停靠方舟的山峰這些傳說如此具有誘惑,以至於人們探尋諾亞方舟的熱情從未消減。想要證明諾亞方舟的存在,找到它是最好的辦法。
  • 諾亞方舟殘骸找到了?它被凍在土耳其冰川中
    筆者:三體-小遙 在西方傳說中,上帝為了懲罰貪婪的人類,製造了一場史無前例的大洪水,它淹沒了地球上絕大部分生物。一位名為諾亞的人由於具備勤勞善良的品德而得到了提示,為了儘可能保全各個生物,他投入了大量精力製造出一艘巨大的船,這就是諾亞方舟。
  • 傳說中的「諾亞方舟」到底存不存在
    由於在人類中也有一家的人是善良,仁慈的,就是諾亞一家人,他們經常告誡他們周圍的人不要殺戮,遠離罪惡。所以神在毀滅這一切時,他決定把諾亞一家人留下來。神對諾亞說,他要發動一場大洪水,對人類實行一次清洗計劃,於是命令諾亞他們一家建造一艘方舟,到時大洪水來臨時好得以逃生。還要他們在方舟建好後,選擇一些沒有汙染的牲畜,牲畜公母要平均。
  • 有專家說諾亞方舟真實存在,神話成真到底是怎麼回事?
    專業人員鑑定,這些泥板距今已經有5500多年,正好是諾亞生活的時代。更重要的是有塊泥板記錄了《古爾蓋梅希史詩》的文字。經過後來的解讀,文字大概意思是:「在一場可以吞沒世界的洪水中,一個名叫完塔·納皮提姆的人和他的妻子,坐著一條巨大的船逃生的故事,這個故事的情節與諾亞方舟的故事頗為相似。」
  • 「星環號」即將起飛 讓AI照進現實
    IT時報記者 李蘊坤7年、1200萬行軟體代碼、大數據3.0時代、國內第一個分布式資料庫,這是星環科技為國產基礎軟體搭建的壁壘。星環科技CEO孫元浩坦言,未來十年將是中國基礎軟體發展的黃金期,在大數據領域,單個用戶可以達到10TB量級以上的數據量,分布式架構將顛覆IT 產業的技術棧。
  • 諾亞方舟的故事,諾亞方舟在哪裡
    上帝告訴他們七天之後就要實施大毀滅,要他們用歌斐木造一隻方舟,分一間一間的造,裡外抹上松香。這隻方舟要長360米、寬23米、高13.6米。方舟上邊要留有透光的窗戶,旁邊要開一道門。方舟要分上中下三層,他們立即照辦。
  • 史前大洪水並非神話?諾亞方舟被發掘,驚人的神話時代真的存在?
    大洪水真的存在過?古代「神話」被證實為真?在我們之前還存在過另一批「人類」?大家好啊,我是探險不怕險的掘掘,上一期咱們剛剛一起看過詭異的達文西,這一期咱們就整點更玄幻的,神話傳說也許是真的的論據。其實在每一期正式開始之前掘掘也都會插一段「許願」歷程,但是今天吧,可能「神」給了掘掘莫名的鼓勵,今個咱們就來個美夢成真!來一位朋友點個關注!
  • 諾亞方舟真實存在!科學家已經找到證據!
    每天忙碌的工作,枯燥的生活,一定很辛苦吧,動動手指關注本企鵝號,小編會給大家分享最最精彩的內容哦!在閒暇時間為您卸去滿身疲憊,可以讓您元氣滿滿的,希望你能多多支持!小編在這裡祝您諸事順利,財源滾滾,天天好心情!接下來讓我們一起走進今天的精彩內容:   諾亞方舟都神話傳說可以說是人盡皆知,但是這是真的嗎?
  • 遺失的諾亞方舟(三)
    上周結尾的時候我們講到如果諾亞方舟上承載的並不是活著的動物,而是承載著這些動物的DNA,那麼諾亞方舟的存儲容量就會綽綽有餘。那麼這個建築的目的就是為了防止全球性的災難或者是物種的滅絕,這個建築本身是非常牢靠的,可以抵抗核戰爭、大洪水、隕石撞擊等等,所以這個地方又被網友稱作「末日種子庫」和「諾亞方舟」。
  • 香港探險隊聲稱找到諾亞方舟
    香港探險隊聲稱找到諾亞方舟  由於裝備所限,未能深入探察,決定明年夏天再次出發  本報訊 香港消息 香港一支探險隊,日前在庫德族人及長老協助下,在土耳其東部亞拉臘山4200米一處懸崖邊,發現一露出於懸崖的長方形、有冰覆蓋的物體,在白雪中呈倒三角形狀,探險隊聲稱,已找到了諾亞方舟正確位置,為了進一步揭開這個人類歷史之謎
  • 安東尼-霍普金斯加盟《諾亞方舟》出演瑪土撒拉
    》(Noah’s Ark),今日又確定了一個重要角色的扮演者——奧斯卡影帝安東尼-霍普金斯,將在本片中出演聖經中一位最長壽的老人瑪土撒拉。  「諾亞方舟」是基督教聖經的《創世紀》和亞伯拉罕諸教中,傳說一艘根據上帝的指示而建造的大船,其依原說記載為方形船隻,但也有許多的形象繪畫描繪為近似船形船隻,其建造的目的是為了讓諾亞與他的家人,以及世界上的各種陸上生物能夠躲避一場上帝因故而造的大洪水災難,記載中諾亞方舟花了120年才建成,這段故事分別被紀錄在《創世記》以及伊斯蘭教的《古蘭經》中。
  • 諾亞方舟遺址是真的嗎?諾亞方舟遺址具體位置在哪裡
    解答:諾亞方舟是西方的某個傳說,主要就是一個叫做諾亞的人成功製作了一艘大船,成功在洪水中拯救了人類文明和重要的火種。很多人覺得諾亞方舟確實存在,並且找到了很多所謂遺址,但是最終證實是虛假的。2010年某隻考察隊稱成功尋找到諾亞方舟遺址,下面探秘志帶大家共同了解下。
  • 諾亞方舟是無稽之談?有人發現了4484年前的方舟殘骸
    諾亞方舟的故事不僅在西方是婦孺皆知,哪怕是在遙遠的東方,也是人盡皆知,不過絕大多數人都當這是一個有趣的神話故事。其實,諾亞方舟的故事不僅在《舊約全書》中記載得相當詳細,在有著「世界最古老圖書館」之稱的古代亞述首都,尼尼微的文庫中發掘出來的泥版文書上也有關於這件事的記載。
  • 諾亞方舟是真是假,據說曾經找到過
    真正的諾亞方舟只存在於聖經當中現實中關於諾亞方舟的真實性這個命題爭議質疑了幾千年,但是結論都是僅供參考,神話傳說不可完全歷史化,但歷史可以神化化諾亞方舟是否存在答案眾說紛紜,雖然找到了一些聖經中描述的方舟的疑似物,但結論只能是猜測和推斷,根據聖經記載
  • 星環科技+鯤鵬:乘風破浪的大數據生態
    成立於2013年的星環科技,專注於企業級大數據平臺等產品的自主研發,2016年被Gartner評為全球最具有前瞻性的數據倉庫及數據管理解決方案廠商,2017年被IDC評為中國大數據市場領導者,2018年成為12年來全球首個完成TPC-DS測試並通過官方審計的資料庫廠商。8月14日,星環科技發布了基於鯤鵬的大數據平臺解決方案。
  • 憑什麼說諾亞方舟·焦點生態會火 我們有獨特理由
    憑什麼說諾亞方舟·焦點生態會火,我們並不是空口說白話,我們有獨特理由。一、諾亞方舟是環球(UK)區塊鏈有限公司和MFM(UK)萊斯特基金會共同打造的一艘區塊鏈鏈上孵化器,並成功的推出代號為「焦點生態」的商業模型。其計劃核心是完善區塊鏈遊戲生態。