開採非結構化數據這座金礦,企業需要什麼樣的工具?

2020-12-05 趣味科技

非結構化數據:一座未開發的金礦

伴隨著雲計算、大數據、物聯網、人工智慧等新興技術的快速發展,各種智能終端設備飛速增加,全球數據也呈現出了幾何級數的增長。來自國際數據公司IDC的統計顯示,全球有將近90%的數據都是在近幾年內產生。預測到2025年,全球數據總量將達到175ZB。其中企業存儲的數據量,將超過全球總數據量的80%。

而在企業的存儲系統中,體積最為龐大的就是非結構化數據——其在數據總量中的比例竟然高達80%-90%。從電信行業的話單,到金融行業的「雙錄」,從教育行業的教學文檔,到醫療行業的影像資料,再到傳媒行業的音視頻素材……幾乎所有類型的企業都需要長期存放大量的非結構化數據,這也導致其在數據總量中的比例一直居高不下。

可以想見的是,存儲和管理數量如此龐大的非結構化數據,對於許多企業來說都是一項不輕的負擔。如果對數據的存儲和管理不當,不僅未必能夠為企業帶來理想的價值,企業還有可能因此蒙受巨大損失。不過從另一個方面來看的話,體量如此驚人的非結構化數據,如果管理和應用得當的話,對企業來說則是一座誘人的富饒金礦。

舉例來說,2020年肆虐全球的新冠疫情,就給醫療行業帶來了極其嚴峻的挑戰。作為疫情檢測的一種手段,醫院需要為病人拍攝很多胸片,這時候醫療影像資料的存儲和分析就顯得尤為關鍵。如果醫院有一個連續的機制將相關的影像數據存儲下來,而且有連貫性地進行診斷,就可以通過病情的變化對其進行分析研究,並有的放矢地制定相應的治療方案。

正因為如此,如何降低海量非結構化數據的存儲成本,更好地管理和應用非結構化數據,挖掘數據中潛藏的巨大價值,進而幫助推動自身業務的增長與轉型升級,也就成為了當前眾多企業亟待解決的課題。

備受好評的HCP對象存儲產品組合

俗話說「工欲善其事,必先利其器」,看到廣大企業面對非結構化數據這座「金山」時如此困擾,Hitachi Vantara也為其提供了相應的「挖礦」工具,那就是Hitachi Content Platform(HCP)對象存儲產品組合。

「以最常見的企業辦公場景為例,文件服務ROBO(Remote Office Branch Office)經常需要做跨平臺、跨地域的數據訪問,其中像銀行、MES、醫院HIS等熱數據都是跟核心系統緊密相關的東西;但是也有大量的數據,譬如社交媒體、庫存、財務數據等,都是偏後線的,還有許多數據和文件來自多種渠道,甚至包括微信、微博、抖音等平臺,所有複雜的應用場景和繁多的數據就變成了一種非常複雜的結構,我們稱之為非結構化數據。為了滿足客戶的需求,對非結構化數據後續的分析和處理也就變得更加重要。」Hitachi Vantara中國區首席技術官吳衛平向趣味科技表示,「另一方面就是安全,這一點甚至可能比剛才的複雜性更加重要。目前網際網路的安全問題非常突出,你想要在算法上、在數學機理上保證自己是不可被篡改的,就必須用到對象存儲,這樣才能夠從根本上解決這類問題。所以這些年來,企業對對象存儲的需求一直在不斷增加。」

近日,全球知名分析機構GigaOm發布了《GigaOm非結構化數據管理雷達報告》,指出Hitachi Vantara憑藉HCP對象存儲產品組合位列領導者區域,並且正在向中心區域移動,這表明Hitachi Vantara在非結構化數據管理方面的能力將更進一步趨於完善、成熟。事實上,HCP產品組合已經連續四次獲評IDC對象存儲領導者象限,並且贏得了Gartner和GigaOm的一致認可,更被全球2,500多家企業機構青睞和選用。

然而Hitachi Vantara並沒有就此滿足,而是再接再厲攜手WekaIO(Weka)推出了全新的分布式文件系統和管理解決方案,旨在幫助企業更加快速地訪問包括郵件、文檔、健康記錄、音頻、視頻和圖像等在內的非結構化數據,並從中獲得洞察。

不久前,Hitachi Vantara還宣布了對HCP解決方案的全新擴展。此次功能擴展採用性能優化的全快閃記憶體HCP節點,可更好地支持新一代非結構化數據工作負載,以及更好的數據獲取、可視化、保護、成本優化、檢索和分析,連接邊緣和用戶設備,並支持私有雲、公有雲、混合雲之間的智能數據移動性。

更安全、更易用、更高效、更具性價比

對於企業用戶來說,Hitachi Vantara推出的HCP對象存儲產品組合及其創新擴展,為他們帶來了更安全、更易用、更高效、更具性價比的解決方案。

在安全方面,HCP是全球第一家通過十幾家公司認證,符合歐洲和美國安全標準的平臺。HCP的EC糾刪碼、DPL多副本保護、WORM(一次寫多次讀)、多版本管理、數據自校驗和自修復等機制,能夠充分應對各種物理故障、系統邏輯故障和人為錯誤,保證數據100%符合行業監管要求。

在易用性方面,HCP具備多項強大的原生功能,能支持客戶通過平穩地改變現有主要存儲的用途,顯著提高存儲的有效容量。不僅如此,HCP還提供了易用的下載和上傳功能,並能有效監測和控制不斷增長的數據量。此外,HCP產品組合中還包括了HCP Anywhere、HCP Anywhere Edge以及HCP Gateway,可通過建立基於對象存儲的私有雲,滿足企業的遠程辦公需求。

在效能方面,由於採用了性能優化的全快閃記憶體HCP節點,HCP功能擴展後可幫助客戶在Amazon S3協議上實現與以往相比3.4倍的吞吐率,並降低多達34%的成本。更新後的存儲節點將讀寫性能也提升了三倍,並同時在與上一代產品相同的機架空間中實現了三倍的容量提升。為了滿足高性能需求,越來越多的企業組織正將其傳統NAS存儲、主要工作負載和雲原生工作負載不斷遷移到對象存儲。

在性價比方面,HCP在幫助企業提升業務效率的同時,還可以幫助降低存儲成本。以醫療行業為例,醫療機構如果將影像資料保存在傳統的NAS存儲中,不僅成本高昂,而且響應速度也會隨著數據量的增加而變慢;如果換用HCP建立分層存儲,則可以根據需求從不同層級的存儲中調閱數據,不但提升了工作效率,而且還降低了存儲成本。

「今年全新擴展的HCP對象存儲產品組合,其中的高密度存儲櫃可以在4U空間裡支持差不多100塊硬碟。如果以單塊硬碟10TB計算的話,存儲容量就是1PB,而且還可以通過增加單塊硬碟的容量來繼續加大存儲空間。在業界能夠做到這麼高存儲密度的,我們可能是僅此一家。」Hitachi Vantara資深解決方案顧問蔡慧陽補充道,「在每個TB單位存儲成本下降的同時,還可以帶來其他方面的好處,那就是節省機房和機櫃空間,以及進一步降低能耗和製冷成本。這樣如果遇上機房空間不夠,或者是租用IDC機房的情況,我們的解決方案還能幫助企業進一步降低成本。」

值得一提的是,截至今年,Hitachi Vantara已為全球50,000家數據量超過16EB的客戶提供100%數據可用性保證長達20年!「在存儲領域,Hitachi Vantara有著自己獨特的技術領先優勢。」吳衛平向趣味科技表示,「以VSP 5000系列為例,它可以保證99.999999%也就是「8個9」全天候運行的正常運行時間和可靠性。而業內其他產品通常是6個9或者7個9,與VSP 5000系列有著10倍甚至是100倍的巨大差距。」對於銀行、電信、醫院等對安全要求較高的企業來說,VSP 5000系列是理想的最安全、可靠的存儲解決方案。而同時VSP 5000同樣可以作為HCP後端存儲池的擴展,為那些尋求高性能、高可靠、多協議支持的用戶提供非結構化解決方案。

相關焦點

  • 非結構化數據:企業存儲「隱秘的角落」
    IDC預測,到2025年全球數據總量將達到175ZB。在企業組織的存儲系統中,非結構化數據也佔據了數據總量的80%至90%。 非結構化數據這一「龐然大物」,卻也是企業存儲中「隱秘的角落」。儘管企業花費了大量成本長期存放這些數據,也未必能夠帶來滿意的附加價值,而管理不當,則會令企業蒙受相當大的損失。
  • 山東現328噸超大金礦:開採難
    礦區勘探需要兩三年 專家評審才能出成果今年煙臺市探明31個新礦區,為何集中在今年出現這麼多、這麼大的礦源呢?據介紹,確定新礦區有非常複雜的程序,企業報備勘探結果,還需要省、市兩級專家評審認定。「實際上這些礦區都勘探好幾年了,就是沙嶺那個礦也有3年多的勘探歷史了,最終是今年認定的。」
  • 煙臺仍有1300噸金礦深埋地下 技術受限開採難(圖)
    中國巖金勘查第一深鑽鑽到地下4000米深處    「南非金礦開採深度才達到3-4公裡,咱們國家開採深度不超過1.5公裡。咱煙臺發現的礦產有的深達2000米,目前還不能開採。至於深部地下埋了多少礦產?還有多少儲量?這都需要看黃金勘查的深鑽成果。」
  • 世界上最孤獨的金礦,遍地都是黃金,卻至今無人能開採出來
    礦產資源代表著財富,特別是金礦這樣稀有的礦產,如果某個地區有金礦的話,那這周圍一定會興起一起淘金的熱潮,就連周圍的人也會專門跑到這裡來,想要依靠這些金礦收穫得一批財富,然而世界上卻有一個金礦,有著大量的黃金資源,卻至今無人開採。
  • 全球四大「特殊」金礦:一個最孤獨、一個開採難度堪比上太空……
    這座金礦距離最近的城市超過200公裡,一度只能靠飛機進出。礦區擁有相當多現代化基礎設施,包括溫暖的生活區、電視休息室、一個健身房甚至還有一個擺滿宗教肖像畫的教堂。很多食物補給都要提前2年預定,然後通過350多公裡的冰路送到礦場中。
  • 為非結構化數據存儲樹新標準,PowerScale的傳承與創新
    因此,這就對非結構化數據的存儲、使用和管理提出了更高要求,同時也對存儲基礎設施的性能和可擴展性提出了前所未有的挑戰。而這也會最大化地釋放「新基建」時代數據的作用與價值,並大大推動企業數位化轉型的步伐,讓客戶在面對非結構化數據創新挑戰時真正做到「不畏挑戰,不懼艱難」。
  • 一個蘊含大量金礦的地方,卻少有人來開採,是怎樣的環境
    一個蘊含大量金礦的地方,卻少有人來開採,是怎樣的環境?如果告訴你,有那麼一個地方,有一個大金礦,並且還沒有人去撿那裡的金子,你會去嗎?一般來說,這樣的問題,就算是真的有,那也肯定是不可能去的,為什麼?真要有個大金礦擺那兒了,哪有那麼好心的人還會特地跑來告訴我們一聲問去不去啊,早就自己一溜煙跑去了好嗎。不過在西伯利亞,其實還問就是有這麼一個金礦,但就算是能在那裡隨手就能撿著金子,也還是沒有人願意在那裡,這是為什麼呢?這個帶著巨大誘惑的金礦,叫做庫伯爾金礦,具體是在西伯利亞的東部。
  • 世界上最大的金礦,目前已經開採將近150年,記錄從未被超越
    世界上最大的金礦,目前已經開採將近150年,記錄從未被超越。黃金是所有貨幣衡量的標準,而且有的人為了防止貨幣貶值,會專門儲藏黃金當成外匯。因為黃金價值太高,所以很多人都在追求黃金寶藏,尤其是一些社會上流人士。咱們今天要講的就是黃金儲量最大的礦區,叫做蘭德礦區。
  • 中國唯一海底煤礦正式關停,唯一海底金礦成業界典範
    目前礦產資源的開發程度與人們未來的需求並不匹配,人類需求的不斷上升和超強度盲目開採,陸地可採礦產資源越來越少,於是很多企業將目標瞄向了海域!隨著技術的不斷進步,諸多海底礦山進入大眾視野!目前,中國擁有兩座海底礦山,分別是三山島金礦和北皂煤礦,其中,北皂煤礦由於資源幾乎枯竭,開採成本過高,已於今年10月正式關停。
  • 貴州數字經濟樣本:從開採政務「鐵礦」到商業「金礦」
    「但這只是一個層面,另外一條路是借引進大數據企業驅動實體經濟升級,」馬雷認為,「上萬家大數據企業只有把它的產品、成果和應用與實體經濟相結合,才能體現大數據的優勢,產生增值。同時,因為大數據企業的介入,傳統企業產業升級的綜合成本將大大降低。」
  • 山東海底2000米現超大金礦 開採難度堪比太空
    萊州三山島北部海域金礦尚屬全國首個海上發現的金礦。記者了解到,這麼大一個「金娃娃」最終由萊州市瑞海礦業有限公司抱得。由陸地進入海域勘查找金,由此,海下2000米的「黃金王國」揭開神秘的面紗,這,在巖金勘查領域具有劃時代的意義。「海下金山」怎麼發現的,記者日前趕赴萊州進行現場探訪。
  • 地球還有多少黃金可開採?萬萬沒想到,你「身邊的金礦」竟是手機!
    這也引發了人們對這種金光燦燦的稀有金屬的關注。黃金儲量到底有多少?是不是快開採完了?什麼時候地球上的金礦會被採空?世界黃金協會(World Gold Council, 縮寫WGC)數據顯示,2019年,全球黃金產量是3531噸,比2018年減少1%。比例不大,卻是2008年以來產量首次下滑。
  • 大數據技術市場調查報告:「BigData浪潮」迫使企業做出抉擇
    根據IDC的調查報告預測到2020年全球電子設備存儲的數據將暴增30倍,達到35ZB(相當於10億塊1TB的硬碟的容量)。大數據浪潮的到來也為企業帶來了新一輪的挑戰。對於有準備的企業來說這無疑是一座信息金礦,能夠合理的將大數據轉換為有價值信息成為未來企業的必備技能。
  • 世界上「最孤獨」的金礦,漫山遍野全是黃金,卻沒人敢挖!
    但是,世界上有這樣一座金礦,金礦的儲量很大,礦石中的黃金含量非常高,卻沒有人願意去開採呢?這個「奇怪」的金礦位於俄羅斯的庫保羅金庫,這裡包含著豐富的金礦資源,可以通過所有的挖掘來挖掘金礦,因為獨特的地理環境,幾乎沒有勇氣挖掘金礦。俄羅斯的海拔最高,這個地方是歐亞大陸最高的地方,特殊的地理位置使這個金礦的開採非常困難,同時這裡對人類的活動也有很大的限制。
  • 山東黃金三山島金礦:智能礦山裡的「掘金人」
    當然,這並非說明廢舊手機比金礦更具開採價值,而是金礦的開採更需要機械化、自動化、信息化、智能化。因此建設智能礦山,藉助新技術來提高金礦的開採效率,才是現代「掘金人」的最佳選擇。在建設智能礦山上,山東黃金三山島金礦無疑是最有發言權的礦山之一。三山島金礦作為中國100家最大有色金屬礦採選業企業之一,不僅是目前國內唯一的海底開採黃金礦山,也是全國機械化程度最高的黃金礦山之一。
  • 全球首個海底採礦項目VS中國唯一海底金礦,海底礦產被鎖定了!
    隨著人類需求的不斷上升和超強度盲目開採,全球礦產資源越來越少,甚至面臨耗竭。有人將目光投向了深海。海底蘊含了豐富的礦產資源,深海採礦一直是近些年來的熱門話題。一組科學家曾向國際相關組織提出建議,呼籲暫停對深海開採許可證的發放。
  • 全球最「可憐」的金礦,遍地石頭都含黃金,為何卻無人理睬?
    全球最「可憐」的金礦, 遍地石頭都含黃金, 為何卻無人理睬?古往今來無論是誰富有或者貧窮都對金子有著避免的狂熱追求,因為金子象徵著財富,象徵著稀有,擁有足夠的金子就是擁有足夠的財富。但是如今的國際形勢就是金子的出量,非常的少,而且很多國家已經禁止開採金礦,因此黃金就越來越稀有,越來越珍貴,很多時候國際上貨幣在一定程度上和黃金價值等同。但是世界上卻有這樣一個地方,他擁有非常大的一個金礦,但是滿地的金子卻沒有人開彩,這個地方實在是世界上最可憐的金礦了,這究竟是什麼原因呢?
  • 湖南金礦概述
    另有少量的已氧化形成的鐵帽型金礦,可單獨開採。湖南省內的金礦有以下成因類型。1、矽鋁質淺變質巖中斷裂帶型金礦:這是金礦的主要類型。2、有色金屬礦中伴生型金礦:主要有兩個礦區。一是水口山鉛鋅礦中伴生金礦,在康家灣鉛鋅礦體中含金46噸,老鴉巢鉛鋅礦體合金3.77噸,硫鐵礦風化的鐵帽金礦(龍王山金礦)2.3噸,合計52噸,大型。其中老鴉巢鐵帽金礦可單獨開採。
  • 世界上「最孤獨」的金礦,漫山遍野都是黃金,但沒人敢挖
    舉報   在我們的生活中,最愛的是黃金,黃金很貴,誰都喜歡,我看過各種各樣的黃金首飾,但是沒有見過金礦吧
  • 農村承包地下勘探出金礦礦脈,土地承包戶可以開採嗎?農民別不懂
    黃金是貨真價實的貴金屬啊,儲量有限,開採難度也大,數量就決定了他的價值!並且黃金價值可分割,價值10萬的黃金割成2塊,總價值還是10萬。一克拉鑽石割成2個50分試試?那麼,如果在農村承包地下勘探出金礦礦脈,土地承包戶可以開採嗎?農民別不懂!《中華人民共和國礦產資源法》第三條就規定了, 礦產資源屬於國家所有,由國務院行使國家對礦產資源的所有權。