看DTCC2015:阿里、360、京東 NoSQL實踐

2021-01-15 IT168

　【IT168 評論】一年一度的資料庫和大數據領域技術盛宴——2015中國資料庫技術大會(簡稱 DTCC 2015)將於4月16日至4月18日在北京新雲南皇冠假日酒店隆重召開。最新消息，大會NoSQL專場演講嘉賓已經全部確認完畢，嘉賓議題已經發布。

　「大數據技術交流和價值發現」是大會的核心主題，DTCC 2015大會規模將達到2500人，分3天21個專場，近百場精彩演講，大會將雲集了國內外最頂尖的數據專家，共同探討MySQL、NoSQL、Oracle、緩存技術、快閃記憶體技術、國產資料庫、Hadoop、數據挖掘、推薦系統、機器學習等領域的前瞻性熱點技術。

　　日前由IT168編譯並發布的（2014年12月世界資料庫流行度排行榜）中我們可以看到，排行榜前十名中，NoSQL資料庫已經佔了三席,分別是MongoDB、Cassandra和Redis。這說明NoSQL正在變得越來越流行。對傳統的關係型資料庫巨頭而言，單純靠SQL資料庫，在面對超大型Web應用上顯然捉襟見肘了。

　　天貓雙十一對阿里搜索事業部來說，就是一場高強度的數位化戰爭。早在2010年，Hadoop/HBase技術就被引入到裡的搜索體系中，用於存儲相關的網頁、價格和圖片信息等。不光如此，連小米、奇虎360也都在使用HBase，HBase究竟有哪些神奇之處?

　　京東每天的庫房記錄在十億個數量級，商品圖片總共有幾十億張。這些文件基本上都是KB 級別的，關係型資料庫不太擅長處理這些海量小文件。京東最早使用的內存鍵值存儲是Redis，而現在轉而使用了JimDB，您覺得為何會有這麼大的轉變?JimDB與Redis又能否兼容?

　　和京東一樣，360也在嘗試自主研發NoSQL，360為何要自主研發?如何選擇從開源軟體過渡到自主研發的時機?在設計時，360參考中心化和去中心架構的特點，根據自身業務場景進行了融合，從延遲、一致性、集群伸縮方面做了權衡;面對新的混合架構，360遇到了一些前所未有的挑戰，又是如何一一解決和優化的?

　　想真正了解京東和阿里的NoSQL資料庫嗎?想了解360自主研發過程與挑戰嗎?想了資料庫存儲引擎技術發展趨勢嗎? 2015第六屆中國資料庫技術大會(DTCC)上，來自京東高級架構師袁航即將為大家發表主題為《京東內存存儲技術演進》的精彩演講，同時，一淘及搜索事業部離線系統團隊搜索研發專家雨田將為大家講述《HBase在阿里搜索的應用與擴展》，360高級技術專家王超會為大家分享《Bada-構建主從/去中心混合架構的NoSQL》，而華為企業中間件首席架構師彭淵也會給我們分享《高性能原創資料庫引擎Coolhash》。

　　歡迎大家報名參會!大會官網連結：http://dtcc.it168.com/

　　附NOSQL專場演講嘉賓與主題：

　　華為企業中間件首席架構師 彭淵

　　演講主題：高性能原創資料庫引擎Coolhash分享

　　內容簡介：Coolhash是一個java實現的k/v資料庫引擎，採用並行計算引擎設計，單server能達到百萬吞吐量tps，同時改進了傳統hash算法，能夠支持千萬規模數據的秒級範圍查詢和任意模糊查詢，Coolhash實現高性能的同時提供的是持久化存儲，可以超出內存大小限制，同時Coolhash的key指針提供1對1，1對多，多對多的關聯join查詢的新思路，Coolhash是一個nosql資料庫，但是提供了大部分sql的函數功能，還包括簡單的事務處理(ACID)。CoolHash整體只有200k大小，不到1萬行java代碼，沒有任何依賴，高度產品化和易用性強，採用apache2.0開源協議，同時支持windows和linux(unix-like)，非常適合您做新型數據引擎技術的研究參考和應用。

　　本課題會分享資料庫存儲引擎技術的業界發展趨勢，從裸設備存儲到SSD結合內存、從緩存到持久化存儲的靠近，從aerospike到Couchbase的分析，Coolhash的樹型key設計思想和架構，Coolhash跟redis、leveldb的詳細比較，應用場景和技術探討等。

　　一淘及搜索事業部離線系統團隊搜索研發專家 徐斌(花名雨田)

　　演講主題：HBase在阿里搜索的應用與擴展

　　內容簡介：阿里集團搜索系統後臺的Hadoop/HBase混合集群已經達到1000+的規模，計算+存儲一體化的解決方案支撐了淘寶、天貓、B2B、Etao、雲搜索等阿里全部搜索業務線。本次主題除了介紹HBase在阿里搜索技術領域的應用、優化和運維經驗以外，還將介紹我們基於HBase自主研發的HQueue(消息隊列)和HTunnel(HBase增量訂閱服務)，以及基於它們的實時計算解決方案。

　　京東高級架構師袁航

　　演講主題：深入解讀JIMDB—京東分布式緩存與高速NoSQL服務

　　內容介紹：主要涉及Jimdb從無到有, 從1.0得到3.0, 基於規模驅動和痛點驅動的研發歷程; 包含:監控和報警, 故障檢測和自動切換, 遷移和擴容, 基於內存和磁碟的2級存儲 , 基於ssd的新一代NoSQL資料庫等各方面的內容.

　　360高級技術專家 王超

　　演講主題：Bada-構建主從/去中心混合架構的NoSQL

　　內容目錄：在分布式NoSQL遍地開花的今天，我們為何要自主研發?如何選擇從開源軟體過渡到自主研發的時機?在設計時，我們參考中心化和去中心架構的特點，根據自身業務場景進行了融合，從延遲、一致性、集群伸縮方面做了權衡;面對新的混合架構，我們遇到了一些前所未有的挑戰，又是如何一一解決和優化的?歷經三個月的研發，一年多的線上改進，成功解決了當時面對的問題且得到了廣泛認可，架構的優劣和可借鑑性由各位思考

相關焦點

  • 年終獎大盤點:微信普發iPhone6S阿里騰訊20+萬360發AV女優
    在數目上，阿里的年終獎羨煞旁人。總監級別的年終獎從15萬~20萬起，一個月薪2萬的阿里員工年底發15萬的年終獎，外加3000股股票。有行業人士透露，由於阿里成功登陸紐交所上市以及在「雙11」的大豐收，阿里的年終股權激勵會非常誘人，阿里之前上市後曾拿出30.10億元激勵員工。
  • 京東健康市值趕超阿里健康,究竟值錢在哪?
    2020年12月8日，京東健康正式於香港聯交所主板上市，首個交易日收漲55.85%，總市值達3440億港元，一舉超越阿里健康。12月9日，恒生指數公司表示，京東健康將被納入恒生綜合指數、恒生中國企業指數、恒生科技指數、恒生醫療保健指數和恒生港股通新經濟指數。相較而言，阿里健康在2014年「借殼」上市6年後，於今年11月才被納入恒生中國企業指數。由此足以看出資本市場對京東健康的看好。截至12月10日港股收盤，京東健康市值超過3518億港元，高於阿里健康。
  • 京東阿里決戰紫禁之巔受傷的卻是通達系
    京東提出入駐阿里電商平臺要求後，至今未得到回應。於是京東和申通就只能終止合作了。明眼人都可以看出來，京東與申通的分道揚鑣，絕不止表面上的合同結束那麼簡單。京東物流要求入駐阿里電商遭拒，這邊京東將阿里參股的申通逐出合作物流公司名單——快遞江湖，正被人為地劃分南北。
  • 新視角第1105期:十年後京東阿里誰能活下來-搜狐財經
    馬克：京東現在也有自己的支付體系，你看京東白條（5）做起來了，他自己也在做供應鏈金融，打通產業鏈上下遊。　　凌書巖：京東的金融是否能做起來，也是個問題。阿里是已經養成了用戶把錢存在支付寶裡的習慣，餘額寶只是讓用戶把習慣擴大而已，京東就難辦了。　　物流成本PK　　凌書巖：京東的業務太複雜了。
  • 電商平臺:阿里、京東與拼多多的絞肉機大戰
    另一方面，以阿里、京東、拼多多為代表的中國頭部線上零售平臺公司，都對未來短期內的發展給出了超出行業均值的樂觀指引。更重要的是情緒，它們都不認為自己處在整體上的競爭劣勢地位。毫無疑問，長期來看電商行業增速肯定會放緩，如果阿里、京東、拼多多的發展與它們的預期沒偏離太多，那麼唯一的解釋就是市場集中度會加速提高，新平臺電商的機會將越來越渺茫。
  • 阿里、京東分別起訴國家知識產權局
    北京京東叄佰陸拾度電子商務有限公司（簡稱京東公司）認為「雙十一」商標持有人阿里巴巴集團控股有限公司（簡稱阿里集團）在三年內未實際使用該商標，應予撤銷。國家知識產權局覆審後認為，涉案商標在廣告等服務上的註冊應予維持，但在其餘多項服務上應予撤銷。
  • Nosqli:一款功能強大的NoSql注入命令行接口工具
    $ nosqli  NoSQLInjector is a CLI tool for testing Datastores that  do not depend    Usage:    nosqli [command]
  • 京東回應停用申通快遞:自家物流未能接入阿里平臺
    8月18日，京東方面在接受時代財經採訪時確認了這一消息。他們表示，京東開放平臺暫停與申通的合作是因為雙方的合同已經過期，且並未就續約達成一致。不過，京東相關人士也告訴時代財經，雙方續約進展出現停滯的一大原因是京東物流未能接入阿里平臺。「2019年6月，合同到期後，雙方就續約問題在不斷溝通。
  • 360收購金城銀行,叫板騰訊和阿里?
    值得注意的是，360入股天津金城銀行後，將使得後者成為繼微眾銀行、浙江網商銀行之後，國內第三家由網際網路公司任第一大股東的網際網路普惠銀行。而騰訊、阿里分別均佔有各自旗下微眾銀行、網商銀行30%的股份。拿下銀行牌照相關資料顯示，金城銀行是銀保監會批籌的首批5家民營銀行之一，於2015年正式營業，而360控股股東和金城銀行都註冊在天津市。
  • 分眾傳媒與新潮再掐架:百度阿里京東巨頭鏖戰 阿里深套75億後京東...
    8月8日，京東集團宣布對新潮傳媒進行戰略投資。本輪融資近10億元人民幣，由京東集團領投。值得注意的是，就在去年11月，百度也投資了新潮傳媒。 如今，背靠阿里的分眾和背靠百度、京東的新潮傳媒再度「掐架」。看樣子，被金主爸爸相中的梯媒行業競爭，短時間內只會愈發白熱化… 京東想怎麼幹？
  • 阿里騰訊百度京東360……等名字的由來 你如果不知道就out了
    百度4京東:則是取自劉強東的「東」和他前女友龔小京的「京」字。但又不能叫東京吧！京東就是劉強東的思念，痴情。就是奶茶妹不知道怎麼想了。要不改叫「天東」？京東5、360=250+110.說起來大家都知道360是幹嘛的？免費殺毒。當時有人覺得周鴻禕（yi）這群人就是250.然後周鴻禕笑稱自己的智商人類中最高，超過了人類的極限達到了250這個數字。
  • 阿里之後京東開始「交棒」,「二號人物」登場,手握「三駕馬車」
    京東交棒不過，在阿里巴巴之後，京東似乎也開始進入到了「交棒」階段，這讓外界非常的疑惑，因為劉強東在企業家圈中是非常年輕的，不至於這麼早就進行「交棒」，需要注意到的一點是，京東的「交棒」和阿里巴巴有所不同，京東的「交棒」並不是說劉強東直接退休，而是說劉強東開始放權
  • 阿里這次要輸了,萬年老二京東終翻身
    值得注意的是，京東健康的用戶數與阿里健康相差巨大，但是營收相當，利潤也相當。 招股書顯示，京東健康2020年上半年營收達到87.7億元人民幣，淨利潤為3.7億元。而阿里健康中報顯示，上半年阿里健康營收71.6億元，淨利扭虧為盈達到4.36億元。
  • 同城零售,美團、阿里、京東各有幾分機會?
    只是，誰能抓住這機會，就要看誰「考前預習」做的好。工欲善其事，必先利其器。回顧過去的十多年時間，京東在物流的基礎設施布局上可謂一路「逆行」。但與已經盈利的京東物流相比，其對物流體系的效率把控依然要低於京東——這在歷年京東618、雙11期間格外明顯——當京東憑藉著「211限時達」當日下單當日送達的配送時效滿足消費者時，阿里的消費者們則往往一周了還未收到貨。
  • 網際網路醫療江湖 京東健康、阿里健康和平安好醫生誰主沉浮?
    近期，京東健康的上市更是推向短暫的高潮。　　12月8日，京東健康登陸港交所，收盤大漲55.85%，市值達到3440億元，超越阿里健康、平安好醫生，成為目前三家上市企業的老大。　　而其它玩家也在虎視眈眈，如騰訊投資的微醫集團已長成獨角獸，餓了麼、美團、叮噹快藥等也都已加入戰場。　　他們都處於網際網路醫療江湖，是江湖就有紛爭，接下來的網際網路醫療將是誰主沉浮呢?
  • 又一行業「爆發」,規模將超8萬億,阿里、萬達、京東爭相進入
    2014年10月21日，中信21世紀正式改名為「阿里健康」。 阿里健康是阿里巴巴在醫藥健康產業的重要布局，從2014年以來，阿里健康先後完成一系列「完美」運作，阿里健康也迅速成長起來，阿里健康目前已成為一家集網際網路銷售、智慧醫療、健康產業服務的醫療健康服務巨無霸。
  • ...阿里「穩」 京東「高」 拼多多「快」 雲集、蘑菇街、唯品會等...
    從本季度財報上看，三家各有千秋，阿里巴巴在GMV、年度活躍用戶、淨利潤方面領先；京東在單季度營收上躍居首位；拼多多在營收增速方面略勝一籌。其中有幾個數字值得關注：京東2011億元單季營收的「高」；拼多多淨利潤增速92.32%的「快」；阿里淨利潤394.7億元的「穩」。
  • 奢侈品電商賽道難出頭,阿里京東陰影下艱難度日
    阿里今年登頂亞洲市值最高峰，朝著五千億美元市值奔去；京東股價也一路追趕，還曾險些將BAT變成ATJ。作為在美上市的電商中概股，阿里和京東吸引了太多目光，形成了「資本黑洞」。自阿里2014年上市以來，再無電商中概股的登陸納斯達克的消息。寺庫雖打著「阿里之後又一電商中概股」的旗號卻很難分得資本市場的關注，反而更加暴露了其在巨頭陰影下的尷尬。
  • 京東健康、阿里健康、平安好醫生下半場 王者滋養與困者焦慮
    換言之，巨頭看似熱鬧，實則仍是洪荒時代，更多靠「賣藥」來維持牌面，尤其是京東健康、阿里健康。 在此背景下，無論流量輔助、用戶轉化亦或醫藥零售，電商因素加持是重中之重。背靠阿里、京東的全鏈路「補血」，兩者想不封神也難。 京東健康尤甚。
  • 京東、阿里等網際網路巨頭混戰大健康,下階段的打法是什麼
    12月8日，京東健康（06618.HK）港股上市首日股價漲幅55.85%超過110港元，市值達3440億港元，躋身港股網際網路醫療市值第一。阿里健康（00241.HK）當日報收股價23.9港元，平安好醫生（01833.HK）則為91.5港元。