【數據嗑靴家系列03】 OLTP和OLAP概念入門兒

2021-02-23 星星之無圻
今天跟小宇宇去看了彭于晏,回家又看了追光吧,彩啊!如果讓我一邊看追光吧一邊學習,我能學一天,為什麼會有這麼搞笑的綜藝,chen志朋哈哈哈笑出鵝叫……相比之下曉明真的清新自然,芬芳淡雅!(我一定要在12點之前用掉今天的發文份額衝衝衝)

回到正題!

我們把數據處理粗暴分成兩大類:聯機事務處理OLTP(on-line transaction processing)、聯機分析處理OLAP(On-Line Analytical Processing)。

60年代,關係資料庫之父E.F.Codd提出了關係模型,促進了聯機事務處理(OLTP:Online Transaction Processing)。1993年,E.F.Codd提出了聯機分析處理(OLAP:Online Analytical Processing)概念,認為OLTP已不能滿足終端用戶對資料庫查詢分析的需要,SQL對大型資料庫進行的簡單查詢也不能滿足終端用戶分析的要求。用戶的決策分析需要對關係資料庫進行大量計算才能得到結果,而查詢的結果並不能滿足決策者提出的需求。因此,E.F.Codd提出了多維資料庫和多維分析的概念,即OLAP。(反正就是OLAP是分析的)

OLTP是傳統的關係型資料庫的主要應用,主要是基本的、日常的事務處理,例如銀行交易。一般都是高可用的在線系統,以小的事務以及小的查詢為主,評估其系統的時候,一般看其每秒執行的Transaction以及Execute SQL的數量。在這樣的系統中,單個資料庫每秒處理的Transaction往往超過幾百個,或者是幾千個,Select 語句的執行量每秒幾千甚至幾萬個。

OLTP的特點一般有:

1.實時性要求高。

2.數據量不是很大,生產庫上的數據量一般不會太大,而且會及時做相應的數據處理與轉移。

3.交易一般是確定的,是對確定性的數據進行存取 。

4.高並發,並且要求滿足ACID原則。比如大型的購物網站秒殺活動時上萬的QPS請求。

OLAP是數據倉庫系統的主要應用,支持複雜的分析操作,側重決策支持,並且提供直觀易懂的查詢結果。OLAP系統多用於在線指標分析,舉個例子:某個AB實驗,A桶用戶比B桶用戶效果好。還希望去下鑽分析到底是那個年齡段的用戶效果好。OLAP系統百花齊放,每一個都有其擅長的領域,例如Apache Kylin,Apache Kudu,ClickHouse等。在這樣的系統中,語句的執行量不是考核標準,因為一條語句的執行時間可能會非常長,讀取的數據也非常多。所以,在這樣的系統中,考核的標準往往是磁碟子系統的吞吐量(帶寬),如能達到多少MB/s的流量。在OLAP系統中,常使用的技術有分區技術,並行技術。如分區技術可以使得一些大表的掃描變得很快(只掃描單個分區),而且方便管理。另外,如果分區結合併行的話,也可以使得整個表的掃描也會變得很快。

OLAP的特點一般有:

1.實時性要求不是很高,比如最常見的應用就是天級更新數據,然後出對應的數據報表。

2.數據量大,因為OLAP支持的是動態查詢,所以用戶也許要通過將很多數據的統計後才能得到想要知道的信息,例如時間序列分析等等,所以處理的數據量很大;

3.OLAP系統的重點是通過數據提供決策支持,所以查詢一般都是動態,自定義的。所以在OLAP中,維度的概念特別重要。一般會將用戶所有關心的維度數據,存入對應數據平臺。

周末快樂快樂快樂!

相關焦點

  • 你們千呼萬喚的工裝靴來啦,誰才是靴中王者?(上)
    對於男人來說,好鞋只有三個標準:舒適、好看、耐操,能擔得起這三個詞的,非工裝靴莫屬。最近在後臺看到好多人留言,想看工裝靴排行。有求必應的小蓋,當然是選擇滿足你們。由於品牌和內容較多,今天先給大家分享幾款排名靠後但入門優選的工裝靴。(想知道「靴中王者」是誰?記得明天來看看)不含廣告否則鞋靴買到假貨NO.12Dr.
  • CAT卡特大黃靴——自帶機械基因的潮靴
    在如今提倡獨立自主的時代,工裝風也漸漸成為很多人的選擇,但是工裝有很多個品牌,足以讓你挑得眼花繚亂,今天要說的,就是有著工裝「傳統」的CAT卡特大黃靴。​CAT卡特做機械的歷史可以追溯到1904年,目前已經發展成為世界上最大的工程機械和建築機械生產商。1988年,CAT卡特開始涉足於時尚領域,生產以CAT為代表標誌的時尚產品,而CAT卡特大黃靴就是其明星產品之一。CAT卡特大黃靴被很多時尚達人推薦,成為很多人工裝風入門的備選之一。
  • CAT卡特大黃靴 自帶機械基因的潮靴
    CAT卡特大黃靴 自帶機械基因的潮靴時間:2020-09-07 09:57   來源:搜狐   責任編輯:青青 川北在線核心提示:原標題:CAT卡特大黃靴自帶機械基因的潮靴 工裝一直以來就是搭配中一道獨特的風景,代表時尚、潮流、酷我、自信,工裝來源於上世紀,因為它不挑身材,耐磨耐穿,慢慢的成為一種獨特的著裝風格
  • CAT卡特工裝靴,一款易輕鬆駕馭的時尚單品
    CAT卡特復古工靴作為一款入門級工靴,越來越被追求簡單潮流風格的年輕人所喜愛。初秋時節,CAT卡特復古工靴霸氣來襲,潮high你的秋冬!  CAT卡特工裝靴最近與Superfiction進行跨界聯名,除了大家日常可見的重器系列外,SF辛勤勞作的Freddy執著推薦腳感舒適、復古有型的經典系列;都會系列則成為工裝靴死忠粉Celine的心頭最愛,低調有型、自穿必備,漫步都市無拘無束;雅痞系列被為夢想打拼的Nick實力代言,越穿越有型、細節滿分;有著極高追求的裁縫Scott則傾力推薦型咖系列,這一系列工藝精緻
  • 入門平臺最佳選!突擊槍系列電源上市
    入門平臺最佳選!突擊槍系列電源上市 2014年03月20日 00:11作者:廠商投稿編輯:張涵文章出處:泡泡網原創     泡泡網電源頻道3月20日 軍威的現代兵器電源系列產品想必各位已經非常了解了
  • 純愛甜甜文《你不許兇我》《我嗑了對家X我的CP》
    1、《我嗑了對家X我的CP》作者:PEPA簡介:衛言梓是個隱形富二代,在老爸的保駕護航下進入娛樂圈成了三線鮮肉,但是因為演技稀爛而總是被嘲。顧依涼則是衛言梓的對家,此人長得好演技好,在這個對家的對比下,衛言梓更是被黑出了天邊彩虹。由於一條微博粉絲的艾特,衛言梓意外發現自己和對家竟然組成了一對cp。
  • 《重啟》同樣是嗑cp,朱一龍這版,我更想嗑胖子紙和吳邪!
    豆瓣評分8點多,創下《盜墓筆記》系列最高分。不得不說,作為一個大的IP,書粉兒稻米的力量也是很強大的。作為原著粉,怎麼可能不嗑「瓶邪」這對cp呢?別問,問就超級甜!emmmmm……但是看了新更新的劇情,我竟然嗑上了胖子和天真的cp糖。是我不乾淨了,但是也太甜了吧!
  • 「小說推薦」《我嗑了對家和我的CP》
    小說推薦《我嗑了對家和我的CP》作者:PEPA關鍵詞:娛樂圈、甜寵前兩天那個讓我推薦danmei甜寵文的朋友,小的這就來了!今天要推薦的這個文真的是輕鬆愉快,將甜寵進行到底。會搜自己對家的名字嗎?衛言梓:嗯,也會……衛言梓就是這樣在網上衝浪時,在一派不美好的聲音中,發現了自己和對家的CP——娘子軍!從前他和顧依涼一顰一笑都是暗戰,在這裡一舉一動卻都是情愫。在網路上黑料滿天飛的時候,這裡就是一個真善美的世界!
  • CAT卡特工裝靴助你新年走花路!
    新的一年,我們要將CAT卡特工裝靴和CAT卡特傳承系列服飾搭配起來,在搭配中尋找快樂,在搭配中尋找動力,在搭配中學會傳承。CAT卡特工裝靴的款式有很多,但是在搭配傳承系列服飾的時候,棕色系的CAT卡特工裝靴依舊是最經典的。在潮流界,顏色的混搭和款式的設計是兩大亮點所在,CAT卡特工裝靴更是如此,它既為穿搭增添了色彩,也保持了自身的設計感。對於大多數人來說,平時工作場合中,大家還是應該穿得成熟穩重,不宜太過個性張揚,CAT卡特工裝靴穩重與個性兼顧,在年輕消費群體中佔據了很大比重。
  • 《我嗑了對家x我的cp》|娘子軍 is rio!
    ——PEPA《我嗑了我對家x我的cp》簡介:文風輕鬆搞笑。衛言梓是個隱形富二代,在老爸的保駕護航下進入娛樂圈成了三線鮮肉,但是因為演技較差而總是被嘲。顧依涼則是衛言梓的對家,此人長得好演技好,在這個對家的對比下,衛言梓更是被黑出了天邊彩虹。
  • 作品集&排版設計入門課 03期報名
    作品集&排版設計入門課,帶你從建立邏輯思維,熟悉軟體,清晰方向,信息整合,連貫風格,再到最終的製作完成。沒有完美的模版和套路,只有獨屬於你的自我展示。 —個人作品— 小紅花販賣機系列
  • 復古靴之王Red Wing,讓我雪藏了Timberland大黃靴
    大黃靴的撞鞋率,比動不動就小一萬的大鵝,不知道要高了多少倍,這種撞鞋率下,再有特點的一雙工裝靴,穿出去也是毫無特色的大眾款,因為真的審美疲勞了。 事實上,工裝靴的選擇遠不止Timberland一種,今天我就和各位聊聊號稱工裝靴之王的Red Wing——紅色之翼。
  • 大數據入門:Scala大數據黃金語言
    在大數據的學習當中,關於程式語言選擇的部分,是很多人在學習初期非常關注的。在企業大數據平臺開發場景下,Java語言是主流選擇,其次涉及到Spark部分,就不得不提到Scala語言。今天的大數據入門分享,我們就具體來講一講大數據黃金語言Scala。
  • 從入門到放棄: 在技術概念的大爆發中何以自處?
    最後我做了逃兵,我想Java這個技術方向是適合那些更聰明的人繼續發展的方向,那你們慢慢玩兒吧,我走了。2005年我放棄Java,走上了Web前端這個新方向,一下就解脫了。所以我們今天的話題有個「從入門到放棄」的噱頭。我在這之前確實是經歷過客戶端開發和後端開發從入門到放棄的過程的。
  • 工裝靴誰更地道?有人為了它,放棄了紅翼
    儘管不是全手工,但對比紅翼入門級的系列靴款,如 875、87111 這些,Chippewa 普遍上做工都會更加精細一點,品相更好。再者是皮革材質。風格硬朗之中帶有雅致感,腳感體貼,做工工整是 Chippewa 最大的亮點,它不像現在那些聲名遠揚的工裝靴品牌那樣,在某一方面格外出色,簡單來說,它只是各方面都做得不錯罷了。假如你想要找雙「入門級」的工裝靴款,那麼在紅翼之外,Chippewa 絕對算得上是一個夠格之選。
  • 《科幻概念設計知識與素材資料入門》- E01
    哈嘍大家好,本期請來了新晉 Concept Artist  斯基 - Marksanwel 來給大家講解一下《科幻概念設計知識與素材資料入門》,
  • 能抗衡地球惡劣環境的CAT卡特大黃靴
    冷風一吹,又到了工裝休閒風搶佔C位的季節了,冬天CAT卡特大黃靴一定是不能缺少的單品之一了,CAT卡特大黃靴不僅將休閒風與工裝風完美融合,還能夠與地球惡劣環境相抗衡,被稱為Walking Machine「行走的機器」,值得點讚!
  • 數據模型概念及類型劃分
    3)數據約束:數據模型中的數據約束主要描述數據結構內數據間的語法、詞義聯繫、他們之間的制約和依存關係,以及數據動態變化的規則,以保證數據的正確、有效和相容。  類型  數據模型按不同的應用層次分成三種類型:分別是概念數據模型、邏輯數據模型、物理數據模型。
  • 推書《我磕了對家x我的CP》:嗑CP將自己嗑彎了,對家也跟著彎了
    2.嗑CP將自己嗑彎了從某種程度上,衛言梓和顧依涼是對家,衛言梓黑子滿天飛,粉絲軍團甚至還隱藏了不少CP粉,看一遍能將臺詞背下來,可是演技堪憂到天怒人怨。顧依涼就不一樣了,演技好RP等等業績指數爆表,業務能力強得不行。此二人同公司,兩家粉絲莫名其妙的撕逼大戰,日日能大戰三百回合那種,關鍵是二位正主話都沒說兩句,就強行成為了對家。
  • 《我嗑了對家X我的CP》丨只要你看我們就是一輩子的朋友
    是的,我說的就是《我嗑了對家X我的CP》,作者真他X的是個鬼才……小編簡單給介紹一下,各位可以根據自己口味選擇是否入坑!(仗義)BL題材,正文清水,番外正在碼;娛樂圈文,一個演技超群顏值能打的2線演員和一個演技那啥但顏值也很能打性格也很好的3線演員的驚天大甜餅!!五百年了!!我已經五百年沒看過這麼好看的文了!!