概率論|貝葉斯公式及其推論的理解和運用

2021-01-11 算法與編程之美

貝葉斯公式的得來

在需要計算事件A在事件B下的條件概率時,可以計算P(A|B)=P(AB)/P(B),又因為條件概率公式P(AB)= P(B|A)*P(A),所以可得P(A|B)= P(B|A)*P(A)/P(B)。而在一個樣本空間中,事件B可以劃分成幾個部分,例如下圖中事件B可以分為AB同時發生和A』B同時發生兩種情況,它們共同組成了事件B,所以事件B的概率還可以表示成P(B)=P(AB)+P(A』B)。

根據條件概率公式對P(AB)和P(A』B)變形可以便得到貝葉斯公式:

在上述貝葉斯公式中,我們將事件B看作事件A和A』發生的情況下產生的結果,於是貝葉斯公式便可以簡單的理解成已知結果發生時求導致結果的某種原因的概率。

例如問題1:

「將兩信息分別編碼為A和B傳送出去接收站收到時,A被誤收作B的概率為0.02,而B被誤收作A的概率為0.01.信息A與信息B傳送的頻繁程度為2:1.若接收站收的信息是A,問原發信息是A的概率是多少?」

在這個問題中,設發送信息A為事件A,發送信息B為事件B,接收到信息的信息為A是事件C,接收到的信息為B是事件D,那麼將事件C作為結果,題目也就轉換成了已知結果C發生求條件A的概率問題。

所以可以得到:

P(A|C)=P(AC)/(P(AC)+P(BC))

P(A)=2/3

P(B)=1/3

P(AC)=0.98*2/3

P(BC)=0.01*1/3

帶入數據可計算出P(A|C)=196/197。

貝葉斯推論

貝葉斯公式經過變形可以得到貝葉斯推論:

在這個式子中,把P(A)稱為"先驗概率"(Prior probability),即在B事件發生之前,對A事件概率的一個判斷。

P(A|B)稱為"後驗概率"(Posterior probability),即在B事件發生之後,對A事件概率的重新評估。

P(B|A)/P(B)稱為"可能性函數"(Likelyhood),這是一個調整因子,使得預估概率更接近真實概率。

而在問題1中,P(A)就是先驗概率,是在實驗結果前測試的概率,而P(A|C)Z則是在實驗結果後得到的後驗概率,由於在式子中的調整因子大於1,所以使得先驗概率被增強,事件A發生的可能性變大了。

貝葉斯推論在現實生活中的運用

貝葉斯推理實際是藉助於新的信息修正先驗概率的推理方法。顯然,這樣的方法如果運用得當,可以在依據概率作出決斷時,不必一次收集一個長期過程的大量資料,而可以根據事物發展的情況,不斷利用新的信息來修正前面的概率,作出正確決策。例如,當無法對一件事做出準確的判斷時,可以通過尋找它的調整因子來增大或者減小它的概率,在經過多次調整後,即可將它的概率增加或者減少到可以做出判斷。

相關焦點

  • 條件概率,全概率,貝葉斯公式理解
    由條件概率公式推導出貝葉斯公式:P(B|A)=P(A|B)P(B)/P(A);即,已知P(A|B),P(A)和P(B)可以計算出P(B|A)。假設B是由相互獨立的事件組成的概率空間{B1,b2,...bn}。則P(A)可以用全概率公式展開:P(A)=P (A|B1)P(B1)+P(A|B2)P(B2)+..P(A|Bn)P(Bn)。
  • 全概率公式和貝葉斯公式
    條件概率公式 設A, B是兩個事件,且P(B)>0, 則在事件B發生的條件下,事件A發生的條件概率(conditional probability)為:P(A|B)=P(AB)/P(B)條件概率是理解全概率公式和貝葉斯公式的基礎,可以這樣來考慮,如果P(A|B)大於P(A)則表示B的發生使A發生的可能性增大了。
  • 2021考研數學備考指導:概率統計淺析貝葉斯公式及其應用
    2021考研數學備考指導:概率統計淺析貝葉斯公式及其應用 2021考研已經進入緊張的備考強化階段,考生務必要重視,打好基礎,為將來做準備!
  • 貝葉斯和貝葉斯公式
    貝葉斯在數學方面主要研究概率論。他首先將歸納推理法用於概率論基礎理論,並創立了貝葉斯統計理論,對於統計決策函數、統計推斷、統計的估算等做出了貢獻。貝葉斯思想和方法對概率統計的發展產生了深遠的影響。今天,貝葉斯思想和方法在許多領域都獲得了廣泛的應用。從二十世紀20~30年代開始,概率統計學出現了「頻率學派」和「貝葉斯學派」的爭論,至今,兩派的恩恩怨怨仍在繼續。貝葉斯決策理論是主觀貝葉斯派歸納理論的重要組成部分。
  • 全概率公式&貝葉斯公式
    該怎樣理解這兩個公式呢ԅ(¯ㅂ¯ԅ)?簡單來說,如果導致一個事件發生的原因有很多種,而且各種原因是互斥的,那麼這個事件發生的概率就是每種原因引起該事件發生的概率的總和,而求出這個概率,就是全概率公式要解決的問題而如果一個事件已經發生了,有很多原因都能導致這個事件發生。
  • 概率|全概率公式和貝葉斯公式
    註:有些條件概率不方便直接求,而用貝葉斯公式將其轉換後,每一項我們都可以求得,這種迂迴的方式很方便,但是剛開始使用大家可能在思路上轉不過來,覺得很亂,多做幾個題就會清晰許多,不信你試試    最後我想致謝白志惠老師,在這裡引用她之前寫的一篇文章——「狼來了」的貝葉斯公式解讀:    狼來了這個故事大家都聽過,那麼從心理角度分析,這個小孩是如何一步步喪失村民信任的呢?我們可以藉助貝葉斯公式來解讀。
  • 條件概率和貝葉斯公式 - 圖解概率 03
    條件概率與貝葉斯公式給定條件 B 發生時, A 的條件概率:現在用文氏圖直觀來看什麼是條件概率
  • 複習概率論後,有一些關於概率論前三章的看法
    但是總的來說,我認為概率論要比線性代數和高等數學好拿分,這是我今天衝刺階段複習概率論前三章的感覺。第一章隨機事件及其概率這部分我就重點看了條件概率,貝葉斯公式以及全概率公式,這三個知識點考查非常多,也容易讓我犯渾,但是現在弄明白了,其實貝葉斯公式和全概率公式主要區分一下用的時機,我的獨立理解是求部分概率用貝葉斯公式,求整體概率用全概率公式,還有就是其實兩個公式真正理解了它們的形成就不難記憶甚至不需要記憶,看到題目可以直接想到並且應用。
  • 2011年福建師範大學《概率論與數理統計》考研大綱
    《概率論與數理統計》是數學與應用數學本科專業的基礎課程,是進一步學習隨機數學理論的前提和基礎。概率論是一門從數量角度研究隨機現象內在規律性的學科,數理統計學是一門研究如何有效地收集數據,如何利用概率論思想對數據進行統計推斷或預測,從而為決策提供科學依據和建議。
  • 全概率公式和貝葉斯公式學習筆記(內容來自浙江大學公開課)
    全概率公式百度百科給定義有些拗口:公式表示若事件A1,A2,…,An構成一個完備事件組且都有正概率,則對任意一個事件B都有公式成立。
  • 2020考研數學:概率論各章節知識點梳理
    眾所周知,概率論的知識點又多又雜,需要我們系統的歸類並掌握,這樣才能獲得高分。本文整理了考研數學概率論各章節知識點梳理,希望對大家有所幫助。  隨機事件和概率  (1)樣本空間與隨機事件  (2)概率的定義與性質(含古典概型、幾何概型、加法公式)  (3)條件概率與概率的乘法公式
  • 數學之美:貝葉斯公式估算災備切換概率
    講講概率論中的貝葉斯公式的應用,貝葉斯的應用有很多,比如前面介紹的中國風歌曲識別,除了用餘弦相似,用貝葉斯來判斷也是可以的,有興趣的同學可以試試。今天主要用貝葉斯試算災備切換和重大災難之間的關係。關於條件概率,全概率,貝葉斯公式的介紹就不多說了,網上有很多資料。這裡主要列下公式。條件概率:在B發生的條件下A的概率 P(A|B) = P(AB)/P(B)全概率:P(B) = P(B|A)*P(A) + P(B|A')*P(A'),其中A+A』=全集,其思想是將複雜事件的概率分解為簡單事件的概率之和。
  • 半個月學完概率論與數理統計 (第1章)
    大家好,接下來大概花費半個月時間,我們一起來過一遍《概率論與數理統計》茆詩松版。今天學習的是第一章 隨機事件與概率。做到了解概率論的定義、性質及條件概率(考試重點內容)。1.3,1.4節筆記古典概率主要應用於2種模型。
  • 兩個小例子來理解貝葉斯公式
    關於貝葉斯公式,已經回爐學習過很多次了,但是感覺還是理解的不夠深入,最近又重溫了下,發現和工作生活還是很普遍的,可以不斷的培養這種思維模式。我做了如下的兩個例子來理解貝葉斯公式。這個公式看起來比較有逼格。
  • 2021考研概率論與數理統計衝刺:隨機事件和概率考試要求
    概率論與數理統計是考研數學中尤其重要的一門,在這個階段大家一定不要放鬆,持續備戰方可戰勝困難,下面中公考研小編為大家整理概率論與數理統計相關內容,希望對各位考生有所幫助。隨機事件和概率考試要求1.了解樣本空間(基本事件空間)的概念,理解隨機事件的概念,掌握事件的關係及運算。
  • 科普| 貝葉斯概率模型一覽
    頻率學派主張大數定律,對參數的最佳選擇是使觀測變量概率最大的值;而貝葉斯學派提出了貝葉斯公式和主觀概率,他們認為參數可以是一個分布,並且最初可以通過主觀經驗設置。頻率學派的人對此是無法接受的,他們認為參數應該是一個確定的值不應該有隨機性。舉個例子,有個檢測太陽是否爆炸的探測器,它有 0.3 左右的概率撒謊。當探測器說出太陽爆炸時,兩個學派的人答案是不一樣的。
  • 概率論大師
    泊松的科學生涯開始於研究微分方程及其在擺的運動和聲學理論中的應用。他工作的特色是應用數學方法研究各類物理問題,並由此得到數學上的發現。他對積分理論、行星運動理論、熱物理、彈性理論、電磁理論、位勢理論和概率論都有重要貢獻。泊松也是19世紀概率統計領域裡的卓越人物。他改進了概率論的運用方法,特別是用於統計方面的方法,建立了描述隨機現象的一種概率分布──泊松分布。
  • 條件概率與貝葉斯統計
    頻率論統計學家很清楚,只有兩種可能:探測器擲出一對 6,表示它說了謊;或者擲出其他的數,表示它說的是真的。因為沒有擲出一對 6 的概率是 35/326(97.22%),所以頻率論統計學家得出結論,探測器可能說的是真話。因此,太陽真的可能爆炸了。貝葉斯統計學家在建立概率模型時會加入額外的信息。
  • 貝葉斯與貝葉斯公式
    他非常想證明上帝的存在,於是希望藉助概率統計的知識。當時貝葉斯發現了古典統計學存在的一些缺點,從而提出了自己的一套貝葉斯統計學理論。貝葉斯的理論是基於條件概率的理論上的,所以讓我們來簡單看看條件概率是個什麼東西。
  • 2021考研數學(三)概率論與數理統計部分大綱原文解析
    2021考研數學三概率論與數理統計部分大綱原文解析 2021年考研數學大綱已經發布,概率論與數理統計大綱原文如下: 一、隨機事件和概率 考試內容 隨機事件與樣本空間 事件的關係與運算 完備事件組 概率的概念 概率的基本性質 古典型概率 幾何型概率