自相關與偏自相關的簡單介紹

2021-02-19 ATYUN訂閱號

自相關和偏自相關圖在時間序列分析和預測中經常使用。這些圖生動的總結了一個時間序列的觀察值與他之前的時間步的觀察值之間的關係強度。初學者要理解時間序列預測中自相關和偏自相關之間的差別很困難。

在本教程中,您將發現如何使用Python來計算和繪製自相關圖和偏自相關圖。

完成本教程後,您將知道:

讓我們開始吧。

每日最低氣溫數據集

該數據集描述了澳大利亞墨爾本市10年(1981 – 1990年)的最低每日氣溫。

單位為攝氏度,觀測值為3650次。數據來源於澳大利亞氣象局。

點擊這裡了解更多信息並從Dara Market下載數據集。

下載數據集並將其放在您當前的工作目錄中,文件名為「 daily-minimum-thermometer.csv 」。

注意:下載的文件包含一些問號(「?」)字符,必須先刪除它然後才能使用數據集。在文本編輯器中打開文件,並刪除「?」字符。同時刪除文件中的任何頁腳信息。

下面的示例將加載最低每日溫度並繪製時間序列。

1from pandasimport Series2from matplotlibimport pyplot3series= Series.from_csv('daily-minimum-temperatures.csv', header=0)

運行該示例將數據集加載為Pandas序列,並創建時間序列的折線圖。

相關和自相關

統計相關性總結了兩個變量之間的關係強度。我們可以假設每個變量的分布都符合高斯(鐘形曲線)分布。如果是這樣,我們可以使用皮爾遜相關係數(Pearson correlation coefficient)來總結變量之間的相關性。

皮爾遜相關係數是-1和1之間的數字分別描述負相關或正相關。值為零表示無相關。

我們可以使用以前的時間步長來計算時間序列觀測的相關性。由於時間序列的相關性與之前的相同系列的值進行了計算,這被稱為序列相關或自相關。

一個時間序列的自相關係數被稱為自相關函數,或簡稱ACF。這個圖被稱為相關圖或自相關圖。

以下是利用statsmodels庫中使用plot_acf()函數計算和繪製「每日最低氣溫」自相關圖的一個例子。

1from pandasimport Series2from matplotlibimport pyplot3from statsmodels.graphics.tsaplotsimport plot_acf4series= Series.from_csv('daily-minimum-temperatures.csv', header=0)

運行示例創建一個2D平面圖,顯示沿x軸的延遲值以及y軸上的相關性(-1到1之間)。

置信區間被畫成圓錐形。默認情況下,置信區間這被設置為95%,這表明,這段代碼之外的相關值很可能是相關的,而不是統計上的意外。

默認情況下,列印所有延遲值,這讓顯得圖表有些雜亂。我們可以將x軸上的延遲值限制為50,讓圖更容易看懂。

偏自相關函數

偏自相關是剔除幹擾後時間序列觀察與先前時間步長時間序列觀察之間關係的總結。

在滯後k處的偏自相關是在消除由於較短滯後條件導致的任何相關性的影響之後產生的相關性。

– 第81頁,第4.5.6節偏自相關,Introductory Time Series with R。

一項觀察的自相關和在先驗時間步上的觀測包括直接相關和間接相關。這些間接相關是線性函數觀察(這個觀察在兩個時間步長之間)的相關。

偏自相關函數試圖移除這些間接相關。沒有進入數學,這就是偏自相關的直覺。????

下面的示例使用statsmodels庫中的plot_pacf()來計算和繪製最低每日溫度數據集裡的前50個滯後的偏自相關函數。

1from pandasimport Series2from matplotlibimport pyplot3from statsmodels.graphics.tsaplotsimport plot_pacf4series= Series.from_csv('daily-minimum-temperatures.csv', header=0)5plot_pacf(series, lags=50)

運行這個示例創建了前50個滯後的偏自相關的平面圖。

ACF和PACF圖的直覺

時間序列的自相關函數和偏自相關函數的平面圖描述了完全不同的情形。我們可以使用ACF和PACF的直覺來探索一些理想實驗。

自回歸直覺

由具有滯後k的自回歸(AR)過程生成的時間序列。我們知道ACF描述了自相關在這個時間步的觀察和前一個時間步的觀察之間存在直接依賴信息和間接依賴信息。這意味著,我們期望AR(k)時間序列裡的ACF對k的滯後有很強的影響,並且這種關係的慣性將會延續到後來的滯後值中,在某種程度上隨著效果的減弱而逐漸減弱。

我們知道,PACF僅描述觀察與其滯後之間的直接關係。這表明除了k之外的滯後值沒有相關性。這正是ACF和PACF計劃在AR(k)過程中的期望。

移動平均線的直覺

由k的滯後的移動平均(MA)過程產生的時間序列。移動平均過程是先前預測中時間序列剩餘誤差的自回歸模型。考慮移動平均模型的另一種方法是根據最近預測的錯誤來糾正對未來的預測。我們預計ACF在MA(k)的過程中與最近的值顯示出強相關性直到k的滯後,然後急劇下降到低或沒有相關性。這就是生成該過程的方法。

我們預計繪圖將顯示出與滯後的密切關係,以及與滯後的相關性減弱。這正是MA(k)過程的ACF和PACF圖的預計。

總結

在本教程中,您發現了如何使用Python計算時間序列數據的自相關和偏自相關圖。

具體來說,您學到了:

如何計算並創建時間序列數據的自相關圖。

如何計算和創建時間序列數據的偏自相關圖。

解釋ACF和PACF圖的差異和直覺。

相關焦點

  • 自相關
    自相關目錄1 什麼是自相關1.1 自相關概念1.2 自相關產生的原因1.3 自相關表現形式2 自相關後果3自相關檢驗4 自相關補救4.1 廣義差分法4.2 Cochrane—Orcutt迭代法4.3 差分法
  • 自相關、卷積與匹配濾波
    自相關、卷積與匹配濾波1、引言最近被相關、卷積和匹配濾波弄得暈頭轉向,今天總結下這幾個概念以及實際工程實踐中的應用情況
  • 自媒體運營的相關法律常識
    很多時候,評判自媒體相關的衝突,都只能引用別的相關法律,這就使得看似沒有明確規則的自媒體行業,一旦需要規則進行評判,就可能採取自己從未考慮到的規則,這就會對自媒體職業者造成重大影響。為了避免這些不良影響,就要求自媒體人除了解自己將面對什麼樣的法律風險外,還要了解自媒體時代的他律及自律。
  • 自相關和互相關函數計算方法總結及心得體會
    x(t),y(t)在任意兩個不同時刻t1,t2的取值之間的相關程度,自相關函數是描述隨機信號x(t)在任意兩個不同時刻t1,t2的取值之間的相關程度。[轉版友hustyoung]自相關函數是描述隨機信號X(t)在任意兩個不同時刻t1,t2的取值之間的相關程度;互相關函數給出了在頻域內兩個信號是否相關的一個判斷指標,把兩測點之間信號的互譜與各自的自譜聯繫了起來。它能用來確定輸出信號有多大程度來自輸入信號,對修正測量中接入噪聲源而產生的誤差非常有效。
  • 三角函數相關公式的簡單介紹
    小夥伴們,有了之前的基礎,我們今天就來看一看三角函數的相關公式吧。圖片源自CSDN圖片源自CSDN0305三倍角公式06萬能公式小夥伴們,你們了解了三角函數的相關公式了嗎
  • 【Matlab】逐像元偏相關分析
    理論知識:偏相關分析也稱淨相關分析,它在控制其他變量的線性影響的條件下分析兩變量間的線性相關性,所採用的工具是偏相關係數(淨相關係數)。
  • SPSS、EXCLE——偏相關分析
    SPSS、EXCLE——偏相關分析原始數據:一、為什麼要使用偏相關分析相關分析用於分析兩個事物之間的關係情況,比如本題研究「排序」與「入鏈數」之間的關係,此兩者都和相同關鍵詞數有一定的關係,當存在可能會影響兩變量之間的相關性因素時,就需要使用偏相關分析,以得到更科學的結論。
  • stata中的自相關檢驗(LM檢驗、Q檢驗、DW檢驗)操作及其分析
    ,它有多種檢驗方法,包括圖示法、BG檢驗、Q檢驗、DW檢驗等,這裡介紹如何使用stata進行Lm檢驗、Q檢驗、DW檢驗等的檢驗,並對結果如何進行分析與判斷。在給定α=0.05的情況下,BG檢驗的卡方統計量chi2(1)=35.723,對應p值為0.000<0.05,拒絕方程擾動項不存在自相關的原假設,說明方程擾動項存在自相關。
  • 自貿試驗區更新路標等待啟航 記者探訪相關區域-試驗區 外高橋...
    在自貿試驗區新的制度創新驅動下,位於浦東新區的這塊28.78平方公裡前沿陣地,即將見證中國經濟發展奇蹟更精彩的「第二季」。  上海自貿試驗區掛牌前夕,記者探訪外高橋和臨港新城等地,了解全新的自由貿易試驗區給這些區域帶來的點滴變化。
  • 凹凸世界自定義頭像怎麼做 自定義頭像製作方法介紹
    凹凸世界手遊中很多玩家想設置個性化的頭像,那麼凹凸世界自定義頭像怎麼設置呢?還不知道的小夥伴快來一起看看凹凸世界自定義頭像製作方法的相關內容吧。
  • 四葉開啟攪拌器相關介紹
    四葉開啟攪拌器相關介紹 ,「r44opv」   中藍水處理成套設備(南京)有限公司,攪拌器,產品齊全,質量可靠,廣泛應用,歡迎來電諮詢選購!    四葉開啟攪拌器相關介紹潛水回流泵三相鼠籠式電機伏三相防護等級定子絕緣等級直接啟動潛水回流泵軸承軸承或進口品牌使用壽命超過小時潛水回流泵的葉輪?其特點是匹配功率低千瓦轉速低轉分葉片直徑大毫米轉速低體積流場大使用範圍廣!
  • 隨機偏微分方程及其相關主題國際會議南開舉行
    南開新聞網訊(記者 張軼帆 攝影報導)由南開大學陳省身數學研究所主辦的隨機偏微分方程及其相關主題國際會議於4月25日至29日在南開大學省身樓舉行。來自英國、美國、德國、法國、挪威和日本等國家以及國內的概率論及相關領域的著名專家、學者共60餘人參加了本次會議。
  • XMLHTTP的簡單講解及相關概念的介紹
    大家好,我們今日講解「XMLHTTP的簡單講解及相關概念的介紹」,這節內容是「VBA信息獲取與處理」教程中第六個專題「VBA中利用XMLHTTP完成網抓數據」的第一節。第一節 XMLHTTP的簡單講解及相關概念的介紹現在的社會是網絡的社會,離開了網絡,很多工作會變得不通暢。我們日常的生活也是和網絡緊密聯繫一起的,那麼網絡是如何搭建的呢?
  • DNF自走棋叫什麼名字?自走棋模式介紹[多圖]
    DNF自走棋究竟是什麼意思?其實這是新春活動新推出的玩法,版本更新後上線的,不過很多人還不知道這是什麼,所以小編這就來給大家介紹一下自走棋模式,DNF自走棋的玩法將在下方Wie大家介紹,看看這次新版本的更新內容。
  • Windows10系統OneDrive關閉自啟方法介紹
    今天小編就給大家介紹下在win10系統中關閉OneDrive自動啟動的方法。今天小編就給大家介紹下在win10系統中關閉OneDrive自動啟動的方法。 >>>windows10系統使用教程大全
  • 全自動灌裝設備商丘加工廠家相關介紹
    全自動灌裝設備商丘加工廠家相關介紹   全自動灌裝設備商丘加工廠家相關介紹    首先,高壓脈衝電壓非常高,留有很多的安全隱患,有些設備在電解過程中有放電危險而不允許人接近。
  • 自走棋是什麼?《多多自走棋》遊戲模式介紹
    最近大熱的自走棋模式到底是啥?相信大家和我一樣有很多的疑問,那麼就在昨天,我第一次接觸自走棋,大概玩了幾局弄明白了遊戲規則。說到自走棋,大家對刀塔自走棋可能比較熟悉,並且王者榮耀也將上線自走棋模式。《dota2》(刀塔2)由美國Valve公司研發的一款遊戲,dota官方正統自走棋遊戲《刀塔霸業》已於6月份上架谷歌商店,目前安卓系統還不能下載該遊戲,大致會在12月份上線。但是同類型自走棋遊戲《多多自走棋》已經上線開啟刪檔測試,兩款遊戲相差不大。《多多自走棋》由巨鳥多多自主研發,龍淵網絡提供技術及發行的全新多人在線集換式戰棋手遊,並且與騰訊聯合發行。
  • SPSS中的「相關」分析
    本文摘自電子工業出版社《SPSS常用統計分析教程(SPSS 22.0中英文版)(第4版)》。
  • 皇家拼圖好玩嗎 可以自定義的拼圖遊戲介紹
    小編這就來給大家介紹著皇家拼圖這款可以自定義的拼圖遊戲。 遊戲最簡單的12張碎片模式   玩過拼圖類遊戲的玩家們一定知道,以前的拼圖遊戲中只提供幾張固定的拼圖,而且拼圖的碎片數量也都是固定的,玩了幾次之後就會覺得遊戲無聊了。
  • 除了簡單相關分析,我還會典型相關分析
    言歸正傳,接下來帶你學習典型相關分析和SPSS的操作。理論介紹:在一元統計分析中,研究兩個隨機變量之間的線性相關關係,可以用簡單相關係數;研究一個隨機變量與多個隨機變量之間的線性相關關係,可用復相關係數。但如果要研究兩組變量的相關關係時,這些統計方法就無能為力了。