偏最小二乘法是什麼?全新SmartPLS 3.3X統計方法來了!

2021-02-20 張偉豪量化學院

你也許了解最小二乘法,但是你聽過偏最小二乘法嗎?它到底是個什麼東西?又是幹嘛用的呢?它和最小二乘法僅一字之差,卻大不相同!

隨著社會科學的發展,在經濟管理、教育學、社會科學、醫學中,多元線性回歸分析已經成為一種普遍應用的統計分析和預測方法。但是,當自變量之間存在多重相關性的時候,我們常用的最小二乘法就會失效,即使採用主成分分析,也無法很好的彌補。

 

很多研究者在遇到這種情況的時候就會開始迷茫,不知道如何是好。今天就給大家推薦一種量化研究神兵利器——偏最小二乘法(PLS)。

偏最小二乘法發展較SEM稍晚,最早是由 Wold (1975) 基於經濟計量分析需求所提出,但卻在化學計量領域獲得重視與普及,目前在經管、營銷、商學領域普遍通行。

PLS 最早被視為數據運算的一種算則,而非具有完整應用程式的統計技術;但近年來 PLS 獲得不同領域研究者的廣泛重視,並應用在不同研究課題,因此逐漸被視為類似於回歸的一種技術,可以說是一種新型的多元統計數據分析方法,它可以同時實現多元線性回歸、主成分分析以及兩組變量之間的相關分析。

PLS相對於CB-SEM對樣本需求較少、PLS無需分析數據符合正態分配、能夠處理多構面的複雜結構模型、可同時處理反映 型指標與形成型指標構面,且 PLS適合於理論之發展,而非理論之測試,因此PLS 特別適用於預測 (R2 )。

 

樣本數在研究中扮演著重要角色,PLS在樣本數較小時,統計檢定力會較SEM來得更佳。Henseler et al. (2009) 認為SEM較適合理論之驗證,而PLS則適合理論之預測。SEM檢視期望協方差矩陣與樣本協方差矩陣模型,所以適合進行驗證理論模型的適用性。PLS主要則是解釋變異(檢視因果關係是否顯著),所以適合理論的建構。

SEM與PLS屬性有所不同但可以互補。

SEM 與 PLS 差異在於 SEM 是針對變量的共變量結構進行分析,藉由定義一個因素結構來解釋變量間的共變關係,因此稱為共變量形式結構方程模式。PLS 則是應用變量的線性整合定義出一個主成分結構後,進而利用回歸原理來解釋檢定主成分間的預測與解釋關係,因此稱為主成分形式結構方程模式 (component-based SEM) 。

 

從方法原理與特性來看,SEM與PLS可應用在相同的一批數據與相同研究課題的分析,所產生的結果或許差異不大,但是背後的運算思維邏輯卻截然不同。

Chin & Newsted  指出PLS優於 SEM:PLS適用於預測變量、非正態性資料、樣本較小時、具有多元共線性、指標為原因指標與欲檢定測量指標是否有效之時。

理論模式未定或發展尚未成熟,可應用PLS而勿進行 SEM分析,以避免模式界定錯誤(model misspecifications),尤其是重要變量之遺漏、與因果關係之混淆。

近年來SmartPLS 3.3X版受到許多研究者的歡迎,軟體內容引進了多個具有特色的分析方法,幫助研究者自動快速完成統計程序。雖然PLS-SEM研究者很努力付出,但這些新方法的文獻仍然很有限,即使有心學習這方面知識的老師或同學,仍很難找到資源來了解它。

因此,為了讓更多研究者了解偏最小二乘法SmartPLS 3.3X的最新統計方法,並知道如何正確高效利用PLS進行完整的論文分析,我們特別推出由統計亞洲一哥張偉豪老師主講的《18小時,PLS全掌握》線上直播課程。

該課程共3天,每天6小時直播。共分為PLS基礎篇、應用篇及進階篇三大部分,該課程把偏最小二乘法的內容從理論到實務,以實例說明如何分析及解讀這些嶄新的統計方法,一步步引導並完整的呈現在大家的面前。

與以往偏最小二乘法的課程不同,該課程主要採用SmartPLS 3.3X教學,為全新的課程內容!

▲採用SmartPLS 3.3X全新統計方法,抓住新的機會窗口,更有利於投上頂級期刊。

▲統計亞洲一哥張偉豪全程授課,3天,18小時手把手教學,實時互動答疑。

▲課程內容由淺到深,由理論到實踐,層層攻破偏最小二乘法的核心難題

√ 了解SmartPLS軟體的操作及基本的理論

√ 了解PLS SSCI投稿實務分析,掌握PLS二、中介、調節及多群組比較分析方法,增加文章價值;

√ 掌握全新SmartPLS的統計方法(SmartPLS 3.3X),找到新的機會窗口,有機會投上一些不錯的期刊。

北京巨大量化科技有限公司及三星統計公司創始人及董事長,全亞洲最會講統計學的專家之一,人稱「統計亞洲一哥」。獨創幽默詼諧卻又入木三分的「白話文統計學」,曾創下單場講座破千人記錄,授課及演講足跡遍布國內外近百所城市、超過100所大學,擁有眾多量化粉絲,統計界的明星神話專家。

張偉豪老師曾任SPSS統計軟體資深顧問,也是臺灣首批通過SPSS專業認證的講師,全亞洲最會上結構方程模型(SEM;Structural Equation Modeling)課程的講師,專門解決統計疑難雜症,具有多年SPSS與Amos教學經驗。擅長統計分析,尤以結構方程模型(SEM, Structural Equation Modeling)為最。

2020年8月24日—26日

09:00 - 12:00

14:00 - 17:00

已具有SEM基礎能力該課程適合社會科學領域或想要學習統計分析的本科、碩博士生、高校老師等各階段研究者,最好有一定結構方程模型基礎。

1. 該課程為線上課程,一經訂閱,無法退款;

2. 該課程直播結束後,可永久回看;

3. 該課程可開具電子發票及出具邀請函,可聯繫微信13121139350。

4. 該課程不提供軟體下載,需自行安裝。

相關焦點

  • 偏最小二乘法到底是什麼?
    今天就給大家推薦一種量化研究神兵利器——偏最小二乘法(PLS)偏最小二乘法發展較SEM稍晚,最早是由 Wold (1975) 基於經濟計量分析需求所提出,但卻在化學計量領域獲得重視與普及,目前在經管、營銷、商學領域普遍通行。
  • 量化分析的神兵利器:偏最小二乘法(SmartPLS)實戰研討會
    偏最小二乘法(Partial Least Square, PLS)為結構方法模型(Structural Equational Modeling, SEM)就是應這種實際需求的另一個分支的多變量統計分析技巧,它是一種多因變量對多自變量的回歸建模方法。可以較好的解決許多以往用普通多元回歸無法解決的問題。主要的應用都是潛變量分析。
  • 最小二乘法
    令: φ = ∑(Yi - Y計)2 (式1-2)  把(式1-1)代入(式1-2)中得:  φ = ∑(Yi - a0 - a1 Xi)2 (式1-3)  當∑(Yi-Y計)平方最小時,可用函數 φ 對a0、a1求偏導數,令這兩個偏導數等於零。
  • 最小二乘法的本質是什麼?
    肯定不是統計吧,那是高中/大學課程。歐氏空間是平坦的、線性的、各向同性的。(用愛因斯坦的話來說就是空間曲率為0)為什麼最小二乘法好使?因為我們處於空間曲率近似為0的空間,多數的物理量和物理定理都滿足歐氏空間的特性。實際上,高斯對於最小二乘法的認識,很有欽定的意味:假定最小二乘法最優,那麼如何如何。至於為什麼它最優,抱歉,高斯本人也不知道。
  • 手把手教你最小二乘法
    今天這期推送的主題是介紹最小二乘法以及如何利用最小二乘法對已有數據進行擬合。之所以會想到這個主題,是因為前段時間在準備美賽時看到很多最小二乘法的應用,但多數關於其原理的帖子要麼晦澀難懂要麼不夠清楚,就像下面這樣,於是乎萌生出這個想法。        (全文共2479字,我也不知道什麼時候能看完。
  • 如何理解最小二乘法?
    文章同步在個人博客網站:https://changshuitaotao.github.io/歡迎訪問無論是傳統的統計學,還是時下火熱的機器學習,線性回歸都是最基礎但又十分重要的模型之一。線性回歸使用了最小二乘法來估計模型參數,如何理解最小二乘法將成為掌握線性回歸的關鍵。
  • 最小二乘法的數學公式
    之前在德輝學堂介紹過最小二乘法,但是有很多好學的小夥伴總是追問,最小二乘法的數學公式究竟是怎麼樣的?      本期的這一篇文章,我們將介紹一個簡潔的最小二乘法數學公式,慢慢剖析它,爭取讓好學的小夥伴們能認識它,然後再結合Excel利用它來做一些計算。
  • 最小二乘法的前世今生,及其與平均值的關係
    使用最小二乘法原理,誤差的平方的和z要最小:帶入數據接出a≈0.557,b≈-0.448.即,這條擬合直線方程為:f(x)=0.557x-0.448。1805年,勒讓德正式對外公布了他關於最小二乘法的研究成果。但是年輕高斯卻不屑一顧,因為他說早在1795年他就用到了這個方法。事情經過大致是這樣的,1801年,義大利天文學家皮亞齊發現了第一顆小行星——穀神星。經過40天的跟蹤觀測後,因為某些原因,皮亞齊失去了穀神星的位置,而此後各類計算方法都沒有得到該行星的運行軌跡。
  • Python實現最小二乘法
    上一篇文章講了最小二乘算法的原理。這篇文章通過一個簡單的例子來看如何通過Python實現最小乘法的線性回歸模型的參數估計。王松桂老師《線性統計模型——線性回歸與方差分析》一書中例3.1.3。Xi=data[u'X']Yi=data[u'Y']"""畫散點圖"""plt.figure()plt.scatter(Xi,Yi,color='red',label='sample data',linewidth=2)plt.legend(loc='lower right')plt.show()散點圖結果如下:散點圖從圖中看出大致服從一個線性分布,所以我們採用一元線性回歸模型來進行分析
  • 最小二乘法(附MATLAB代碼)
    前幾天有一些小夥伴需要小編講一下最小二乘法,小編依稀記得當年數值計算這門課學習過這個知識點,但無奈小編忘得一乾二淨,於是在知乎上看到這位大神對最小二乘法的講解,各位小夥伴如果想直接看這位大神講解的話,可以點擊下方閱讀原文直接進行學習。
  • 學習回歸——最小二乘法
    最小二乘法:https://zh.wikipedia.org/wiki/%E6%9C%80%E5%B0%8F%E4%BA%8C%E4%B9%98%E6%B3%95                    2.3.1最速下降法(1)微分計算在數學中,微分是對函數的局部變化的一種
  • GD&T乾貨|最小二乘法的數學公式詳解
    (GZHl:智慧汽車供應鏈)之前在德輝學堂介紹過最小二乘法,但是有很多好學的小夥伴總是追問,最小二乘法的數學公式究竟是怎麼樣的?本期的這一篇文章,我們將介紹一個簡潔的最小二乘法數學公式,慢慢剖析它,爭取讓好學的小夥伴們能認識它,然後再結合Excel利用它來做一些計算。
  • 利用最小二乘法實現曲線擬合
    簡介在工程問題的計算中,我們經常需要處理一些離散數據的擬合問題,而最小二乘法是處理曲線擬合問題的常用方法。目前,許多軟體都提供有基於最小二乘法進行曲線擬合的功能,例如在Origin和Excel中均可直接利用離散數據進行曲線擬合。然而,這些軟體只能處理一些簡單函數的擬合問題,當需要擬合的函數較為複雜時,或者無法用簡單的表達式來表述時,則往往無法直接進行擬合。
  • 最小二乘法原理(中):似然函數求權重參數
    似然估計本質本質便是根據已有的大量樣本(實際上就是利用已知的條件)來推斷事件本身的一些屬性參數的方法,最大估計更是最能反映這些出現的樣本的,所以這個參數值也是最可靠和讓人信任的,得到這個參數值後,等來了一個新樣本 X(i+1) 後,我們可以預測它的標籤值。
  • 【SPSS數據分析】最小二乘回歸模型在生物醫藥統計分析中的應用詳解(2)——【杏花開生物醫藥統計】
    最小二乘法(又稱最小平方法)是一種數學優化技術。它通過最小化誤差的平方和尋找數據的最佳函數匹配。
  • 常用算法知識:最小二乘的幾何意義及投影矩陣
    拿來拼湊肯定是不行的,最小二乘法告訴我們,這個多項式的係數應該讓每個點的誤差的平方之和最小。(百度百科)最小二乘法(又稱最小平方法)是一種數學優化技術。它通過最小化誤差的平方和尋找數據的最佳函數匹配。利用最小二乘法可以簡便地求得未知的數據,並使得這些求得的數據與實際數據之間誤差的平方和為最小。最小二乘法還可用於曲線擬合。
  • 11個回歸分析方法測度原理
    經典最小二乘回歸以使誤差平方和達到最小為其目標函數。 因為方差為一不穩健統計量,故最小二乘回歸是一種不穩健的方法。為減少異常點的作用,對不同的點施加不同的權重,殘差小的點權重大,殘差大的店權重小。偏最小二乘回歸 長期以來,模型式的方法和認識性的方法之間的界限分得十分清楚。而偏最小二乘法則把它們有機的結合起來了,在一個算法下,可以同時實現回歸建模(多元線性回歸)、數據結構簡化(主成分分析)以及兩組變量之間的相關性分析(典型相關分析)。
  • Python機器學習筆記:證明SVM(3)FlyAI
    2,實對稱矩陣 A 正定若且唯若 A 與單位矩陣合同3,若 A 是正定矩陣,則 A 的逆矩陣也是正定矩陣3. 損失函數  之前提到過「支持向量機(SVM)是 90 年代中期發展起來的基於統計學習理論的一種機器學習方法,通過尋找結構化風險最小來提高學習機泛化能力,實現經驗風險和置信範圍的最小化,從而達到在統計樣本量較少的情況下,亦能獲得良好統計規律的目的。」
  • 高考數學:統計二輪微專題——用最小二乘法求線性回歸方程
    最小二乘法主要用來求解兩個具有線性相關關係的變量的回歸方程,該方法適用於求解與線性回歸方程相關的問題,如求解回歸直線方程,並應用其分析預報變量的取值等.破解此類問題的關鍵點如下:①析數據,分析相關數據,
  • 數據分析師必須掌握的10種統計方法 (1)
    數據科學家是編程、統計、商業意識的集合體。正如Josh Wills說的那樣,「數據科學家是程式設計師中最懂統計的,是統計學家中最懂編程的「。我認識非常多的軟體工程師在轉向數據科學家的路上走得很艱難,因為他們沒有充分理解統計理論。而統計能力在現今的職場上已成為最重要的能力之一。不管你從事什麼工作,已經不能否認整理、分析、合理化數據的重要性了。