看看通話記錄,就能預測貧富?

2021-02-14 決策與行為科學研究中心

  隨著網絡和通信科技的高速發展,移動網際網路已經完全滲入人們的生活,手機作為移動網際網路的載體為人們帶來日益豐富的服務,越來越多的人成為了名副其實的手機黨。

  全世界共有34億人在使用手機,貧窮和發展中地區使用手機的人群也越來越龐大。手機及移動網際網路的普及推動了爆炸性的數據增長。據分析,2019年全球每天收發2936億封電子郵件,僅Facebook,每天就產生了4PB的數據,包含100億條消息,以及3.5億張照片和1億小時的視頻瀏覽。

  海量的手機數據捕捉了豐富的信息。不管是通信事件的頻率和時間,還是個人複雜的社交網絡結構、喜好以及消費支出歷史,都被編碼成一串串0和1組成的數字,存儲在世界上某個角落的巨大機器裡。

  儲存數據的巨大機器價格不菲,運營成本也十分昂貴,那麼這海量的手機數據有什麼具體用途呢

  在商業,大數據分析給企業帶來了深刻的洞察,指導企業的決策。通過分析手機上個人的歷史購買和搜索記錄,可以分析顧客的個人喜好,從而刻畫用戶畫像,進行個性化的產品推薦;通過分析手機上個人的社交網絡,可以看出顧客的交際偏好領域和交際影響大小,判斷顧客的終身價值;通過對個人地理信息的分析,還可以看出地域性的偏好和差異,進行因地制宜的商業活動。

  在政界,通過分析廣大群眾手機上社交媒體的言論, 同樣能幫助預測總統競選……

  2015年發表在《Science》雜誌上的一篇文章表明,通過對移動手機通話記錄進行分析,可以準確地推斷出一個人的社會經濟地位,進而預測國家整體的財富分布狀況。

  Joshua Blumenstock、Gabriel Cadamuro等研究者對盧安達最大的行動電話網絡記錄數據進行分析,隨機抽取了856個手機使用者,進行了問卷調查收集數據,問卷不包含用戶的個人信息,但包含了資產所有權、住房特徵和其他一些基本福利的指標。

  在獲得被調查者的同意後,研究者將問卷調查結果與手機交易資料庫合併,最終從每個被調查者身上得到了75個問卷問題回答和數千個基於電話的互動的歷史記錄,如電話和簡訊,研究者希望能從此推測個人的貧富水平,進而推測出盧安達整個國家的財富分布。

  研究者將問卷中所有關於財富的問題進行主成分分析,選取第一主成分作為一個單一的財富指數,成為個人貧富的評估指標。

  研究者首先從每個人的行動電話交易記錄中自動組合轉換出幾千個定量指標,包含了通信總量、強度、時間和方向性等方面的信息,然後刪除其中不能預測財富的指標,從而獲得更容易推廣、更加簡單的模型,完成特徵的選擇。

  之後,通過交叉驗證對各種監督學習模型進行比較,獲得預測準確度高的模型,並且避免了由於數據過擬合導致樣本外預測效果差的情況。

  通過手機通話數據預測出的貧富情況是精確到個人的,因而沒有其他可用的數據對個體的預測進行驗證,於是研究者將預測的個體數據匯總到地區級。

  他們發現根據移動用戶的通話記錄預測的財富分布(圖1A)與盧安達政府收集的官網數據衡量的財富分布(圖1B)相關性很高,兩張圖片很相似。

  同時,國家不同地區間手機的使用模式相似,通過856個樣本個體對樣本外其他手機持有者貧富情況進行預測,最後能較好地反映國家整體財富分布情況。

財富預測與政府調查數據的比較。(A)  預測綜合財富指數(地區平均值),根據 2009 年的徵集數據計算,並按行政區匯總。(B)  實際綜合財富指數(地區平均值),根據 2010 年 12792 個家庭的政府人口與健康調查(DHS)計算得出。

  傳統普查以全體人員為調查對象,準確性高,但成本高、工作量大、組織複雜且調查內容有限,一個典型的全國性家庭調查花費超過 100 萬美元,需要 12 到 18 個月才能完成, 因而通過普查獲得的國家層面經濟人口的數據常常不完整且滯後。

  比如在非洲,經濟生產的國家統計數據 50%都缺失,私營部門和公共部門等可以使用的小區域數據幾乎不存在。又例如在安哥拉,2014 年之前的最近一次人口普查是在 1970 年進行的,然而在這 44 年期間,官方人口增長了 400%以上,兩次國家調查間長時間的間隔導致了數據的滯後。

  關於一個國家人口經濟特徵可靠的定量數據對於健全的經濟政策和研究至關重要,因而通過行動電話數據來衡量人口特徵將成為一種成本效益高的選擇,具有重要的實踐意義:

1. 相比典型的全國性家庭調查,上述研究的電話調查只花費了 12000 美元,並且花費了 4 周的時間來管理,成本更低,周期更短。2. 對於國家整體情況的預測準確性較高,有利於及時收集本土的信息,便於國家政策的及時調整。3. 與手機數據中豐富的地理空間標記相結合後,數百萬個人用戶的預測屬性使我們能夠以極其精細的空間粒度來研究財富的地理分布,相比傳統普查數據更加精細化。4. 對於一些資源欠缺,無法經常開展普查的地區,此方法具有開創性的意義。

  研究人員還發現,通過這種移動手機數據調查方法不光可以預測地區的平均財富,還可以進一步推廣,預測很多其他方面的宏觀指標。

  比如,可以根據手機通話記錄來估計地區電氣化率,並且衛星對0.55平方公裡網格單元內夜間光照強度的估計值與從問卷中「您的家庭是否有電」這個問題得出的數據相關性很高。

  因而,這種移動手機數據分析方法具有廣泛的前景,很有可能幫助預測國家各種宏觀微觀指標,成為一種低成本的臨時國家統計數據來源。

  隨著網際網路、傳感器,以及各種數位化終端設備的普及,一個萬物互聯的世界正在成型。在未來時代,大數據毫無疑問將徹底改變我們的生活,我們將越來越依賴電子設備,在網際網路上以數據的形式留下我們的足跡,企業和政府通過收集這些數據來獲取我們豐富的信息,包括我們的興趣和行為習慣,甚至可以通過先進的模型從已有的信息推測出新的信息,或者預測我們未來的信息。

  去年,來自美國羅徹斯特大學的Adam Sadilek和來自微軟實驗室的工程師John Krumm就稱他們可以大致預測一個人未來可能到達的位置,最多可以預測到80周後,其準確度高達80%。

  誠然,大數據給我們帶來了無限的時代紅利,比如上述學者通過移動手機數據的分析可以幫助偏遠和交通不便地區進行人口監測、實時評估政策或者將資源定向給最需要的人。

  但隨著我們信息的逐漸透明化,讓我們不禁焦慮,在未來時代我們真的還有隱私可言嗎?企業和運營商是否能遵循基本的營業道德,尊重個人用戶的隱私呢?政府應當如何加強對於數據隱私的監管,保護用戶的隱私呢?應當如何防止數據大亨的崛起與壟斷呢?這或許都將成為未來大數據時代值得深思的問題。

  一個安全有保障的大數據時代需要各方的共同努力,大數據時代並不是一個充斥著算法和機器的冰冷世界,人類的作用依然無法完全替代。

Blumenstock, J., Cadamuro, G., & On, R. (2015). Predicting poverty and wealth from mobile phone metadata. Science, 350(6264), 1073-1076.

文章作者:羅豔琪

文字編輯:蘇 藝

微信編輯:蘇 藝

優薈寶福利第二彈來襲~

優薈寶福利第二彈,參與即有機會獲得30元現金紅包

截至2021年2月6日24:00,參與人數不足100人時,獲得助力最多的50%的參與者可以獲得30元現金紅包;參與人數達到或超過100人時,獲得助力最多的50位參與者可以獲得30元現金紅包。

掃描下方二維碼進入小程序參與活動吧!

*具體活動規則以小程序內規則頁介紹為準。

相關焦點

  • 怎麼查看愛人手機通話記錄?
    1、隱私方面通話記錄涉及到個人的隱私,沒有經過對方的同意,是不能隨便查看的,即使自己想看,也要看看對方的意見。不過,如果對方想隱瞞什麼,一般會把記錄刪除,自己是看不出什麼的,再者,即使你偷偷查看,被發現之後,可能影響的是兩個人。2、想想後果現在網際網路那麼發達,人與人之間的交流通過一部手機就能輕鬆搞定,無論在什麼時候,什麼地方。
  • 如何恢復被刪的通話記錄 通話記錄恢復教程
    我們先看下電話本,找到204條記錄,其實我手機裡只有170條左右,其它的都是已經被刪除掉的。可以根據條件進行模糊查找,這裡有一些重複的,因為我的手機是雙卡,兩個卡上都記錄的就會有兩條記錄。下面來看下通話記錄,它和通信錄是一個資料庫文件,我們選擇不同的類型即可。通話記錄裡包括通話時間,對方號碼,對方姓名,通話類型,通話時長等信息。姓名處是空白的,說明這個電話沒有在通信錄中記錄。
  • 手機通話記錄沒了怎麼辦?安卓手機如何恢復刪除的通話記錄?
    總有人能不小心將手機中的通話記錄誤刪了,然後又急急忙忙的尋求恢復方法。有些人認為這是小題大做,不就是通話記錄嘛,何必呢?
  • 移動手機如何線上查詢通話詳情 移動手機通話記錄如何恢復
    手機通話打破地域限制,不過手機通訊記錄隨著時間遷移不可能保存那麼多,只會顯示目前的通話記錄,要查詢手機通話詳情,只能帶身份證去手機線下營業廳辦理。那麼線上如何查詢手機通話記錄?如何恢復通話記錄?  注意事項:中國移動網上營業廳可以提供(含當月在內)6個月的通話記錄;移動營業廳自助終端僅可以提供(不含當月在內)5個月的通話記錄。如何線上怎麼查移動手機通話記錄  1、打開瀏覽器,輸入;移動營業廳。
  • iPhone找回被誤刪的通話記錄,就這幾招…
    那今天就和大家說iPhone的數據——來電記錄。iPhone有個iCloud雲備份,可以備份通訊錄跟通話記錄。如果你忘記備份了,想找回手機最近的通話記錄,就只能拿著身份證去營業廳裡查詢了。聽起來真麻煩,獅哥今天教大家一個很簡單的辦法,不需要去營業廳,輕鬆找回被誤刪的通話記錄。
  • 貧富的差距 (2)​
    僅僅憑運氣,就能帶來這麼大的貧富差距。所以,所有呼籲貧富均衡的偽君子,無論如何都會變追求結果公平。而結果公平,就是吃大鍋飯,幹多幹少一個樣,剝削富人補貼窮人,造成對生產力的極大破壞。很多窮人,以為追求免費福利,就能給自己帶來好處。實際上呢,6億人口月收入低於1000元,比窮是永遠贏不了的。
  • 蘋果手機通話記錄恢復?
    如有侵權,請在後臺留言聯繫我們進行刪除,謝謝蘋果手機通話記錄恢復?當有很多騷擾電話或者推銷電話時,很多人會選擇清空手機上的通話記錄。如果誤刪了重要的通話記錄怎麼恢復呢?  下面就為大家帶來兩種通話記錄恢復方法。
  • 手機通話記錄怎麼看?
    點擊上方藍字關注,領取手機知識小百科資料如今的手機記錄應該都很少有人用了吧
  • 怎樣查詢手機通話記錄
    我們可以通過查詢手機的通話記錄來得知我們最近一段時間都給誰打過電話,打了多長時間,有時候我們查詢相關信息的時候 ,都會去查通話記錄,今天我就來說一下查詢通話記錄的方法
  • 網絡分析 大尺度通話記錄數據集的網絡分析
    二、大尺度網絡分析Python的GraphLab包下面介紹如何在筆記本電腦上處理百萬級節點關係數據的Python的機器學習軟體包Graphlab。我們採用 IPython Notebook(現在叫Jupyter)。
  • 微信怎麼查詢通話記錄?
    首先要說明:這個微信當中有很多人都在問你想要查找微信通話記錄是很簡單的如果事先沒有錄音的話,後續想了解微信通話記錄內容幾乎是不可能的,除非特殊機關下面是方法:打開手機上的微信APP,然後點擊好友頭像,點擊發起音視頻通話,通話完成後即可在聊天記錄內看到通話記錄。
  • 華為手機打開這個開關,就能自動通話錄音!再也不怕電話會議了
    現在通話內容和聊天記錄都非常重要,在必要的時候還可以當做證據來保障我們在自身權益。
  • 法院到底能否向通信公司調取案件當事人的通話記錄?
    文 | 廬州判官法院在審判和執行工作中,能否向移動、電信等通信企業調取案件當事人及相關人員的通話記錄
  • recover 如何恢復手機刪除的通話記錄
    四、 掃描手機內存中的通話記錄       選擇「通話記錄」 後點擊「開始掃描」。                (如圖所示,不僅可以恢復「通話記錄」還可恢復「簡訊」、「聯繫人」、「照片」等等等~總之功能真的超強大~!)       壁虎數據恢復會自動檢測手機的運行環境。
  • iPhone 如何查看更久的通話記錄?
    ( 來自於 Konsn 抖音的評論 )小哥哥,小哥哥,iPhone 的通話記錄怎麼保留時間長一點?
  • 用python的graphlab進行大尺度通話記錄數據集的網絡分析
    假設我們擁有一個移動通話記錄數據集首先我們在Jupyter環境中先加載graphlab包In [1]import graphlab as glIn [2]# 顯示所有圖形和圖表在ipython notebook內部gl.canvas.set_target('ipynb')
  • iPhone通話記錄總出現陌生號碼,怎麼辦?
    問題1.蘋果手機刪除不了軟體,是自己下載的軟體啊,平時長按圖標就會出現xx圖標的,現在都不會出現
  • 教你幾個辦法恢復手機被刪除的通話記錄
    手機通話記錄被意外刪除了怎麼查看呢?是否還有辦法查詢這些刪除的記錄呢?
  • 對法院調取通話記錄不得而罰款的疑問
    近來,多有法院為尋找債務人等原因,在執行程序中要求移動通信企業提供相關的手機通話記錄,而移動通信企業予以拒絕,最後企業及其工作人員被法院罰款的事件發生
  • 通話清單、實時位置、開房打車記錄、...只需手機號,你的隱私全被洩
    近期,一些信息販子在網絡上公然叫賣,聲稱只要提供一個人的手機號碼,就能查到其所有私密的個人信息,而且範圍覆蓋全國。