今日Paper | PolarMask;時間序列;面部表情編輯;ELECTRA 等

2020-12-17 雷鋒網

PolarMask: 一階段實例分割新思路

特例化的時間序列模型特徵重要度度量

Cascade EF-GAN:以局部焦點進行漸進式面部表情編輯

ELECTRA:預訓練文本編碼器 作為鑑別器而不是生成器

FOAL:用於心臟運動估計的快速在線自適應學習

論文名稱:PolarMask: Single Shot Instance Segmentation with Polar Representation

作者:Enze Xie

發表時間:2019/12/24

論文連結:https://paper.yanxishe.com/review/13545?from=leiphonecolumn_paperreview0325

推薦原因

本文的研究意義:

在本文中,作者介紹了一種新的單實例分割方法——PolarMask,該方法完全卷積且網絡結構簡單,可以最大限度的將其嵌入到大多數現成的檢測方法中使用。通過PolarMask方法可以將實例分割問題轉化為研究中心分類和極坐標距離回歸的輪廓預測問題。此外,作者還對處理高質量採樣的中心示例和密集距離回歸優化進行了探索,發現採用該方法可以顯著提高性能並簡化訓練過程。最後作者通過實驗證明了提出的PolarMask框架在實例分割任務中是明顯優於其他的方法。

論文名稱:What went wrong and when? Instance-wise Feature Importance for Time-series Models

作者:Sana Tonekaboni /Shalmali Joshi /David Duvenaud /Anna Goldenberg

發表時間:2020/3/5

論文連結:https://paper.yanxishe.com/review/13468?from=leiphonecolumn_paperreview0325

推薦原因

1 核心問題:

本文主要研究的是探究在時間序列模型中,何種特徵在哪個時間段對預測結果影響最大的問題。

2 創新點:

在在時間序列分析中,大部分特徵重要度的分布模型都把注意力放在全局級別的重要度中,但是,全局級別的的重要度可能無法產生對個體樣本實例的局部解釋,此類模型不利於用戶理解某個特例的模型結果。本文的工作則聚焦在時間序列中例子級別的特徵重要度,提出了一個通用的時間序列觀測重要度度量方法。該方法在個體歷史數據的分布中採樣,基於合理的反事實上的積分,去估計了在觀測前後預測分布的差異來度量重要度。根據該方法,可以得到在不同時間上的相關特徵複雜度,並且可以得到每個特徵最有影響力(重要度最高)的特定時間點。

3 研究意義:

(1)本文將得到的重要度度量,和基於梯度的解釋,注意力機制以及其他基準在模擬和臨床ICU數據的結果進行了比較,說明了本文的方法可以生成最精確的結果(2)同時,本模型還具有價格低廉,通用的特點(3)並且可以使用在任意複雜時間序列模型和預測器中(4)最後,本文提出的設計是唯一一個對時間序列中每一個特徵都可以確定其重要時間點的方法。

  Cascade EF-GAN:以局部焦點進行漸進式面部表情編輯

論文名稱:Cascade EF-GAN: Progressive Facial Expression Editing with Local Focuses

作者:Wu Rongliang /Zhang Gongjie /Lu Shijian /Chen Tao

發表時間:2020/3/12

論文連結:https://paper.yanxishe.com/review/14229?from=leiphonecolumn_paperreview0325

推薦原因

這篇論文被CVPR 2020接收,考慮的是面部表情編輯的問題。

生成對抗網絡易於在表達密集區域周圍產生偽影和模糊,且在處理諸如從憤怒到笑的轉換時,常會引入不希望的重疊偽影。為克服這些局限性,這篇論文提出級聯表情聚焦生成對抗網絡(Cascade Expression Focal GAN,Cascade EF-GAN),能以局部表情為重點進行漸進式面部表情編輯。引入局部焦點後,Cascade EF-GAN可以更好保留與身份相關的特徵和眼睛、鼻子、嘴巴周圍的細節,從而進一步減少生成的面部圖像中的偽影和模糊。此外,通過將大型面部表情轉換分成多個小面部表情,這篇論文還設計了一種新的級聯轉換策略,這有助於抑制重疊的偽像並在處理大間隙表情轉換時產生更逼真的編輯效果。在兩個公開面部表情數據集上進行的大量實驗表明,Cascade EF-GAN具有出色的面部表情編輯性能。

  ELECTRA:預訓練文本編碼器 作為鑑別器而不是生成器

論文名稱:ELECTRA: PRE-TRAINING TEXT ENCODERS AS DISCRIMINATORS RATHER THAN GENERATORS

作者:Kevin Clark /Minh-Thang Luong /Quoc V. Le /Christopher D. Manning

發表時間:2020/9/24

論文連結:https://paper.yanxishe.com/review/14226?from=leiphonecolumn_paperreview0325

推薦原因

本文重點:隨著bert的爆發,現在在NLP領域眾多的預訓練語言模型已經成為當下的熱點,這篇論文完成了類似的工作

創新點:在NLP領域擁有語言模型 (LM)和掩碼語言模型(MLM),其中BERT就是掩碼語言模型。而本論文提出了一種新的任務replaced token detection,它像語言模型,又像掩碼語言模型。它像MLM一樣訓練一個雙向模型,也像LM一樣學習所有輸入位置。它使用偽token替換真實的token。首先使用一個生成器預測句中被mask掉的token,接下來使用預測的token替代句中的[MASK]標記,然後使用一個判別器區分句中的每個token是原始的還是替換後的。

研究意義:他超過了之前的BERT和XLNET模型。

論文名稱:FOAL: Fast Online Adaptive Learning for Cardiac Motion Estimation

作者:Yu Hanchao /Sun Shanhui /Yu Haichao /Chen Xiao /Shi Honghui /Huang Thomas /Chen Terrence

發表時間:2020/3/10

論文連結:https://paper.yanxishe.com/review/14059?from=leiphonecolumn_paperreview0325

推薦原因

這篇論文被CVPR 2020接收,考慮的是心臟運動估計的問題。

心臟MRI視頻動態估計對於評估人體心臟的解剖結構和功能至關重要。在臨床部署中,由於訓練和測試數據集之間分布不匹配,深度學習模型的性能急劇下降。這篇論文提出了一種新的快速在線自適應學習(Fast Online Adaptive Learning ,FOAL)框架,包括一種基於在線梯度下降的優化器,該優化器由元學習器進行優化。元學習器使在線優化器能夠執行快速而強大的調整。這篇論文通過在兩個公共臨床數據集上的廣泛實驗評估了所提方法。結果表明,與離線訓練的跟蹤方法相比,FOAL準確性更高。

雷鋒網雷鋒網(公眾號:雷鋒網)雷鋒網

相關文章:

今日 Paper | CVPR 2020 論文推薦:元轉移學習;ABCNet;動態圖像檢索;點雲分類框架等

雷鋒網原創文章,未經授權禁止轉載。詳情見轉載須知。

相關焦點

  • 今日Paper|視覺目標;聯合學習;面部反欺;在元學習等
    目錄CVPR 2020 | 檢測視頻中關注的視覺目標CVPR 2020 | D3Feat:密集檢測和3D局部特徵描述的聯合學習CVPR 2020 | 搜索中央差分卷積網絡以進行面部反欺模型的密度估計能力、序列生成能力、BLEU分數之間到底是什麼關係在元學習和具體任務的學習之間尋找平衡CVPR
  • 今日Paper | RevealNet;時間序列預測;無監督問答;實時語義立體...
    from=leiphonecolumn_paperreview0331推薦原因本文已經被提交到ECCV2020。Image Matting是眾多圖像編輯應用中的一個關鍵技術,其需要將對象從圖片分割出來並估計其不透明蒙版。基於深度學習的方法也取得了很大的進展,但大多數現有網絡僅預測alpha遮罩,需要藉助後處理方法來恢復透明區域中的原始前景色和背景色。
  • 今日Paper | MaskGAN;深度人臉識別;人體姿態估計;妝容遷移等
    論文名稱:MaskGAN: Towards Diverse and Interactive Facial Image Manipulation作者:Lee Cheng-Han /Liu Ziwei /Wu Lingyun /Luo Ping發表時間:2019/7/27論文連結:https://paper.yanxishe.com/review/
  • 今日Paper|RevealNet;時間序列預測;無監督問答;實時語義立體匹配等
    目錄F, B, Alpha Matting使用一種基於符號化方法的LSTM網絡進行時間序列預測RevealNet:窺探RGB-D掃描場景中的每個物體BERT還不足以稱之為知識庫:無監督問答任務中BERT對事實性的知識和基於名稱的推理學習能力對比
  • NLP中的Mask全解
    Mask 的作用 處理非定長序列RNN 中的 Mask Attention 中 Mask 2.防止標籤洩露 Transformer 中的 Mask BERT 中的 Mask XLNet 中的 Mask對於 NLP 中 mask 的作用,先上結論: 1. padding mask:處理非定長序列,區分 padding 和非 padding 部分,如在 RNN 等模型和 Attention
  • with polar bears
    The incredible close-ups of wild polar bears were taken by a fearless photographer as he swam just inches away from
  • 今日Paper | 問答系統;3D人體形狀和姿勢;面部偽造檢測;AdderNet等
    為了幫助各位學術青年更好地學習前沿研究成果和技術,AI科技評論聯合Paper 研習社(paper.yanxishe.com),重磅推出【今日 Paper】欄目, 每天都為你精選關於人工智慧的前沿學術論文供你學習參考。
  • 今日Paper | 多人姿勢估計;對話框語義分析;無監督語義分析;自然...
    研究意義:在這個數據集上,解析模型的性能優於序列到序列的方法。論文名稱:The Stanford CoreNLP Natural Language Processing Toolkit作者:ChristopherD.Manning  /Mihai Surdeanu /John Bauer發表時間:2014/6/23論文連結:https://paper.yanxishe.com/review/9235
  • 今日Paper|從純圖像重建世界;層次遞歸網絡序列;注意力神經網絡...
    作者:Zhilin Yang /Ruslan Salakhutdinov發表時間:2017/3/18論文連結:https://paper.yanxishe.com/review/10864?from=leiphonecolumn_paperreview0214核心問題:在序列標註問題中,為了解決傳統的機器學習存在的需要手動構建特徵的問題,這裡常常使用神經網絡的方式,但是神經網絡常常需要大量的數據才可以,那麼現在就面臨一種情況,當數據量不足的時候,如何才可以解決這個問題呢?
  • 哈工大訊飛聯合實驗室發布的中文ELECTRA系列預訓練模型再迎新成員
    項目地址:http://electra.hfl-rc.com 中文法律領域ELECTRA 我們在20G版(原版)中文ELECTRA的基礎上加入了高質量2000萬裁判文書數據進行了二次預訓練,在不丟失大規模通用數據上學習到的語義信息,同時使模型對法律文本更加適配。
  • 今日Paper | 物體渲染;圖像和諧化;無偏數據處理方法;面部偽造檢測...
    Michael /Theobalt Christian /Stamminger Marc /Nießner Matthias發表時間:2018/11/26論文連結:https://paper.yanxishe.com/review/13549?
  • 今日Paper | 深度循環神經網絡;PoseNet3D;AET vs. AED;光場視差...
    發表時間:2019/11/30論文連結:https://paper.yanxishe.com/review/13855?AED: Unsupervised Representation Learning by Auto-Encoding Transformations rather than Data作者:Zhang Liheng /Qi Guo-Jun /Wang Liqiang /Luo Jiebo發表時間:2019/1/14論文連結:https://paper.yanxishe.com
  • BFAST分析MODIS時間序列數據
    BFAST分析MODIS時間序列數據前面分享了一篇論文,打算復現研究一下,查了查用到的方法,在這裡分享Jan Verbeselt寫的教程。教程原文請大家點擊文末 閱讀原文 跳轉。經過測試代碼能夠運行通過。
  • Pandas 時間序列 - 縱覽與時間戳
    時間序列縱覽時間戳 vs.時間段轉換時間戳提供格式參數用多列組合日期時間無效數據紀元時間戳把時間戳轉換為紀元應用 `origin` 參數生成時間戳範圍自定義頻率範圍時間戳的界限依託 NumPy 的 datetime64、timedelta64 等數據類型,pandas 可以處理各種時間序列數據,還能調用 scikits.timeseries 等 Python 支持庫的時間序列功能。
  • 「換臉AI升級版」面部表情、身體動作、視線方向都能實時遷移
    新智元報導 來源:thenextweb編輯:肖琴【新智元導讀】「變臉」技術已經不新奇,來自德國慕尼黑工業大學、史丹福大學等的一組研究人員最近開發了一個叫「HeadOn」的AI,它可以「變人」——根據輸入人物的動作,實時地改變視頻中人物的面部表情
  • 《星際公民》面部追蹤技術演示 浮誇表情十分滑稽
    《星際公民》面部追蹤技術演示 浮誇表情十分滑稽 2018-10-15 21:43:33 來源:遊民星空[編譯] 作者:J1ang 編輯:J1ang 瀏覽:loading
  • 下一代emoji表情可能是你的面部表情
    還在尋找最全的emoji表情包?你out啦!未來最流行的emoji表情可能是你自己的表情,看著屏幕上的小黃臉隨著你的真實表情實時變化,該是多麼有趣的一件事啊。一款新型APP試圖幫助人們更輕鬆地回復朋友們在網上發布的照片和視頻——通過人工智慧技術捕捉人們的面部表情並自動將其轉化成emoji表情。
  • 和人類一樣,這種小動物也能用面部表情表達情緒
    每個人表達情緒的面部表情都是基本一致的。例如,當討厭某種東西時,我們的眼睛會眯起來,鼻子會皺起來,上嘴唇也會變得扭曲。即便是新生兒,也可以通過面部表情來傳達悲傷、開心等情緒。不僅如此,我們還覺得可以通過面部表情來了解寵物的感受。相比之下,其它動物在人類看來似乎是面無表情的。
  • 從口罩(mask)想到的英語單詞「意向」記憶法
    防止新冠病毒傳染的最好辦法,也是最基本的辦法就是勤洗手+戴口罩,一時間口罩已成為緊俏物資。從口罩的英文單詞mask,想到了英語單詞的「意向」記憶法(本人原創說法)。咱們中國人背單詞就是這樣的,一對一的背誦記憶,大概是這樣的:「mask,面具;mask、口罩;….」
  • 時間序列基礎
    時間序列時間序列是通過以往數據對未來預測的一種方法區別於回歸,時間序列必須以時間為索引