用iPhone給林徽因拍照會是啥樣?

2020-12-26 網易科技

(原標題:用iPhone給林徽因拍照會是啥樣?這款「穿越相機」把老照片換成現代風)

如何用iPhone給林肯拍大頭照?除了肉身穿越回19世紀以外,你還可以試試這款「穿越相機」。

照相技術發明100多年以來,有無數歷史名人留下了黑白照片。然而因為時代不同、技術不同以及歲月的侵蝕,這些歷史照片逐漸失真。

能不能用現代相機的風格把他們都恢復原貌呢?

現在,來自華盛頓大學、UC伯克利、谷歌的最新論文Time-Travel Rephotography,將這些照片裡的歷史人物真實地展現在屏幕上。

比如,居裡夫人、愛迪生、林徽因……

放大瑕疵的老照片如何恢復

從黑白照片乃至畫像恢復人臉並不是什麼新鮮事,比如最近恢復兵馬俑、古代帝王的視頻在社交網絡大熱。

但是從古老照片恢復人臉要複雜得多。

我們先看一張著名作家卡夫卡的還原照。Zhang等人恢復的照片粗看起來皮膚上有很多瑕疵,而「穿越相機」恢復的照片似乎自帶「磨皮」。

那麼是前一張恢復照片更加真實嗎?

事實並非如此,卡夫卡臉上的瑕疵是當年底片技術導致的。如果只是簡單給黑白照片填色,那麼就不能充分表徵舊膠片的特性和老化過程。

最早誕生玻璃感光底片只對藍光紫外光敏感,1873年推出的新感光乳膠也只對綠光和藍光敏感。

由於他們都缺乏對紅光的敏感性,造成了人物臉上的雀斑和皺紋被放大,嘴唇變黑。

所以我們今天來看林肯的原始照片,會發現林肯臉上呈現出很多誇張的皺紋:

1907年,對紅藍綠都敏感的全色底片誕生。所以1913年採用新技術拍攝的潘克斯特(時年55歲),臉部皮膚要乾淨和平整得多:

因此,恢復這些歷史照片不僅要考慮照片的模糊、褪色、噪點、低解析度等問題,還要考慮不同老照片對顏色的感光差異。

而這款「穿越相機」相比之前的方法,在人物的還原上避免了當時技術造成的失真。

從StyleGAN2出發

對於1873年之前的照片,作者使用了藍光敏感模型,對於1873年至1907年的照片,手動在藍光敏感和正色底片之間選擇,然後在1907年以後拍攝的照片,則在所有模型中手動選擇。

作者利用StyleGAN2框架將舊照片映射到現代高解析度照片的空間中,從而在統一的框架中實現所有這些效果。

作者使用其他彩色樣本圖像作為參考,它們與黑白圖像具有相似的面部特徵,但包含高頻細節以及自然色和照明。為了進一步減小輸入圖像和現代人像之間的感知身份差距,他們還設計了特別適合於老照片的重建損失。

模型的結構如下:

1、同級編碼器

以低解析度灰度參考圖像I作為輸入,生成具有真實顏色和相似面部特徵的同級圖像Is。

2、同級顏色和細節轉換

為了進一步限制顏色和皮膚細節,使其與同級圖像匹配,模型引入了顏色轉換損失Lcolor強制StyleGAN2的ToRGB層輸出與同級圖像的相似性。

3、老照片的重建損失

為了進一步減小輸入圖像和現代人像之間的感知身份差距,作者特別設計了適合於老照片的重建損失Lrecon,它對老照片的缺陷具有魯棒性。

4、潛在編碼優化

將之前的所有損失函數疊加起來,以此進行優化,生成最終圖像Î。

據作者介紹,生成這樣一張1024×1024的照片,需要在英偉達Titan X上運行10分鐘。

與其他幾種恢復老照片的方法相比,「穿越相機」的效果顯然有著更真實的觀感。

不過,「穿越相機」現在還存在著一些缺點。

首先是對在恢復人物發行與配飾方面存在著錯誤,或者會丟失細節。

另外,生成照片也非常依賴於統計圖像的選擇,如果選擇了和原照片不一樣的種族或性別,會造成黑人變白人、女人變男人。

作者簡介

這篇文章作者包括華盛頓大學、UC伯克利與谷歌等學校與機構的6名學者。

其中第一作者是畢業上海交大ACM班校友羅璇,她現就讀於華盛頓大學。

她今年還有一篇「水淹食堂」的CV論文,因為驚豔的效果引起了不小的轟動。

從交大畢業後,羅璇選擇進入華盛頓大學研究「虛擬視覺」,又先後在迪士尼、谷歌等知名企業實習。

作者在項目主頁中表示,「穿越相機」的代碼將會很快開源。不過根據「水淹食堂」這篇論文開源的節奏,我們恐怕還要等上兩三個月了。

本文來源:量子位 責任編輯:賀錦格_NB18842

相關焦點

  • 用iPhone給林徽因拍照會是啥樣?這款「穿越相機」把老照片換成現代風
    如何用iPhone給林肯拍大頭照?除了肉身穿越回19世紀以外,你還可以試試這款「穿越相機」。能不能用現代相機的風格把他們都恢復原貌呢?現在,來自華盛頓大學、UC伯克利、谷歌的最新論文Time-Travel Rephotography,將這些照片裡的歷史人物真實地展現在屏幕上。比如,居裡夫人、愛迪生、林徽因……
  • 用iPhone給林徽因拍照是啥樣?這款「穿越相機」把老照片變現代風
    曉查 發自 凹非寺量子位 報導 | 公眾號 QbitAI  如何用iPhone給林肯拍大頭照?除了肉身穿越回19世紀以外,你還可以試試這款「穿越相機」。  能不能用現代相機的風格把它們都恢復原貌呢?  現在,來自華盛頓大學、UC伯克利、谷歌的最新論文Time-Travel Rephotography,將這些照片裡的歷史人物真實地展現在屏幕上。  比如,居裡夫人、愛迪生、林徽因……
  • 關於iPhone的拍照技巧,全在這裡
    1.開啟iphone的快速連拍模式快速連拍模式最快能在一秒鐘拍下十張照片,並且手機還會自動識別出其中拍得最好的推薦給你,你只需要長按拍照鍵即可。2.養成橫拍的好習慣別擔心,一秒就能解決。只需輕觸圖上所標示的白色圓鍵就能在拍攝視頻的途中輕鬆抓拍照片啦!
  • 用iphone拍照被嘲笑手殘黨?那是因為還沒用過這玩意!
    其實吧,用iphone拍照已經很簡單了,但有時候依然被嘲笑手殘黨,其實吧,有時候真不是技術方面的原因,可能是手不停使喚,穩都穩不住,還拍個毛的好照片啊
  • 原來iPhone80%的拍照功能,你都用錯了
    ,你都用錯了。可按音量鍵直接拍照利用耳機上的音量鍵拍照可不用解鎖進行拍照長按快門按鈕可實現10張/s連拍延時攝影和慢動作讓視頻更好玩使用網格線拍照那麼,這些簡單的技巧,會表現出怎樣神奇的效果iPhone拍照模式下,可選擇HDR模式:自動、打開或關閉。能夠提高暗處的亮度同時減輕過曝現象。相當於相機中的曝光補償,在使用HDR模式時,iPhone在照片App中會生成兩張照片,供你選擇。
  • 拍照清晰玩法多樣,iPhone Xs讓你隨手拍出精彩
    對於女性來說,拍照功能可以說是一款手機中最重要的功能之一了,能不能拍出生活中的每分精彩,是判斷一款手機好不好的主要理由。手機包裝帶有找靚機平臺的標示。沒有原裝包裝,說明書,充電器和充電線。不過作為禮品來說也還拿得出手,手機成色啥的讓我還是十分滿意的。
  • iPhone拍照的幾個基本技巧!
    小編微信:5539137,查看更多報價在公眾號回復"二手"~說起用iPhone拍照,這可能是很多人的痛點,明明用的都是同款iPhone,在不同人手裡拍出來的照片往往也截然不同,仿佛自己用的是假iPhone。很多人都希望自己能夠拍出高質量且有意境的圖片。
  • 拍照!IPhone 8 Plus與iPhone 8該如何選?
    其實蘋果8和8plus系列一直是我想給大家推薦的兩款手機,他們在拍照遊戲方面根本不用擔心,先通過一張表來給大家看一下他們的參數:通過參數其實也沒有多大區別,就可能會在續航,像素方面有點差別,就看你有少經濟預算。
  • 楊超越真人到底長啥樣?在陽光下拍照忘開美顏,皮膚狀態過於真實
    楊超越真人到底長啥樣?在陽光下拍照忘開美顏,皮膚狀態過於真實!每次在電視上看到楊超越,都覺得她比芭比娃娃還精緻,很多人都忍不住好奇,楊超越真人到底長啥樣呢?當時她在陽光下拍照,卻忘記開美顏,呈現出了最為自然的效果,沒有半分明星架子,仿佛是鄰家小女孩一般。
  • 為什麼攝影師們都喜歡用iPhone拍照了?
    知乎上有個熱門話題:為什麼許多攝影師喜歡用iPhone拍攝而不是其他品牌手機?有個高贊回答這樣說:自己朋友圈裡很多手機廠商的樣片攝影師,雖然是品牌合作攝影師,但更多是用iPhone拍照。包括自己在內,雖然有安卓機,但還是會用iPhone拍攝多一點。為什麼呢?其實,手機拍照並不是所見即所得。
  • 最火的iPhone拍照技巧都在這,不會用手機都白買了!
    大家都知道,iPhone像素高清只要善用拍照技巧出大片是分分鐘的事但很多人只會用不會拍↓
  • 【快捷指令】iphone拍照竅門
    前言iphone拍照竅門快捷指令規則文件,所有技巧數據來源與蘋果官方宣傳視頻,省略大家在官網查找的繁瑣步驟,運行規則即可查看所有宣傳視頻,學會拍照讓您的照片與視頻變得更加美麗。規則文件已經為大家準備好,在文章最底部查看並獲取,本次分享快捷指令規則文件僅支持ios13系統,低版本系統會提示快捷指令格式太新,建議升級系統後進行使用,規則文件在文章最底部查看獲取方法,獲取後添加到快捷指令庫。
  • iPhone SE拍照怎麼樣?
    iPhone SE拍照怎麼樣  拍照方面,iPhone SE攝像頭升級為後置1200萬像素,相比iPhone 5S內置的後置800萬像素攝像頭,單個像素1.22微米,光圈f攝像頭規格提升還是十分明顯的,拍照方面自然會有出色表現。  根據提供的消息資料,就能了解到iPhone SE 拍照怎麼樣。外觀方面,iPhone SE並沒有採用傳聞中的設計,而是完全和iPhone 5s一樣。明顯不同的是,iPhone SE新增了玫瑰金的配色,共有深空灰、銀白、香檳金和玫瑰金四種配色。
  • 用美顏相機拍照算失真嗎
    用手機拍照早已蔚然成風,連我這個特別不喜歡留影的人,在劉閨蜜的帶動下,都變得越來越對拍照上心了。還真別說,拿現在的照片與幾年前的相比,本尊這張老臉,竟然越照越漂亮了。當然這也是我的體重比幾年前減了差不多30斤,連帶的臉型發生了變化,從肥頭大耳變成了有稜有角,雖然還是這張臉,卻顯得順眼了,照出相來連我自己都覺得變化太大了。
  • iphone 11雙卡雙待好用嗎?使用了這些天的iphone感覺怎麼樣
    【iphone 11雙卡雙待好用嗎?使用了這些天的iphone感覺怎麼樣】相對於iphone XR來說,Iphone11這款手機可謂提升相對較多。特別是在它的拍照能力方面,採用的是雙1200萬的鏡頭,整體的手機拍照效果有了質的提升,並且在續航方面也能夠保證iphone XR一貫的優勢,整體的性能也符合A13處理器的特性,綜合能力確實可圈可點。但是,對於這款手機,它依然存在幾個非常突出的問題。我們可以和大家一起聊一聊:1.信號表現確實令我們感覺無奈。
  • iPhone實用拍照秘籍小二樣
    天大北洋蘋果資訊347期 因為輕便,不少人會利用 iPhone 進行拍照或錄影,基本上絕大部分人都會用自動對焦,然後按屏幕下方的按鈕拍攝,簡單方便,但是 iOS 的相機應用程式還有不少元素,而且可以輕易應用於錄影、自拍,甚至影下一些特別的相片,以下與大家分享三個實用的拍照或錄影小技巧。
  • iphone拍照效果大讚的秘密之:神奇的HDR
    本文用通俗易懂的文字講述了iphone(及其他)手機中的HDR原理,對於大家了解HDR攝像及HDR顯示都有一定的幫助,特別是當前HDR日漸成為新的電視宣傳賣點的情況下本文將會為您答疑解惑。自然是有的,後續會詳細介紹。大家拍照時應該會遇到這樣的經驗,在晴朗的天空下拍攝一個不是很亮的景物,如果根據天空的亮度來確定曝光量,可以拍出很清晰的天空,但是下方的景物就會一團漆黑,看不清細節,這是因為天空亮度太高,以其亮度來確定曝光,曝光時間會很短,導致底下景物亮度嚴重不足,各個細節丟失。但是如果以低亮度景物進行曝光,則曝光時間會較長,導致天空均被過曝光,細節部分也同樣嚴重丟失。
  • iPhone SE2和iPhone 8、XR、11 推薦哪個?
    這是iphone時隔4年後,再一次發布iphone SE。前面三年,就有很多喜歡小屏手機的果粉一次次的期盼第二代SE的到來,沒想到蘋果一次次的跳水,直到今年才發布。很多人會說,這是蘋果為了清庫存,才選擇發布iphoneSE2。
  • 我們的寶寶長啥樣使用教程 父母顏值合成app[多圖]
    時下最火的父母圖片顏值合成app,我們的寶寶長啥樣app。這是最近新出的一款用於測試孩子長相的小應用,我們的寶寶長啥樣app可以讓網友們上傳雙親照片然後動態生成孩子照片,男孩和女孩可以任意選擇。特備熱戀當中的男女們可以通過這款我們的寶寶長啥樣app來懷想以後哦!當你們有了寶寶之後他會張啥樣呢?我們的寶寶長啥樣app可以讓你提前知道你的孩子們將來可能會張啥樣。
  • iphone的相機渣?這玩意能釋放iphone鏡頭全部的潛力!
    很多人都說iphone的拍照雖然用起來方便,但拍照效果不怎麼樣,比如有些人就說iPhone6s的拍照效果不如三星S7,甚至還不如S6 edge,