問起在處理技術上與Prisma是否有不同之處。時光相冊App的工程師告訴雷鋒網(公眾號:雷鋒網),Prisma將神經網絡用作端到端的生成模型,直接修改圖片的像素顏色值或者輸出最終的像素顏色值,這樣可以生成一些與原照片差異較大,風格很奇特的圖片,但自然程度和美感可能會不夠好。而「你的名字濾鏡」對機器學習和神經網絡的應用主要在於算法參數的學習和圖像的分割,這些機器學習的預測輸出會作為圖像處理算法的輸入,而真正對圖像做直接處理的算法是受約束和可解釋的。另外,為了在用戶上傳的美感和質量不高的照片中營造整體的「新海誠氛圍」,濾鏡還使用了傳統圖像增強方法和基於圖像的渲染(IBR)方法對圖像進行預處理和後處理。
與圖普科技一位研究圖像風格化算法工程師分析的相同。這位工程師告訴雷鋒網,「Prisma的本質是放棄原圖的細節,保留結構信息,然後將風格圖經常出現的模式與原圖合成。因此,僅用現有的深度學習方法暫時無法這樣對細節進行精挑細選的處理。所以時光相冊是採用了深度學習跟傳統計算機視覺的技術結合,先用深度學習做像素分割,再結合傳統計算機視覺的方法做濾鏡處理。」
濾鏡完成後,先上線了H5版本,計劃在小範圍內進行測試,用一周時間完成推廣以及在時光相冊App上線,但結果卻超預期。沈振宇說,「一夜過後,伺服器基本上癱瘓了,於是調用了上百臺的TPU伺服器來支持後臺運作,提前在時光相冊App上線。每天都會新增30萬左右用戶。」
現在,時光相冊App仍在配合發行方進行相關的電影宣傳工作。App中的濾鏡也還在不斷地更新中,上線了「星空」濾鏡、「古銅」濾鏡以及「花木」濾鏡。其中「星空」濾鏡延續了日系動漫風格,技術原理大致相同,但模型是「重新」訓練過的,天空素材與「你的名字」濾鏡也與不同,前景風格也不同。
而「古銅」濾鏡與「花木」濾鏡同屬於油畫風格。沈振宇說,這兩款濾鏡的處理技術與Prisma相同,但做了一些性能優化,提高了圖片渲染速度。新濾鏡的上線主要是為了避免用戶使用你的名字濾鏡過於單調的問題,後續也會接著嘗試新的繪畫風格。
對於新濾鏡以及時光相冊App今後的運營狀況,沈振宇並沒有更高的預期。顯然,沈振宇深諳「現象級應用」的宿命,也想極力想擺脫這種宿命。