「你的名字」電影濾鏡火爆的背後

「你的名字」濾鏡出自上海時光無線科技有限公司,在這款濾鏡火爆之前,他們的產品主要是時光相冊 App。媒體訪問到這家公司的負責人沈振宇,為大家解密這款濾鏡背後的故事。
評論
評論

本文獲合作媒體 雷鋒網 授權轉載。

《你的名字》最近在中國上映,不到 24 小時,票房突破 6000 萬人民幣,衝到了票房榜首。一同火爆的還有與電影同名的濾鏡。電影上映前一周,「你的名字」濾鏡 就先爆紅了起來,而這也是繼 Prisma 之後,又一款備受推崇的「人工智慧」濾鏡。與 Prisma 不同的是,「你的名字」濾鏡主打日系動漫風格。

「你的名字」濾鏡出自上海時光無線科技有限公司,在這款濾鏡火爆之前,他們的產品主要是時光相冊 App。媒體訪問到這家公司的負責人沈振宇,為大家解密這款濾鏡背後的故事。

時光相冊 App 主要為手機內的照片提供雲端存儲服務,並可以根據照片的主題,對照片進行智慧分類管理以及簡單的編輯處理。沈振宇說:「公司創立時主要就是想將人工智慧技術運用在圖片分類處理類 App 中,日活躍人數在百萬左右,公司 80% 左右的員工都是工程師,但「你的名字」濾鏡的火爆程度卻是始料未及的。」

構想之初,受到 Prisma 的啟發,時光相冊也想做一款可以把照片風格化處理的濾鏡,但沈振宇認為,油畫的風格並不符合中國絕大多數人的審美習慣,想嘗試一種大家都比較喜歡的風格,於是選擇了日系動漫。用了近兩個月的時間,嘗試了許多不同的算法,讓機器去學習新海誠動漫中作品中的紋理特徵,不斷的調教參數,最後達到了「你的名字」濾鏡現在的效果。用戶只需要上傳照片,選擇濾鏡,就可以得到一張充滿新海誠畫風的照片。

「你的名字」濾鏡的核心技術在於對圖片中天空的處理,可以讓任何一張照片中看起來平淡、或是沒有色彩的天空部分,成功貼合成為新海誠動漫中的效果。沈振宇介紹說,濾鏡會對圖片中的天際線進行智慧識別,然後將天空部分摳掉,換上電影裡的藍天白雲。「藍天白雲」的素材都是從新海誠電影的正版片源中截取的,且已獲得官方授權。

據沈振宇介紹,濾鏡取材的電影有《秒速五厘米》、《言葉之庭》以及《你的名字》,開始時選取了幾十張的天空素材,但發現一些素材的貼合效果並不是很好,最後挑選了 20 張左右的天空素材,作為最終濾鏡可以呈現的效果。

問起在處理技術上與 Prisma 是否有不同之處。時光相冊 App 的工程師表示, Prisma 將神經網路的演算法用作端到端的生成模型,直接修改圖片的像素顏色值或者輸出最終的像素顏色值,這樣可以生成一些與原照片差異較大,風格很奇特的圖片,但自然程度和美感可能會不夠好。而「你的名字」濾鏡對機器學習和神經網路的應用主要在於演算法參數的學習和圖像的分割,這些機器學習的預測輸出會作為圖像處理算法的輸入,而真正對圖像做直接處理的算法是受約束和可解釋的。另外,為了在用戶上傳的美感和質量不高的照片中營造整體的「新海誠氛圍」,濾鏡還使用了傳統圖像增強方法和基於圖像的渲染(IBR)方法對圖像進行預處理和後處理。

與圖普科技一位研究圖像風格化算法工程師分析的相同。這位工程師說,「Prisma 的本質是放棄原圖的細節,保留結構資訊,然後將風格圖經常出現的模式與原圖合成。因此,僅用現有的深度學習方法暫時無法這樣對細節進行精挑細選的處理。所以時光相冊是採用了深度學習跟傳統電腦視覺的技術結合,先用深度學習做像素分割,再結合傳統電腦視覺的方法做濾鏡處理。」

濾鏡完成後,先上線了 H5 版本,計劃在小範圍內進行測試,用一周時間完成推廣以及在時光相冊 App 上線,但結果卻超預期。沈振宇說:「一夜過後,伺服器基本上癱瘓了,於是調用了上百台的 TPU 伺服器來支持後台運作,提前在時光相冊 App 上線。 每天都會新增 30 萬左右用戶。」

現在,時光相冊 App 仍在配合發行方進行相關的電影宣傳工作。App 中的濾鏡也還在不斷地更新中,上線了「星空」濾鏡、「古銅」濾鏡以及「花木」濾鏡。其中「星空」濾鏡延續了日系動漫風格,技術原理大致相同,但模型是「重新」訓練過的,天空素材與「你的名字」濾鏡也與不同,前景風格也不同。

而「古銅」濾鏡與「花木」濾鏡同屬於油畫風格。沈振宇說,這兩款濾鏡的處理技術與 Prisma 相同,但做了一些性能優化,提高了圖片渲染速度。新濾鏡的上線主要是為了避免用戶使用「你的名字」濾鏡過於單調的問題,後續也會接著嘗試新的繪畫風格。

對於新濾鏡以及時光相冊 App 今後的運營狀況,沈振宇並沒有更高的預期。顯然,沈振宇深諳「現象級應用」的宿命,也想極力想擺脫這種宿命。

INSIDE 編輯提醒:請留意 App 的資安問題,建議採用 Web 的服務。


王品集團藉 IT 升級抗疫,雲端化數位體質成致勝關鍵

看臺灣餐飲龍頭王品集團如何善用遠傳的雲端服務打造 IT 升級轉型,找到抗疫的關鍵能力,打造靈活致勝關鍵。
評論
Photo Credit::王品集團提供
評論

一場侵襲全球的疫情讓許多產業鏈都重新洗牌,特別是餐飲業在很多市場都變成「慘」業。台灣近期突然升溫的疫情態勢,讓許多企業面臨危機,但也有部分超前部署的業者在衝擊之下快速應變,找到新的營運與服務模式來降低衝擊。且看王品如何善用遠傳的雲端服務打造 IT 升級轉型,找到抗疫的關鍵能力。

機房雲端化降載人力負擔   啟動 IT 轉型奠定數位化創新基礎

臺灣餐飲龍頭王品集團,從 2015 年即開啟了 IT 轉型之路,在完成核心系統整併之後,2016 年開始推動機房雲端化,與遠傳合作把核心的 ERP 和 POS 系統正式轉移到遠傳 FET Cloud 雲端平台,打造更彈性靈活的 IT 架構,也為後續數位化發展奠定強大的基礎,也因為超前部署的數位思維,在去年開始因為疫情帶來餐飲服務模式的衝擊之下,得以快速轉變因應。

內圖1_機房雲端化
Photo Credit::遠傳提供

王品在 2016 年決定擁抱雲端,即是著眼於唯有卸除繁複的機房維運管理工作, IT 部門才有更多的資源來從事創新與營運優化,成為企業內部推動轉型的推手。為了維持核心系統服務不中斷,王品與遠傳雲端團隊前後經過一年的縝密規劃與累積信任,並透過積極靈活的內部推演,最後只花了比預期少一半的時間,即在前端門市絲毫沒有察覺的情況下,無痛完成 ERP 和 POS 系統的龐大資料搬遷上雲。

核心系統上雲後,有遠傳雲端團隊協助 7x24 的維運管理及監控,並採用遠傳電信的骨幹網路,不僅為王品大幅降載 IT 人力負擔,也同時提升系統效能、穩定度與可靠度。王品集團也在此雲端平台上積極展開各項由內而外的服務創新,包含王品集團官網、「王品瘋美食」APP 及 5 月底甫推出的「王品瘋美食購物網」等電商平台都架設在遠傳 FET Cloud 雲端平台上。

內圖2_APP點餐
Photo Credit::遠傳提供

王品集團靠超前部署 IT 轉型快速轉戰電商   遠傳雲端平台扮演穩定後援

因應全國升級三級警戒、餐廳禁內用衝擊之下,餐飲業被迫加速轉型。王品集團原本就有發展電商的計畫,除了與外送平台合作之外,更火速推出「王品瘋美食購物網」,以王品嚴選的概念,將頂級生鮮食材與旗下餐廳的美味料理透過宅配送到消費者的餐桌,搶攻「宅經濟」商機。

Photo Credit::王品集團提供

疫情考驗企業的應變能力,幸好王品早已超前部署雲端化,加上遠傳團隊即時彈性協助擴充雲端資源,多年累積的數位轉型成果在此刻充分展現。這是早期自建自維機房,當有新的服務需求開出時,需從硬體資源擴充開始漫長的導入及上線流程,所難以比擬的速度,也正是 IT 協助企業升級轉型的價值所在。

遠傳以自身轉型經驗出發   助企業找到最合適的 IT 升級轉型模式

遠傳深知數位轉型沒有一步到位的捷徑,而是一場漫長的旅程。身為國內大型企業的代表,遠傳從組織、流程均已踏上數位轉型之路,更結合自家 IT 與「轉型辦公室」的服務能量,將成功經驗「再服務化」,以顧問模式協助企業客戶找到 IT 升級轉型最合適的切入點,並由遠傳專業雲端團隊提供量身訂製的公有/私有/混合雲服務,以及整合大數據、人工智慧、物聯網等「大人物」創新應用的產業解決方案,致力成為企業數位轉型的最佳夥伴。

本文章內容由「遠傳」提供,經關鍵評論網媒體集團廣編企劃編審。