會自動幫你賦予照片“生命”的AI

哈利波特世界里，能讓報紙上的照片動起來的魔法，現(xiàn)在麻瓜們已經(jīng)掌握得越來越熟練了。

看，16歲的圖靈正穿越時空朝你眨眼、微笑，神態(tài)十分自然。

原本在老照片中沉默的美人，當年眼波流轉(zhuǎn)、巧笑倩兮的模樣，也重新清晰呈現(xiàn)。

而這樣的全家福，是否喚醒了一段有關(guān)過往的回憶？

這就是這個周末國外社交媒體上最火的AI應(yīng)用，呈現(xiàn)在人們眼前的“魔法”。

連李開復(fù)本人都忍不住玩了一把……

無需掌握什么技術(shù)，只要在MyHeritage這個網(wǎng)站上上傳一張老照片，10-20秒之后，AI就會自動幫你賦予照片“生命”。

甚至是雕塑也一樣OK。

如此自然的效果，讓不少網(wǎng)友感嘆：這非常哈利波特。

任何足夠先進的技術(shù)都無法與魔法區(qū)分開來。

神奇的是，這是一個在線家譜網(wǎng)站…

所以，這個當紅炸子雞MyHeritage是什么來頭，咋就突然掀起熱潮了？

當你點進這個網(wǎng)站，你會發(fā)現(xiàn)它的本職其實是一個在線家譜平臺……

真的能幫你方便整理家譜的那一種……你可以在其中填寫每一個家庭成員的信息、上傳照片。

其背后的公司2003年創(chuàng)辦于以色列。截至2020年，該網(wǎng)站已支持42種語言，在全球擁有超過5000萬用戶，并已為用戶構(gòu)建了約5200萬個家譜……

雖然創(chuàng)始人Gilad Japhet是在一個家庭農(nóng)場里搞出了這么一家公司，但扒一扒他們過往的發(fā)展歷程，會發(fā)現(xiàn)MyHeritage還真是前沿技術(shù)弄潮兒。

比如2006年，MyHeritage就推出了人臉識別功能，這個功能可以幫用戶從照片數(shù)據(jù)庫中識別人臉特征，將個體聯(lián)系在一起。

2016年，MyHeritage還推出了一項基因檢測服務(wù)，號稱能幫你發(fā)現(xiàn)你的種族起源，并尋找到新的親戚……目前售價59美元。

據(jù)《國家地理雜志》報道，2018年，MyHeritage提供了5000份這樣的DNA檢測工具包，幫助在美墨邊境散失的移民家庭團聚。

而公開資料顯示，到2019年為止，MyHeritage成為了全球第三大DNA檢測公司。

嗯，從制作家譜，到DNA檢測，再到用AI“復(fù)活”老照片，這個技術(shù)發(fā)展路徑還真挺合理呢?。ㄊ謩庸奉^）

不僅變高清，還能動起來

咳咳，梳（ba）理（gua）完了，我們還是照例說回到技術(shù)本身。

雖然MyHeritage沒有詳細說明這一火爆應(yīng)用背后的技術(shù)細節(jié)，但大致上，讓老照片動起來的效果，需要兩步來完成。

先是用超分辨率，讓照片變得更高清：

然后再用動作遷移，將另一個視頻中的人物動作，“遷移”給照片中的人物。

首先，是超分辨率技術(shù)，也就是通過降噪、增加分辨率等方法，來增加照片的清晰度。

這里，就需要GAN來發(fā)揮作用了，對這種模型進行訓(xùn)練后，再采用其中的生成器，來對低頻圖像進行重建。

整體而言，GAN能夠解決MSE損失函數(shù)缺少高頻信息的問題，從而補全圖像中有關(guān)高頻細節(jié)的內(nèi)容。

利用這種方法重建的圖像，能構(gòu)造出非常細節(jié)的人臉圖像，甚至連馬賽克人臉都能還原。

不過，這種方法也有一些問題，那就是在還原圖像的過程中，模型會更注重圖像風(fēng)格的相似、而非像素的相似（即感知相似）。

所以即使人物逼真，在細節(jié)上也可能會出現(xiàn)像這樣與原圖不一致的情況：

△深度生成算法ILO

當然，將圖片變得清晰后，還需要利用動作遷移，讓照片動起來。

這項技術(shù)能實時提取一段視頻中的任務(wù)關(guān)鍵點，并將這些關(guān)鍵點和照片中的人臉關(guān)鍵點對應(yīng)起來。

利用一項名為“骨架”（skeleton）的技術(shù)，模型將視頻人物的關(guān)鍵點提取出來，并給照片中的人物也標記上對應(yīng)的關(guān)鍵點。

△動作遷移算法TransMoMo

然后，再一幀幀將視頻人物的動作“遷移”到圖片中去。

通過這種方法，哪怕只有一張照片，也能讓里面的人物跟著“開口說話”：

確實接近于“魔法”了。

有人感動，也有人擔(dān)心

除了對“魔法”效果的驚嘆，這樣的技術(shù)，也實實在在帶來了感動。

在reddit熱度高達2.9k的火爆討論之中，就有網(wǎng)友寫下了自己的真實感受：

我試了試我父親的老照片，效果令我哽咽。他在我?guī)讉€月大時就去世了，這是我第一次看見他動起來，眨眼、微笑……

也有網(wǎng)友提出，這要是搭配上AR放到博物館里，讓照片里的人親自給你講述他們的人生故事，那真的簡直了。

不過，也有不少網(wǎng)友表示，擔(dān)心這樣的技術(shù)被濫用，比如拍攝某些小電影……

而雖然MyHeritage強調(diào)他們不會向任何第三方提供用戶上傳的照片，并且未被完全注冊的照片會被自動刪除，但網(wǎng)友仍然對數(shù)據(jù)泄露表示擔(dān)憂。

畢竟MyHeritage本來也有過翻車歷史……

2018年6月，MyHeritage被發(fā)現(xiàn)一個安全漏洞，泄露了超過9200萬名用戶的數(shù)據(jù)。

這些數(shù)據(jù)，包括用戶的Email地址和密碼。

雖然MyHeritage聲稱，用戶家譜、DNA圖譜和信用卡等信息存儲在另一個系統(tǒng)，未被泄露，且在漏洞發(fā)現(xiàn)當天就對用戶進行了雙重身份驗證。

但2019年12月，這些泄露的信息卻出現(xiàn)在了各種非法網(wǎng)站上，正被出售（而且出售的信息不止Email地址和密碼）。

原文標題：現(xiàn)在最好玩的AI竟然來自一個家譜公司？？？

文章出處：【微信公眾號：中山市物聯(lián)網(wǎng)協(xié)會】歡迎添加關(guān)注！文章轉(zhuǎn)載請注明出處。

責(zé)任編輯：haq