智東西（公眾號：zhidxcom）
編譯?|? 程茜
編輯 |? 李水青
智東西11月10日消息，本周二，谷歌為其藝術(shu)(shu)與(yu)文化（Arts and Culture）應用程(cheng)序推出(chu)了“寵物(wu)肖像（Pet Portraits）”的AI新(xin)功能：用戶拍攝的寵物(wu)照片可(ke)以(yi)匹配(pei)藝術(shu)(shu)作品，例如古埃及雕像、墨西哥街頭藝術(shu)(shu)、中(zhong)國(guo)水彩畫(hua)等。
谷歌藝(yi)術與文化應(ying)用程(cheng)序于2016年推(tui)(tui)出。它(ta)最初提供了大量的(de)藝(yi)術作品(pin)(pin)，用戶可(ke)以(yi)在上面瀏覽藝(yi)術家和藝(yi)術史的(de)信(xin)息。此前(qian)，谷歌就已經推(tui)(tui)出用于人臉匹(pi)配(pei)藝(yi)術作品(pin)(pin)的(de)Art Transfer和Art Selfie功能。
你(ni)的寵物像哪個藝術作品的形象呢？谷(gu)歌藝術與文化應用程序(xu)的新功能將告訴(su)你(ni)答案。
一、為愛寵匹配到名畫，主人驚了
在(zai)體驗“肖像功(gong)能”時，用戶(hu)可(ke)以(yi)為自己的(de)寵物(wu)拍照，無論是(shi)狗、貓或馬、鳥等動物(wu)，都可(ke)以(yi)在(zai)數萬件藝術作品中找出與照片相匹(pi)配的(de)藝術作品。
用(yong)戶(hu)可以(yi)拍攝或從相(xiang)冊上傳寵物的(de)照片，而(er)得到與之相(xiang)匹配(pei)的(de)藝術作品(pin)，谷(gu)歌(ge)稱之為“藝術化(hua)身(shen)”。“藝術化(hua)身(shen)”的(de)藝術成分占(zhan)多少(shao)呢？谷(gu)歌(ge)說了不算，還(huan)要看用(yong)戶(hu)的(de)體驗。
谷歌官網展示了好多動物的案例，看下面這(zhe)只小(xiao)貓(mao)，雖然表情、顏(yan)色都十(shi)分相(xiang)像，但總(zong)覺得(de)哪(na)里(li)不對，明顯左邊更(geng)可愛一點。
終(zhong)于有一(yi)只(zhi)小貓、小狗以外的(de)動物(wu)了，連臉上白色的(de)部分都(dou)一(yi)模一(yi)樣(yang)。
新動(dong)物又來了！這只(zhi)可愛的玄(xuan)鳳鸚鵡的腮紅去(qu)哪里了？怪不得匹配度只(zhi)有76%。
看到下面(mian)這(zhe)張(zhang)圖(tu)片(pian)，主人只能驚呼：“這(zhe)是哪位？”
一張照片也(ye)可以匹配多張藝術作(zuo)品，我也(ye)感受了一下，上傳圖(tu)片之(zhi)后，得到了三個可愛的藝術化身，看起(qi)來相似度還挺高(gao)。
但The Verge上(shang)展示的(de)案例，就讓主人喜憂(you)參半了(le)。下(xia)面這(zhe)只小狗(gou)的(de)花色、表情(qing)都近乎完美匹配，連(lian)眼白都“模(mo)仿”地(di)恰如其分(fen)！
但還(huan)是有一些被吐槽(cao)的(de)地方(fang)，看這只小(xiao)貓，它匹配到的(de)藝術化身，表情相似(si)但花色(se)完全(quan)不同，令(ling)人好(hao)奇這89%的(de)相似(si)度是怎么來的(de)。
下(xia)面(mian)這(zhe)只(zhi)花色完全一(yi)致(zhi)的(de)小貓，雖然高達90%的(de)匹配(pei)度(du)，但(dan)這(zhe)驚恐的(de)表情是怎么(me)回事？
寵(chong)物肖像與藝術化身的匹(pi)配度就像過山車，忽(hu)高(gao)忽(hu)低，但究其原因不知(zhi)道是(shi)受寵(chong)物形(xing)象、位置的影響(xiang)還是(shi)AI算法的識別問題(ti)。
二、AI鎖定寵物，比對數萬件藝術品
谷歌最(zui)新(xin)推出的“寵物肖(xiao)像(xiang)”功能，依靠算法識(shi)別照片，并對(dui)照片內容(rong)作出分析(xi)，從其數(shu)據庫中尋找相似的藝術作品(pin)。
當用(yong)戶使用(yong)“寵(chong)物(wu)(wu)肖像(xiang)”功能為自(zi)己(ji)的寵(chong)物(wu)(wu)拍照時，該應用(yong)程(cheng)序會用(yong)計算機視覺算法識(shi)別寵(chong)物(wu)(wu)所在的位(wei)(wei)置(zhi)，裁(cai)剪圖像(xiang)并將它們放在相應的位(wei)(wei)置(zhi)，使得寵(chong)物(wu)(wu)的正面形象位(wei)(wei)于照片中央。
照片內容的位置調整(zheng)完成后(hou)，機器學習(xi)算法會將寵物的照片與(yu)數萬件藝術(shu)作品(pin)進行匹配，以找到看起來最相似的藝術(shu)品(pin)。
最后，用戶可以將寵(chong)物的照片和藝術作品分享(xiang)為單個(ge)靜(jing)止(zhi)圖像，或選(xuan)擇多張圖像生成GIF進行發布(bu)。
此外，“寵物(wu)肖像”功能還會提供(gong)每件藝術(shu)品背后的(de)(de)故事(shi)以及藝術(shu)家(jia)的(de)(de)信息，供(gong)用(yong)戶(hu)閱讀(du)。
三、從人“畫”到寵物，背后AI技術起底
谷(gu)歌藝(yi)術與文化應用程序早期的自拍匹(pi)配功能Art Transfer可讓用戶將自己(ji)的臉與著名藝(yi)術作品進行(xing)比(bi)較(jiao)。
該功能中包(bao)含的藝術(shu)作(zuo)品是(shi)基于(yu)英(ying)國國家(jia)(jia)美術(shu)館、日(ri)本MOA藝術(shu)博物館和其他文化機構的藝術(shu)作(zuo)品，包(bao)括(kuo)文森特(te)·梵高、弗里達·卡羅、愛(ai)德華·蒙克和列奧納多·達芬奇(qi)等藝術(shu)家(jia)(jia)的作(zuo)品。
2018年1月，谷歌的(de)(de)藝術(shu)與文(wen)化(hua)應(ying)用(yong)程序推(tui)出了人(ren)像自(zi)拍匹配(pei)藝術(shu)作品(pin)的(de)(de)功能Art Selfie，進入這一功能上傳照片(pian)后(hou)，用(yong)戶就可(ke)以(yi)看到匹配(pei)后(hou)的(de)(de)藝術(shu)作品(pin)以(yi)及系統估(gu)計(ji)每(mei)個(ge)匹配(pei)項和用(yong)戶臉部的(de)(de)視覺相似度的(de)(de)百分比。
相(xiang)比于寵物照(zhao)片，人臉(lian)照(zhao)片相(xiang)似度(du)就很高了，看(kan)起(qi)來也十分舒服(fu)。但為(wei)何(he)下面這位匹配度(du)只有53%，不知(zhi)道是不是因(yin)為(wei)找(zhao)不到戴眼鏡的藝術化身。
但下(xia)面這個，為什(shen)么把(ba)微笑的(de)小姐(jie)姐(jie)變成如此嚴肅的(de)表情？
Art Transfer功能的(de)實現是基于麻省(sheng)理工學院沃森(sen)人(ren)工智能實驗室的(de)研究(jiu)人(ren)員構(gou)建的(de)小部件，讓用戶可以對他們的(de)照片應用進行相(xiang)似度(du)藝術轉換(huan)。
該研究小組(zu)的(de)論文表示(shi)，卷積神經(jing)網絡中的(de)內容和風格表示(shi)是(shi)可分離的(de)。也就是(shi)說(shuo)，我們可以(yi)(yi)獨立地(di)操(cao)縱(zong)它們，以(yi)(yi)產生(sheng)新的(de)、具有感(gan)知意義的(de)圖像。為(wei)了證明這(zhe)一發現，研究人員從(cong)兩個(ge)不(bu)同的(de)源圖像生(sheng)成混合(he)內容和樣式表示(shi)的(de)圖像。
▲研(yan)究小(xiao)(xiao)組匹配藝(yi)術(shu)作品和照片的過程（圖片來源為研(yan)究小(xiao)(xiao)組論文）
通過找到(dao)同(tong)時匹配照(zhao)片(pian)內容(rong)表示和(he)相應藝術作品風格(ge)表示的(de)圖(tu)像(xiang)來合成(cheng)圖(tu)像(xiang)。雖然(ran)保留了原始照(zhao)片(pian)的(de)整體布局，但構(gou)成(cheng)全(quan)部風景的(de)顏色和(he)局部結構(gou)由藝術品提(ti)供。實際上(shang)是以藝術品的(de)風格(ge)渲染照(zhao)片(pian)，使(shi)得合成(cheng)圖(tu)像(xiang)的(de)外(wai)觀(guan)類(lei)似于(yu)藝術品，但它(ta)顯示的(de)內容(rong)與照(zhao)片(pian)相同(tong)。
谷歌藝(yi)術與文化(hua)應用程序最初的(de)功能(neng)只是展(zhan)示藝(yi)術作品的(de)信息，直到其匹配藝(yi)術作品的(de)功能(neng)上(shang)線(xian)，其iOS和Android上(shang)下載次數迅速增長。
結語：趣用AI，讓藝術與普通人產生交集
谷歌藝(yi)術(shu)與文化應用程序最(zui)初的功(gong)能只是展示藝(yi)術(shu)作品(pin)的信息(xi)，后來陸續上線人臉和寵物照片匹配藝(yi)術(shu)化身的功(gong)能，沖淡(dan)了藝(yi)術(shu)的乏味(wei)，為(wei)你的照片添加了一層(ceng)逼真的藝(yi)術(shu)濾鏡。
從人(ren)臉(lian)識別到寵物(wu)肖像識別，谷歌利用(yong)AI技術(shu)將照片和藝(yi)術(shu)作品聯系到一起(qi)，但用(yong)戶(hu)的使(shi)用(yong)體驗卻參差不(bu)齊，有(you)十分(fen)逼真的藝(yi)術(shu)化身，也有(you)讓主人(ren)忍不(bu)住翻白(bai)眼的匹配對(dui)象，為(wei)了(le)留住用(yong)戶(hu)，谷歌的AI算法可能要更加“精(jing)準定(ding)位”了(le)。
來(lai)源：The Verge、Google、康奈(nai)爾大學官網
