智東西（公眾號(hào)：zhidxcom）

編譯| 程茜

編輯 | 李水青

智東西11月10日消息，本周二，谷歌為其藝術(shù)與文化（Arts and Culture）應(yīng)用程序推出了“寵物肖像（Pet Portraits）”的AI新功能：用戶拍攝的寵物照片可以匹配藝術(shù)作品，例如古埃及雕像、墨西哥街頭藝術(shù)、中國(guó)水彩畫等。

谷歌藝術(shù)與文化應(yīng)用程序于2016年推出。它最初提供了大量的藝術(shù)作品，用戶可以在上面瀏覽藝術(shù)家和藝術(shù)史的信息。此前，谷歌就已經(jīng)推出用于人臉匹配藝術(shù)作品的Art Transfer和Art Selfie功能。

你的寵物像哪個(gè)藝術(shù)作品的形象呢？谷歌藝術(shù)與文化應(yīng)用程序的新功能將告訴你答案。

一、為愛(ài)寵匹配到名畫，主人驚了

在體驗(yàn)“肖像功能”時(shí)，用戶可以為自己的寵物拍照，無(wú)論是狗、貓或馬、鳥等動(dòng)物，都可以在數(shù)萬(wàn)件藝術(shù)作品中找出與照片相匹配的藝術(shù)作品。

用戶可以拍攝或從相冊(cè)上傳寵物的照片，而得到與之相匹配的藝術(shù)作品，谷歌稱之為“藝術(shù)化身”?！八囆g(shù)化身”的藝術(shù)成分占多少呢？谷歌說(shuō)了不算，還要看用戶的體驗(yàn)。

谷歌官網(wǎng)展示了好多動(dòng)物的案例，看下面這只小貓，雖然表情、顏色都十分相像，但總覺(jué)得哪里不對(duì)，明顯左邊更可愛(ài)一點(diǎn)。

終于有一只小貓、小狗以外的動(dòng)物了，連臉上白色的部分都一模一樣。

新動(dòng)物又來(lái)了！這只可愛(ài)的玄鳳鸚鵡的腮紅去哪里了？怪不得匹配度只有76%。

看到下面這張圖片，主人只能驚呼：“這是哪位？”

一張照片也可以匹配多張藝術(shù)作品，我也感受了一下，上傳圖片之后，得到了三個(gè)可愛(ài)的藝術(shù)化身，看起來(lái)相似度還挺高。

但The Verge上展示的案例，就讓主人喜憂參半了。下面這只小狗的花色、表情都近乎完美匹配，連眼白都“模仿”地恰如其分！

但還是有一些被吐槽的地方，看這只小貓，它匹配到的藝術(shù)化身，表情相似但花色完全不同，令人好奇這89%的相似度是怎么來(lái)的。

下面這只花色完全一致的小貓，雖然高達(dá)90%的匹配度，但這驚恐的表情是怎么回事？

寵物肖像與藝術(shù)化身的匹配度就像過(guò)山車，忽高忽低，但究其原因不知道是受寵物形象、位置的影響還是AI算法的識(shí)別問(wèn)題。

二、AI鎖定寵物，比對(duì)數(shù)萬(wàn)件藝術(shù)品

谷歌最新推出的“寵物肖像”功能，依靠算法識(shí)別照片，并對(duì)照片內(nèi)容作出分析，從其數(shù)據(jù)庫(kù)中尋找相似的藝術(shù)作品。

當(dāng)用戶使用“寵物肖像”功能為自己的寵物拍照時(shí)，該應(yīng)用程序會(huì)用計(jì)算機(jī)視覺(jué)算法識(shí)別寵物所在的位置，裁剪圖像并將它們放在相應(yīng)的位置，使得寵物的正面形象位于照片中央。

照片內(nèi)容的位置調(diào)整完成后，機(jī)器學(xué)習(xí)算法會(huì)將寵物的照片與數(shù)萬(wàn)件藝術(shù)作品進(jìn)行匹配，以找到看起來(lái)最相似的藝術(shù)品。

最后，用戶可以將寵物的照片和藝術(shù)作品分享為單個(gè)靜止圖像，或選擇多張圖像生成GIF進(jìn)行發(fā)布。

此外，“寵物肖像”功能還會(huì)提供每件藝術(shù)品背后的故事以及藝術(shù)家的信息，供用戶閱讀。

三、從人“畫”到寵物，背后AI技術(shù)起底

谷歌藝術(shù)與文化應(yīng)用程序早期的自拍匹配功能Art Transfer可讓用戶將自己的臉與著名藝術(shù)作品進(jìn)行比較。

該功能中包含的藝術(shù)作品是基于英國(guó)國(guó)家美術(shù)館、日本MOA藝術(shù)博物館和其他文化機(jī)構(gòu)的藝術(shù)作品，包括文森特·梵高、弗里達(dá)·卡羅、愛(ài)德華·蒙克和列奧納多·達(dá)芬奇等藝術(shù)家的作品。

2018年1月，谷歌的藝術(shù)與文化應(yīng)用程序推出了人像自拍匹配藝術(shù)作品的功能Art Selfie，進(jìn)入這一功能上傳照片后，用戶就可以看到匹配后的藝術(shù)作品以及系統(tǒng)估計(jì)每個(gè)匹配項(xiàng)和用戶臉部的視覺(jué)相似度的百分比。

相比于寵物照片，人臉照片相似度就很高了，看起來(lái)也十分舒服。但為何下面這位匹配度只有53%，不知道是不是因?yàn)檎也坏酱餮坨R的藝術(shù)化身。

但下面這個(gè)，為什么把微笑的小姐姐變成如此嚴(yán)肅的表情？

Art Transfer功能的實(shí)現(xiàn)是基于麻省理工學(xué)院沃森人工智能實(shí)驗(yàn)室的研究人員構(gòu)建的小部件，讓用戶可以對(duì)他們的照片應(yīng)用進(jìn)行相似度藝術(shù)轉(zhuǎn)換。

該研究小組的論文表示，卷積神經(jīng)網(wǎng)絡(luò)中的內(nèi)容和風(fēng)格表示是可分離的。也就是說(shuō)，我們可以獨(dú)立地操縱它們，以產(chǎn)生新的、具有感知意義的圖像。為了證明這一發(fā)現(xiàn)，研究人員從兩個(gè)不同的源圖像生成混合內(nèi)容和樣式表示的圖像。

▲研究小組匹配藝術(shù)作品和照片的過(guò)程（圖片來(lái)源為研究小組論文）

通過(guò)找到同時(shí)匹配照片內(nèi)容表示和相應(yīng)藝術(shù)作品風(fēng)格表示的圖像來(lái)合成圖像。雖然保留了原始照片的整體布局，但構(gòu)成全部風(fēng)景的顏色和局部結(jié)構(gòu)由藝術(shù)品提供。實(shí)際上是以藝術(shù)品的風(fēng)格渲染照片，使得合成圖像的外觀類似于藝術(shù)品，但它顯示的內(nèi)容與照片相同。

谷歌藝術(shù)與文化應(yīng)用程序最初的功能只是展示藝術(shù)作品的信息，直到其匹配藝術(shù)作品的功能上線，其iOS和Android上下載次數(shù)迅速增長(zhǎng)。

結(jié)語(yǔ)：趣用AI，讓藝術(shù)與普通人產(chǎn)生交集

谷歌藝術(shù)與文化應(yīng)用程序最初的功能只是展示藝術(shù)作品的信息，后來(lái)陸續(xù)上線人臉和寵物照片匹配藝術(shù)化身的功能，沖淡了藝術(shù)的乏味，為你的照片添加了一層逼真的藝術(shù)濾鏡。

從人臉識(shí)別到寵物肖像識(shí)別，谷歌利用AI技術(shù)將照片和藝術(shù)作品聯(lián)系到一起，但用戶的使用體驗(yàn)卻參差不齊，有十分逼真的藝術(shù)化身，也有讓主人忍不住翻白眼的匹配對(duì)象，為了留住用戶，谷歌的AI算法可能要更加“精準(zhǔn)定位”了。

來(lái)源：The Verge、Google、康奈爾大學(xué)官網(wǎng)

關(guān)鍵詞： 藝術(shù)作品 寵物 谷歌 藝術(shù) 化身 用戶 圖像 ai 照片 肖像