1

近日,雷鋒網發現不少明星和用戶都在微博、朋友圈分享自己的插畫像。這些插畫像輪廓幾乎與本人一致,神情神態有幾分相似。但是細看,這些插畫像似乎都出自同一位畫師之手,哪位畫師能同時畫出成千上萬的畫像?
原來,這位畫師是人工智能。
這些畫像都來自于美圖秀秀的最新產品——人工智能繪畫機器人Andy。作為一位有繪畫才藝的機器人,Andy可以根據用戶的自拍照為用戶畫一張插畫。
Andy背后的人工智能技術如何?美圖作為一款P圖軟件為什么要發力人工智能?雷鋒網特意采訪了美圖秀秀產品負責人姜晗與提供Andy技術支持的MTlab。
雷鋒網了解到,美圖秀秀一直在做人工智能的研發, 2010年美圖成立美圖影像實驗室 (MTlab),2012年,MTLab就開始關注人工智能、深度學習。
美圖CTO張偉此前接受雷鋒網采訪時曾說: “我花70%的時間在上面...... 我們覺得如果再過三年,這家公司不做AI,可能就會空掉了。”
Andy正是MTlab技術的階段性成果。MTlab相關人員告訴雷鋒網,Andy實現的技術包括MTlab的MTface(人臉技術)和MTsegmentation(圖像分割技術),以及最新的影像生成技術(MTgeneration)。影像生成技術(MTgeneration)核心是基于MTlab自主研發搭建的生成網絡Draw Net,通過大數據和深度學習Draw Net可以構建繪畫模型,這些模型包括大到構圖、小到筆觸的不同層面的藝術風格和繪制規則。

拆解一下Andy的技術,我們會發現Andy是這樣制作插畫像的:首先,Andy學習了大量的插畫作品,在此基礎上,自己創建出了通用的繪畫模型。Andy看到用戶的圖片后,通過MTface技術,Andy可以掌握人臉的輪廓、五官位置和特征。再加上MTsegmentation技術,Andy掌握了頭發、衣服和背景區域。最后,利用繪畫模型將掌握的特征表現出來,就得到一張成品的圖片。

從Andy的作品我們可以反觀到其對繪畫模型特點的把握,MTlab相關人員介紹到“比如以Garden風格為例,Andy畫出的人臉,眼睛不會特意去描繪雙眼皮,女生的眼睛下面會加一些腮紅來顯得可愛,這是根據前期的數據學習到的共有的特征,Andy會結合這些特征來繪畫用戶照片,形成插畫風格。” 因為這些設定,不少用戶也評價到,Andy的畫筆也具備一貫的美圖功能。
Andy的技術和產品形態是逐步積累過來的。在2017年初,美圖秀秀上線了一款“手繪自拍”的產品。MTlab相關人員介紹到,手繪自拍初步運用了人工智能,但是當時用戶對這個產品的反映特別好。

(美圖手繪自拍)
手繪自拍主要用到的是人臉技術和圖像分割,在人臉的基礎上做美化。讓人直接擁有漫畫版魔幻光澤的頭發、超大閃亮雙眸和近似透明的皮膚。
我們也看到,現在用計算機繪畫有多種方式:谷歌曾推出AutoDraw,將用戶畫出的簡筆畫,與已有的圖片數據庫進行匹配,進而生成一幅完整的畫;而Prisma主要是在用戶照片上添加風格濾鏡。而Andy是首次完全讓計算機去繪畫、臨摹一張照片。
Andy這個產品是MT generation技術成熟之后的應用。在Andy之前,美圖還用MT generation技術做了一個“混血兒”的應用。通過大數據和深度學習,美圖掌握了不同國家的人的面部特征,然后用Draw Net生成網絡去將用戶的亞洲人照片轉換為歐洲人的照片,用戶就能看到如果自己是歐洲人會長什么樣子。
在問及Draw Net如何學習大量數據時,MTlab相關人員說目前這一部分還是保密狀態,美圖在之后可能會發表論文來解釋,但是目前還是其技術壁壘。
MT generation可以說是MTlab目前最新的技術, MTlab相關人員介紹到MT generation技術也可以運用在別的應用場景。例如“AI美化”,AI會直接幫你調整出一張適合你本人的完美的臉,也就是可以學習亞洲人的審美習慣,然后直接對人臉進行優化。簡單粗暴來說,堪比整容。
從新技術到落地的產品,Andy研發過程特別曲折,摸索過程中經歷了很多次失敗,研發過程周期也很長,前幾個月幾乎沒有進展,直到近兩個月才看到了成效,然后一步步優化。
這一張圖片顯示了Andy早期的繪畫作品和目前的對比。

這也說明,AI繪畫是一個長期學習和迭代的過程。Andy學習了6個月,而人類從零基礎開始學習大概需要2-3年的時間。目前,我們看到Andy在繪畫時只能大致畫出相似的輪廓,還不夠精細,Andy也無法識別眼鏡、耳釘、衣服細節等。然而姜晗也說到,目前用戶對于新的東西的忍耐度都比較高。Andy要繼續走下去,則需要更多努力的學習。
美圖類產品已經出了很多現象級的產品:臉萌、Prisma、“你的名字”版濾鏡等等。而我們看到,這些產品一時間火爆朋友圈,卻又很快被遺忘。
從各種爆款的出現到被人遺忘,反映出美圖行業需要不斷追逐新技術、新創意的現象。姜晗告訴雷鋒網,“美圖秀秀的所有產品都圍繞著‘美’,而‘美’是一種時尚,用戶一直都喜新厭舊。美圖秀秀如果只是停留在現階段,遲早會被市場淘汰,這是我們一直在思考的問題。”
姜晗說,“每個用戶都會想要擁有一張自己的插畫像,這是人工智能一個很好的落地點,Andy的出現正是為了滿足這個普遍的愿望。”
在找到落地場景后,如何讓Andy這款產品走得長遠呢?
姜晗告訴雷鋒網:“美圖秀秀目前有兩個方向:一個是專業化的方向,一個是娛樂化的方向。手繪自拍和繪畫機器人Andy都是現象級的作品。但是如果有好的創意和好的效果,你也可以把這種現象級的生命力無限延長。美圖從11年初推出手機版到現在已經做了很多引爆的項目,而我們會持續挖掘引爆點。專業化的這條路就是提供基礎的圖像功能,長久地去滿足用戶的需求。”
雷鋒網也發現,目前美圖秀秀新上線“美圖黑科技”模塊,“手繪自拍(跨次元相機)”、“夢幻娃娃機”、“少女照片館”、“繪畫機器人Andy”都放進了這個模塊。這些產品都是在基礎功能之上升級的娛樂功能。
姜晗介紹到,Andy在商業上有很大的想象空間,可以在美圖的個性化定制上發揮很大效用。美圖在上半年上線了“美圖定制”,在用戶用美圖秀秀P圖之后,美圖會自動生成多種定制產品:手機殼、抱枕、T恤衫等。 而姜師傅認為Andy的人像插畫很適合做用戶的定制產品。

此外,美圖自己研發的技術也開始走to B的路線,這也是商業化的一種。Andy的插畫或許還需要很長時間來優化,但是其背后的MT generation技術則可以應用落地到更多的場景里。據稱,MTlab會長期的專注于Andy和MT generation技術的研發。他們的最終期望是希望Andy能夠超越插畫師,成為AI界的繪畫大師。
人工智能理解語義、理解圖像是個漫長的過程,而人們一直熱衷于在語言和圖像表達上投入時間。盡管不能真的模擬人與人的對話,人們也很熱衷于和Siri、Cortana、小冰交流,時不時調戲一下。
或許,調戲Andy的繪畫能力也成了一件有趣的事情。
雷峰網原創文章,未經授權禁止轉載。詳情見轉載須知。