专访| 绘画机械人Andy的出身与美图秀秀在人工智能技能上的野心_美图_技巧
原来,这位画师是人工智能。
这些画像都来自于美图秀秀的最新产品——人工智能绘画机器人Andy。作为一位有绘画才艺的机器人,Andy可以根据用户的自拍照为用户画一张插画。
Andy背后的人工智能技能如何?美图作为一款P图软件为什么要发力人工智能?雷锋网特意采访了美图秀秀产品卖力人姜晗与供应Andy技能支持的MTlab。
Andy背后的新技能——MTgeneration
雷锋网理解到,美图秀秀一贯在做人工智能的研发, 2010年美图成立美图影像实验室 (MTlab),2012年,MTLab就开始关注人工智能、深度学习。
美图CTO张伟此前接管雷锋网采访时曾说: “我花70%的韶光在上面...... 我们以为如果再过三年,这家公司不做AI,可能就会空掉了。”
Andy正是MTlab技能的阶段性成果。MTlab干系职员见告雷锋网,Andy实现的技能包括MTlab的MTface(人脸技能)和MTsegmentation(图像分割技能),以及最新的影像天生技能(MTgeneration)。影像天生技能(MTgeneration)核心是基于MTlab自主研发搭建的天生网络Draw Net,通过大数据和深度学习Draw Net可以构建绘画模型,这些模型包括大到构图、小到笔触的不同层面的艺术风格和绘制规则。
拆解一下Andy的技能,我们会创造Andy是这样制作插画像的:首先,Andy学习了大量的插画作品,在此根本上,自己创建出了通用的绘画模型。Andy看到用户的图片后,通过MTface技能,Andy可以节制人脸的轮廓、五官位置和特色。再加上MTsegmentation技能,Andy节制了头发、衣服和背景区域。末了,利用绘画模型将节制的特色表现出来,就得到一张成品的图片。
从Andy的作品我们可以反不雅观到其对绘画模型特点的把握,MTlab干系职员先容到“比如以Garden风格为例,Andy画出的人脸,眼睛不会特意去描述双眼皮,女生的眼睛下面会加一些腮红来显得可爱,这是根据前期的数据学习到的共有的特色,Andy会结合这些特色来绘画用户照片,形成插画风格。” 由于这些设定,不少用户也评价到,Andy的画笔也具备一向的美图功能。
Andy的技能和产品形态是逐步积累过来的。在2017年初,美图秀秀上线了一款“手绘自拍”的产品。MTlab干系职员先容到,手绘自拍初步利用了人工智能,但是当时用户对这个产品的反响特殊好。
(美图手绘自拍)
手绘自拍紧张用到的是人脸技能和图像分割,在人脸的根本上做美化。让人直接拥有漫画版魔幻光泽的头发、超大闪亮双眸和近似透明的皮肤。
我们也看到,现在用打算机绘画有多种办法:谷歌曾推出AutoDraw,将用户画出的简笔画,与已有的图片数据库进行匹配,进而天生一幅完全的画;而Prisma紧张是在用户照片上添加风格滤镜。而Andy是首次完备让打算机去绘画、临摹一张照片。
Andy这个产品是MT generation技能成熟之后的运用。在Andy之前,美图还用MT generation技能做了一个“混血儿”的运用。通过大数据和深度学习,美图节制了不同国家的人的面部特色,然后用Draw Net天生网络去将用户的亚洲人照片转换为欧洲人的照片,用户就能看到如果自己是欧洲人会长什么样子。
在问及Draw Net如何学习大量数据时,MTlab干系职员说目前这一部分还是保密状态,美图在之后可能会揭橥论文来阐明,但是目前还是其技能壁垒。
MT generation可以说是MTlab目前最新的技能, MTlab干系职员先容到MT generation技能也可以利用在别的运用处景。例如“AI美化”,AI会直接帮你调度出一张适宜你本人的完美的脸,也便是可以学习亚洲人的审美习气,然后直接对人脸进行优化。大略粗暴来说,堪比整容。
重新技能到落地的产品,Andy研发过程特殊弯曲,摸索过程中经历了很多次失落败,研发过程周期也很长,前几个月险些没有进展,直到近两个月才看到了成效,然后一步步优化。
这一张图片显示了Andy早期的绘画作品和目前的比拟。
这也解释,AI绘画是一个长期学习和迭代的过程。Andy学习了6个月,而人类从零根本开始学习大概须要2-3年的韶光。目前,我们看到Andy在绘画时只能大致画出相似的轮廓,还不足风雅,Andy也无法识别眼镜、耳钉、衣服细节等。然而姜晗也说到,目前用户对付新的东西的忍耐度都比较高。Andy要连续走下去,则须要更多努力的学习。
绘画机器人Andy能火多久
美图类产品已经出了很多征象级的产品:脸萌、Prisma、“你的名字”版滤镜等等。而我们看到,这些产品一韶光火爆朋友圈,却又很快被遗忘。
从各种爆款的涌现到被人遗忘,反响出美图行业须要不断追逐新技能、新创意的征象。姜晗见告雷锋网,“美图秀秀的所有产品都环绕着‘美’,而‘美’是一种时尚,用户一贯都喜新厌旧。美图秀秀如果只是勾留在现阶段,迟早会被市场淘汰,这是我们一贯在思考的问题。”
姜晗说,“每个用户都会想要拥有一张自己的插画像,这是人工智能一个很好的落地点,Andy的涌现正是为了知足这个普遍的欲望。”
在找到落地场景后,如何让Andy这款产品走得长远呢?
姜晗见告雷锋网:“美图秀秀目前有两个方向:一个是专业化的方向,一个是娱乐化的方向。手绘自拍和绘画机器人Andy都是征象级的作品。但是如果有好的创意和好的效果,你也可以把这种征象级的生命力无限延长。美图从11年初推脱手机版到现在已经做了很多引爆的项目,而我们会持续挖掘引爆点。专业化的这条路便是供应根本的图像功能,长久地去知足用户的需求。”
雷锋网也创造,目前美图秀秀新上线“美图黑科技”模块,“手绘自拍(跨次元相机)”、“梦幻娃娃机”、“少女照片馆”、“绘画机器人Andy”都放进了这个模块。这些产品都是在根本功能之长进级的娱乐功能。
姜晗先容到,Andy在商业上有很大的想象空间,可以在美图的个性化定制上发挥很大效用。美图在上半年上线了“美图定制”,在用户用美图秀秀P图之后,美图会自动天生多种定制产品:手机壳、抱枕、T恤衫等。 而姜师傅认为Andy的人像插画很适宜做用户的定制产品。
此外,美图自己研发的技能也开始走to B的路线,这也是商业化的一种。Andy的插画或许还须要很永劫光来优化,但是其背后的MT generation技能则可以运用落地到更多的场景里。据称,MTlab会长期的专注于Andy和MT generation技能的研发。他们的终极期望是希望Andy能够超越插画师,成为AI界的绘画大师。
人工智能理解语义、理解图像是个漫长的过程,而人们一贯热衷于在措辞和图像表达上投入韶光。只管不能真的仿照人与人的对话,人们也很热衷于和Siri、Cortana、小冰互换,时时时调戏一下。
或许,调戏Andy的绘画能力也成了一件有趣的事情。
本文系作者个人观点,不代表本站立场,转载请注明出处!