秒变“迪士尼在逃公主”这款一键切换“漫画脸”AI因效果太过逼真彻底火了!

上传一张照片,就可以拥有自己的动漫形象?

现在一个名为“Toonify yourself”的AI工具就可以办到,而且效果非常逼真。

受新冠肺炎疫情影响,今年传统的摆七娘、睇七娘、拜七娘、七夕游园等线下非物质文化遗产活动面临新的挑战。

从他的个人主页上了解到,Justin曾是一名物理学家,现在英国MathWorks担任软件顾问,负责算法开发、模型训练以及组织软件开发实践。

重要的是,通过预训练模型,可以得到更高质量的图像。

该项研究同样是基于“图层交换(Layer Swapping)”的概念,将基础模型与使用转移学习的模型(即微调模型)融合在一起达到最终的效果。

这一过程,输入示例大致经历了三步处理过程:

这些动漫形象全部出自一个名为“Toonify yourself”的AI工具。它不仅呈现出效果逼真,操作起来还非常简单,只需在模型中上传一张照片即可!

Justin Pinkney是该工具另一创建者。与Doron一样,Justin对生成艺术和机器学习非常感兴趣。

当日10时许,“迎七娘”仪式正式开始,祠堂内青烟袅袅,“巧姐们”准备好香案、供台、火盆等用品准备行礼。闻讯而来的市民游客们争相围观,不少市民还拿着相机寻找最佳拍摄点。在优雅的古乐伴随下,两位主礼嘉宾踱步而出,“玉女”们手捧瓜果饼酒,姗姗而来。献礼敬茶、焚香祈祷,传达虔诚祈福之音、营造天地谐和之境,热烈祥和,寓意深远,充分体现自古以来中华女性对心灵手巧、勤劳智慧和幸福生活的美好向往和追求。

Doron介绍称,为了达到更好的动漫效果,他们收集了迪士尼/皮克斯/梦工厂等大约300张动漫图像作为数据集。

那么,这款工具是如何实现的呢?

此外,还有利用神经网络生成各类虚假蛋糕等。

据了解,这款工具刚刚发布就完成了25万次服务,非常受用户欢迎,还有网友评论称:研发者可以考虑考虑商业化的问题了。

最近,热映的真人版《花木兰》,在国外又掀起了一股动漫风!各种名人漫画形象频频刷屏,比如这张宫崎骏老爷爷,可可爱爱的形象完全可以出演动漫电影了。

据它的创建者之一Doron Adler介绍称,该工具主要利用了混合网络(Blended Network),这是一个复杂的网络机制,主要由于两部分模型来完成:StyleGAN Model和Blended Model。

五、相关工作暂处于调查摸底阶段,请大家做好个人防护,减少聚集,严防感染。如有进一步消息,使馆将第一时间通知。

还有这张演员杨紫琼的动漫形象,大眼、瘦脸完全具备了动漫角色的典型特征。

Doron 使用的 Layer Swapping 脚本从原始模型中提取了高分辨率层,从StyleGAN Model微调模型中提取低分辨率层,因此,最终得到了具有卡通人脸结构且具备照片级逼真渲染效果的混合模型。

更重要的是几乎复刻了真人的原始状态,包括头发、面部表情、神态,妥妥地定制化动漫形象。

尽管对数据集进行了少量的训练,但大眼、瘦脸等典型特征都能很好的捕捉到。其中部分图像比较模糊,是因为原始图像的分辨率比较低,而且有些是手绘图像造成的。

其中,StyleGAN Model负责对初始照片进行预训练,其目的是节省训练的时间和成本,因为对于个人而言,并不是每个人都有足够的CPU或者数周的时间进行数据训练,这个过程也被成为“转移学习(Transfer learning)“。

基于这一原理,用户只需要在系统中上传照片即可。不过可惜的是,由于用户访问量过大,考虑到服务器的运行成本,Doron暂时关闭了这一系统的使用入口,并表示重新规划成本效益后,会再次对外开放。

生成漫画脸的技术原理

可以看到,使用原始的面孔模型和混合卡通模型生成图像,两者之间存在着明显的联系,保持了人物的原始面貌,同时也实现了动漫化。(需要强调的是,如何需要高分辨率的卡通形象,则需要输入高像素的原始图像,一般不得低于1024×1024像素)。

“既要确保中华优秀传统文化的根不断、质不变,又要最大程度地减少疫情对传统文化带来的冲击。”广州市天河区政府相关负责人表示,虽然今年珠村乞巧节取消了聚集性的动态七夕游园、七娘饭活动,但保留静态的摆七娘、广州乞巧文化博物馆展览活动,并开启线上线下相结合的互动模式;同时,还将以往的六台乞巧供案浓缩在一个最具代表性的活动场所——珠村明德堂进行展示。

请扫描下方二维码进入登记界面。

“七夕今宵看碧霄,牵牛织女渡河桥。”21日,广州天河区珠村明德堂里张灯结彩,“巧姐们”兴致勃勃前后张罗,浓浓的七夕氛围萦绕四周。

此外,乞巧节期间,除了在珠村明德堂持续开展摆七娘、拜七娘等传统活动外,广州乞巧文化博物馆也向市民免费开放,作为中国为数不多的以乞巧文化为主题的博物馆,将通过实物与数字场景相结合的形式,生动再现乞巧春秋的历史与传承。(完)

当日,位于珠村祠堂中庭的乞巧供案上,上百件微型工艺品争奇斗艳,令人目不暇接。除了传统的米花、谷花、斋塔、牌坊、鹊桥等作品散发着浓浓农耕气息外,今年还增加了“致敬最美逆行者”“垃圾分类靠大家”等具有新时代气息的主题作品,让现场的市民游客眼界大开。

引用链接:雷锋网雷锋网雷锋网(公众号:雷锋网)

“这是我们中华民族的传统节日和文化,我每年都会过来参加。”市民刘先生告诉记者,自15年前广州开办乞巧文化节后,他每年都会过来参加,并帮家人和朋友祈福。

通过对数据集进行训练来学习动漫角色的典型特征。从以下输出结果来看,效果还是非常不错的。

接下来,经过人脸微调的图像会进入Blend Model的处理阶段。

四、使馆收集到的信息将仅用于驻肯使馆开展相关领事服务,请放心填写。驻肯使馆不会要求您提供银行账户等个人信息,也不会提出转账、汇款等要求。

提取面步特征,并自动对齐图像。 找到潜在代码,复制图像。 使用卡通模型的潜在代码,对图像进行处理。

在这里,由于StyleGAN 的结构,模型中的不同层以不同的方式影响生成人物的外观。低分辨率层决定头部姿态和人脸形状,高分辨率层则控制光线和纹理等细节。

三、请各位中国公民如实填写信息,如有任何信息造假或不守信行为,将被列入失信名单,相关后果自行承担。

效果逼真,操作简单,但因太火而下线

然后将具有特定“代码”的人脸图像输入混合模型,结果就可以得到一个卡通化人脸。

广州珠村“迎七娘”通常在农历七月初一举行,即迎接中国神话故事中的七仙女下凡,表达对七仙女的虔诚之意,同时为亲朋祈求生活幸福美满、工作顺利等,是珠村特有的习俗,也是乞巧节前的民间开幕礼。

StyleGAN模型可以产生大量人脸图像,在其中可以找到任何一张人脸的图像。比如通过该模型输入一张需要处理的图像示例,模型会通过“代码”(也称为潜在向量),输出一个与示例完全匹配的人脸图像,如下图左边为原图在左边,右边边为生成图。

雷锋网原创文章,。详情见转载须知。