您当前的位置: 首页 > 生活

揭秘线稿自动上色喵图科技突破GPU模型压iyiou.com

2019-03-11 16:43:03

揭秘线稿自动上色,喵图科技突破GPU模型压缩技术

人工智能进军动漫产业,可以助力整个行业,让动漫日更、优化动漫视效?

来自喵图科技的算法研发团队给出了深度学习在动漫领域的研究进展,开发了一套在压缩GPU显存的情况下,通过人工智能给漫画线稿优化线条、自动上色的技术。

训练机器自动上色,生成效果以假乱真!

研究团队使用生成对抗络(GAN)完成上色任务,达到与人工作画相近的效果。GAN使用了两个以博弈论的方式协同工作的络,以相互竞赛的方式来训练彼此。构成 GAN的两个络分别是鉴别器和生成器,神经络自行从输入图片中学习到上色的方法,由生成器创建伪造的样本,同时鉴别器接收[input, training data]和[input, fake output]对来鉴别哪些样本是真实的,哪些样本是伪造的。络G的目标就是尽量生成真实的图片去欺骗判别络D,随着其中一个络变得更强大,另一个络也必须适应和提升。博弈的结果是什么?在理想的状态下,G可以生成足以以假乱真的图片。基于GAN的生成器,研发团队还针是对生命的一种珍惜对不同的业务场景设计了解耦模型,通过校正输出、输入图片之间的关系,减弱甚至消除这种相互关联,将不同场景区别开来。如此训练后得到的模型,能够找到接近输入图片画面风格的参数,实现自动上色。

喵图科技自动上色多种渲染,一键完成只需0.5秒

攻克技术难题,GPU模型压缩技术很

传统的自动上色算法对GPU的资源消耗极大,很难做到大规模的对应上色处理请求。举个例子来讲,具有50个卷积层的ResNet-50需要超过95MB的存储器以及38亿次浮点运算。喵图科技研发团队基于通道减枝,试图去除冗余和不重要的项来降低存储和计算复杂度,训练一个更紧凑的神经络来重现一个更大的络的输出。此外,他们还将神经络二值化,让计算主要在正1或负1间进行,几十倍地降低了络大小和计算量,保证预测准确率。经过他们的努力,AI自动上色仍能照常工作,但GPU显存占用降低至原模型的5%,做一个快乐的人!做一个幸福的人!做一个知足的人!人到中年须具备的修养

速度提升为10倍。

此项研究的成功,代表着自动上色技术不仅可以用于娱乐面向用户,也可以形成低成本工业规模服务于整个动漫行业,可以为动漫行业提供工业级画面输出,大大压缩动漫制作的生产时间,节约生产成本。在未来,动漫制作组只需要几个人为作品制作剧情方向、绘制部分分镜,剩下的可以都交给AI自动上色来搞定。

关注ITBear科技资讯公众号(itbear365 ),每天推送你感兴趣的科技内容。

声明:本文仅为传递更多络信息,不代表ITBear观点和意见,仅供参考了解,更不能作为投资使用依据。

营收下滑母婴之家2016上半年亏损近4千万
温州社区战略投资企业
2008年武汉汽车出行B+轮企业
推荐阅读
图文聚焦