快捷搜索:

【澳门新葡8455手机版】图表顶会SIGGRAPH上的视觉

日期:2019-08-21编辑作者:澳门新葡8455手机版

澳门新葡8455手机版 1

但是在现阶段,该算法在修正人体时主要修正脸部,因此有时候因广角畸变而扭曲的身体部分暂时无法很好地修复。

上图是几何解释模块。 该模块获取整个图像,使用来自对象提议的适当公式推断3D属性,并且可以生成可解释的表示以用于理解和操纵。这里首先使用MaskRCNN对对象实例进行分割。 对于每个对象,推断其3D网格模型和对象姿势。

这样看,似乎这项技术不仅帮设计师解决了难题,甚至以后电影拍摄也可以在GPU里进行了。

澳门新葡8455手机版 2

随后,研究人员通过该方法制作了一个实用流水线,能从系统捕捉的实景表演中创建传统风格的动画。



澳门新葡8455手机版 3

澳门新葡8455手机版 4

同时,绘制和擦除的画笔大小和特征强度也是可以选择的。

准备超车,成功超越,消失在雾霾中。



{"type":1,"value":"除了图像和视频方面,今年的SIGGRAPH在设计和布局领域也录入了一项有意思的研究。



值得一提的是,研究人员们让包括图灵测试在内的97名志愿者,区分系统的生成字体和真人手写字体。测试结果表明,志愿者无法区分哪些是系统生成的字迹,哪些是人写的原始笔迹。

先打个左转弯转过来。

由于各类艺术肖像中面部地标的位置和形状不同,因此他们使用基于面部特征的地标矫正步骤,以减少不同面部特征之间的依赖性。



澳门新葡8455手机版 5检测艺术肖像的几何与纹理风格" style="width:60%;margin:1rem auto">

先让原图像经过语义去渲染器,生成语义地图;同时经过纹理去渲染器,生成纹理代码;然后还要经过几何去渲染器,生成3D属性。

澳门新葡8455手机版 6学习人类字迹后生成个性化字体库" style="width:60%;margin:1rem auto">

不过这些研究主要还是围绕2D图像来进行的,我们介绍的这项新研究则在其中加入了3D感知

这一方法的重点是,它对视频进行风格化的同时,保持风格的视觉质量、用户可控性和对任意视频的适用性。

设计师们总是接到这种神奇的需求,但是受限于素材和工具的“想象力”,设计师无法凭空推理出背影女子的正脸是美女还是恐龙,这种需求根本无法达成。

该研究论文名为《EasyFont:基于样式学习的系统,可轻松构建大型手写字体(EasyFont: A Style Learning-Based System to Easily Build Your Large-Scale Handwriting Fonts)》,研究团队为北京大学计算机科学与技术学院。

原标题:想让照片里的美女“回头”?清华MIT谷歌用AI帮你实现了

其中,一篇名为《基于生成图像优先级的语义图像处理(Semantic Photo Manipulation with a Generative Image Prior)》的研究论文中,描绘了一个叫GANPaint Studio的黑科技,赚足了人们的眼球。



此外,在用户界面的右侧有一个历史面板,该面板会按时间顺序显示用户的修改历史和范围。当用户将鼠标悬停在以前的编辑上时,相应的编辑痕迹也会在图像中突出显示。当然,编辑过的内容也可以从列表中进行删除。

Shunyu Yao, Tzu Ming Harry Hsu, Jun-Yan Zhu, Jiajun Wu, Antonio Torralba, William T. Freeman, Joshua B. Tenenbaum

与自然面部图像相比,艺术肖像在几何和纹理方面都更加多样化,分析起来也更复杂。

澳门新葡8455手机版 7

系统在分析和描述所有连续笔画的连通性,以及每种笔画轮廓的细节后,会将学习到的样式添加到参考数据上,为每个字符创建轨迹并恢复手写细节。

—返回搜狐,查看更多



最后,利用该变形的网格对输入的照片进行修正,照片中的人脸和背景都能相应地得到校正。

然后掉头180°,开始“逆行”。

从SIGGRAPH收录的学术论文中不难发现,今年研究人员们在图像科学领域可谓是卯足了劲开发新花样。

传送门

{"type":1,"value":"接下来,用户需选择相应的语义特征,例如“椅子”、“树木”、“天空”、“桌子”。有意思的是,这些语义特征会因上传图像的不同而变化。

澳门新葡8455手机版 8

该方法基于一种叫图像类比框架(image analogies framework)的技术,它能够未视频处理提供精确的控制,以及处理视频任意风格的能力。

语义、纹理、几何分层

因此,谷歌的研究人员们研发出了一种新的人脸识别算法,能够矫正因为广角拍摄而畸变失真的照片。

语义&纹理推理

简单几笔生成逼真新照片

澳门新葡8455手机版 9

然而,计算机在艺术肖像领域仍是一个具有挑战性的研究,也是一个尚未探索的问题。

3D-Aware Scene Manipulation via Inverse Graphics

{"type":1,"value":"目前在智能手机市场中,许多手机都拥有广角相机功能,不仅给照片带来了更开阔的视野,也能让用户在拍集体照的场合时无需担心画面容纳不下所有人。



其中3D动画制作的风格有着独特的外观,但遗憾的是,目前通过利用3D动画还无法全面地再现传统动画的风格外观,也没有自动化的方法可以使用实时性能捕捉来生成传统动画外观。

研究人员在开发模型时,需要识别GAN内部和特定对象类型相关的单元。然后再分别对这些单元进行测试,看消除它们后是否会导致照片中的某些物体消失或出现。

比如雾霾天气路上的车辆:

同时,他们还需要移除造成图片显像错误的单元,以提高照片的整体质量。



{"type":1,"value":"自然图像中的面部地标检测(Facial Landmark detection)是一个十分活跃的研究领域。



就拿目前业界领先的中国字体制作公司FounderType来说,一个由三到五名经验丰富的字体设计师组成的团队,需要花超过12个月的时间才能生成一个GB18030-2000的中文字库。

“麻烦帮我把照片上这个美女转过来,脸朝前。”

例如为建筑更换屋顶的设计、给房间设计一个新的窗户、让植被变换更换不同季节的颜色……这些编辑过程不仅具有选择性,而且编辑过后的图像也显得十分逼真。

主要的原理是将图像的语义、纹理、几何三个维度分层,分别经过一系列去渲染和渲染流程。

澳门新葡8455手机版 10广角镜头畸变的“救星”" style="width:60%;margin:1rem auto">

澳门新葡8455手机版 11

专业设计师都需耗费如此多的时间和精力,更别说普通人了。



SIGGRAPH(Special Interest Group for Computer GRAPHICS,计算机图形和交互技术特别兴趣小组)成立于1967年,由布朗大学(Brown University)教授Andries van Dam和IBM的Sam Masta共同发起,主要推广和发展计算机绘图和动画制作的软硬件技术。

伊瓢 发自 凹非寺

今年SIGGRAPH收录的学术论文中,有一篇名为《艺术之脸:肖像中的标记检测和几何风格(The Face of Art: Landmark Detection and Geometric Style in Portraits – Supplemental material )》的论文。

使用两个单独的卷积网络来获得背景中道路、天空、树林等部分,以及前景中的轿车、货车等物体,以及的必要颜色和纹理描述代码。

澳门新葡8455手机版 12

2.深度生成模型,比如大家都知道的GAN;

自1974年起,美国计算机协会计算机图形专业组(ACM SIGGRAPH)每年都会组织一次SIGGRAPH会议,并逐渐发展为图形学界最具权威和影响力的国际会议。

3D属性经过几何渲染器后,与语义地图及纹理代码共同进行纹理渲染,最终实现图像分层,将图像分解为背景和多个前景对象。

近年来,针对图像识别和处理的研究一直是AI研究人员们在利用人工智能算法处理图像方面的一大热点。



它还提供了一个更简单的艺术视频创作的流程,让以往单调乏味的逐帧绘画过程变得更简单有趣,同时也保留了传统艺术视频独特而丰富的视觉品质。

在语义和纹理分析的过程中,先要分析类似场景的2D信息。

澳门新葡8455手机版 13

澳门新葡8455手机版 14

澳门新葡8455手机版 15

或者给道路上的车“喷上”不同的颜色。

针对这些领域,智东西精选出了5项涵盖图像科学(Photo Science)、视频和设计与布局(Design and Layout)3大领域的创新性研究,并为大家一一解读。



目前,该算法主要针对70°至120°的广角范围,并且它是全自动的,校正速度也很快。



为了评估这个面部地标检测框架,研究人员还创建了一个艺术肖像数据集,其中包含160件不同艺术流派、艺术家和风格的艺术作品,其作品的几何形状和纹理都有很大差异。

这项研究本身基于三类研究:

测试表明,研究人员通过该算法可以检测艺术肖像中的面部特征,并分析它们的几何风格。

3.深度图像处理,比如风格迁移。

今年,SIGGRAPH共收录了143篇学术论文,涉及图像科学(Photo Science)、VR和AR(VR and AR)、神经渲染(Neural Rendering)和设计和布局(Design and Layout)等32个研究领域。



接下来,系统会为每个字符图像提取每个笔画的书写轨迹,并选择正确的提取结果,然后采用人工神经网络来学习用户的整体手写风格。

责任编辑:

那么它具体是如何做到的?

而且除此之外,这项研究成果还可以实现“看图拍电影”功能,一张静态图就可以演化出一系列不同帧的镜头。

研究人员表示,他们希望通过这个时间连贯的视频艺术风格化新方法,能有助于弥合视频的实时动作、3D动画和传统手绘动画之间的差距。

本文由澳门新葡8455手机版发布于澳门新葡8455手机版,转载请注明出处:【澳门新葡8455手机版】图表顶会SIGGRAPH上的视觉

关键词:

基于深度学习的目的检查测量试验算法综述,目

原标题:干货 | 基于深度学习的目标检测算法综述 cs231n学习笔记-CNN-目标检测、定位、分割 目标检测(ObjectDetection)...

详细>>

她俩摊上如何事情了,一项新加坡人商讨被指违

原标题:发了一流随想,却被官方跨国手撕,他们摊上怎样事情了? 一项印度人探讨被指违反伦理准则 做了商量、发...

详细>>

比人强就行,AI已经在影响性犯罪和其他刑事犯罪

原标题:算法有偏见?比人强就行! 原标题:AI已经在影响性犯罪和其他刑事犯罪的刑事司法系统 全文大约1100字。读...

详细>>

过好光景更要紧,中华夏族民共和国科技(scienc

原标题:18年三次“卡脖子”广播发表,中华夏族民共和国科学和技术经历了怎么着? 这几天几天,《科学技术晚报...

详细>>