沉浸式科技前沿2019计算机图形学会议SIGGRAPH上都有哪些新探索

放大字体  缩小字体 2019-09-15 15:00:44  阅读:7340 作者:责任编辑NO。杜一帆0322
​编者按:本文来自微信大众号“NeXTSCENE”(ID:theNeXTSCENE),作者栗亚,36氪经授权发布。优质的沉溺式文娱领会必定离不开艺。

编者按:本文来自微信大众号“NeXTSCENE”(ID:theNeXTSCENE),作者栗亚,36氪经授权发布。

优质的沉溺式文娱领会必定离不开艺术与技能的完美结合,作为具有工业研讨视角的专业媒体,NeXT SCENE除了从艺术和商业层面介绍和报导沉溺式领会项目之外,也一向重视沉溺式文娱科技开展的最前沿。

SIGGRAPH是由ACM SIGGRAPH(美国计算机协会计算机图形专业组)安排的计算机图形学尖端年度会议,是全球影响最广、规划最大、最威望的计算机图形学会议。每年这个时分,全球顶尖的科技公司、研讨人员和高等学府会齐聚一堂,共享各自的研讨成果。而近几年的SIGGRAPH也着重强调了沉溺式领会的影响力,每年都会有VR Theater和Immersive Pavilion。NeXT SCENE作为工业研讨媒体受邀参加了整个SIGGRAPH活动,快来跟从咱们的研讨员看一下沉溺式文娱科技都有哪些最新前沿吧。

SIGGRAPH全称:SpecialInterestGroup on ComputerGRAPHics and Interactive Techniques

图片来自 ACM SIGGRAPH Media

Immersive @ SIGGRAPH

15个VR剧场领会,29个沉溺式场馆领会

图片来自 Muso

作为一个集科学、艺术和商业为一身的CG展现会与学术研讨会,SIGGRAPH给我的第一形象是"Geek"(极客)。对计算机图形学最感兴趣的人,无疑便是对科技的最新开展亲近重视的电脑工程师和图形规划师了。在会场,各场学习讲座济济一堂。他们尊重知识,对新事物坚持好奇心,并孜孜不倦的探求问题,这样的精力给了我很大的震慑。

“Geek Bar”这个温馨的旮旯一天不间断地为参会者充电

图片来自 ACM SIGGRAPH Media

除了能见到学术大牛以外,会场内会有许多“Real Geek”

图片来自 Muso Instagram

展会最新资讯

在SIGGAPH的每一天,你都能听到有关计算机图形学的重磅新闻。

NVIDIA

NVIDIA(英伟达)在这次研讨会上宣告现已有超越35个专业的构思运用程序支撑旗下的RTX GPU的光线追寻技能(Raytracing),并有多家全球抢先的软件制造商推出了选用RTX技能的运用程序。此款GPU不只可以最大化地加快图形烘托使命,进步文娱领会中的实时光线追寻功能,并且可以支撑深度学习(Deep Learning)和高档人工智能技能的运用。

支撑RTX的程序包括:Adobe Substance Designer, Autodesk Flame, Blender Cycles, Daz 3D Studios, Foundry Modo, Dimension 5 D5 Fusion, and Luxion Keyshot 等等

图片来自 作者Lia

在NVIDIA的展会现场,个性化的“登月之旅”领会项目(Moon Landing)招引了世人的眼球。正值阿波罗11号登月50周年,NVIDIA运用RTX GPU从头发明了一次独具匠心的实时登月领会。经过摄像头捕捉姿势后,领会者会与经过3D烘托后的宇航员人物相匹配,经过实时光线追寻烘托各个细节。之后将其与开发式协作渠道Omniverse相结合,即时生成传神的3D形象。

让玩家重温前史时刻

图片来自 Nvidia

这个技能的特别之处在于,屏幕上的每个像素都是经过追寻光束进入相机后实时生成的。在这个过程中,场景中的人物改动会引发光线的交互作用,智能化调理画面并生成新形象。对创造者来说,这项技能可以让他们即时而精确地看到光线的反射、 暗影的柔软度、大局照明以及其他视觉效果,然后更好的调整规划方案。而以往,特效烘托人员要花上好多天时刻才干到达相同的传神度。

说到NVIDIA,不能不提它发布的AI绘画的网页运用GauGAN。这款取名于画家高更的运用,在大会评选中取得了本次Siggraph的最佳实时现场演示奖(Real-Time Live! Best in Show)以及观众挑选奖(Audience Choice awards)。无论是作业电脑画师仍是业余的绘画爱好者,都可以运用现场的演示品在几分钟内创造出高水平的绘画图画。

笔者初度测验,感觉AI仍是跟我不搭

图片来自 Lia

Khronos Group

增强实际(AR)和虚拟实际(VR方面, Khronos Group发布了OpenXR 1.0规范,揭露免版权费的开源技能规范。OpenXR作业组旨在协助AR/VR的开发者创立跨渠道混合实际(XR)领会,免除在不同的软件开发工具包中转化的费事。

PIXAR

自从2015年皮克斯宣告将开源动画软件Universal Scene Description(USD)之后,它逐步成为动画和视觉特效行业界的规范。这款软件可以协助创造者完整地将动画制造中的各项运用组装到其他运用中,有用削减数据烘培。因而不同构思人员可以在同一规划场景中协同作业,而无需等候对方完结。除了The Foundry、Unity、Epic Games (Unreal Engine)、Pixar、Animal Logic之外,Autodesk和Nvidia也均已运用和支撑USD。

说到这儿,不得不提一下皮克斯的Renderman软件。最新上映的《玩具总动员4》中就运用到了这款强壮的烘托引擎。

特别展厅中等人高的塑像

图片来自 Lia

假如你看过电影的话,你必定记住胡迪和牧羊女在古玩店里面对琳琅满目的吊灯场景。这个场景用了大约一万七千多个灯泡,全部都是在Renderman的支撑下出现的!

除了上述展位之外,笔者还发现展会现场有不少动作捕捉公司的展台:例如带来现场体操扮演的OptitrackQualisys,展现的无需外部相机的连体衣的Rokoko,乃至是笔者偶然扳话的来自我国的Noitom等。

招引人眼球的Optitrack的动作捕捉展现

图片来自 ACM SIGGRAPH Media

Noitom展台

图片来自 Lia

咱们可以看到动捕技能的商业化之路越来越老练,在5G技能推广的助推下,今后或许人人都可以自在创造。

领会中心共享

在SIGGRAPH会场中,笔者最喜欢的当地非领会中心(Experience Hall)莫属了。这儿是整个SIGGRAPH创造者和科研人员的大舞台,也是艺术与科技完美结合的当地。

Experience Hall

图片来自 ACM SIGGRAPH Media

除了人流如织的VR剧场(VR Theatre)之外,领会中心还包括艺术展厅(Art Gallery)、新式技能展厅(Emerging Technologies),领会展厅(Experience Presentation)、沉溺乐土 (immersive pavilion) 以及作业室 (studio)。

艺术展厅 展位引荐

本年的艺术展旨在探求人们怎么面对充溢不确认性的未来。参展的著作不只展现了咱们在当下所取得的艺术成果,更提出了咱们在全球化的社会中所发现的问题和或许的应对思路。

不断增加的或许性:艺术与规划猜测的未来

图片来自 Lia

在这儿,艺术家们经过混合不同的艺术形式和数码制造手法,结合科学、修建、规划,以及虚拟和增强渠道来提出对社会问题的考虑。

RUSHI:如是

色彩与我国形而上学山水的结合

图片来自 ACM SIGGRAPH Media

来自我国香港的John Wong遭到了我国的风水理论和生辰八字算命办法的启示,创造了“如是”,一个算法交互式设备艺。这个充溢了艺术美感的领会,背面却是一些看似违而又美妙交融的元素:大数据与人工智能、命运与迷信。参与者只需要输入他们的出生日期,屏幕就会显现不同受众的可视化数据,终究经过色彩的改动表现出来。

作者说到,数据科学家和算命先生在某种程度上都是将不确认的国际量化成可以了解的数字或许答案。这么说来,大数据和人工智能是否也是一种新的迷信呢?

Robotic Voice Activated Word Kicking Machine

这个真实的“文字游戏”让笔者玩的不亦乐乎。

图片来自 Lia

参与者对着话筒说的任何话会被即时转化成文字。假如文字若掉入右下角的听筒中,会被念出来。若文字不幸碰到了右上角的脚,则会被“踢”回来。这件风趣的设备探讨了虚拟与实际间的交互,让我看到了声响可视化的另一种风趣的运用。假如周星驰在《九品芝麻官》里对着大海练谈锋的场景中运用这件著作,场景会更绚丽呢!

NoiseAquarium

有关海洋的艺术著作总给人一种温暖而安心的感觉。这个看似一般的虚拟实际领会其实并不简略。很少有人知道,人为发生的水下噪音对海洋生物有着毁灭性的影响。不只像鲸鱼和海豚这类靠声响沟通的高档生物深受人类噪音之害,很多的浮游生物的生计空间也被日益要挟着。

图片来自 Lia

这个充溢浮游生物的交互设备,运用3D扫描技能监测微生物在噪音影响下的生计状况,结合数据剖析后,经过动画的方法向领会者出现绚丽的现象。肉眼看不到的生命,也是值得被尊重的生命,况且这些生命和海洋生态体系休戚相关。事实上,这不只仅是浮游生物的问题,更是咱们人类所面对的问题。

新式技能展厅 展位引荐

360-Degree Transparent Holographic Screen Display

图片来自 Lia

出自索尼日本规划研讨中心的这款360度通明的全息屏幕给参会者供给了一种很共同的“存在性”实际。实际上,在通明圆柱的背面是2D形象和高速摄像头传感技能的结合。

Arque: Artificial Biomimicry-Inspired Tail for Extending Innate Body Functions

人类要是有了尾巴会怎样?你知道长了尾巴的感觉嘛?这款相同出自于日本的研讨著作在现场招引了不少眼球。

人工仿生机械尾巴

图片来自 Lia

鉴于尾巴对大多数脊椎动物的重要性,规划师们提出了一种以人工仿生学为根底制造的拟人尾巴,让领会者可以经过改动尾巴而影响身体冲力,加强对触觉的反应与运用。

Matching Visual Acuity and Prescription: Towards AR for Humans

新式穿戴式增强实际设备

图片来自 Lia

关于广阔眼镜佩带者而言,戴上额定的眼镜既费事又损坏领会感。来自NVIDIA研讨组的研讨人员规划了两款新式的增强实际设备:一款是将度数纠正整合到5毫米厚的图画合成器中,这样无需剩余的镜片就能看到增强实际形象;一款是经过调整分辨率和焦点深度来适运用户的视界。

领会展厅 展位引荐

OZ Immersive

OZ游戏体系

图片来自 Lia

这家来自法国的公司可谓是我本次的意外收成。高水准的虚拟实际游戏形象,风趣的游戏规划和交际元素,感同身受般的领会,OZ沉溺式游戏体系让人眼前一亮。

游戏原理示意图

图片来自Twitter @BlackLight

Mary and the Monster

玛丽和怪物(Mary and the Monster)是一场戏曲与混合实际的完美结合。

图片来自 Parallux

科幻小说之母玛丽雪莱自己的日子和她创造的故事《弗兰肯斯坦》相同精彩。这款增强实际/虚拟实际领会,经过年青玛丽的视角将读者带回了怪物的身边。其共同之处在于它将增强/虚拟实际的优势和舞台剧的观看领会成功地结合在了一同,让观众可以愈加沉溺于主人公共同的内心国际,并愈加自在地挑选不同视角来领会怪物诞生的心路历程。

Wolves in the Walls: Chapter 2, It's All Over.

图片来自 ACMSIGGRAPH Blog

曾在圣丹斯和翠贝卡两大电影节首映过,改编自Neil Gaiman同名小说“墙面里的狼”虚拟实际领会著作,也来到了本次SIGGRAPH。这不只仅是一个童话故事,更是一次无与伦比的心灵之旅。

一个人游玩的幼年,和虚拟朋友的互动,对漆黑与不知道的惊骇,急需家人信赖的心境,这一切都完美的融入到这场触目惊心的VR冒险之中。在这个领会里,我不再仅仅一个旁观者,更是一场故事的参与者。我目击了天马行空的狼群向我袭来;我也在漆黑里和那个小女子一同涂鸦、攀谈;我在一个鬼影幢幢的大房子里找寻本相;最终戛然而止的不只仅女孩一家人的命运,更是我纠葛的心。

VR剧场 著作引荐

VR剧场内部

图片来自 ictus_audio instagram

小补白:整个VR剧场的3D声学体系是由坐落温哥华的Ictus Audio担任规划施行的,值得自豪的是,Ictus Audio的两位创始人Yao Wang和Sherry Li都是华人,也是NSR研讨团队主管 Muso教师的朋友。

KaiJu Confidential

图片来自 Lia

这个仅五分钟的VR电影无疑是本次VR展映的惊喜。作为特摄片爱好者,我第一次发现本来在怪物的视角看被炸毁的乡镇是件如此风趣的工作。

Kate

图片来自 ACM SIGGRAPH Media

说起VR电影,不得不提迪士尼动画的第二部VR短片“风筝”(Kate)。看着极具我国风的龙风筝起崎岖伏,我不由回想起了小时分放风筝的日子。这儿的风筝,有人道有生机,无需任何言语。其实简略的东西,往往最能牵动听心了。

电脑动画节 著作引荐

这场在电子剧场(Electronic Theatre)举办的电脑动画节可谓大张旗鼓。在将近三小时的时刻里,几十个动画佳作轮流演出:有的画面质量到达了业界的最高水准,有的故事内容发人深思,有的作为计算机图形技能开展的典范展现。不得不说Siggraph的动画可谓业界上乘。

Stuffed

图片来自 ACMSIGGRAPH Media

这个取得最佳学生著作奖项的动画让人意犹未尽。在很多CG加成的著作中,Stuffed不只高水准的完结了定格动画的制造,更是用心讲了一个引人深思的故事。虽然动画没有台词,看完后我能感遭到作者想要表达的那种丢失,焦虑和无助。可以传递情感和心境的故事,让人形象深入。

Passage

图片来自 ACMSIGGRAPH Media

来自塞尔维亚的动画制造者则向观众展现了什么是艺术与人文。这个人物均由几许构成,没有过多言语的故事让人深受震慑。

战役与暴力,文明与宗族,命运与轮回,我想不同的观众会有不同的领会。看到那些拿枪指着乡民的战役机器,我不由想起了那些令人毛骨悚然的耻辱的前史。更可怕的是,这些前史或许正在不断轮回,或许正在国际的某个旮旯演出。

鉴于篇幅约束,笔者只挑选了一些最风趣的见识和咱们共享。本年的SIGGRAPH展会展现了最前沿的电脑绘图技能与艺术结合的更多或许性,而这些或许性也为沉溺式领会的开展供给了新的空间。

咱们看到了沉溺式领会与游戏相结合的测验,也看到了沉溺式领会不再只限于视觉,而更多地触及触觉、温度的热感应乃至痛觉。正是有了这些电脑工程师、绘图规划师在技能上的不断探求和立异,才让更多动听的著作从一个主意变为或许。未来沉溺式领会会怎么开展,让咱们拭目而待。

本文仅代表作者个人观点,与本网站立场无关。如若转载,请联系我们!

本网站转载信息目的在于传递更多信息。请读者仅作参考,投资有风险,入市须谨慎!

推荐阅读