一场从图形引擎到混合现实的对话

Estimated read time 1 min read

这是对话德国的第70篇原创采访文章

吴晓茂博士作为对话德国的第40位采访嘉宾

混合现实XR_怎么删除混合现实门户_混合现实又叫啥/

颗粒科技创始人兼CEO吴晓茂博士

本文长度约7200字,建议您阅读20分钟。

在之前的专访文章中,吴小茂博士与大家分享了他的学习、工作和创业经历,并从一个跨国企业家的角度分享了很多个人经历。

通过这篇文章,我们将从另一个角度了解吴博士和颗粒科技的产品和技术。 吴博士将为我们介绍颗粒科技打造的第三代图形引擎GritGene,并从从业者的角度介绍和展望未来在智慧城市、混合现实和元宇宙的应用。 在采访的最后,吴博士也会对有志于从事新兴技术领域的读者提出自己的建议,同时也欢迎计算机图形学相关领域的人才加入颗粒科技。

专访策划:陈楼勋爵 李政磊 谢宇兴 于静 耿孟万 周毅

文章整理:郑磊、谢宇星

文章校对:杨世玉、刘旭辉

专访:陈力、谢宇星、郑磊、余景楼

面试时间:2022年2月5日

面试地点:德国法兰克福

宾客简介

颗粒科技创始人兼CEO吴晓茂博士。

吴小茂博士获得博士学位。 上海交通大学计算机科学博士。 曾在微软亚洲研究院和欧特克从事研发工作。 2007-2009年在法国INRIA(国立计算机与自动化研究所)从事博士后研究。 之后,他从学术界转战工业界,进入德国法兰克福著名游戏公司Crytek的总部,担任项目总监和技术总监。 期间,他组建了Cinebox团队,参与了CryEngine引擎、《孤岛危机2》和Xbox One第一部大作《罗马之子》等项目的研发。

2015年,吴博士创立了自研的第三代图形引擎GritGene——GritWorld。 该引擎将应用于游戏行业、影视动漫、智慧城市等领域。 Granule Technology 在德国法兰克福、上海和中国广州设有办事处。 来自21个不同国家和地区的员工使颗粒科技成为一家极具国际化的高科技企业。 2021年,颗粒科技获得高瓴资本领投的B轮融资。

混合现实XR_怎么删除混合现实门户_混合现实又叫啥/

颗粒科技公司标志

怎么删除混合现实门户_混合现实又叫啥_混合现实XR/

吴博士您好,能否简单介绍一下贵公司的产品图形引擎GritGene及其相关业务?

怎么删除混合现实门户_混合现实XR_混合现实又叫啥/

图形引擎GritGene是我公司的主要产品。

目前市场占有率最高的3D图形引擎是游戏引擎Unreal和Unity,但其主要应用对象通常是专业人士。

我们自研的GritGene与这两个主流引擎类似,但突破了它们的局限性,可以实现跨端和云端的联合计算。 而且我们不称其为游戏引擎,因为我们针对的是通用图形应用程序。 广义的图形技术应用在很多领域,比如SAP的3D可视化工具、智慧城市、数字孪生应用、模拟演练、影视动画制作,甚至未来元界的社交等。

这个引擎需要的开发周期比较长。 在开发的同时,我们会与大B企业(注:大巨人企业)合作,将我们的功能注入到他们的产品中。 与以往只支持相对单一硬件平台的游戏引擎相比,我们的图形引擎支持跨设备和云计算,可以为其他企业提供更好的服务。 我们会优先辐射产品给大B,然后辐射给中小B(注:中小企业),再辐射给普通消费者。

怎么删除混合现实门户_混合现实XR_混合现实又叫啥/

2021年吴晓茂博士将在颗粒科技产品发布会上

怎么删除混合现实门户_混合现实又叫啥_混合现实XR/

那么颗粒科技的产品将如何面向普通消费者呢?

怎么删除混合现实门户_混合现实XR_混合现实又叫啥/

目前C端消费者不会直接接触我们的发动机产品。 他们接触到我们产品的场景很可能是在一个交互应用或者立杰等公司打造的应用中。 用户在GritGene参与的应用中会看到powered by GritGene,比如你会看到一些动画或者影视作品就是用我们的引擎渲染的。

我认为消费者会直接使用我们的引擎,这可能会在混合现实相对成熟的时候发生。 届时第三代发动机将开始允许消费者真正大规模地为自己使用它们。 我预测,2025年左右,混合现实的雏形很可能会成型。

怎么删除混合现实门户_混合现实又叫啥_混合现实XR/

颗粒科技现有业务涵盖多个不同行业。 能否介绍一下Granule的不同业务场景?

怎么删除混合现实门户_混合现实XR_混合现实又叫啥/

业务场景有多种类型,我们也根据相关业务选择大B公司进行投资合作。

第一类是硬件。 未来混合现实的硬件离不开移动网络和手机。 目前网络的稳定性和5G的普及度还不够高。 即使在中国这样已经率先5G普及的国家,各地的5G信号依然不稳定。 因此,早期无法通过硬件设备直接连接云计算,实现便捷交互。

所以,我们需要和手机硬件厂商合作。 Granularity研发的第一款引擎产品是手机上完全自主可控的AR(AR:Augmented Reality,增强现实)引擎。 未来,无线交互离不开手机。 我们目前做的是对目前手机中的二维交互方式进行升级,然后逐步融入三维交互。

第二类是动漫数字内容。 一家科技公司如果没有IP(知识产权)驱动,不能和大B巨头合作,就很难做大,运营起来会很痛苦。 力杰的重要合作伙伴之一是玄机科技(注:杭州玄机科技信息技术有限公司是一家从事动漫影视制作和品牌运营的科技娱乐公司,主要作品有《斗罗大陆》、 《武更记》、《秦时明月》等),他们正在和我们合作一个知名IP,叫做《鬼刀》。这个IP目前在中国有很多的粉丝。在微博上的微博热搜在颗粒世界之前的发布会是在玄机科技这个IP的带动下,我观察到我们公司来自21个国家的员工也很喜欢《鬼刀》这个IP。

第三类是智慧城市。 我认为智能城市是计算机图形学和视觉技术的沃土,也是混合现实和元宇宙的核心部分。 只有将现实世界的真实场景数字化,并将设备连接到这个场景,才能提供混合现实和数字化管理服务。 在这方面,中国领先于任何其他国家。

智慧城市的数字化需要更好的图形引擎来支持。 传统游戏引擎不能直接使用,需要修改。 但是这方面的人才很少,后续的人才支持成本也很高。 这也激励我们的主要合作伙伴与我们一起开发新发动机。

综上所述,我们公司产品的客户主要来自以上三类:硬件厂商、数字内容、智慧城市。

怎么删除混合现实门户_混合现实又叫啥_混合现实XR/

您提到智慧城市,能否介绍一下它的发展历程和具体应用?

怎么删除混合现实门户_混合现实XR_混合现实又叫啥/

智慧城市的发展仍以中国为主,德国的应用还不够广泛。

智慧城市早期,更多的是一种概念和愿景,相关的基础设施也是根据概念宣传建设的。 随后人们开始探索其用途,并开始通过连接数据(如地理监测、污水监测、人群和交通监测等)产生实际应用。 然后经历了操作平台的迭代,从只能在大屏电脑上使用,到可以在手机和平​​板上使用。

智慧城市可提供定制化服务,如缴纳水费、自动识别车牌号码、智能停车场等。 远程看到停车场有哪些空车位,电梯开到哪一层,人从哪里进入小区等等,也够精准了。 我们可以用它来观察某处发生的事情。

所有这些数据都可以连接起来,形成一套完整的数字化管理系统。 这样可以大大减少人力和运营成本,同时让人们实现数字化生活,比如数字化支付、数字化开票等。

由于数据量大,智慧城市的建设需要一个好的图形引擎。 我们有一个智慧城市案例,重庆以1:1的比例完全数字化。 在这个模型中,我们可以从任何角度以虚拟的方式观察真实场景。

目前,智慧城市更多的应用在安全部门和交通部门。 例如,他们可以通过智慧城市查看某个地点有多少车辆经过,甚至可以实现对红绿灯的远程智能控制,优化交通出行。

这种数字孪生管理也可以应用于智能工厂、智能学校、智能办公室、智能家居等。

怎么删除混合现实门户_混合现实又叫啥_混合现实XR/

颗粒科技智慧城市应用

怎么删除混合现实门户_混合现实又叫啥_混合现实XR/

正如您在颗粒大会上所说,第三代图形引擎应该从非游戏市场发展,例如智慧城市和虚拟现实办公会议。 那么,在国际化等业务发展目标方面,颗粒科技现在有什么规划吗?

怎么删除混合现实门户_混合现实XR_混合现实又叫啥/

一些。 我们的技术目前可以在中国第一步应用,当然我们希望以后可以全球化。

这个过程也分为几个阶段。 第一步,我们将专注于中国市场并使技术成熟。 第二步会考虑开拓亚洲市场,然后是欧洲市场和美国市场。

我希望我们有机会成为世界第一。 虽然我们在芯片、工业软件、生物医学技术领域失去了机会,但我认为我们有机会在元宇宙的基础技术——图形引擎领域成为世界领先者。

由于元界与现实紧密结合,我们的基础设施数字化能力和政府支持都比较强,第三代图形引擎有机会,所以元界操作系统的实现是水到渠成的事情。 我觉得在图形领域,一定有中国公司——不一定是立捷,可以超越国外公司。

怎么删除混合现实门户_混合现实又叫啥_混合现实XR/

您刚才提到了元界,那么您认为未来元界搭载的主要硬件设备是什么? 相关应用的发展现状如何?

怎么删除混合现实门户_混合现实XR_混合现实又叫啥/

Metaverse早期的应用主要在VR设备(如Meta的Oculus;VR:Virtual Reality,虚拟现实)和AR设备(如微软的Hololens;AR:Augmented Reality,增强现实)。 没有手机也可以使用VR设备。 它可以在房间等小范围内表现良好,但在房间外就无法发挥作用。 因此,它更偏向于B端或者动静不大的应用。 而AR设备会在很长一段时间内离不开手机,所以可以应用到C端,但相应的设备要求会更高。

元宇宙的广泛应用也受到一些条件的限制。 首先是硬件设备不成熟。 比如眼镜的重量太重,续航能力不够强,处理真实数据的能力不够强。 另一个限制是用户参与度不够高。 XR(XR:Extended Reality,扩展现实)眼镜普及后,用户对内容的需求将会爆发。 如果内容生产工具的效率太低,就会导致内容匮乏,用户戴上眼镜后也看不到足够的内容。 但我更乐观地看待 Metaverse。

怎么删除混合现实门户_混合现实又叫啥_混合现实XR/

你认为未来的元宇宙世界会是什么样子?

怎么删除混合现实门户_混合现实XR_混合现实又叫啥/

互联网让人们的信息和生活变得透明,而元界将使整个人类社会的管理体系更加透明和去中心化。

就像用户通过蓝牙耳机接收声音信号,沉浸在音乐环境中一样,当戴上眼镜阻隔外界的声音和图像时,用户就进入了虚拟世界。

在元宇宙中,公民参差不齐,但也出现了霸权。 由于元界的去中心化设计,这种霸权不可能长久。 这不同于物质世界的长期可持续霸权。

Metaverse中也有平行世界,会有不同种类的Metaverse(就像不同种类的游戏一样)。 用户可以在不同的虚拟世界之间穿梭并改变角色。 而人天生喜欢变化,所以这是很人性的。

通过元宇宙,过去需要花费大量时间去体验和观察的事物现在可以以多种速度观看。 以前我们要活到50岁、60岁甚至70岁,才觉得经历了很多事情,经历了人生,但现在可能二十几岁就够了。

怎么删除混合现实门户_混合现实又叫啥_混合现实XR/

在过去的三年或三到五年内,我们将有机会看到什么样的面向普通消费者的虚拟世界或虚拟现实应用?

怎么删除混合现实门户_混合现实XR_混合现实又叫啥/

我觉得三年会有比较大的变化。 一是眼镜在不久的将来会足够便携。 二是会与现实绑定,可以增强用户获取信息的能力。

我认为出差率很有可能在三年内下降。 那时,我们不需要飞到另一个国家去见客户,只需要在家里戴上眼镜,我们要见的客户就会出现在我们眼前。 这其实就是最近Meta和微软一直在推广的应用。 已经实现了,但是成本太高,暂时无法向大众普及。

要普及这类应用,一是要将设备的硬件成本降低到普通消费者可以接受的水平,二是要实现个人用户的数字化。

实现个体数字化后,用户可以在具有真实感的虚拟世界中遇见另一个人。 比如你想和客户开会,只需要通过系统验证,通过后就可以把对方拉进会议室。 受灯光的影响,对方会很像坐在现实世界的会议室里,或者至少对方的面部表情和肢体语言都被“捕捉”到了。 而对方喜欢穿什么样的衣服,戴什么样的眼镜,做什么样的动作,喝什么样的饮料等等都可以在虚拟世界中得到更好的模拟,也减少了需要在现实世界中相遇。

此外,在这个场景中,还可以吸引观众围观,可以开通一些聊天功能,让大家参与到一定的交流中,甚至AI也可以旁观。

再一个就是用户不需要在同一个屏幕上处理各种信息,这些应用会分散在空间中。 例如,抖音可能投射在天花板上,微信投射在左墙上,微信投射在右墙上,邮件或短信投射在镜子前。 当然,这些应用可以根据用户自己的喜好进行切换。

此外,用户获取信息的能力也将得到增强。 例如,如果一个孩子早上要去上学,他需要看看公共汽车开往哪里。 这时候,只要用户戴上眼镜,转过头,就可以透过墙壁看到马路对面的公交车是否到了。 无需先打开APP,直接输入站名即可查看公交时刻表。 如果用户允许分享自己的身份,那么其他用户就可以看到该用户的实时动态、心情指数、心率等信息。

另外要说的是,这款产品会给用户更多的自由度,成为一款提升生活技能的应用。 那时你可能不需要大屏幕或投影仪,可以选择任何高清大屏幕直接眼镜投影。 当用户在家里或者等飞机或者在餐厅的时候,只要戴上眼镜,就可以拉出一个屏幕,让大家在上面交流计划。 而且即使是在同一个物理空间的人,每个人也能看到不同的内容。 看电影的时候,你也可以选择AI陪你看电影,就是你身边有个模拟机器人陪你看电影,它可以和你说话交流。

这些场景我觉得三四年后出现的可能性很大,但主要是一些基础设施和功能的实现,也就是说质量会低一些,不能完全达到不能的效果辨别某些媒体所宣传的真假。 其实对于早期的产品来说,如果不需要高质量,那么质量越低越好,这样生产成本会更低,也能让更多的用户参与进来。 这也符合能源最优、低碳环保的原则。

未来,在自动驾驶领域,也会有大量的内容消费。 手机将成为移动边缘计算节点,用得越来越少。 我早期的判断是手机会消失,但现在我认为这是一个错误的判断。 手机不会消失,但人们花在屏幕上的时间越来越少。 它将成为移动电源、导航仪和移动计算节点。 所以以后大家的包里都会带一个手机,但是不会再拿出来,而是会更多的戴眼镜,因为这样更方便。

混合现实又叫啥_怎么删除混合现实门户_混合现实XR/

颗粒技术办公室中的混合现实应用

怎么删除混合现实门户_混合现实又叫啥_混合现实XR/

您能否用通俗易懂的简明扼要概括一下 Metaverse 是什么?

怎么删除混合现实门户_混合现实XR_混合现实又叫啥/

元宇宙是混合现实。 我觉得metaverse唯一的优点就是简单易懂,就三个字——metaverse,但它本质上是一个混合数字世界,也就是虚拟世界和现实世界融合在一处。

过去,我们以片段的形式查看内容。 例如,手机上的内容与发生的地点和时间无关。 但是现在我们需要将一个内容绑定到某个位置,使用位置感知设备,让用户更好的体验根据位置推送的内容。

因此,虚拟世界可以提供基于位置的混合现实服务和体验,同时它的时间是可以控制的。 比如,当用户和某人谈论某个话题时,他可以把之前和他谈论过这个话题的人拉过来,回头看看他当时是怎么交流的。 在这里,时间可以向前和向后跳跃。 如果以后用户想看到自己或者其他人,可以通过切换摄像头的方式看到。 而如果用户不想看在场的某个人,他也可以用别的东西来代替这个人。

这一切都可以通过元宇宙实现,让用户体验到更加不一样的世界。 但是这个世界并不一定会让人们感觉更好,它也可以变得更可怕、更糟糕。

怎么删除混合现实门户_混合现实又叫啥_混合现实XR/

有人说,区块链是元界重要的底层技术。 你如何看待今年流行的NFT(Non-Fungible Tokens)概念? 很多人看不懂,觉得充满泡沫和炒作。 不过,传统消费行业的一些大公司(如Gucci、耐克、阿迪达斯等)正在做相应的布局。

怎么删除混合现实门户_混合现实XR_混合现实又叫啥/

我觉得这不是炒作,它实际上会成为元界非常主流的商业形态。 我觉得核心是去中心化的区块链技术,目前大家看到的NFT只是其中之一。

元界中的资产是虚拟的,但其属性应该与现实世界中的资产相同。 比如这个杯子是我的,别人偷了或者抢了,就相当于“犯罪”了。 现实世界中资产所有权的概念肯定会被复制到虚拟世界中。 用户无法物理拥有虚拟世界的资产,只能通过区块链等去中心化技术进行保护,保护效果优于现实。 因此,区块链最好的应用场景就是元界。

元宇宙和NFT都会继续发展,这个过程会震荡。 它们在早期被高估,然后下跌,然后突然又上涨,就像一些股票一样。 但总体上行趋势不会改变。

怎么删除混合现实门户_混合现实又叫啥_混合现实XR/

颗粒科技有没有参与过任何真实的元界应用开发?

怎么删除混合现实门户_混合现实XR_混合现实又叫啥/

是的,我们会在上海从粮食世界所在的建筑到国歌纪念广场建设混合现实元宇宙体验中心和测评中心,就像德国用于高性能赛车测试的纽博格林赛道(Nürburgring)一样。 我们已经开始数字化建筑物,国歌广场和中间的雕像,附近的楼梯,从地铁到我们办公区的小广场。

建成后,你可以体验这个园区的大部分设备,包括VR、AR、手机交互和下一代传感器。 而且我们也可以在这里做验证测试,包括商业模式。 比如我觉得早期VR设备是租赁的,我们可以在园区星巴克搭建虚拟VR设备租赁平台,调查人们是否愿意或者愿意为这个设备付费。 这也是对联合商业模式的早期尝试。

我们选择上海国歌广场的公园也很有代表性。 第一是希望立捷成为代表中国软件崛起的标杆企业。 颗粒科技上海办公室紧邻国歌广场。 国歌广场周围都是西门子、安联、大陆等外国公司。 从五谷天地,还可以直接看到国歌广场和那些外企,这会给我们每天追赶超越的力量。 越出国,对中国文化越有信心。 这种自信不是课堂教育带出来的,而是亲身体验和比较出来的。 在法国和德国学习和工作后,回到中国去体验,发现我们的国家有很多令人惊叹的地方。

怎么删除混合现实门户_混合现实又叫啥_混合现实XR/

对于有志在元宇宙/虚拟现实、计算机图形学、人工智能相关领域工作的 Dialogue Germany 读者,您有什么建议?

怎么删除混合现实门户_混合现实XR_混合现实又叫啥/

首先是关注游戏技术和新的发展方向,有选择地玩一些不同类型的游戏,比如VR游戏、手机游戏、虚拟世界游戏Roblox。 目前硬件设备有Meta的Oculus quest 2,也可以玩。 我觉得这个过程可以帮助大家更好的感知世界的变化,理解虚拟现实和元宇宙。 如果一个人没有体验过各种游戏,他/她可能会在某个点上难以理解,甚至错过一个机会,比如NFT交易、虚拟股票市场等。

二是与中国有更多联系。 在德华人主要有两类:一类还与中国保持着密切联系; 另一个完全融入德国,与中国没有联系。

我认为中国目前有巨大的市场和机遇,需要大量的高科技人才。 这个机会在五到十年内也存在。 中国发展以后,需求会减少。 所以,我建议大家保持一个开放的心态,趁着这五到十年的时间,回国多和国内的人聊聊,感受一下中国的变化。

未来的趋势是中德文化的融合,中德市场的融合,技术的融合。 我认为这对在德国的中国人来说是一个巨大的机会。

三是鼓励大家多想想创业。 在德国的华人创业群体非常小。 我们在德国的华人创投微信群只有30到40人,而在美国的华人创投群往往是500人的大群。 通常一个组是不够的,需要不断创建新的组。 以计算机技术为例,德国没有什么顶尖的计算机创新企业,但其计算机技术其实非常强大,基础非常好。

在德国学习、工作、生活的经历也会给我们带来一个很好的品质:做事一定要细心、踏实、有计划。 但这种品质的副作用是,人们会觉得自己做事不能那么咄咄逼人。 但是,中国人的基因里有冒险的元素。 只要不压抑自己的个性,他/她可能还会想。 我建议你把中国特色和德国特色结合起来,充分利用双方的优势,抓住最好的机会。 我个人的倾向是多保留中国特色,少保留德国特色。 因为德国的体制很稳定,变化也很慢,而中国地大物博,日新月异。

后记

作为图形技术公司的代表,粮仓科技目前正在大量招聘职位,包括高级图形开发工程师、3D引擎开发工程师、3D仿真开发工程师、软件测试工程师、IOS开发工程师、Andriod Native高级开发工程师、UI / UX设计师、服务与数据研发工程师、技术美术师、角色建模师、场景特效师、财务助理、IT工程师等。

欢迎有兴趣进入元宇宙/虚拟现实、计算机图形学等相关领域的读者朋友关注并申请加入颗粒科技。 更多职位详情,请访问颗粒科技官网或官方公众号“颗粒科技”招聘栏目。

怎么删除混合现实门户_混合现实又叫啥_混合现实XR/

You May Also Like

More From Author