索尼中国研究院院长竹中幹雄:加速前沿技术在中国市场落地

索尼中国研究院院长竹中幹雄:加速前沿技术在中国市场落地

【大泽科技SHOW】作为一年一度索尼在华的品牌盛会,Sony Expo 2023近日在上海顺利举行,本次活动以“奇境漫游”为主题,全面展示索尼在华电子、音乐、动画、游戏、影视、技术研发、可持续等业务亮点与发展现状。

这次也是索尼中国研究院首次亮相Sony Expo,索尼中国研究院于 2005 年在北京设立了第一个实验室,最近几年又设立了深圳和上海实验室,持续加大在中国的研发投入。其中,北京实验室主攻人工智能(AI)、无线通信方面的研究,上海实验室侧重研究 3D 内容制作,深圳实验室则侧重于传感器和机器人相关研发。

展会期间,索尼(中国)副总裁、索尼中国研究院院长竹中幹雄接受了大泽科技等媒体的采访。

竹中先生表示,索尼中国研究院的使命是" 通过开展对索尼技术的应用研究,为中国社会和索尼的业务做出贡献",研发聚焦于三个方向——娱乐、移动出行和可持续发展。

中国是一个高速发展和充满无限可能性的市场,并且人才济济,在中国做研发能够更贴近本土的实际需求、加快研发成果的概念验证,从而推动实际落地。"

以下为采访实录:

问:我想了解动作捕捉和反馈振动这两个技术目前在索尼的产品里面有哪些应用?或者说在短期的未来能看得到的应用。

竹中幹雄:非常感谢您的提问,先说一下这两项技术,一个是动作捕捉,一个是触觉反馈。前者目前已经推出了mocopi的产品,后者已经应用在PS5游戏机的DualSense手柄、Xperia智能手机的部分型号中。我们考虑把它应用于元宇宙当中,在元宇宙空间里为用户提供更丰富多彩的交互方式。除了视觉以外,还可以通过触觉反馈来增加用户的体验方式。

问:我上午看到了非常多有前瞻性的技术,想问一下这些技术我们会以什么形式进入中国市场,以什么样的形式落地?

竹中幹雄:RDC相关介绍大家参加了上午的媒体见面会应该已经了解到了一些信息,我们集中研发的领域是娱乐、移动出行和可持续发展这三个方面。我们希望在这三个领域寻找到具有中国特色的、适合中国国情的一些应用场景,我们研究院是从2005年开始就已经在中国开展了基础技术研究。比如说像人工智能、无线移动通信方面的研究。

在活用这些基础技术之上,我们在向应用型研究转型,就是怎样把我们的基础技术应用到实际场景当中,应用到实际产品当中,这样我们是想以我们现有的技术再加上其他的技术进行一些适合中国国情的PoC验证,并在中国寻找合适的合作伙伴,比如说产学研三者合作来加强未来的技术力量。

现场RDC的展台展示了一个虚拟舞蹈室的体验项目,这个项目集结了一个是动作捕捉的系统叫做mocopi,还有一个是Spatial Reality Display(空间现实显示设备),这个是一个裸眼3D设备。第三项技术是FVV,自由视点体积捕捉拍摄技术。利用这个技术可以迅速生成3D的数字化身,到时候大家可以到现场体验一下。

这其中运用了人工智能的技术,还有我们开发的算法,通过这三种技术的有机组合,我们会提出各种各样的新的应用方法提案,然后进行实验价值验证。目前我们主要是在娱乐领域运用这几项技术,以及在元宇宙世界制作的方面集中我们的技术力量,我们也认为元宇宙的3D内容制作在中国可以得到迅速的应用。

问:接着mocopi问一下,这是一个什么样体感的产品?能不能介绍一下这款产品当时在开发时的理念和产品特性要点,以及在开发的时候有没有遇到一些怎么样的难题,怎么样解决的?

竹中幹雄:mocopi是我们起的特定的名字,它是一个轻量级的动作捕捉系统,它可以使动作捕捉的制作过程变得非常简单。只要在身上穿戴六个简单的传感器,用户就可以自由自在地控制他的数字形象。因为mocopi是一个轻量型的动作捕捉系统装置,如何在降低价格、简单易用、提高精度的这几方面取得平衡,这是我们面临的课题。

问:这个产品好像在海外市场已经销售了是吗?

竹中幹雄:已经在日本和美国正式销售了。

问:研究院目前致力于未来两到三年的研究,还是说中长期十年的研究?之前我了解到我们在北京、上海、深圳分别有三个研究中心,负责三块不一样的业务,这个是因为什么样的原因把三块不一样的业务分开三地,是因为有相应的人才在三地吗?我们还是说先成立了再去找相应的人才?

竹中幹雄:无论是短期还是长期的战略研究,我们都有考虑。关于两到三年近期的研究战略,我们集中在娱乐和移动出行的领域。中长期角度来看,五到十年间,我们是想着眼于中国现存的一些社会课题领域,比如说像农业、老龄化,还有教育等,我们希望运用索尼的技术在本地找到合适的合作伙伴,共同开发相应的解决方案,这个是需要花更长的时间来推动和进行的。

之所以我们有三个分支机构分别在不同的城市,这个是我们根据每个城市自己独特的特点来决定的。

北京是最早在2005年成立的,当时主要是进行人工智能和无线移动通信的基础技术研究,我们主要是和中国的知名大学进行合作研究。提到深圳的话,深圳这个城市的电子、技术行业很发达,非常适宜进行传感器、机器人方面的研究开发。提到上海的话,我们在上海成立研究院分支机构的主要原因就是一些索尼旗下和娱乐相关的公司,比如说安尼普和索尼互动娱乐这些娱乐相关的索尼在华企业更集中在上海,我们希望能够跟他们一同合作,开展相应的研究开发,所以就在上海也设立了分支机构。

问:刚刚提到索尼在RDC现场展出了裸眼3D、动作捕捉和振动反馈技术具体时间。索尼未来会以一个什么样的身份在全球和中国市场推广这类技术呢?是以硬件平台还是会建立对应的内容分发平台,甚至是索尼本身作为一个内容创作者的方式推进这些技术?

竹中幹雄:关于是以硬件的形式还是以软件的形式去推广我们的新技术,可能我们不仅限于自己以硬件或者是软件的形式,或者是解决方案的形式,我们希望能够在中国寻找到比较合适的伙伴一起开发全面的解决方案,共同推进业务,为中国的娱乐事业发展做出贡献。

5月26日,我们RDC部门专门邀请了一些和我们有合作的,例如大学研发机构,创新企业,还有一些我们其他方面业务合作伙伴,单独安排一个专场与他们沟通交流,我们不仅自己推动技术研发和技术应用,我们在中国还有一些合作伙伴,希望能够和他们共同推动娱乐事业等在中国的发展。

问:我们刚才体验了一些展示的创新技术,这些技术有没有现有的硬件产品和解决方案能够做结合的具体方向?你们提供哪些方面的资源支持?

竹中幹雄:不知道您是否已经到我们的展台体验了这三个展出项目,如果您去了应该能看到我们虚拟舞蹈室的展出项目,其实就是我们索尼研究院开发的技术和现有产品的结合,其中mocopi和空间现实显示屏,这两项是已有的产品。在这个产品的基础上组合了我们自由视点体积拍摄技术,瞬间可以生成3D 人物的技术,我们为用户创造了全新的一种娱乐体验。

另外我们还有一个展台展出的是摄影机械臂,提到机器人大家可能对它有一些固有的概念,就是工业应用比较多。但是我们是探索了它在娱乐方面的新应用,它是一个可移动的自动对焦、自动拍摄的机器人,就是类似这样的一些基于已有产品,导入了RDC开发的新型技术,然后我们对它赋予了全新的应用场景和用途,这样的方法我们也在进行各种各样的尝试。

问:这些技术是在研发合作阶段就已经比较多的跟外部机构合作,还是说主要还是由RDC自己完成?这个东西出来了以后是我们主动接触一些外部的机构,再去跟他们探索进一步的合作方向吗?还是说会有一些外部机构主动来找RDC?

竹中幹雄:先回答您第一个问题,在研究开发阶段是我们自主研究还是和合作伙伴共同研究的问题,我们举一个例子,3D内容制作的这项技术。从我们整个公司来讲,轻型3D内容制作技术是由索尼内部开发的,但是这个技术可以有各种各样的应用场景和用法,比如说像RDC我们会在某些特定的应用领域去寻找合适的合作伙伴,然后积极和他们接触,共同进行研究和开发。

通过和合作伙伴一起共同研究开发新的解决方案和新的应用,能够改进我们的技术。整体总结来说,基础技术研究这部分是由我们独自完成的,但是在基础研究上面一层的应用研究方向我们是希望能够积极的和外部合作伙伴一起共同开展的。

第二个关于您提到的如何寻找合作伙伴,是否会主动接触一些本地的创新企业等。我们明确了在某一个领域想要寻找一个合作伙伴的时候,我们会本着可以互补的原则,比如说对方有,而我们没有的东西,或者是技术,这样我们会去主动提出邀约合作的提案,共同在中国推进某一项技术的发展。

所以从这个角度来说,我们明天特意安排了与战略合作伙伴专门的沟通交流活动,也是希望能够通过这个活动邀请到现有我们的一些合作伙伴,让他们通过大型的索尼活动,不但是了解RDC,还要了解整个索尼,喜欢整个索尼,为我们以后共同合作创造更多的机会。

问:既然索尼研究院有一些关于AI的研究方向,我想知道您怎么看目前国内一些AI内容创作,以及这种AI大模型研究的课题,因为其实在国内目前科技行业其实是非常热门的方向,索尼是怎么看这样的一些内容?

竹中幹雄:您刚才提到的AI进行内容创作,还有AI大模型的研究,我们也认为这是一项非常重要的前沿技术,也是非常有未来发展的前景。它将会给未来的互联网带来极大的冲击。RDC目前在AIGC方向发力较多。

问:我想问一下,看到这两年新能源汽车在中国市场非常火,在这次展会上我也看到了高级车载音响的展出,我想问一下索尼在跟新能源汽车这边有没有一些研究的方向和策略?

竹中幹雄:我们在移动出行领域也是有一些相关研究的,刚才也提到我们北京的研究院成立的比较早,2005年的时候就成立了,那个时候我们就开始进行一些无线通信方面的基础研究。从无线通信方面延伸研究,其中一个领域就是车联网和应用车联网的自动驾驶技术,我们在这些方面是有一些技术积累的。

这是RDC自己内部的一个情况,但是作为索尼集团整个来说,在移动出行的领域的动作和投入会更大。

问:今天有介绍RDC进行的是最前沿的研发,我想问一下咱们内部怎么界定和并选择这个前沿的研发方向?

竹中幹雄:从基础技术研究的选题来讲,我们很早就在北京建立了研究院,主要是致力于人工智能和无线移动通信技术的研究开发。这个选题是我们和中国知名大学合作选定的,在中国的大学里有很多水平非常高的研究人员,通过与他们的合作和共同提案,我们选择了这两个领域相应的研究方向。

问:除了今天已经分享的这些技术方向,有没有一些针对近期的趋势,新的正在考虑、去探索的创新方向?

竹中幹雄:目前,我们有一个主要着眼点就是可持续性发展,利用我们现有的一些工业互联网IoT的技术,还有一些传感器设备,以及传感技术再组合上RDC开发的人工智能和无线移动通信的基础技术,应用在农业、老龄化社会以及教育等领域,希望能够找出新的、能够解决中国现有社会问题的机会,也希望能够为中国社会的发展做出一些贡献。返回搜狐,查看更多

责任编辑:

发布于:山东烟台莱州市