2023-07-06
7月4日，，，波币钱包（002354.SZ）与专注3D视觉+AI的高科技半导体企业银牛微电子签署战略合作协议，，，并宣布共同投资4000万成立合资公司。。。波币钱包总经理徐德伟出席签约仪式并发表讲话，，，提到：“将以合资公司为主体，，，把波币钱包在元宇宙、、、虚拟数字人领域的应用场景优势与银牛微电子在3D视觉芯片领域的技术优势与相结合，，，共同研发面向元宇宙应用场景的3D深度视觉模组，，，实现虚拟数字人低成本、、、短周期、、、批量化生产制作与低延迟、、、高精度、、、沉浸式互动体验，，，不断降低元宇宙进入门槛，，，不断丰富元宇宙应用场景。。。”
为进一步了解波币钱包与银牛微电子成立合资公司后的产品计划，，，记者与徐德伟进行了深入交流。。。
Q：您在签约仪式上提到，，，与银牛共同成立的合资公司将共同研发3D视觉感知产品，，，请问具体的产品规划是什么？
A：目前，，，我们规划了3款产品，，，包括便携式3D深度相机、、、桌面式3D摄像机和数字人3D数据采集系统，，，分别应用在虚拟数字人扫描与自动化建模、、、虚拟数字人全身深度视觉捕捉驱动、、、人体动作3D数据采集3个领域。。。
Q：合作开发的第一款产品会是什么呢？
A：第一款产品，，，我们会把研发重点放在便携式3D深度相机这个产品上，，，主要应用于虚拟数字人扫描与自动化建模。。。
波币钱包在虚拟人的打造和运营上有丰富的经验，，，以往行业内要完成一个虚拟人的构建从扫描到建模，，，需要很长的周期和很高的成本，，，很难实现大规模的批量化生产。。。在2020年我们决定切入虚拟数字人赛道时，，，我们和很多企业、、、科研机构交流、、、合作过，，，当时大部分需要2到3个月的周期才能完成一个超写实的虚拟数字人，，，建模成本更是从几十万到上百万不等。。。
在过去1年多时间里，，，我们基于自研的Meta-Surfing元享智能云平台，，，通过对数字人生成、、、数字人驱动、、、数字人交互三个核心功能模块算法的不断优化，，，通过软件系统的投入，，，已经大幅缩短了制作周期与制作成本，，，但距离完美的消费级ToC应用还有一定差距，，，主要原因是传统的相机扫描采集到的都是2D数据，，，需要花大量的算力和时间转换成3D数据。。。
银牛的3D视觉芯片采集的天然就是3D数据，，，芯片本身还具备AI算力，，，他们的3D视觉芯片与我们的元享软件平台结合后，，，会弥补这最后的一点差距，，，通过软硬结合，，，真正实现虚拟人短周期、、、低成本、、、批量化生成，，，从而降低元宇宙的门槛，，，提供给C端用户工具化、、、标准化、、、易用型的可交付产品与解决方案。。。
Q：研发桌面式3D摄像机是出于哪些考虑？
A：虚拟人生成核心环节主要涉及建模、、、驱动和渲染三大技术。。。第一阶段通过便携式3D深度相机我们实现了虚拟人扫描、、、建模自动化，，，那么第二阶段我们希望变革驱动环节。。。
我们把虚拟人的发展划分了三个阶段，，，1.0阶段是静态虚拟数字人阶段，，，只能展示，，，不能互动；2.0是动态虚拟数字人阶段，，，进行展示时可以与现实人互动，，，但需要中之人操纵，，，也就是双簧式，，，需要现实人一对一搭配数字人；3.0是智能数字人阶段，，，通过自学习，，，数字人完全可以替代现实人在一些领域独立工作。。。
1.0阶段是通过传统CG或体积视频技术建模的，，，是不可控体数字人，，，无法实时互动，，，应用场景比较狭窄；2.0阶段主要是基于惯性动作捕捉、、、光学动作捕捉及实时渲染技术，，，打造出可控体数字人，，，应用在虚拟主播、、、虚拟偶像上，，，虽然有一些应用，，，但不完美，，，动作容易失调、、、面部表情不到位、、、互动能力差、、、沉浸体验感不好。。。针对这些问题，，，我们计划推出可以实现3D深度视觉捕捉驱动的桌面式3D摄像机。。。
通过3D摄像机和深度传感器能获取人体的三维形状和姿势信息，，，甚至是骨骼结构追踪。。。对于人脸识别、、、姿态、、、动作识别、、、手势识别，，，它的准确性和细节捕捉能力都非常强。。。
因此，，，相较于惯性动作捕捉、、、光学动作捕捉、、、光惯混合动捕方式，，，视觉捕捉更加灵活方便，，，无需额外的佩戴设备，，，对于C端更加适用，，，而且经过AI数据修正，，，可以获得更高精度、、、更稳定、、、高质量数据，，，而且还可以在摄像头的视野范围内进行采集拍摄，，，有更大的活动空间和范围。。。
Q：第三阶段将推出什么产品，，，人体动作3D数据采集有什么意义？
A：产品研发的第三阶段，，，我们的目标是打造一个应用于人物表情、、、形态及行为特征数据采集的数字人3D数据采集系统，，，形成我们特有的数据库，，，用来训练数字人表情和动作，，，这是我们为实现3.0智能数字人阶段做的数据基础设施。。。
ChatGPT出现后，，，虚拟人聊天等智能交互体验有了飞跃提升，，，但虚拟人作为AIGC典型多模态应用，，，整个生成式AI技术在虚拟人动作和表情生成领域相对滞后。。。我们看到一个AI驱动的数字人，，，或许能和你聊天，，，但是来来回回就那几个动作。。。AI技术的成熟度、、、算法迭代离不开数据，，，特别是大量、、、高精度、、、高质量的3D数据库。。。
未来，，，我们会有一个较大规模的基于3D深度摄像机的人体复杂行为数据库，，，经过数据喂养、、、深度学习算法提取,AI数字人的动作也会像语言交互体验一样趋于自然、、、流畅，，，而且是自学习的，，，届时虚拟数字人才能真正摆脱“中之人”驱动，，，完成全面的AI进化。。。
Q：最后一个问题，，，为什么选择和银牛微电子合作？
A：选择银牛作为合作伙伴是经过深思熟虑的。。。银牛是一家集3D双目视觉处理和人工智能芯片设计能力于一体的高科技半导体企业。。。在3D深度视觉、、、复杂SoC设计、、、低功耗、、、光学、、、嵌入式系统软件、、、边缘计算等方面具有10年以上的深厚经验。。。全球最早从事芯片上3D深度感知引擎研发的企业之一以色列公司Inuitive也是银牛的子公司。。。加上多年来在泛机器人领域的应用探索，，，银牛自研的集成3D视觉感知、、、AI、、、SLAM的系统级芯片已经应用在在众多前沿应用领域的产品中，，，3D和AI能力已经得到了验证。。。
我们认为，，，虚拟人就是元宇宙世界里的关键，，，它需要3D视觉感知能力，，，需要AI能力。。。3D视觉+AI的模式，，，将赋予虚拟人和各类智能设备“人眼”和“人脑”。。。选择和银牛合作对波币钱包来说，，，是跟我们在元宇宙场景和虚拟人方面进行软硬件结合的最佳选择。。。
内容来源：证券时报