银牛微电子3D空间计算技术 赋能人形机器人实现具身智能
发布时间:2024年04月03日

        4月2日,由中国机电一体化技术应用协会指导,中国机器人网、智能谷产业园联合主办的人形机器人行业盛会——“2024中国人形机器人生态大会”在上海盛大举行。中国工程院院士赵连城、中国科学院院士褚君浩、俄罗斯工程院院士孙立宁、中国机电一体化技术应用协会会长李亚平、哈工大机器人研究所所长赵杰、上海交通大学电子信息与电气工程学院副院长王贺升、浙江大学教授熊蓉、上海大学机电工程与自动化学院机械自动化工程系主任田应仲、青浦区各级领导以及众多人形机器人产业链专家、企业代表、行业菁英出席了本次大会。

       2024年,在人工智能的加持下,我国人形机器人产业迎来了重大变革。随着产业链智能制造优势的不断凸显,核心零部件的国产化替代进程的不断加速,我国人形机器人的成本困境有望得到缓解。同时,我国正处于工业数智化转型的关键节点,发展人形机器人产业的使命必然。本次大会以“人机融合 智造未来”为主题,准确把握新一轮科技革命和产业革命带来的历史机遇,深入贯彻落实《人形机器人创新发展指导意见》,剖析行业发展趋势,为2025年中国人形机器人创新体系的初步建立布局谋篇,努力提升关键技术,助力整机产品达到国际先进水平,实现批量生产。

       银牛微电子受邀参加本次大会,并由副总裁周凡博士发表“银牛3D空间计算解决方案助力人形机器人锐眼识界”的主题演讲。银牛作为一家专注3D空间计算及人工智能芯片和产品设计的高科技企业,其自研系列芯片是全球唯一单芯片集成芯片化3D视觉感知、AI(人工智能)、SLAM(实时定位与建图)的系统级芯片,其3D空间计算技术和解决方案能够从实现具身智能和精细操作两个维度颠覆性地提高人形机器人的能力,同时大幅降低人形机器人的成本。

       周凡博士讲到,高精度3D感知、实时空间计算能够赋能三维多模态人工智能大模型,助力人形机器人实现具身智能。同时,多个3D视觉感知子系统组成人形机器人整体视觉系统,能够帮助人形机器人克服触觉等其他感知的不足,实现低成本、超高精细度的精巧操作能力。

       银牛的3D空间计算解决方案能够提供高精度、实时的空间计算,帮助机器人更好的感知周围真实的世界。在语音、文本和图像等基础模态之上,加入3D点云模态,通过增强的多模态关联技术提高人形机器人的智能水平和逻辑自洽。

       周凡博士表示,3D空间多模态大模型实现的难点是需要海量数据用作训练,对算力和训练数据要求非常高,而“银牛拥有三维空间多模态大模型数据库,借助三维空间数据,大幅降低多模态大模型对训练数据的海量要求,大幅提高训练结果的准确度,帮助大模型的发展摆脱对算力和数据量的过度依赖。”

       银牛3D空间计算技术可支持和提供头部、手腕、指尖等多个视觉子系统,并将其有机地整合在一起,从而组成人形机器人整体视觉系统。所有视觉子系统均具备较强的边缘计算能力,能够帮人形机器人更好地感知和理解真实的世界,以较低成本实现类人级别的视觉感知能力,赋能精巧操作能力。 

       据悉,银牛微电子已和包括小米在内的多家头部企业以及多所全国TOP高校建立深入合作,通过3D视觉系统和三维多模态大模型帮助人形机器人更好的感知、识别和理解真实物理世界,助力人形机器人锐眼识界。