对话肇观电子冯歆鹏:这款3D视觉芯片如何为机器人点亮双眼?( 二 )


在远距离的自然环境成像实验中 , D163A成像的深度图具有适应范围广、不受阳光干扰的特点 。
另外 , 肇观电子展示了D163A芯片在640*480高帧率下的成像效果 , 最终成像的深度图准确反映了球在地上远近滚动的不同深度 。
▲被动光双目场景中 , 阳光下球滚动的深度图
▲被动光双目场景中 , 在阳光下拍球的深度图
在主动光双目的场景中
, D163A芯片的性能优于IntelRealsense 。

对话肇观电子冯歆鹏:这款3D视觉芯片如何为机器人点亮双眼?
文章图片
▲在主动光双目场景中 , D163A(中)和IntelRealsense(右)的对比
三、几何计算能力:支持200余种通用数学计算
除了具备高精度3D深度计算能力 , D163A芯片还具备业界领先的数字信号处理能力 。
具体来说 , D163A芯片可以支持200余种通用数学计算算子 , 其中包括三角函数、对数、快速傅立叶变换、HoG、SVM、RANSAC等等 。
在应用中 , D163A芯片可以实现各种复杂图像特征点的实时计算 , 可以同时运行特征点计算和AI计算 。

对话肇观电子冯歆鹏:这款3D视觉芯片如何为机器人点亮双眼?
文章图片
▲D163A芯片同时运行实时640×480像素的FAST角点计算和AI计算
四、AI加速计算能力:网络精度几乎无损失 , 算法“5分钟”部署
AI计算性能方面 , 在INT8和FP16精度下 , D163A运行各项网络均可达到较高的每TOPs每秒处理帧数 。

对话肇观电子冯歆鹏:这款3D视觉芯片如何为机器人点亮双眼?
文章图片
▲上–在INT8的精度下 , D163A芯片跑各项网络可以达到的每秒帧数;下–在FP16精度下 , D163A芯片跑各项网络可以达到的每秒帧数
计算精度方面 , 肇观电子在PCNCNNFP32和板端INT8精度下对七种网络进行测试 , 结果显示D163AINT8量化网络的精度损失均在1%以内 。

对话肇观电子冯歆鹏:这款3D视觉芯片如何为机器人点亮双眼?
文章图片
▲针对7种算法网络 , D163AINT8量化网络几乎无精度损失
不仅如此 , 搭配肇观电子推出的AI应用开发平台InferStudio? , 用户可实现对D163A的快速开发部署 。
冯歆鹏分享 , 一位客户基于InferStudio?开发平台 , 仅用时半天就完成了对D163A芯片的多项开发任务 。
五、已在多个领域实现商业闭环
作为国产3D视觉赛道上的一位玩家 , 肇观电子正凭借D163A和更早发布的N163A芯片快速铺开市场 。 据冯歆鹏分享 , D163A非常适合解算双目立体视觉、结构光、ToF(飞行时间传感器)、激光雷达等传感器生成的数据 。 目前 , D163A芯片已经在智能叉车、可穿戴设备、无人机、工业检测等领域实现了商业闭环 。
此外 , 在移动设备市场 , 肇观电子亦有所规划 。 据冯歆鹏分享 , 肇观电子将承担为3D产业链“赋能”的角色 , 通过与客户合作 , 推动芯片在模组、移动设备乃至更多领域内的落地 。
展望未来 , 冯歆鹏认为在几年内 , 3D视觉技术有望被应用到80~90%的智能设备上 。 同时他表示 , 面对一片市场蓝海 , 肇观电子将持续深耕市场、推动产品迭代 。
“肇观电子将聚焦于现有的产品组合 , 依据客户的需求和技术的发展 , 把几个产品线越做越好 , 这是我们的目标 。 ”他说道 。
结语:3D视觉有望成为机器视觉市场主流
目前 , 3D视觉市场正在飞速发展 。 据市场研究机构赛迪顾问预测 , 到2022年 , 中国工业机器视觉市场规模将达到180亿元 , 其中3D视觉技术和产品有望成为市场主流 。
在这背后 , 工业机器人对于抓取目标的三维位置信息需求变大、自动驾驶应用对于环境感知能力的需求变高……许多领域均对3D视觉技术伸出“橄榄枝” 。 在国产3D视觉产业链中 , 肇观电子等玩家的成长 , 亦印证了这一趋势 。
对话肇观电子冯歆鹏:这款3D视觉芯片如何为机器人点亮双眼?】未来 , 3D视觉应用或将渗透进更多场景 , 我们拭目以待 。