2024年5月22日,上海金脉电子科技有限公司(“金脉”)以对汽车产业智能化的深度探索,凭借软硬结合的全栈技术能力与前瞻积累,基于ToF(时间飞行法)3D成像技术,推出隔空操控全栈解决方案,以先进科技变革并引领汽车座舱智趣交互新体验。

 

金脉 3D ToF 解决方案(仅供示意)

ToF(Time of Flight)即3D成像技术, 通过给特定范围内的目标连续发送主动光脉冲,收集物体的反射光信号所产生的相位偏移等光学讯息来判断物体距离空间等三维信息。得益于传感器与AI的成熟,ToF以其精准的距离测量能力,为智能交互带来革命性变革并在智能汽车领域迎来巨大的应用潜力。

金脉 3D ToF解决方案具备国际先进的视觉感知技术,拥有更高维度的交互感知能力,响应速度快、识别精度高。让驾乘者无须物理接触,仅凭借识别与分析面部表情、视线和手势,即能实现驾乘人员隔空控制智能座舱以及第三方应用功能场景,如3D面部识别B柱解锁、人脸支付、接打电话,以及音视频切换、音量调整、手势游戏等娱乐多媒体系统的智能操作。不仅提升驾驶过程中的便捷性和安全性,也为驾乘体验注入更多便捷与乐趣。该概念解决方案于2023中国国际智能产业博览会上首次亮相即受到广泛关注。

作为一套完整的平台化系统级解决方案,金脉以软硬件全栈技术驱动,同时深度考量方案兼容性和生态性,基于量产化、可拓展的产品平台进行开发。方案由深度相机模组、解算算法、手势三维重建算法和手势控制中间件等单元构成,在简化系统复杂性的同时,实现弹性组网、高效开发与快速灵活部署,具备无缝集成、代际兼容、灵活配置的特性。

国际先进的硬件性能,最优的工程化设计与标定融合

深度相机标准模组采用英飞凌基于第五代像素技术的超感应 3D REAL3™图像传感器 ,能够以毫秒级捕捉速度实时提供深度数据,具有高度集成、速率快、性能独特等优势,是世界首款符合ISO 26262 ASIL-B功能性安全要求的车规级ToF传感器。该传感器获得专利的背景照明抑制(SBI)技术,不受环境照明条件影响,即使在夜间或弱光、强光、雨雪、扬尘天气环境下依旧可以高效工作。同时,单目系统架构,即便出现振动、跌落或热弯曲时,也无需机械调准和角度校正,是准确可靠的深度数据和最小的摄像头模块设计的最佳之选。

深度相机标准模组的结构相对简单、散热性能好、可靠性更高,支持VGA大分辨率640×480、大广角FOV110°×80°、大于30fps 高帧率标准运行。采用满足激光安全 IEC60825-1 Class 1等级的940nm标准激光模块,同时搭载RGB sensor支持200w rgb图像,主从模式可以兼容舱内已有的IR模组,可灵活支持各种场景的技术评估和开发验证。整体模组“身形”小巧,可根据安装环境自定义结构设计并灵活匹配舱内安装位置,如车辆后视镜、AB柱、车辆中部车顶、屏下结构等空间位置。

金脉基于英飞凌领先的图像传感器特性和对ToF技术的深刻理解,结合自身多年量产化经验和行业领先的产品化平台开发,在调制脉冲频率、深度精度、成像视场角、分辨率之间探寻并取得在舱内多场景下的最优适配平衡点,同时通过软件和算法对硬件模组进行优化、标定和补偿,充分发挥硬件模组最佳的三维成像与处理能力。

 

金脉 3D ToF 标准模组

“开发为底、生态为先”,打造跨模态下无缝集成新标杆

金脉以统一的架构、统一的软件栈和统一的标准接口进行开发设计,打造的是“全生态、系统级”的完整解决方案,可跨平台无缝集成适配Android、Linux、HarmonyOS、整车厂车机系统及任意内置应用、第三方应用和特定场景等,快则一周时间即可实现标准Demo集成部署,并具备OTA能力。软件方案搭配了映射、滤波、手势策略、姿态策略等算法并进行深度调优,整体方案性能表现远超目前市场上同类解决方案,实现了跨模态下高精度、高鲁棒的识别、操控与处理。

金脉自主开发的平台化中间件,在算法适配、标准驱动和应用生态等方面做到最大程度的兼容。创新设计的算法适配框架,可快速适配不用厂家的算法方案,缩短开发周期;对底层有专属的标准化驱动框架,能够在不同的硬件平台上高效移植与复用;对上层应用,满足客户和整车厂需求逻辑的快速部署,以及各种上层应用的灵活调度与开发,并支持更多生态应用功能拓展。

深度优化且高效的中间件系统平台,可为上层应用提供基于人体不同部位的识别与更多功能实现,如手部手势、头部姿态、身体坐姿,以及主动安全与智能音效等场景支持。扫描手部得到的关键点信息实现多种手势操控,如移动、点击、拖拽、自定义手势等;支持结合智能娱乐系统及APP应用,为不同年龄段的人群或儿童推荐合适的音视频节目/游戏;支持人脸3D面部识别,可根据不同乘客的表情或情绪,推荐当前情绪下不同类型的音乐或娱乐信息;针对不同乘客的坐姿,可进行身体姿态及头部姿态策略和响应,为其调整座椅角度,甚至在紧急情况下,判断坐姿及位置实时调整安全气囊的弹出角度和力度,最大程度地保护乘客的安全。

 

金脉 3D ToF 系统架构

金脉副总经理秦晨表示:“车载 3D ToF 是一个复杂且高度集成的解决方案,涉及照射单元、光学成像、各类算法、系统中间件、模组设计等多个软硬件技术环节,极度考验供应商的全栈开发能力。金脉基于多年成熟的平台化开发理念,全程以先进技术与量产化要求把控方案及产品的可靠性、安全性,交付的不仅是完整的全栈产品解决方案,更是端到端的全链路技术服务。未来,金脉将携手更多生态合作伙伴深度赋能舱内多场景智能方案落地,共同定义与推动下一代智慧座舱新形态。”