随着科技的不断进步,智能座舱正逐渐改变着我们的驾驶体验。其中,搭载了驾驶员监控系统(DMS)和TOF 3D手势识别技术的智能座舱,为我们带来了前所未有的便利和安全性。本文将深入探讨智能座舱中TOF相机的核心技术和其所带来的革命性变化。
01 3D TOF技术简介
TOF(Time of Flight)相机是利用光的传播速度测量物体与相机之间的距离,并通过分析这些距离信息来识别和理解面部表情、眼神和手势等。驾驶员可以通过挥动手指或手势划动,来实现对智能座舱功能的控制,如调整音量、接听电话等,无需触摸屏或物理按钮。
02 3D TOF车载应用1:3D动态/静态手势操作
为什么要使用3D手势操作,技术难点在哪?
传统的基于2D图像手势识别往往受到车内环境的影响,导致识别率较低,且算力消耗大。3D TOF相机不仅可以减少车厢内复杂环境的影响,提高车内手势识别的准确率和稳定性,同时可以保护乘务人员的隐私。
3D点云质量是制约高准确度手势识别、定位的关键因素。尤其是在较远距离的后排情况,3D点云质量变得尤为重要。
点昀自研3D TOF手势识别系统包含Okulo A1高性能车载TOF相机和配套自研神经网络算法,为汽车终端厂家提供“一站式”解决方案。Okulo A1 TOF相机采用了点昀的独家技术,不仅可以获得高精度的3D点云,同时实现了PoC供电,使得其在智能汽车中部署更加方便。
03 3D TOF车载应用2:隐私保护的驾驶员监控系统(DMS)
驾驶员监控系统(DMS)是智能座舱中的重要组成部分,NCAP安全组织正在要求安装驾驶员监测系统(DMS)来检测驾驶员疲劳。疲劳驾驶、分心驾驶容易导致的较大道路交通事故,因此,实时监测驾驶员的注意力水平、位置和动作变得至关重要。
点昀自研基于3D TOF的DMS通过使用TOF相机和人工智能算法来实时监测驾驶员的分心、疲劳、3D视线等,并提供相应的警示和建议,预防潜在的事故风险。
3D ToF DMS系统相较传统DMS系统优势:
- 隐私保护
- 3D Eye Tracking,眼部状态和注视准确性高。
- 更高的灵活性:3D头部位置检测,摄像头安装位置更灵活。
- 头部方向范围大:扩展了头部扭动监测范围。
- 可在低光、复杂光线、或强光(120 klux)下稳定工作
- 同时支持安全人脸解锁
此外,点昀技术还提供算力内置的低成本2D DMS解决方案,欢迎汽车主机厂家和Teir 1洽谈合作。
04 点昀技术Okulo A1 相机
关于点昀 | About us
点昀技术(Point Spread Technology)是聚焦“Physical AI 的实时视觉内核”的端到端计算光学平台,为机器人、智能汽车、无人机、医疗提供面向复杂环境的低延时处理能力和端到端计算光学解决方案,提供标准化、可快速集成的人-机-环境感知、决策与交互能力。点昀自研无内存低延时2D、3D ISP架构与RAW HDR直入GPU链路,将视觉处理端到端延时压至3ms以内、夜间雨雾强逆光下依然鲁棒,性能对标并替代ARM等国际IP。产品已获Meta等国际头部客户验证,斩获某国际头部企业10亿元级订单定点,具备IATF 16949车规量产能力。
联系邮箱 | sunqilin@pointspread.cn
