PROPHESEE 发布全新事件视觉传感器,超低功耗、极小尺寸让消费类智能设备更自主、更安全

2023-10-20 13:27:05 来源:Prophesee

微信图片_20231020132844.png

20231020日,中国上海——领先的神经拟态视觉传感公司普诺飞思(Prophesee)今日宣布,推出业界首款专为超低功耗边缘视觉设备集成设计的 Metavision® 事件视觉传感器 GenX320。该新品为Prophesee第五代Metavision 传感器产品,采用尺寸为 3x4mm 的裸片。GenX320的推出将 Prophesee开创性的事件视觉技术平台的应用范围拓宽,扩展至快速增长的边缘市场领域,覆盖 AR/VR 设备、可穿戴设备、游戏、机器人、笔记本和平板电脑、物联网设备等。

 

 微信图片_20231020132930.png

Prophesee Metavision® 事件视觉传感器 GenX320裸片尺寸

 

Prophesee 联合创始人兼首席执行官 Luca Verre 表示:事件视觉传感器具备卓越的性能及能效,非常适合低功耗边缘人工智能市场各式各样的应用。基于在其应用领域取得商业成功,我们开发了这款全新的 Metavision 事件视觉传感器,专门满足边缘系统开发人员的需求。该款传感器易于集成、配置和优化,适用于运动和物体检测、存在感知、手势识别、眼追踪,以及其它高增长市场的多种用例。

 

基于 Prophesee 丰富经验和多年的技术积淀,GenX320 事件视觉传感器能够为各种应用带来速度、低延迟、动态范围和能效方面的优势。GenX320 事件视觉传感器采用 BSI 堆栈式技术,像素尺寸为 320x320 6.3μm,采用微型的 1/5” 光学格式,因此,在能源、计算和尺寸都受制约的嵌入式边缘视觉系统中,GenX320 事件视觉传感器正契合其对于高效集成事件视觉传感的技术要求。即使在极具挑战性的操作和照明条件下,GenX320 仍能以超低功耗提供稳定、高速的视觉感知。

 

GenX320 带来的优势包括:

• 低延迟的事件时间戳,分辨率为微秒,且数据格式灵活。

• 片上智能电源管理模式,可将功耗降至 36uW,并支持智能唤醒事件,同时支持深度睡眠和待机模式。

• 与标准 SoC 轻松集成/连接,具备多个集成事件数据预处理、过滤和格式化功能,可最大程度地减少外部处理开销。

• MIPI CPI 数据输出接口为嵌入式处理平台(包括低功耗微控制器和现代神经拟态处理器架构)提供低延迟连接。

• AI-ready:片上直方图输出可兼容多个 AI 加速器。

• 传感器级别隐私保护:得益于事件传感器固有的稀疏无框事件数据,以及静态场景去除功能,能够从传感器层面保护隐私。

•  Prophesee Metavision Intelligence 原生兼容,Metavision Intelligence 当前业界最全面免费事件视觉软件套件,目前在全球拥有超过 10,000 名用户。

 

潜在应用场景

• 用于 AR/VR/XR 头显中的注视点渲染或无缝交互的高速眼动追踪

• 消费电子设备(电视、PC、游戏机、智能家居等)中低延迟、无接触的人机交互界面

• 物联网摄像头中的智能存在检测和人数统计

• 超低功耗 always-on 区域监控系统

• 家庭及医疗设备中检测跌倒的摄像头

 

 微信图片_20231020132958.png

Prophesee Metavision事件视觉传感器 GenX320, 专为超低功耗边缘视觉设备开发设计

 

商业可用

GenX320 现可从 Prophesee 及其销售合作伙伴处购买。GenX320 配套一整套开发工具,包括装有板载芯片 (COB) GenX320 或紧凑型光学柔性模的综合评估套件 (Evaluation Kit),可帮助开发人员轻松探索和开展优化工作。此外,Prophesee 还提供一系列适配器套件,可无缝连接到各种嵌入式平台(例如 STM32 MCU),从而缩短产品上市时间(Time-to-Market)。

 

合作客户

 

Zinn Labs

基于 Prophesee Metavision 事件传感器的独特功能,Zinn Labs 正在开发新一代视线跟踪系统。 Prophesee 新型 GenX320 传感器能够以毫秒为时间单位,捕捉眼睛和注视动作的变化。相比传统的基于视频的视线跟踪模式,使用 GenX320 传感器,Zinn Labs 能够以更小的功率及计算量来跟踪眼睛的特征变化(视线追踪系统的功率低于 20 mW)。此外,由于新款传感器的封装尺寸更小,使得事件视觉传感器能够首次应用于空间有限的 AR/VR 头显设备中。Zinn Labs 很高兴能与 Prophesee 合作,我们正在将 GenX320 传感器集成到即将推出的客户项目中。

 

Kevin Boyle

Zinn Labs 创始人兼首席执行官

 

YunX 

“YunX 是一家致力于物联网技术与医疗应用的企业。随着全球人口老龄化现象日益加剧和医疗科技的快速发展,照护市场迎来前所未有的机遇。如何在注重隐私保护的同时实时提供对人体更精准、更可靠的 AI 监测分析,成为当前的最主要的挑战。基于 Prophesee 所开发的事件传感 EVS  Metavision影像技术,YunX 为这一市场提供了两种需求兼顾的理想方案,并在其高阶产品中已得到功能验证。全新面市的第五代 GenX320 传感器在紧凑性、低功耗和边缘 AI 能力及降低成本方面实现了重大突破,同时通过算法革新在性能上也保持了巨大的优势。

 

鲍柏君

YunX 首席执行长

 

XPERI

每当将视觉技术应用于驾驶员监控解决方案(DMS)和电视服务等产品中时,隐私总是消费者最关心的问题之一。通过 Prophesee Metavision 事件视觉技术,我们无需对场景进行明确的视觉表征即可理解场景,将我们的隐私设计 (PbD)”原则提升至更安全的水平。只需捕获每个像素的变化,无需像传统图像传感器那样捕获整个场景,我们的算法可通过捕获的内容来感知到场景中的细节,不用再对其进行详细表征。我们还开发了一个概念验证演示,证明使用神经拟态传感器完全可以实现驾驶员监控解决方案。使用 1MP 神经拟态传感器,我们可以推断出与基于主动 NIR 照明 2MP 视觉传感器的解决方案类似的性能。未来,我们将重点关注GenX320 神经形态传感器,它适用于隐私敏感智能设备,将帮助我们进一步提升用户体验。

 

Petronel Bigioi

XPERI 首席技术官

 

ULTRALEAP

通过在 Ultra Leap TouchFree 应用中的高精度手势识别和手部跟踪功能,我们看到了 Prophesee 事件视觉传感器在实现无接触交互方面的优势。Prophesee 事件视觉传感器能够在极具挑战性的环境条件下,以极为高效的能耗水平和低系统延迟运行,从而增强我们无接触用户界面(UI)的整体用户体验和直观性。随着新款 Genx320 传感器的推出,将有更多的应用和设备,包括电池供电的小型系统以及不断增加的无接触式用例,都将受益于事件视觉传感器的稳健性、低功耗、低延迟以及高动态范围的优势,进一步提升各类数字内容交互的便利性和易用性。

 

Tom Carter

ULTRALEAP 联合创始人兼首席执行官


  1. EETOP 官方微信

  2. 创芯大讲堂 在线教育

  3. 创芯老字号 半导体快讯

相关文章

全部评论

@2003-2024 EETOP