PROPHESEE 发布全新事件视觉传感器，超低功耗、极小尺寸让消费类智能设备更自主、更安全

2023年10月20日，中国上海——领先的神经拟态视觉传感公司普诺飞思（Prophesee）今日宣布，推出业界首款专为超低功耗边缘视觉设备集成设计的 Metavision^® 事件视觉传感器 GenX320。该新品为Prophesee第五代Metavision 传感器产品，采用尺寸为 3x4mm 的裸片。GenX320的推出将 Prophesee开创性的事件视觉技术平台的应用范围拓宽，扩展至快速增长的边缘市场领域，覆盖 AR/VR 设备、可穿戴设备、游戏、机器人、笔记本和平板电脑、物联网设备等。
 
 
Prophesee Metavision^® 事件视觉传感器 GenX320裸片尺寸
 
Prophesee 联合创始人兼首席执行官 Luca Verre 表示：“事件视觉传感器具备卓越的性能及能效，非常适合低功耗边缘人工智能市场各式各样的应用。基于在其它应用领域取得商业成功，我们开发了这款全新的 Metavision 事件视觉传感器，专门满足边缘系统开发人员的需求。该款传感器易于集成、配置和优化，适用于运动和物体检测、存在感知、手势识别、眼动追踪，以及其它高增长市场的多种用例。”
 
基于 Prophesee 丰富经验和多年的技术积淀，GenX320 事件视觉传感器能够为各种应用带来速度、低延迟、动态范围和能效方面的优势。GenX320 事件视觉传感器采用 BSI 堆栈式技术，像素尺寸为 320x320 6.3μm，采用微型的 1/5” 光学格式，因此，在能源、计算和尺寸都受制约的嵌入式边缘视觉系统中，GenX320 事件视觉传感器正契合其对于高效集成事件视觉传感的技术要求。即使在极具挑战性的操作和照明条件下，GenX320 仍能以超低功耗提供稳定、高速的视觉感知。
 
GenX320 带来的优势包括：
• 低延迟的事件时间戳，分辨率为微秒，且数据格式灵活。
• 片上智能电源管理模式，可将功耗降至 36uW，并支持智能唤醒事件，同时支持深度睡眠和待机模式。
• 与标准 SoC 轻松集成/连接，具备多个集成事件数据预处理、过滤和格式化功能，可最大程度地减少外部处理开销。
• MIPI 或 CPI 数据输出接口为嵌入式处理平台（包括低功耗微控制器和现代神经拟态处理器架构）提供低延迟连接。
• AI-ready：片上直方图输出可兼容多个 AI 加速器。
• 传感器级别隐私保护：得益于事件传感器固有的稀疏无框事件数据，以及静态场景去除功能，能够从传感器层面保护隐私。
• 与 Prophesee Metavision Intelligence 原生兼容，Metavision Intelligence 是当前业界最全面的免费事件视觉软件套件，目前在全球拥有超过 10,000 名用户。
 
潜在应用场景
• 用于 AR/VR/XR 头显中的注视点渲染或无缝交互的高速眼动追踪
• 消费电子设备（电视、PC、游戏机、智能家居等）中低延迟、无接触的人机交互界面
• 物联网摄像头中的智能存在检测和人数统计
• 超低功耗 always-on 区域监控系统
• 家庭及医疗设备中检测跌倒的摄像头
 
 
Prophesee Metavision事件视觉传感器 GenX320, 专为超低功耗边缘视觉设备开发设计
 
商业可用
GenX320 现可从 Prophesee 及其销售合作伙伴处购买。GenX320 配套一整套开发工具，包括装有板载芯片 (COB) GenX320 模组或紧凑型光学柔性模组的综合评估套件 (Evaluation Kit)，可帮助开发人员轻松探索和开展优化工作。此外，Prophesee 还提供一系列适配器套件，可无缝连接到各种嵌入式平台（例如 STM32 MCU），从而缩短产品上市时间（Time-to-Market）。
 
合作客户
 
Zinn Labs
“基于 Prophesee Metavision 事件传感器的独特功能，Zinn Labs 正在开发新一代视线跟踪系统。 Prophesee 新型 GenX320 传感器能够以毫秒为时间单位，捕捉眼睛和注视动作的变化。相比传统的基于视频的视线跟踪模式，使用 GenX320 传感器，Zinn Labs 能够以更小的功率及计算量来跟踪眼睛的特征变化（视线追踪系统的功率低于 20 mW）。此外，由于新款传感器的封装尺寸更小，使得事件视觉传感器能够首次应用于空间有限的 AR/VR 头显设备中。Zinn Labs 很高兴能与 Prophesee 合作，我们正在将 GenX320 传感器集成到即将推出的客户项目中。”
 
Kevin Boyle
Zinn Labs 创始人兼首席执行官
 
YunX 
“YunX 是一家致力于物联网技术与医疗应用的企业。随着全球人口老龄化现象日益加剧和医疗科技的快速发展，照护市场迎来前所未有的机遇。如何在注重隐私保护的同时实时提供对人体更精准、更可靠的 AI 监测分析，成为当前的最主要的挑战。基于 Prophesee 所开发的事件传感 EVS 的 Metavision影像技术，YunX 为这一市场提供了两种需求兼顾的理想方案，并在其高阶产品中已得到功能验证。全新面市的第五代 GenX320 传感器在紧凑性、低功耗和边缘 AI 能力及降低成本方面实现了重大突破，同时通过算法革新在性能上也保持了巨大的优势。”
 
鲍柏君
YunX 首席执行长
 
XPERI
“每当将视觉技术应用于驾驶员监控解决方案（DMS）和电视服务等产品中时，隐私总是消费者最关心的问题之一。通过 Prophesee Metavision 事件视觉技术，我们无需对场景进行明确的视觉表征即可理解场景，将我们的“隐私设计 (PbD)”原则提升至更安全的水平。只需捕获每个像素的变化，无需像传统图像传感器那样捕获整个场景，我们的算法可通过捕获的内容来感知到场景中的细节，不用再对其进行详细表征。我们还开发了一个概念验证演示，证明使用神经拟态传感器完全可以实现驾驶员监控解决方案。使用 1MP 神经拟态传感器，我们可以推断出与基于主动 NIR 照明 2MP 视觉传感器的解决方案类似的性能。未来，我们将重点关注GenX320 神经形态传感器，它适用于隐私敏感的智能设备，将帮助我们进一步提升用户体验。”
 
Petronel Bigioi
XPERI 首席技术官
 
ULTRALEAP
“通过在 Ultra Leap 的 TouchFree 应用中的高精度手势识别和手部跟踪功能，我们看到了 Prophesee 事件视觉传感器在实现无接触交互方面的优势。Prophesee 事件视觉传感器能够在极具挑战性的环境条件下，以极为高效的能耗水平和低系统延迟运行，从而增强我们无接触用户界面（UI）的整体用户体验和直观性。随着新款 Genx320 传感器的推出，将有更多的应用和设备，包括电池供电的小型系统以及不断增加的无接触式用例，都将受益于事件视觉传感器的稳健性、低功耗、低延迟以及高动态范围的优势，进一步提升各类数字内容交互的便利性和易用性。”
 
Tom Carter
ULTRALEAP 联合创始人兼首席执行官