Prophesee：基于EVS打造机器视觉新范式-德赢Vwin官网网

电子发烧友网报道（文/吴子鹏）机器视觉起源于20世纪50年代。近几年，随着边缘智能需求爆发，机器视觉发展换挡提速。根据前瞻产业研究院的统计数据，2023年全球机器视觉市场规模约为130亿美元，预计2024-2029年将以20%左右的年复合增长率高速增长，到2029年市场规模达到近400亿美元。

在机器视觉应用快速增长的过程中，传统基于CMOS传感器、CCD传感器或RGBD的相机，在捕捉场景中的运动变化，以及无“事件”发生时的功耗等方面遇到了一定的瓶颈，EVS（基于事件的视觉传感器）成为打造机器视觉应用的新选择。

在2024中国（上海）机器视觉展暨机器视觉技术及工业应用研讨会（VisionChina（上海）2024）上，Prophesee销售总监高喆敏在接受德赢Vwin官网网记者采访时表示，传统相机有一个重要指标是帧率，也就是通过每秒捕捉一些静止帧来表现运动，并不具备动态捕获的能力，由于传统相机受限于曝光时间，所以无法捕捉每一帧之间的信息的，这与人眼的工作原理是完全不同的。EVS则是vwin 人眼感知光的原理，我们设计了像视网膜感光细胞一样工作的像素，EVS中所有的像素都是独立和异步的，所以它们只会在场景发生变化时做出反应，上报事件即event。这样的工作原理让它兼具：超高速、小数据量、低功耗等优势。

高喆敏强调，在EVS相机中，每个像素只在感觉到运动时才被触发，且每一个像素都是完全独立的。当像素捕捉光的亮度超过阈值后就会被检测为事件，然后输出事件像素的坐标、时间和极性信息。和传统相机相比，EVS相机能够捕获的信息不会逐帧到达，也就不存在帧与帧之间的损失。由于EVS的像素不是同步而是异步的，因此时间域上是非常稠密的，Prophesee已经量产的传感器芯片可以等效每秒10000帧的传统传感器。并且，每个像素只有在被触发时才会记录，数据量是非常小的，并不需要很高的处理器性能和传输带宽，功耗低是EVS天然的优势。

在VisionChina（上海）2024上，Prophesee展示了多款基于EVS相机的demo，包括颗粒检测、振动监测、运动捕捉，以及采用ST MCU和AMD芯片打造的高级应用。

基于EVS的振动监测

Prophesee演示了基于EVS相机的振动监测应用。传感器可以监测马达和电刷的振动，打造一个非接触式的解决方案。然后通过软件界面上的数据，就可以准确获取到电机系统每一个部分的振动情况，当检测到振动数值超出设定数值后，系统就会报警。在演示案例中，Prophesee的方案能够覆盖1Hz到kHz范围的振动范围，提供1个像素的精度。

高喆敏谈到，由于EVS相机在时间域上是非常稠密的，通过跟踪场景中每个像素的时间演变，能够连续远程监控振动频率，具有像素精度。因此，EVS相机在工业设备检测上不会丢失关键信息，这是一个非常大的优势，有助于实现更好的设备维护。

基于EVS的运动检测

Prophesee还演示了基于EVS相机的运动检测应用。通过XYT查看器可视化事件数据，揭露物体在时间和空间上连续变化的信息。如上所述，在这个应用中，EVS相机可以揭示帧与帧之间的不可见内容，并且可以放大时间，了解场景中的细微运动。

针对运动检测应用，高喆敏说，EVS在捕获运动信息时，不会呈现传统相机提供的色彩、纹理和灰度值等信息，只能看到物理运动的边缘信息，这个边缘信息在时间戳上是非常稠密的。之所以能够做到这样连续的边缘信息输出，得益于EVS另一个显著的特征：快，通过快速捕获动态信息的变化，克服了传统相机在拍摄高速运动物体时掉帧的问题。

基于第三方计算芯片打造的高级功能

Prophesee也展示了基于第三方计算芯片打造的高级功能。比如，在基于成本优化的MCU平台上演示数据流、以及端到端延迟事件处理实验。这个demo选择的就是市面上非常常见的ST MCU。

基于ST MCU的demo演示专为嵌入式应用设计，提供320×320 像素采用1/5光学格式，像素延迟@1k lux <150μs，动态范围为>120 dB。这个demo的典型应用场景包括：

·AR/VR/XR和可穿戴设备
·眼动追踪
·手势识别
·IoT和智能家居
·边缘AI 算法和机器学习
·Always on cameras
·医疗健康（保护隐私）摄像头

高喆敏表示，在这个demo里Prophesee的EVS传感器提供超低功耗模式，相关应用的能效表现会非常好。在方案设计上，EVS相机不需要传统相机所需的ISP模块，能够进一步降低方案成本。

另一款demo是Prophesee携手AMD推出的业界首款兼容 Kria™ KV260视觉AI入门套件的事件视觉解决方案，专为高级视觉应用开发而构建，无需开发者拥有复杂的硬件设计知识或 FPGA 编程技能。

该套件中包含一款突破性的即插即用主动光通信（Ac tive Markers Tracking）应用程序，支持>1,000Hz的3D位姿估算（3D pose estimation），能够在像素级别上完全消除背景干扰，同时在复杂的照明条件下提供极高的鲁棒性。该款应用程序展现了Prophesee Metavision 事件视觉技术的独特功能，为实现一系列全新的超高速跟踪用例提供了助力，如游戏控制器跟踪、建筑工地安全、重载防摇摆系统等。

产品迭代和资源支持

在产品迭代上，目前Prophesee已经发布第五代EVS传感器。第四代产品的空间分辨率是1280×720，是一个百万像素级的产品。第五代产品的空间分辨率是320×320，是一个十万级像素的产品。两者之间的目标应用有明显的差异。同时，为了进一步体现低功耗的属性，第五代EVS传感器提供超低功耗的模式，可以分区感受环境的变化，打造目前热门的“always on”应用。高喆敏称，在超低功耗模式下，Prophesee第五代EVS传感器的功耗是微瓦级的。

为了帮助开发人员更好地运用EVS相机打造机器视觉应用，Prophesee不仅是提供传感器，也提供配套的开发资源，包括开发板和SDK等。同时，Prophesee也在积极筹建和运营EVS技术社群，让更多开发人员了解和参与到EVS相机的生态建设中。

结语

EVS相机的出现，解决了传统相机每一帧捕获的信息并不存在动态信息，且每一帧之间的信息无法被捕捉的痛点，以模仿人眼的机制构建了一个机器视觉的新范式。EVS相机不仅能够连续捕捉动态信息，且天然具有低功耗的特性，加上非常小的数据量传输，能够显著降低机器视觉的硬件门槛，让更多应用受益于这项先进的技术。

声明：本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人，不代表德赢Vwin官网网立场。文章及其配图仅供工程师学习之用，如有内容侵权或者其他违规问题，请联系本站处理。举报投诉

机器视觉

机器视觉

+关注

关注
161

文章
4369

浏览量
120277

适用于机器视觉应用的智能机器视觉控制平台

工控机在机器视觉系统设计中是不可或缺的核心组件，在机器视觉中发挥着至关重要的作用，其强大的计算能力、高度的稳定性和可靠性、实时性以及图像处理和识别能力，为

发表于 11-23 01:08 •159次阅读

适用于<b class='flag-5'>机器</b><b class='flag-5'>视觉</b>应用的智能<b class='flag-5'>机器</b><b class='flag-5'>视觉</b>控制平台

什么是机器视觉opencv?它有哪些优势?

机器视觉（Machine Vision）是一种利用计算机和图像处理技术来模拟人类视觉系统的功能，实现对图像的识别、分析和理解的技术。OpenCV（Open Source Computer

发表于 07-16 10:33 •757次阅读

机器视觉的应用实例解析

机器视觉是一种利用计算机视觉技术对图像进行处理、分析和理解的技术。它在许多领域都有广泛的应用，包括工业自动化、医疗诊断、交通监控、安全监控等。一、引言机器

发表于 07-16 10:19 •445次阅读

机器视觉光源的选择和应用有哪些

机器视觉光源是机器视觉系统中的重要组成部分，它对图像的质量和机器视觉系统的性能有着至关重要的影响

发表于 07-04 11:36 •830次阅读

机器视觉的应用流程是如何实现的

机器视觉是一种利用计算机和图像处理技术，模拟人类视觉系统对图像进行处理、分析和理解的技术。它在工业自动化、智能交通、医疗诊断、安防监控等领域有着广泛的应用。在机器

发表于 07-04 10:47 •407次阅读

机器视觉控制的优缺点有哪些

机器视觉控制是一种利用计算机视觉技术对机器进行控制的方法，它在工业自动化、机器人技术、智能交通等领域得到了广泛应用。然而，

发表于 07-04 10:43 •715次阅读

机器视觉控制轴运动原理是什么

机器视觉控制轴运动原理是一个复杂而深入的主题。下面将从以下几个方面进行介绍：机器视觉概述机器视觉

发表于 07-04 10:42 •534次阅读

机器视觉控制器哪种好

机器视觉控制器是机器视觉系统中的核心部件，负责图像的采集、处理和分析。随着工业自动化和智能制造的快速发展，机器

发表于 07-04 10:35 •525次阅读

PROPHESEE携手Ultraleap与雷鸟创新开发用于AR眼镜的创新技术

推动AR体验迈向全新高度。此次合作将结合Prophesee领先的事件视觉传感技术、Ultraleap在手势识别技术方面的专长，以及雷鸟创新在消费级AR硬件和软件开发方面的专业技术积淀，共同打造兼具前沿互动性和沉浸感的AR眼镜。

发表于 06-20 10:07 •205次阅读

Prophesee与AMD携手，加速边缘机器视觉应用

领先的神经拟态视觉传感公司Prophesee近日宣布，其Metavision® HD事件视觉传感器与AI算法已成功适配AMD Kria™ KV260视觉AI入门套件。这一强强联合标志着

发表于 06-05 14:26 •514次阅读

PROPHESEE 携手 AMD，推出业界首款兼容 Kria™ KV260 视觉 AI 入门套件的事件视觉解决方案

基于 Prophesee Metavision® 事件视觉传感器和 AI算法在性能、功耗及速度上的优势，开发人员现可打造支持 AMD 平台的全新一代边缘 AI 机器

发表于 05-30 10:41 •960次阅读

PROPHESEE Metavision® 智能手机影像去模糊解决方案可投入量产，针对第三代骁龙 8 移动平台全面优化

月 27 日，中国上海——领先的神经拟态视觉传感公司 Prophesee 今日宣布，与高通技术公司的合作进入可量产阶段。在巴塞罗那世界移动通信大会（MWC）期间，Prophesee 展示了其解决方案与骁龙®旗舰移动平台的原生兼

发表于 02-27 17:06 •354次阅读

Zinn Labs 推出基于 PROPHESEE事件视觉传感器的视线跟踪系统，为 AI 智能镜框和 VR/MR 系统赋能

结合 Prophesee 超低功耗、低延迟的事件视觉传感器，该款突破性的视线跟踪系统将助力带来直观、无缝流畅的新用户体验 Zinn Labs 宣布推出业内首款基于事件的视线

发表于 02-07 13:53 •643次阅读

机器视觉软件有哪些机器视觉软件的优点

机器视觉软件是一种利用计算机视觉技术来模拟和弥补人眼视觉功能的软件系统。它可以通过对图像和视频进行分析，识别和理解目标物体，以实现自动化和智能化的任务。

发表于 02-02 10:53 •1531次阅读

机器视觉的应用场景总结

机器视觉是人工智能正在快速发展的一个分支，目前中国已是继美国、日本之后的第三大机器视觉领域应用市场。本文将对机器

发表于 12-26 10:57 •742次阅读