去年,总部位于巴黎的Prophesee公司展示了其自主研发的面向事件的Metavision传感器技术,为智能手机摄像头带来了轰动。该技术的核心理念是消除模糊图像,展示了在开发阶段取得的一些令人印象深刻的成果。
在2024年的MWC上,Prophesee与Qualcomm合作取得了又一重大突破。这家公司在神经形态视觉系统领域做了一些重要工作,宣布其Metavision传感器技术已经进入了量产阶段。
Prophesee告诉Digital Trends,他们已经与索尼合作开发了一款传感器,利用了Qualcomm顶级Snapdragon 8 Gen 3芯片提供的定制软件调校和强大性能。在基本层面上,Metavision传感器与图像传感器同步填补了微秒级的视觉数据差距,为在完全黑暗和极度明亮的情况下实现无模糊的图像打开了大门。
“Prophesee的专利Metavision传感器和人工智能模仿了人眼和大脑的工作方式。”公司表示。MetaVision传感器技术的事件驱动方法采用了动态模糊消除,以确保最终的结果不显示任何运动引起的模糊。
Prophesee如何致力于消除模糊照片
大多数智能手机摄像头,即使是顶级旗舰机型,也难以跟踪快速移动的物体,无法保持适当的焦点锁定。因此,图像不仅看起来格格不入,而且运动造成的伪影几乎使它们无用。
在挑战性光线条件下或夜间,动态模糊尤为明显,因为诸如多帧噪声降低等解决方案未能充分发挥其潜力。Prophesee声称在“快速移动和低光场景”中提供了“前所未有的”图片质量。
与普通的智能手机摄像头传感器不同,Metavision传感器以“永久曝光时间”的方式连续捕捉运动。“就像你的手机里有一台每秒10,000张图像的相机一样,”该公司声称。
除了提供与索尼共同开发的定制传感器外,Prophesee还同样重视软件堆栈和配套的集成服务。“Metavision去模糊软件现在已经进入量产阶段。我们正在将硬件和软件集成到手机中,”该公司告诉Digital Trends。
其目的是为智能手机行业的参与者提供无缝的体验,以便他们在各自的基于骁龙芯片驱动的设备上部署整个Metavision硬件和软件套件。值得注意的是,基准已经设定在顶级Snapdragon 8 Gen 3硅片上,显然是因为其原始性能、先进的ISP和下一代人工智能能力。
智能手机摄像头的激动人心的未来
Prophesee的解决方案已经在索尼IMX636移动摄像头传感器上完全实现。目前,该技术仅在手机的主摄像头上进行了测试。然而,该公司告诉Digital Trends,Metavision传感器的未来版本正在考虑支持多个传感器,包括超广角和长焦类型的传感器。
在其当前状态下,Prophesee的事件驱动传感器只能通过处理静态图像来实现消除模糊。但该公司告诉我们,对视频的支持也在未来的路线图上。
“这主要是一个视频感知平台 – 用于捕捉和处理各种用例中的运动,”Prophesee的一位发言人告诉Digital Trends。该公司并未具体说明我们何时会在市售智能手机上看到Metavision传感器的实际应用。但积极的一面是,由Qualcomm Snapdragon 8 Gen 3驱动的手机已经上市,而且随着Metavision组合现在已经进入量产阶段,等待时间应该不会太长。
根据Prophesee迄今展示的演示,如果Metavision传感器实现了这些承诺,它可能为智能手机摄影开启一个全新的篇章,普通用户不必费心调整快门速度和其他参数即可获得无模糊的图片。这是一个非常令人兴奋的未来展望。
本文来自投稿,不代表TePhone特锋手机网立场,如若转载,请注明出处:https://www.tephone.com/article/13823