[发明专利]虚拟化图像信号处理器

说明书

相关申请的交叉引用

本申请要求于2012年5月15日提交的、申请号为61/647,433的美国临时专利申请案的益处和优先权，其全部内容通过引用并入本文用于所有目的。

背景技术

数字相机使用各种图像传感器（CCD，CMOS等）来将通过光学部件（例如镜头）所接收的光转化为电信号。之后通过机上（on-camera）处理管线发送电信号以最终生成存储在相机上的可交换格式图像。图像可以显示在相机的显示屏上，并且图像可以手动转移到另一设备，诸如台式计算机、笔记本、手写板或其他计算设备。可交换格式图像是可以在计算设备之间共享的与设备无关的格式，诸如JPEG、GIF等。处理管线包括在相机内主要以硬件实现的图像信号处理器（ISP）。专用硬件实现方案是由于ISP中的处理操作的高计算强度，并且使得高质量可交换格式图像能够较快生成。机上处理操作可以包括范围校正、缺陷像素校正（DPC）、镜头阴影校正、去马赛克等等。

发明人已经意识到以上讨论的典型板载ISP的数个缺点。例如，经由硬件部件来实现ISP降低ISP的适应性并且抑制性能升级和处理操作改良。此外，可能花费相当大量的时间来开发用于板载ISP的经改进硬件，这延长用于迭代改良的持续时间并且增加新创新到达市场花费的时间。此外，以在采取曝光之后的少量延迟和少量能力代价将图像显示在相机上是可取的。另一方面，生成高质量图像也是可取的，这可以增加板载系统的复杂性并且消耗更多能力。前述目标（即，延迟、能力代价以及图像质量）通常是不一致的。因此，经由机上ISP来生成图像可以包含在延迟、能力代价以及图像质量之间的权衡。

附图说明

图1和图2显示了数字摄影系统的示意性描绘。

图3显示了包括在图1和图2所示的数字摄影系统中的处理操作管线的示例；以及

图4A-4B显示了用于数字摄影系统中进行图像处理的方法。

具体实施方式

本文描述了用于自动将特定于相机的图像源数据转移到机外（off-camera）图像信号处理器（ISP）用于处理的数字摄影系统。对远程资源的卸载处理在ISP中提供更大的灵活性并且使能对更大量的计算能力的驾驭用于图像处理。结果，与经由机上ISP可以获得的图像质量相比，当利用机外ISP时增加了经处理图像的图像质量。此外，当使用机外ISP时，处理操作可以基于从相机、从工厂所接收的数据（例如，元数据）而被更新、调整，和/或基于用户的偏爱而被调整，以进一步增强图像质量。此外，机外ISP可以生成并发送入境控制信号给数字相机来改进图像质量和总体相机性能。

图1和图2是显示了采用自动化远程ISP处理的数字摄影系统的各方面的示意性描绘。图3显示了可由包括在图1和图2所示的数字摄影系统中的机上ISP和机外ISP这二者所执行的多个处理操作。图4A-4B显示了用于数字摄影系统中进行图像处理的方法。

图1描绘了数字摄影系统10，该数字摄影系统10配置为除了其他方面以外，从通过数字相机12所采取的曝光来生成数字图像。数字摄影系统10包括与包括机外ISP 16的机外处理子系统14电通信的数字相机12。将予以理解的是，在一些实施例中，数字相机12可以位于机外处理子系统14的远程。诸如因特网的网络可以促进在数字相机12和机外处理子系统14之间的电通信。这样，可以通过云计算平台访问机外ISP 16，这增加了ISP的可访问性。因此，可以经由数字相机在数字相机12具有到因特网的连通性的任何位置访问机外ISP 16。

通信模块18，其包括在数字相机12中并配置为提供无线连通性到机外处理子系统14并且特别是机外ISP 16。将予以理解的是，通过一个或多个合适的通信平台，诸如移动通信网络（例如，3G、4G等）、蓝牙、Wi-Fi等，可以实现无线连通性。进一步在一些示例中，通信模块18可以包括应用编程接口（API）。机外处理子系统14还可包括通信模块20以使能电通信。然而，在其他实施例中，机外处理子系统14的电通信功能性可以集成到机外ISP 16内。