[发明专利]流水线化的图像处理序列发生器

说明书

背景技术

本公开一般涉及执行用于图像处理和分析的处理任务。

发明内容

分析涉及处理图像或由图像帧组成的视频序列以获得关于描绘对象的信息。视频分析通常用于多种应用中，举几个例子来说，所述多种应用包括监视、面部识别和视频搜索。

视频分析应用趋向于计算密集型和存储密集型，并且在一些情况下，将两种固定功能的硬件块与软件组件相组合。典型地，通用的功能可以被多次执行，举几个例子来说，所述通用的功能包括像计算阈值、快速傅里叶变换、直方图或空间卷积的项目。

图像处理包括对来自照相机、扫描仪的图片和已有的图像或视频文件的分析以及增强和调整。

附图说明

针对以下诸图描述了一些实施例：

图1是本发明的一个实施例的示意性描绘；

图2是一个实施例的流程图；

图3是针对一个实施例的系统描绘；以及

图4是采用移动设备形式的实施例的描绘。

具体实施方式

根据一些实施例，可以向由顺序地执行的过程单元组成的执行序列分配用于图像处理的可重用的、可重新配置的、专用功能的过程单元。可以在任何给定的执行序列中重新配置任何给定的过程单元以便满足序列性能度量。多个序列可以随后并行地运行。

如本文所使用的，“过程单元”可以是执行特定计算任务的软件或硬件模块。在视频分析应用中的过程单元的例子包括快速傅里叶变换、阈值、形态学、直方图、空间卷积、色度学、查找表、格式转换、模板匹配、可编程的单指令多数据、形状因素、场景统计和三维线框网格。

执行序列是串行地执行的过程单元链。

过程单元可以是可重用的，因为所述单元是专用于特定功能，并且可以在一个或多个执行序列中在不同时间或并行地被重新使用。过程单元可以是可重新配置的，因为它们可以在运行时间被调整以实现特定的操作状况或设计约束。具体地说，可以重新配置任何给定的过程单元以满足与其当前被放置的特定序列相关联的性能度量。

举些性能度量的例子，给定的序列可以具有功耗或功率预算目标。可以只是为了该特定序列的目的而修改在该序列内特定的过程单元的操作，以便满足性能度量。

举另一个例子，可以修改个别的过程单元的性能以便改善序列的速度。例如，可以增加或减少存储器访问的带宽以便改善性能或调节功耗。

举另一个例子，可以改变任何给定的过程单元的特性或操作以实现期望的操作温度范围。例如，可以在特定的序列中修改基于硬件的过程单元的电压或频率以便满足温度限制。

举另一个例子，可以修改给定过程单元操作的速度(例如每秒的操作次数)以实现性能、速度或功耗目标。

举另一个例子，可以修改在执行序列内任何给定的过程单元或整个序列的优先级以便满足序列级别目标(例如操作速度)。具体地说，可以改变过程单元或序列的存储器访问优先级以实现性能度量。

参考图1，流水线分析序列发生器10可以包括：多个可重用的、可重新配置的、专用功能的过程单元12，其形成一个或多个序列；以及划分优先级的总线仲裁器14。此外，序列发生器10可以包括若干个流水线控制器16，在一个实施例中流水线控制器16可以是单独的硬件控制器。流水线化的分析序列发生器10可以通过总线与存储器18通信，存储器18由若干个可寻址的缓冲器20组成。在实施例中，序列发生器可以实现为使用通用计算机的一个或多个软件进程或任务，使得无论是使用软件、硬件或两者的组合，功能是相同的。

因此，过程单元12中的每一个可以是完成特定专用功能的硬件或软件模块。此外，它可以一次在一个以上执行序列中被重新使用，以及可以将其操作特性调整为满足特定的序列操作目标。

在一些实施例中，每个序列可以由受流水线控制器16控制的一个或多个过程单元组成。因此，如图1中所示出的，举一个实施例，流水线控制器16控制由快速傅里叶变换单元12组成的单个单元12序列。类似地，流水线控制器16a可以包括：三个过程单元12，其包括快速傅里叶变换过程单元12。在一些情况下，流水线控制器16和流水线控制器16a可以执行并行地运行的序列，即使它们使用一些相同的过程单元12。为了该目的，划分优先级的总线仲裁器14对针对由一个以上的并发地操作的序列使用的过程单元和存储器位置的争议和竞争进行仲裁。