CN1531332A - 图像处理装置、图像处理方法、以及图像处理程序 - Google Patents

Abstract

用简单的结构，降低画面的闪烁。图像处理装置100具有统计值计算部10、修正参数计算部20及图像修正部30。统计值计算部10生成统计值数据10A。修正参数计算部20使用根据场景切换的有无改变时间常数的低通滤波器，使统计值数据10A平滑化，生成修正参数。然后，根据修正参数生成查找表。

Description

图像处理装置、图像处理方法、以及图像处理程序

技术领域

本发明涉及对图像数据进行图像修正的图像处理装置、图像处理方法及图像处理程序。

背景技术

在图像处理中，有时统计地分析一画面的图像的性质，对图像数据进行对应于分析结果的图像修正处理。作为统计的分析方法，已知一种求灰度的频率分布(频率分布曲线，ヒストグラム)，根据频率分布曲线算出修正参数的方法。

可是，在动态图像的图像处理中，如果修正参数在帧之间变化大，则画面总体的对比度或亮度发生变化，图像的闪烁明显。另外，如果噪声等重叠在图像数据上，则图像的闪烁增大。为了消除这样的不良现象，在专利文献1中公开了这样一种技术：生成频率分布曲线时，通过使频率分布曲线分布的数据通过循环型滤波电路，使频率分布曲线分布变化的时间常数增大，抑制修正后的图像数据的波动。

[专利文献1]

特公平7-99862号公报(段落编号0018)

可是，由于生成成为统计值运算源的频率分布曲线时通过循环型滤波器，所以电路规模大，另外，处理需要花费时间。特别是在便携电话等便携电子设备的情况下，从装置的小型化及降低功耗等观点看，缩小电路规模及处理的高速化成为大问题。

发明内容

本发明就是鉴于上述的情况而完成的，将用简单的结构提供一种能降低画面的闪烁的图像处理装置、图像处理方法及图像处理程序作为解决课题。

为了解决上述课题，本发明的图像处理装置是一种对图像数据进行图像处理的装置，其特征在于具有：对上述图像数据进行统计处理，生成表示统计值的统计值数据的统计值计算单元；根据上述图像数据，检测场景切换的有无的场景检测单元；对多个帧的上述统计值数据进行对应于上述场景检测单元的检测结果的加权，计算修正参数的修正参数计算单元；以及根据上述修正参数，对上述图像数据进行图像修正处理的图像修正单元。

如果采用本发明，则在频率分布曲线或累积频率分布曲线的统计值的运算过程中，不进行平滑化处理，获得了统计值后，进行加权处理。在生成统计值的过程中，由于需要对像素单位的图像数据进行处理，所以运算电路规模增大，另外，处理负荷大。对此，在本发明中，获得了统计值后，进行加权，使修正参数平滑化，所以能使结构简单。另外，根据场景的切换的有无，能变更加权大小，所以能提高修正参数对图像变化的响应性，场景切换时能显示切换自然的图像。

这里，上述修正参数计算单元在由上述场景检测单元检测到了有场景切换的情况下，与没有场景切换的情况相比，最好通过使对过去的帧的统计值数据的加权小的计算，生成上述修正参数。在有场景切换的情况下，由于失去了统计值的连续性，所以通过使过去帧的统计值数据的加权小，能提高修正参数的响应性。

另外，上述修正参数计算单元在由上述场景检测单元检测到了没有场景切换的情况下，最好计算上述多个帧的统计值数据的平均值，生成上述修正参数。在此情况下，由于能除去图像数据中包含的噪声分量等的影响，所以能有效地防止画面的闪烁。

另外，上述修正参数计算单元在由上述场景检测单元检测到了有场景切换的情况下，最好生成当前帧的统计值数据作为上述修正参数。这样，能提高响应性。

另外，上述修正参数计算单元在由上述场景检测单元检测到了没有场景切换的情况下，假设当前帧的统计值数据为S(n)，一帧前的修正参数为P(n-1)，第一系数为A，第二系数为B时，最好按照P(n)＝A*S(n)+B*P(n-1)，1＝A+B，计算当前帧的修正参数P(n)。

在此情况下，能由循环型的低通滤波器生成修正参数。

这里，上述修正参数计算单元在由上述场景检测单元检测到了有场景切换的情况下，最好使A＝1，而且使B＝0。这样，修正参数能够完全排除场景切换前的统计值的影响。

另外，上述修正参数计算单元检测上述图像数据的帧速率，最好对多个帧的上述统计值数据进行对应于检测到的帧速率及上述场景检测单元的检测结果的加权，计算修正参数。在此情况下，能够在能确定修正参数时考虑帧速率，所以能根据帧的疏密进行适当的图像修正。

其次，本发明的图像处理方法是一种对图像数据进行图像处理的方法，其特征在于包括：对上述图像数据进行统计处理，生成表示统计值的统计值数据的步骤；根据上述图像数据，检测场景切换的有无的步骤；对多个帧的上述统计值数据进行对应于场景检测结果的加权，计算修正参数的步骤；以及根据上述修正参数，对上述图像数据进行图像修正处理的步骤。如果采用本发明，则由于获得了统计值后进行加权，使修正参数平滑化，所以能使结构简单。

这里，计算上述修正参数的步骤在检测到了有场景切换的情况下，与没有场景切换的情况相比，最好通过使对过去的帧的统计值数据的加权小的计算，生成上述修正参数。这样，能提高修正参数对图像变化的响应性，场景切换时能显示切转自然的图像。

另外，本发明的图像处理程序是一种对图像数据进行图像处理的程序，其特征在于，使计算机具有作为下列单元的功能：对上述图像数据进行统计处理，生成表示统计值的统计值数据的统计值计算单元；根据上述图像数据，检测场景切换的有无的场景检测单元；对多个帧的上述统计值数据进行对应于上述场景检测单元的检测结果的加权，计算修正参数的修正参数计算单元；以及根据上述修正参数，对上述图像数据进行图像修正处理的图像修正单元。如果采用本发明，则在获得了统计值后进行加权，使修正参数平滑，所以能大幅度减轻处理负荷。

附图说明

图1是表示本发明的第一实施方式的图像处理装置的结构的框图。

图2是用于说明统计计算处理的概要的说明图。

图3是表示修正参数计算部20的结构的框图。

图4是用于说明第一循环型滤波器F1的工作的说明图。

图5是用于说明基于统计值数据10A的图像修正处理的说明图。

图6是表示该实施方式中用的查找表LUT的存储内容之一例的曲线图。

图7是表示本发明的第二实施方式中用的修正参数计算部20’的结构的框图。

图8是表示变形例的图像处理装置中帧速率和第一系数A及第二系数B的关系的说明图。

符号说明

10统计值计算部，10A统计值数据(统计值)，

20、20’修正参数计算部，30图像修正部，100图像处理装置，

GDin输入图像数据，GDout输出图像数据，

Rmax基准最大值，Rmin基准最小值，P修正参数，SE检测信号

具体实施方式

以下，参照附图说明本发明的图像处理装置的一个实施方式。图1是表示本发明的第一实施方式的图像处理装置的结构的框图。输入图像数据GDin被供给图像处理装置100。输入图像数据GDin表示在构成一个画面的各像素中应显示的灰度值。另外，该例的输入图像数据GDin是每一像素8位的动态图像数据。因此，输入图像数据GDin是表示256灰度的数据，其最小值为“0”，最大值为“255”。图像处理装置100对输入图像数据GDin进行统计处理，生成统计值，并且，利用统计值对输入图像数据GDin进行修正处理，生成输出图像数据Gdout。

图像处理装置100具有统计值计算部10、修正参数计算部20、以及图像修正部30。首先，统计值计算部10对输入图像数据GDin进行规定的统计计算处理生成统计值数据10A。参照图2，说明统计计算处理的概要。在统计计算处理中，对于从最小值“0”到第一灰度值D1的第一范围T1、以及从最大值“255”到第二灰度值D2的第二范围T2，沿双向直接生成累积频率分布曲线HG1及HG2，特定所生成的累积频率分布曲线HG1及HG2的频率达到了预定的基准值REF的点作为基准最小值Rmin及基准最大值Rmax，生成表示它们的统计值数据10A。另外，第二灰度值D2比第一灰度值D1大。

累积频率分布曲线表示对每一阶段(每级)沿一定的方向(从最小值到最大值的方向，或者从最大值到最小值的方向)累计了频率分布曲线的频率后的频率。

阶段(级)的宽度虽然能任意地设定，但该例的阶段的宽度为1灰度。另外，在该例中，同时生成两种累积频率分布曲线。即，生成从最小值到第一灰度值D1的累积频率分布曲线HG1、以及从最大值到第二灰度值D2的累积频率分布曲线HG2。

其次，修正参数计算部20根据统计值数据10A，生成查找表LUT。在查找表LUT中对应地存储着输入图像数据GDin的各灰度值和修正后的各灰度值，该存储内容根据统计值数据10A进行变更。图像修正部30参照查找表LUT，生成输出图像数据GDout。具体地说，读出输入图像数据GDin的灰度值作为地址，访问查找表LUT，将从查找表LUT读出的灰度值作为输出图像数据GDout输出。

图3中示出了修正参数计算部20的详细结构。修正参数计算部20具有场景检测部21、计算部22、LUT生成部23、以及查找表LUT。

场景检测部21根据输入图像数据GDin，检测帧之间的场景切换，在有场景切换的情况下，生成呈高电平的检测信号SE，在没有场景切换的情况下，生成呈低电平的检测信号SE。虽然能根据帧之间的图像的相关性检测场景的切换，但例如也能这样检测：计算当前的帧的平均亮度和一帧前的平均亮度的差分，在差分值上升到预先规定的基准值以上的情况下，检测结果为有场景的切换，在差分值在基准值以下的情况下，检测结果为没有场景的切换。另外，除了平均亮度以外，也可以根据某些统计值检测场景切换的有无。

计算部22具有第一循环型滤波器F1及第二循环型滤波器F2。这些滤波器F1及F2具有作为低通滤波器的作用，抑制基准最小值Rmin及基准最大值Rmax的急剧变化，生成修正参数P。第一循环型滤波器F1具有第一系数器221、第二系数器222、加法器223、以及存储器224。另外，第二循环型滤波器F2与第一循环型滤波器F1同样构成，省略说明。

第一系数器221具有乘法电路，将基准最小值Rmin和第一系数A相乘，将乘得的结果输出给加法器223。第二系数器222具有乘法电路，将一帧前的修正参数P(n-1)和第二系数B相乘，将乘得的结果输出给加法器223。加法器223将第一系数器221及第二系数器222的输出信号相加，生成修正参数P(n)。存储器224具有作为一帧的延迟单元的作用，存储修正参数P(n)，在下一帧时输出。因此，从存储器224输出一帧前的修正参数P(n-1)。

在以上的结构中，用以下形式给出当前帧的修正参数P(n)。

P(n)＝A*S(n)+B*P(n-1)，1＝A+B

但，当前帧的基准最小值Rmin为S(n)，一帧前的修正参数为P(n-1)。

根据检测信号SE，选择各第一系数A及第二系数B的值。例如，在检测信号SE呈低电平(没有场景切换)的情况下，可以使A＝B＝1/2，在检测信号SE呈高电平(有场景切换)的情况下，可以使A＝1，B＝0。即，在检测到了有场景的切换的情况下，与没有场景切换的情况相比，最好通过使对过去帧的基准最小值Rmin(统计值数据10A)的加权小的计算，生成修正参数P。

图4是用于说明第一循环型滤波器F1的输入输出特性之一例的说明图。基准最小值Rmin如图4(A)所示变化。在该例中，基准最小值Rmin中包括振幅小的高频分量。另外，在第n帧和第n+1帧中基准最小值Rmin的值变化大。在动态图像的修正处理中，如果用短周期使修正参数P变化，则人的眼睛能看到画面的闪烁或晃动。

这里，如果与场景切换的有无无关地将上述的第一系数A及第二系数B的值固定，则第一循环型低通滤波器F1的输出如图4(B)所示。在此情况下，虽然能将重叠在基准最小值Rmin上的振幅小的高频分量除去，但在有场景切换的n帧和n+1帧之间会出现响应延迟。

可是，在本实施方式中，根据场景切换的有无，使第一系数A及第二系数B变化。因此，第一循环型低通滤波器F1的输出如图4(C)所示。在此情况下，重叠在基准最小值Rmin上的振幅小的高频分量被除去，还能大幅度改善响应性。因此，场景切换时能显示切换自然的图像。

其次，图3所示的LUT生成部23根据从计算部22输出的修正参数P，将规定的数据存储在查找表LUT中。修正参数P包括从第一循环型滤波器F1输出的修正过的基准最小值Rmin’和从第二循环型滤波器F1输出的修正过的基准最大值Rmax’。

其次，参照图5所示的例说明基于修正参数P的图像修正处理。例如，一画面的输入图像数据GDin的灰度值的分布如图5(A)中的频率分布曲线所示，通过上述的统计计算处理，获得基准最小值Rmin及基准最大值Rmax。在此情况下，如图5(B)所示，图像修正部30截断灰度值低于基准最小值Rmin的阴影部，同时截断灰度值大于基准最大值Rmax的最亮部。

因此，修正参数计算部20生成查找表LUT，以便输出图像数据GDout的最小值成为修正过的基准最小值Rmin’，其最大值成为修正过的基准最大值Rmax’。具体地说，生成查找表LUT，以便图像修正处理的输入输出灰度特性按照以下形式给出。

Gdout＝fa*GDin-fb

fa＝256/(Rmax’-Rmin’)

fb＝fa*Rmin

另外，fa是输入输出灰度特性的斜率，fb是输入输出灰度特性的截距。

图6中示出了查找表LUT的存储内容的一例。该图中，虚线是不进行图像修正处理的情况的特性，实线是进行图像修正处理的情况的输入输出灰度特性。如该图所示，在输入图像数据GDin的灰度值从最小值“0”到修正过的基准最小值Rmin’的范围内，输出图像数据GDout的灰度值成为最小值“0”。另外，在输入图像数据GDin的灰度值从最大值“255”到修正过的基准最大值Rmax’的范围内，输出图像数据GDout的灰度值成为最大值“255”。因此，阴影部和最亮部被截断，灰度总体沿图示的箭头方向延伸。

如上所述，如果采用本实施方式，则由于对基准最小值Rmin及基准最大值Rmax等统计值进行了除去高频分量的处理，所以与在生成成为获得统计值用的源的频率分布曲线的过程中除去高频分量的情况相比，能大幅度地简化结构，能谋求减轻处理负荷。另外，由于根据场景切换的有无，切换低通滤波器的时间常数，所以切换了场景时，也能立刻进行适当的图像修正。

其次，说明本发明的第二实施方式的图像处理装置。第二实施方式的图像处理装置使用计算部22’来代替计算部22，除此以外，与图1所示的第一实施方式的图像处理装置100相同。

图7是表示第二实施方式的修正参数计算部20的详细结构的框图。另外，与图3所示的结构部分相同的结构标以相同的标记。该例的计算部22’具有第一低通滤波器f1及第二低通滤波器f2。这些滤波器f1及f2抑制基准最小值Rmin及基准最大值Rmax的急剧变化，生成修正参数P。第一低通滤波器f1具有第一系数器225、第二系数器226、加法器228、以及存储器227。另外，第二低通滤波器f2与第一低通滤波器f1同样构成，省略说明。

一帧前的基准最小值Rmin存储在存储器227中。这里，假设当前帧的基准最小值Rmin为S(n)，一帧前的基准最小值Rmin为S(n-1)，则能用下式给出当前帧的修正参数P(n)。

P(n)＝A*S(n)+B*P(n-1)，1＝A+B

能与第一实施方式同样地根据检测信号SE，选择各第一系数A及第二系数B的值。例如，在检测信号SE呈低电平(没有场景切换)的情况下，可以使A＝B＝1/2，在检测信号SE呈高电平(有场景切换)的情况下，可以使A＝1，B＝0。在此情况下，在没有场景的切换时，能根据多个帧的基准最小值Rmin的平均值，生成修正参数P，在有场景的切换的情况下，能输出当前帧的基准最小值Rmin作为修正参数P。

因此，第二实施方式与第一实施方式相同，由于对基准最小值Rmin及基准最大值Rmax等统计值进行了除去高频分量的处理，所以与在生成成为获得统计值用的源的频率分布曲线的过程中除去高频分量的情况相比，能大幅度地简化结构，能谋求减轻处理负荷。另外，由于根据场景切换的有无，切换低通滤波器的时间常数，所以切换了场景时，也能立刻进行适当的图像修正。

另外，本发明不限定于上述的第一及第二实施方式，例如，能进行以下的变形。

(1)在上述的各实施方式中，也可以根据输入图像数据GDin的帧速率，切换没有场景切换时的第一系数A及第二系数B。例如，如图8所示，帧速率越低，可以使滤波器的时间常数越大，增加平滑化的程度。这是因为，如果帧速率下降，则帧之间的相关性下降，所以帧之间的统计值数据10A的差分值增大。

(2)在上述的各实施方式中，虽然用硬件构成修正参数计算部20中的处理，但当然也可以用软件构成。在此情况下，使CPU按照规定的图像处理程序工作即可。

(3)另外，上述的各实施方式最好用于具有液晶面板、电致发光(EL)面板、数字微镜象装置(DMD)面板、利用由等离子体发光或电子释放产生的荧光等各种电光面板的电子设备。在此情况下，电子设备具有：根据输出图像数据GDout，发生控制电光面板用的控制信号的定时信号发生电路；根据输出图像数据GDout，生成供给电光面板的图像信号的图像信号生成电路；驱动电光面板的驱动电路；以及电光面板。作为电子设备，例如能举出：移动用户型的个人计算机、便携电话、电视机、取景器型或监视器直视型的磁带摄像机、导航装置、寻呼机、电子笔记本、计算器、文字处理机、工作站、可视电话、POS终端、具有触摸面板的装置等。

Claims (10)

1.一种图像处理装置，是对图像数据进行图像处理的图像处理装置，其特征在于，具备：

对上述图像数据进行统计处理生成表示统计值的统计值数据的统计值计算单元；

根据上述图像数据检测有无场景切换的场景检测单元；

对多个帧的上述统计值数据进行对应于上述场景检测单元的检测结果的加权、计算修正参数的修正参数计算单元；以及

根据上述修正参数对上述图像数据进行图像修正处理的图像修正单元。

2.根据权利要求1所述的图像处理装置，其特征在于：上述修正参数计算单元，在由上述场景检测单元检测出有场景切换的情况下，通过使对过去的帧的统计值数据的加权小于没有场景切换的情况的计算，生成上述修正参数。

3.根据权利要求1或2所述的图像处理装置，其特征在于：上述修正参数计算单元，在由上述场景检测单元检测出没有场景切换的情况下，计算上述多个帧的统计值数据的平均，生成上述修正参数。

4.根据权利要求3所述的图像处理装置，其特征在于：上述修正参数计算单元，在由上述场景检测单元检测出有场景切换的情况下，生成当前帧的统计值数据作为上述修正参数。

5.根据权利要求1或2所述的图像处理装置，其特征在于：上述修正参数计算单元，在由上述场景检测单元检测出没有场景切换的情况下，

将当前帧的统计值数据设为S(n)，将一帧前的修正参数设为P(n-1)，将第一系数设为A，将第二系数设为B时，按照下式计算当前帧的修正参数P(n)：

P(n)＝A*S(n)+B*P(n-1)，1＝A+B。

6.根据权利要求5所述的图像处理装置，其特征在于：上述修正参数计算单元，在由上述场景检测单元检测出有场景切换的情况下，使A＝1，而且使B＝0。

7.根据权利要求1或2所述的图像处理装置，其特征在于：上述修正参数计算单元，检测上述图像数据的帧速率，对多个帧的上述统计值数据进行与检测到的帧速率及上述场景检测单元的检测结果相对应的加权，计算修正参数。

8.一种图像处理方法，是对图像数据进行图像处理的图像处理方法，其特征在于，包括：

对上述图像数据进行统计处理，生成表示统计值的统计值数据的步骤；

根据上述图像数据检测有无场景切换的步骤；

对多个帧的上述统计值数据进行对应于场景检测结果的加权、计算修正参数的步骤；以及

根据上述修正参数对上述图像数据进行图像修正处理的步骤。

9.根据权利要求8所述的图像处理方法，其特征在于：计算上述修正参数的步骤，在检测出有场景切换的情况下，通过使对过去的帧的统计值数据的加权小于没有场景切换的情况的计算，生成上述修正参数。

10.一种图像处理程序，是对图像数据进行图像处理的图像处理程序，其特征在于，使计算机具有作为以下单元的功能：

对上述图像数据进行统计处理生成表示统计值的统计值数据的统计值计算单元；

根据上述图像数据检测有无场景切换的场景检测单元；

对多个帧的上述统计值数据进行对应于上述场景检测单元的检测结果的加权、计算修正参数的修正参数计算单元；以及

根据上述修正参数对上述图像数据进行图像修正处理的图像修正单元。

Images