CN1437408A - 考虑人类视觉特征的图像编码和解码方法及装置 - Google Patents

考虑人类视觉特征的图像编码和解码方法及装置 Download PDF

Info

Publication number
CN1437408A
CN1437408A CN03107502A CN03107502A CN1437408A CN 1437408 A CN1437408 A CN 1437408A CN 03107502 A CN03107502 A CN 03107502A CN 03107502 A CN03107502 A CN 03107502A CN 1437408 A CN1437408 A CN 1437408A
Authority
CN
China
Prior art keywords
picture
rectangular area
image
unit
district
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN03107502A
Other languages
English (en)
Other versions
CN1250008C (zh
Inventor
金佑湜
赵大星
李时和
金尚煜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020020000602A external-priority patent/KR100624404B1/ko
Priority claimed from KR10-2002-0051883A external-priority patent/KR100528324B1/ko
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN1437408A publication Critical patent/CN1437408A/zh
Application granted granted Critical
Publication of CN1250008C publication Critical patent/CN1250008C/zh
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • G06T9/005—Statistical coding, e.g. Huffman, run length coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/179—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scene or a shot
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/625—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Abstract

本发明公开一种考虑人类视觉特征的图像编码方法和装置。该图像编码方法包括(a)对在景象单元中输入图像的图像质量分布进行建模以便在景象单元中输入的图像质量从评价区到背景区逐渐降低，(b)根据该图像质量分布的建模结果确定构建一景象的每个区域的量化参数，(c)根据该量化参数量化图像数据，和(d)对该量化的图像数据的熵进行编码。

Description

考虑人类视觉特征的图像编码和解码方法及装置
技术领域
本发明涉及一种图像编码，且更特别地，涉及一种考虑人类视觉特征的图像编码和解码的方法和装置。
背景技术
一般而言，为了存储/传输目的将图像进行压缩。图1示出了常规图像压缩方法的流程图，其中，为了生成压缩的位流，顺序执行空间/时间预测编码(100)，变换编码(110)，量化(120)和熵编码(130)。在这种情况下，在量化操作120的过程中产生许多的损失。该有损压缩方法包括静止图像的有损压缩方法和活动图像的有损压缩方法。JPEG是有代表性的静止图像的有损压缩方法，而MPEG-1，2，4和H.261和H.263是有代表性的活动图像的有损压缩方法。
同时，在对图像进行编码时执行离散余弦变换(DCT)。在这种情况下，因为为了对整个图像执行DCT，计算的数量太大，所以将图像分割成预定大小的块，即8×8，然后再进行编码。而且，当执行量化时，如果使用每个单元块的量化参数对图像进行编码则信息的数量增加以致每个单元块的量化参数不同。因此，在整个图像中使用相同的量化参数。在MPEG-4和H.263系统中，为了对每个16×16的块通过2来调整量化参数而提供信息。然后，使用该信息达到精确的目标位率。
当使用这样的编码器时，在整个景象(scene)上显示具有相似图像质量的图像。然而，当用户观看图像时，用户认为评价区(region of interest)(ROI)的图像质量比背景区的图像质量更重要。这就是为什么用户能同时看到区域之间存在差异的原因。用户想更仔细地观看评价区(ROI)且略过背景区的其它细节部分。特别地，这种现象在活动图像中更显著。因此，当使用较少的位对图像进行编码时，评价区(ROI)图像质量的提高必须通过为评价区(ROI)分配比背景区更多的位，而不是通过对整个图像均匀分配位来达到。
在MPEG-4和H.263系统中，将一部分图像分割成区域并进行编码。在MPEG-4系统中，用户能使用超过中心面的形状编码来限定像素单元中的区域。上述方法主要用在MPEG-4中，因为操作可以在构成景象的每个对象单元中执行。每个对象使用不同的位流来进行编码，且使用上述结构能在MPEG-4中执行用户的交互作用。使用这种方法，将每个对象的ROI和背景区彼此分离以便对图像进行编码使其有不同的图像质量。然而，对象的分离处理过程是很复杂的。即使使用粗糙的形状将对象互相简单分离，在表示每个对象形状时另外还需要信息，因此降低了压缩率。
而且，在H.263系统中，使用附件K处切片结构模式将一部分图像分割成成组的连续宏块(MB)单元中的区域或某一矩形形状的成组宏块(MB)单元中的区域，并将能图像进行编码。用在H.263系统中的这种方法对误差有很强的作用。在使用多传输通道的环境中的重要部分通过在较好的环境中的传输通道传输以便提高传输效率且阻止在一个区域中出现的误差传到另一个区域中。在这种情况下，ROI可以使用矩形形状的切片结构来编码。然而，为了显示背景区，必须将一部分图像分割成几个矩形，因此，H.263系统的结构变得复杂。
在名称为“Motion-adaptive Modeling Scene Content for very low Bit RateModel assisted Coding of Video Sequences(视频序列的超低位率模型的辅助编码的活动自适应模型化景象内容)”的美国专利5764803中，将一部分图像分割成评价区(ROI)和背景区，然后对图像进行编码。然而，在每个区域中能变化的量化参数的范围有限。因此，由于在评价区(ROI)和背景区之间的图像质量的差异，能看见评价区(ROI)和背景区之间的边界。
而且，在名称为“System and Method for fine grannular scalable(FGS)Video with selective Quality Enhancement(具有选择性质量增强的细粒度伸缩性(FGS)视频的系统和方法)”的美国专利6263022中公开了一种用在包括一基层和一加强层的多传输通道环境中的压缩方法。该方法适合一种传输通道的环境，但是执行内预测是困难的，因此降低了编码效率。而且，虽然提高了评价区(ROI)的图像质量，但是却降低了整体编码的效率。因此，大大降低了背景区的图像质量。即，评价区和背景区之间的图像质量的差异增加了，所以在评价区和背景区之间显著地出现了边界。
而且，在名称为“Intra-frame quantizer Selection for Video Compression(视频压缩的帧内量化器选择)”的美国专利6256423中公开了一种压缩方法，其中定义评价区(ROI)和背景区、在评价区(ROI)和背景区之间的过渡区且确定了各区之间的量化参数。在该方法中，因为过渡区，可稍微阻止在评价区(ROI)和背景区之间的边界出现的现象。然而，每个区域的量化参数的范围有限，且当在一部分区域中存在n个评价区(ROI)时也需要n个过渡区，因此编码方法将变得复杂。此外，为了使区域之间的边界变得光滑，还需要在过渡区和另一个区域之间的另一个过渡区。结果，确定每个区域的量化参数是困难的。为了解决这个问题，也已经使用了迭代选择量化参数的方法，但是该方法导致计算量的增加。
发明内容
本发明提出一种图像编码和解码的方法和装置，其阻止了在评价区(ROI)和背景区之间的边界在图像中形成且该方法通过考虑人类视觉特征需要较小的计算量。
本发明进一步提供一种图像编码和解码的方法和装置，通过该方法和装置，当对图像进行编码和解码时，通过使用多个矩形区域有效执行了对评价区(ROI)的编码和解码。
本发明进一步提供一种记录介质，在该记录介质上，将图像编码和解码的方法记录为通过计算机可执行的程序代码。
根据本发明的一个方面，提供一种图像编码方法。该图像编码方法包括(a)对在景象单元中输入图像的图像质量分布进行建模以便在景象单元中输入的图像质量从评价区到背景区逐渐降低，(b)根据图像质量分布的建模结果确定构成景象的每个区域的量化参数，(c)根据量化参数量化图像数据，和(d)对量化的图像数据的熵进行编码。
根据本发明的另一方面，提供一种图像编码装置。该图像编码装置包括：一图像质量建模单元，用于对在景象单元中输入图像的图像质量分布进行建模以便在景象单元中输入的图像质量从评价区到背景区逐渐降低，且根据图像质量分布的建模结果，确定构成景象的每个区域的量化参数；一自适应量化单元，用于根据由图像质量建模单元确定的量化参数量化图像数据；和一熵编码单元，用于对通过自适应量化单元量化的图像数据的熵进行编码。
根据本发明的另一方面，提供一种图像解码方法。该图像解码方法包括(a)解码图像数据，该图像数据包括每个区域的位置和大小信息以及在一接收位流中的量化参数的值，(b)使用每个区域的位置和大小的信息以及在(a)中恢复的量化参数的值来确定每个区域的量化参数的值以便使图像质量从评价区到背景区逐渐降低，(c)使用量化参数的值对解码的图像数据进行逆量化，和(d)根据与在(a)中恢复的每个区域的位置的值相符的相应位置，为每个区域增加恢复的图像并构建一景象。
根据本发明的另一方面，提供一种图像解码装置。该图像解码装置包括：一熵解码单元，用于对图像数据的熵进行解码，该图像数据包括每个区域的位置和大小信息以及在接收位流中的量化参数的值；一图像质量建模单元，使用每个区域的位置和大小信息和通过熵解码单元恢复的量化参数的值确定每个区域的量化参数的值，以便使图像质量从评价区到背景区逐渐降低；一自适应逆量化单元，根据由图像质量建模单元确定的每个区域的量化参数的值，对通过熵解码单元提供的图像数据进行逆量化；和一图像构建单元，根据与通过熵解码单元提供的每个区域的位置的值相符的相应位置，为每个区域增加恢复图像并构建一景象。
根据本发明的另一方面，提供一种图像编码装置。该图像编码装置包括：一切片建模单元，将每个图像分割成至少一个独立的切片；一图片首部编码单元，将通过切片建模单元分割的切片的位置和大小信息连同其他信息一起编码为一图片首部；和一切片编码单元，通过参照图片首部信息，对切片单元中的图像进行编码。
根据本发明的另一方面，提供一种图像解码装置。该图像解码装置包括：一图片首部解码单元，用于对在位流中的图片首部进行解码；一切片构建单元，使用在图片首部信息中的切片的位置和大小信息构建切片；一切片解码单元，通过参照图片首部，对切片单元的图像进行解码；和一图像构建单元，通过参照由切片构建单元获得的切片的位置和大小的信息，将通过切片解码单元恢复的切片单元中的图像构建为图像的一部分。
根据本发明的另一方面，提供一种图像编码方法。该图像编码方法包括(a)在一部分图像中设置切片的位置和大小，(b)将在(a)中设置的切片的位置和大小信息连同其他信息一起编码为一图片首部，和(c)通过参照在(b)中编码的图片首部信息，在切片单元中对图像进行编码。
根据本发明的另一方面，提供一种图像解码方法。该图像解码方法包括(a)对在位流中的图片首部进行解码，(b)使用包括在(a)中解码的图片首部的切片的有关位置和大小信息构建切片，(c)通过参照在(a)中解码的图片首部，在切片单元中对图像进行解码，(d)通过参照切片的有关位置和大小的信息，将在(c)中解码的切片单元中的图像构建为一部分图像。
根据本发明的另一方面，提供一种图像编码方法，其中将图像分割成具有预定大小的切片单元并对其进行编码。该图像编码方法包括：限定多个矩形区域的有关位置和大小的信息，其中将评价区包括在图像中并且较大的矩形包括较小的矩形；对包括在多个矩形区域中最小的内矩形区域的所有切片进行编码；对排除内矩形区域的外矩形区域没有与较小的内矩形重叠的切片进行编码；和将没有包括在最外边的外矩形区域的区域限定为背景区且对包括在背景区中的切片进行编码。
根据本发明的另一方面，提供一种图像解码方法，其中将图像分割成具有预定大小的切片单元并对其进行编码，将图像分割成背景区和评价区，且将图像在位流中进行解码，该位流通过多个矩形区域来限定，其中将评价区包括在图像中且较大的矩形包括较小的矩形。该图像解码方法包括：对包括位流中的评价区的多个矩形区域的每个的位置和大小信息进行提取；对包括在多个矩形区域中的最小的内矩形区域中的所有切片进行解码；仅解码在切片中排除内矩形的外矩形没有与较小的矩形重叠的切片；和对没有包括在多个矩形区域中的背景区中的所有切片进行解码。
附图说明
结合附图，通过对优选实施例的详细描述，本发明的上述和其它特征和优点将变得更加明显，其中：
图1示出了常规的图像压缩方法的流程图；
图2示意性示出了根据本发明一个实施例的考虑人类视觉特征的图像编码装置的框图；
图3示出了根据本发明一个实施例在图2中的图像编码装置中执行图像编码方法的流程图；
图4A和4B示出了在一景象中确定一评价区(ROI)、一插入区和一背景区的步骤；
图5A到图5C示出了将现有技术的图像质量的分布和本发明的图像质量的分布进行比较的曲线图；
图6A到6C示出了通过图2中的图像质量建模单元确定量化参数的特征；
图7A和7B示出了在线性或非线性量化方法中根据量化参数的变化表示位的数量与图像质量的关系；
图8A到8C示出了将根据本发明的图像编码方法应用到实际图像中的情况与将常规编码方法应用到实际图像中的情况的比较；
图9示意性示出了根据本发明一个实施例的考虑人类视觉特征的图像解码装置的框图；
图10示出了根据本该发明一个实施例在图8中的图像解码装置中执行图像解码方法的流程图；
图11示出了根据本发明一个实施例的图像编码装置的框图；
图12示出了在图11中的图像编码装置中执行图像编码方法的流程图；
图13示意性示出了根据本发明另一个实施例的图像解码装置的框图；
图14示出了在图13中的图像解码装置中执行图像解码方法的流程图；
图15A和15B示出了根据本发明处理切片的方法；
图16示出了将根据本发明的编码方法应用到实际图像中的情况与将常规编码方法应用到实际图像中的情况的主观图像质量的比较；以及
图17示出了将根据本发明的编码方法应用到实际图像中的情况与将常规编码方法应用到实际图像中的情况的客观图像质量的比较。
具体实施方式
下文中，将参照附图详细描述根据本发明的考虑人类视觉特征的图像编码和解码方法及其装置。
图2示意性示出了根据本发明一个实施例的考虑人类视觉特征的图像编码装置的框图。参照图2，图像编码装置包括一图像质量建模单元140，一预测编码单元145，一变换编码单元150，一自适应量化单元155，和一熵编码单元160。
图像质量建模单元140在景象单元中建立输入图像的图像质量分布模型以便在景象单元中输入的图像的图像质量从评价区(ROI)到背景区逐渐降低。而且，图像质量建模单元140根据图像质量分布的建模结果确定构成一个景象的每个区域的量化参数。
预测编码单元145对输入的图像进行预测编码，而变换编码单元150对预测编码过的输入图像进行变换编码。在这种情况下，为了简化编码计算，预测编码单元145和变换编码单元150在具有预定大小的块单元中执行编码。
自适应量化单元155根据由图像质量建模单元140确定的量化参数来对每个MB的图像数据进行量化。
熵编码单元160对通过自适应量化单元155量化的图像数据的熵进行编码。
图3示出了根据本发明一个实施例在图2中的图像编码装置中执行图像编码方法的流程图。
现在，将参照图2和3来描述图2中的图像编码装置的操作。
首先，在步骤200中，图像质量建模单元140对在景象单元中的输入图像进行图像质量分布的建模以便在景象单元中输入的图像的图像质量从评价区(ROI)到背景区逐渐降低。在步骤200之后，在步骤210中，图像质量建模单元140根据图像质量分布的建模结果，确定构成一个景象的具有预定大小即8(像素)  8或16 16的每个块的量化参数并将该确定的量化参数提供给自适应量化单元155。
因为图像质量建模单元140对图像质量进行建模以便输入图像的图像质量从评价区(ROI)的中心区域到背景区逐渐降低，所以量化参数在评价区(ROI)中是小的且逐渐朝向背景区增加。量化参数通过位标(bit target)来确定。这里，图像质量建模单元140能对图像质量进行建模以便图像质量分布具有高斯分布。另外，图像质量建模单元140在每个景象的评价区(ROI)和背景区之间能设置一预定的插入区，且能对图像质量分布进行建模以便在评价区(ROI)的中心获得最好的图像质量且每个区域的图像质量将在背景区降低，但是在背景区中的差异在插入区是不显著的。例如，图像质量建模单元140能在一个景象中确定评价区(ROI)250和背景区260，如图4A所示，且能设置插入区300来去除块现象，该块现象是由在彼此互相连接的区域中的区域之间的图像质量的差异引起的，如图4B所示。图像质量建模单元140通过对图像质量进行建模来确定量化参数以便将图像质量自然地在插入区中连接。在插入区中的量化参数可以线性或非线性变化。图像质量的建模将参照图5和6来详细描述。
在步骤210之后，在步骤220中，自适应量化单元155输入每个区域的预测编码和变换编码图像数据，而图像质量建模单元140根据由图像质量建模单元140确定的量化参数量化每个区域的图像数据。同时，通过图像质量建模单元140提供的量化参数从景象的评价区(ROI)到背景区增加，因此通过量化引起的损失程度是不同的。即，最少的损失是在评价区(ROI)的中心，在该评价区中是最吸引人的眼睛的，损失朝向背景区增加，在该背景区中，相对少地吸引人的眼睛。
在步骤220之后，在步骤230中，熵编码单元160对通过自适应量化单元155量化的图像数据的熵进行编码并输出图像数据的编码的熵作为位流。
如上所述，通过考虑人类视觉特征对预定图像质量进行建模，量化参数从评价区(ROI)到背景区逐渐增加，因此有效地去掉在区域间的块现象，同时提高了编码效率。
图5A到5C示出了将现有技术的图像质量的分布和本发明的图像质量的分布进行比较的曲线图。在图5A到5C中，X轴和Y轴分别代表每个图像的空间域，而Z轴代表图像质量。且假定图像的评价区(ROI)是景象的中间部分。
图5A示出了图像质量建模单元140对一个景象中图像质量分布进行建模，使得在评价区(ROI)的中心具有高斯分布的图像质量分布的情况。参照图5A，图像质量分布在图像的中心平均具有两维高斯分布，其中最好的图像质量是在评价区(ROI)中获得且图像质量将在背景区中逐渐降低。在这种情况下，在图像质量中变化的斜率可根据X和Y轴的离散(dispersion)值来调整。可根据评价区(ROI)的数量形成不同的图像质量分布。此外，在这种情况下，在一个景象中对由图像质量分布引起的量化参数分布进行建模并传送其模型，而不是对每个单元块的量化参数进行编码并传送该量化参数。例如，如果相当于评价区(ROI)的中心的单元块的位置和离散值被传输，则所有单元块的量化参数可在接收器中自动计算出来。
图5B示出了在评价区(ROI)和背景区之间放置插入区以便减少图像质量中快速差值的情况。在这种情况下，将一个量化参数分配给每个区域。量化参数变化的间隔根据区域的大小来设置。不需要通过在编码器和解码器中设置相同的规则将附加信息插入在间隔中。例如，在矩形区域的情况下，如果将相当于每个宽度和长度20％的区域设置为一间隔，在该间隔中，量化的参数是变化的，则可将变化的量化参数应用到相当于来自每个区域的外边的20％的块的区域中并对其进行编码。即使当解码量化参数时，将变化的量化参数应用到相当于20％的部分，这样对变化的量化参数可进行正确地编码。而且，通过在编码器和解码器中使用相同的量化方法，在没有插入有关改变量化参数的方法的附加信息的情况下，量化参数根据预设的规则可以变化。
图5C示出了将现有技术中一个景象分成评价区(ROI)和背景区的情况的图像质量的分布。在这种情况下，由于在两个区域之间的图像质量的不同，发生在两个区域之间的边界出现块现象，因此破坏了图像质量。
最后，参照图5A和5B，图像质量从评价区(ROI)到背景区逐渐降低，且因此用户不能感觉到在评价区(ROI)和背景区之间的图像质量的差异。然而如图5C所示，由于在评价区(ROI)和背景区之间的图像质量的快速差异，用户感觉到块现象。
图6A到6C示出了通过图2中的图像质量建模单元140确定量化参数的特征。为方便起见，假定将空间域的0-2和8-10设置为背景区，将空间域的2-8设置为评价区(ROI)，且量化参数从0-31变化。
图6A示出了在图4B或5B的插入区域中量化参数线性变化的情况，图6B示出了在图4B或5B的插入区域中量化参数非线性变化的情况。参照图6A和6B，量化参数被确定以便在评价区(ROI)和背景区之间的图像质量的差异不是快速变化而是在评价区(ROI)和背景区之间的插入区中逐渐变化。图6C示出了在没有常规插入区的情况下当将景象分割成评价区(ROI)和背景区时量化参数的特征，且在图6C中，在评价区(ROI)和背景区之间的量化参数的差异是快速的。因此，块现象可能出现在评价区(ROI)和背景区之间的边界处。
同时，量化参数的线性/非线性特征可以通过量化方法的特征来确定，如图6A和6B所示。即，根据在量化参数中的变量来确定位的数量和图像质量是线性变化还是非线性变化。
图7A和7B示出了在线性或非线性量化方法中根据量化参数的变化，表示位的数量与图像质量的关系，且在图7A和7B中使用MPEG-4和H.26L编码器。
图7A示出了根据量化参数变化的图像质量的变化，并示出了MPEG-4编码器具有非线性特征和H.26L编码器具有线性特征。此外，图7B示出了根据量化参数变化的位数量中的变化，并示出了MPEG-4编码器具有非线性特征和H.26L编码器具有线性特征。即，线性或非线性改变量化参数的方法使通过量化方法来确定，因此不需要传输附加信息。而且，位的数量在评价区(ROI)中减少，且位的数量朝向背景区增加。因此，位的所有数量没有大的变化且不需要附加计算。
图8A到8C示出了将根据本发明的编码方法应用到实际图像中的情况与将常规编码方法应用到实际图像中的情况的比较。图8A示出了使用根据本发明的自适应量化方法的情况，且图8B示出了在图像的中间部分形成矩形评价区(ROI)、将景象的区域分割成两个区域，且在每个区域中对不同的量化参数进行编码的情况。而且，图8C示出了在没有分割评价区(ROI)的情况下，在景象的所有块中对相同的量化参数进行编码的情况。
参照图8A到8C，图像的主观图像质量通过使用评价区(ROI)的编码来得到提高，如图8B所示，而不是在所有块中使用相同的量化参数，如图8C所示。然而，形成了在ROI和背景区之间的边界。由于边界现象，限制了在评价区(ROI)和背景区之间的图像质量的产生差异从而限制了编码ROI的效率。然而，在图8A中的自适应编码方法的情况中，在ROI和背景区之间设置插入区，图像质量在插入区中逐渐变化以便在两个插入区之间的图像质量的差异没有出现显著变化。
图9示意性示出了根据本发明一个实施例的考虑人类视觉特征的图像解码装置的框图。参照图9，图像解码装置包括一图像质量建模单元300，一熵解码单元310，一自适应逆量化单元320，一图像恢复单元330和一图像构建单元340。
图10示出了根据本发明一个实施例在图8中的图像解码装置中执行图像解码方法的流程图。参照图9和10，熵解码单元310接收一位流并对属于每个区域的数据的位流进行解码。在步骤410中，在位流中对包括每个区域位置信息的图像数据、量化参数的值和每个区域的大小进行解码。
在步骤420中，图像质量建模单元300使用通过熵解码单元310进行解码的每个区域的位置和大小信息和数据的量化参数值来确定相应区域的量化参数的值。图像质量建模单元300将量化参数的值提供给自适应量化单元320。在这种情况下，量化参数的值可设置为在预定间隔处逐渐变化以便在每个区域之间的量化参数的值没有快速变化。如上参照图5A到5C和6A到6C所述的，图像质量分布可被建模为集中在评价区(ROI)具有高斯分布，或在ROI和背景区之间可以放入一插入区以便减少在图像质量中的快速变化。这样，在上述编码方法中执行设置一个间隔，其中通过图像质量建模单元300确定的每个区域的量化参数的值是变化的，或执行对一量化参数的改变。
在步骤430中，使用由图像质量建模单元300确定的量化参数的值，自适应逆量化单元320逆量化通过熵解码单元310传送的每个块的数据或数据f。
在步骤440中，图像恢复单元330对具有预定大小的每个块执行逆变换，补偿预测信息并恢复图像。
在步骤450中，图像构建单元340根据与由熵解码单元310提供的每个区域的有关位置的信息相符的相应位置，通过将每个区域的恢复图像增加到图像一部分中而构建一景象。
将上面描述的根据本发明的自适应图像解码装置的结构和操作用于对在通过图2中的自适应图像编码装置编码的图像进行解码。该操作是逆向执行自适应图像编码装置中的操作，并如编码方法中的执行设置其中每个块的量化参数的值是变化的一个间隔，或改变在自适应图像解码装置中执行的量化参数。这样，为方便起见，这些操作将不再在这里重复。
图11示出了根据本发明一个实施例的图像编码装置的框图。参照图11，根据本发明的图像编码装置包括一切片建模单元1100，一图片首部编码单元1200和一切片编码单元1300。切片编码单元1300包括一空间/时间预测编码部分1310，一变换和量化部分1320，和一熵编码部分1330。
切片建模单元1100将图像1000分割成至少一个独立的切片以便由用户独立地对任意期望的区域进行编码。即，切片建模单元1100可以限定ROI为矩形区域且可以构建ROI和多个独立切片的ROI外面的区域。此外，在图像1000的一部分中，切片建模单元1100可以构建一区域以便用几个矩形区域使一大的矩形区域与一小的矩形区域重叠，且可以构建一小的矩形区域和一没有与在多个独立切片中的小的矩形区域重叠的大的矩形区域。
图片首部编码单元1200对在图像中解码所有切片所需的公共信息进行编码并将该编码的信息传输到切片编码单元1300中。在这种情况下，切片的数量，形状，位置和大小都包括在传输信息中。
通过参照从图像首部编码单元1200中输入的图片首部信息，切片编码单元1300在切片单元中对图像进行编码。为此，空间/时间预测编码部分1310去掉空间和时间重叠信息。变换和量化部分1320对空间/时间预测编码部分1310的输出执行预定的变换例如DCT，并量化一变换参数。熵编码部分1330对该变换和量化部分1320的输出的熵进行编码且并产生一压缩位流。
当通过网络对图像进行编码和传输时，切片编码单元1300将图像分割成切片单元。特别地，将图像分割成矩形切片单元并对其进行编码，这样，减少了切片内预测损失。而且，使用分割成矩形内和外区域的切片结构，执行ROI编码和画中画(PIP)编码。这里，在ROI编码中，将图像分割成评价区(ROI)和背景区，ROI的图像质量提高了，且背景区的图像质量降低了以便使用严格的位率提高主观的图像质量。在PIP编码中，可对包括矩形切片的部分进行独立解码以便象其他图像一样利用该部分。
根据本发明，当包括多个切片的矩形区域与另一个矩形区域重叠时，将在重叠区域和背景区域之间的预定区域设置为插入区以便在ROI编码操作中，由于在ROI和背景区之间的图像质量的快速变化，阻止了主观图像质量的降低。此外，在PIP编码操作过程中，可使用具有各个尺寸的PIP。
图12示出了在图11中的图像编码装置中执行的图像编码方法的流程图。参照图12，如果设置独立处理的矩形区域的位置和大小，则在步骤1400中，切片建模单元1100将相应的矩形区域分割成至少一个独立切片。在步骤1500中，图片首部编码单元1200对图片首部进行编码，且在步骤1600中，对切片的编码通过切片编码单元1300执行。
这里，切片编码(步骤1600)包括空间/时间预测编码，以去掉存在于切片单元中的图像的空间和时间上重叠的信息(步骤1610)，执行预定的变换，例如DCT，并对去掉重叠信息的数据进行量化(步骤1620)，且对量化数据的熵进行编码并生成一压缩的位流(步骤1630)。
图13示意性示出了根据本发明另一个实施例的图像解码装置的框图。参照图13，根据本发明的图像解码装置包括一图片首部解码单元2000，一切片构建单元2100，一切片解码单元2200和一图像构建单元2300。该切片解码单元2200包括一熵解码部分2210，一逆量化和逆变换部分2220，和一图像恢复部分2230。
图片首部解码单元2000对通过网络接收的位流中的图片首部信息进行解码。将有关每个解码的矩形区域的切片的数量、形状、位置和大小信息传输到切片构建单元2100中，且将其它的信息传输到切片解码单元2200中。
响应通过图片首部解码单元2000传输的每个解码的矩形区域的切片的数量、形状、位置和大小信息，切片构建单元2100选择切片的位置，处理矩形区域的重叠部分并构建切片。矩形区域的重叠部分的处理将在下面参照图15来描述。
通过参照从图片首部解码单元2000输入的图片首部信息，切片解码单元2200对切片单元中的图像进行解码。为此，熵解码部分2210对位流的熵进行解码，且逆量化和逆变换部分2220对熵解码的位流执行逆量化和逆变换。而且，图像恢复部分2230补偿逆量化和逆转换部分2220的输出数据的空间/时间预测编码信息并恢复该图像。在这种情况下，响应通过切片构建单元2100输入的信息，将在切片单元中恢复的图像增加到通过图像构建单元2300构建的一部分图像中。
将根据本发明具有上述结构的图像解码装置用来解码通过图11中的图像编码装置编码的图像。图像解码装置的操作与图像编码装置的操作反向执行。然而，图像解码装置的切片处理操作的基本特征与图像编码装置的相同。因此，为简洁起见，这些操作将不再在这里重复。
图14示出了在图13的图像解码装置中执行的图像解码方法的流程图。参照图14，在步骤2500中，将图片首部信息在接收的位流中进行解码。在这种情况下，在步骤2600中，有关每个解码的矩形区域的切片的数量、形状、位置和大小的信息通过切片构建单元2100传输，且响应输入的信息，切片构建单元2100选择切片的位置，处理矩形区域的重叠部分并构建切片。在步骤2700中，在构建的切片上执行解码，且在步骤2800中，通过参照切片的位置和大小而构建图像。
这里，切片解码(步骤2700)包括对位流的熵进行解码(步骤2710)，对熵解码的数据执行逆量化和逆转换(步骤2720)，并对经过逆变换的数据补偿空间/时间编码信息(步骤2730)。
图15A和15B示出了根据本发明处理切片的方法。参照图15A，图像500的一部分包括两个矩形区域502和503和一背景区域504。这两个矩形区域502和503互相重叠。而且，两个矩形区域502和503和背景区域504由多个独立的切片组成。
将两个矩形区域502和503中的较小的矩形区域502完全包括在较大的矩形区域503中。在这种情况下，较大的矩形区域503表示没有与较小的矩形区域(有阴影的部分)502重叠的一部分，从该部分中排除较小的矩形区域502(从较大的矩形区域503中排除有阴影部分的区域)。在这种情况下，较小的矩形区域502包括用户认为在图像500的图片中较重要的区域，即评价区(ROI)，且将较大的矩形区域503用作放在ROI501和背景区504之间的插入区。这里，包括ROI501的较小的矩形区域和用作插入区的较大的矩形区域503，使用左上位置信息520和510和右下位置信息521和511来表示每个矩形区域的位置和大小的信息。如上所述，这两个矩形区域502和503以及背景区域504包括多个独立的切片且在切片单元中对其进行编码和解码。而且，当对示出在图15A中的图像进行解码和编码时，优选地，按照较小矩形区域502、较大矩形区域503、和背景区域504的顺序对图像进行编码，并且可以通过根据编码的矩形区域的顺序分配区域号来识别区域。例如，如图15A所示，可以将区域id＝0的号分配给最先编码的矩形区域502，且将区域id＝1的号分配给下一个编码的矩形区域503，而将id＝2分配给背景区域504。
同样地，在ROI501和背景区504之间设置插入区503，以便有效地减少在ROI和背景区之间的边界的出现。
这里，可对构成较小的矩形区域502的多个切片独立进行编码。因此，当不需要对整个图像进行解码时，仅对构成包括ROI的较小矩形区域502的切片进行编码。在这种情况下，从较小的矩形区域502中恢复的图像变为画中画(PIP)。将从较大的矩形区域503中恢复的图像增加到从较小的矩形区域502中恢复的图像中，并构成另一个较大的PIP。因此PIP可以逐步地构建作为在一部分图像中的矩形区域的号，即可从较小的图像到较大的图像来表示。
在图15B中，图像600的一部分包括三个矩形区域603、604和605以及背景区606。两个矩形区域603和604没有互相重叠而重叠在另一个矩形区域605中。而且，这三个矩形区域603、604和605以及背景区606包括多个独立的切片。
参照图15B，两个矩形区域603和604中的每一个包括不同的ROI601和602，这两个不同的ROI是用户认为在图像600的切片中的较重要区域。这里，包括ROI601和602的较小的矩形区域603和604和用作插入区的较大的矩形区域605使用左上位置信息630、620和610和右下位置信息631、621和611来表示有关每个矩形区域的位置和大小的信息。如上所述，这三个矩形区域603、604和605以及背景区域606由多个独立的切片组成且在切片单元中对其进行编码和解码。而且，当对示出在图15B中的图像进行解码和编码时，优选地，按照较小矩形区域603和604、较大矩形区域605、和背景区域606的顺序对图像编码，且通过根据编码的矩形区域的顺序分配区域号来识别区域。例如，如图15B所示，可以将区域id＝0的号分配给最先编码的矩形区域603，且将区域id＝1的号分配给下一个编码的矩形区域604，将区域id＝3的号分配给下一个编码的较大的矩形区域605，而将id＝4分配给背景区域606。
同样地，在ROI601和602以及背景区606之间设置插入区605，以便有效地减少在ROI和背景区之间的边界的出现。
这样，ROI编码或PIP编码通过使用切片结构能有效地执行，其中矩形区域的里面是ROI，而矩形区域的外边是背景区域。特别地，如上所述，几个矩形区域被互相重叠，以便减少在区域之间的边界且能支持具有各种尺寸的PIP。此外，对包括ROI的切片进行编码使得对误差有更强作用以便可在具有误差的传输环境中获得较好的主观图像质量。
图16示出了将根据本发明的编码方法应用到实际图像中的情况与将常规编码方法应用到实际图像中的情况的主观图像质量的比较。参照图16，左列表示使用常规编码方法的主观图像质量，而右列表示使用根据本发明的编码方法的主观图像质量，示出了20％的分组有损率的结果。在图16中，注意的是提高了评价区(ROI)的图像质量从而提高了整个主观图像质量。而且，ROI更加受到保护而免于误差以便提高整个主观图像质量。
图17示出了将根据本发明的编码方法应用到实际图像中的情况与将常规编码方法应用到实际图像中的情况的客观图像质量的比较。参照图17，左列表示在整个图像中的PSNR，且右列表示在评价区(ROI)中的PSNR。在图17中，应注意的是使用根据本发明的编码方法的整个图像中和ROI中的PSNR比使用常规的编码方法改善了。
此外，本发明可作为在计算机可读取的记录介质上的计算机可读取的代码来实现。计算机可读取的记录介质包括各种记录装置，在这些记录装置上可存储计算机可读取的数据。计算机可读取的记录介质包括ROM、RAM、CD-ROM、磁带、软磁盘和光学数据存储装置，且进一步包括载波(即在因特网上传输)。将计算机可读取的存储介质安装在与网络连接的计算机系统上，因此能以分散的方式存储和执行计算机可读取的代码。
如上所述，根据本发明的考虑人类视觉特征的图像编码方法和装置，将景象分割成评价区(ROI)和背景区，且执行对图像质量分布的建模以便在ROI和背景区之间的图像质量的差异不是快速的，由此提高了图像质量。此外，ROI编码可通过使用矩形区域而有效地执行，对每个区域在切片单元中进行独立地编码和解码。特别地，矩形区域彼此互相重叠以便有效地防止了在ROI和背景区之间的边界的出现，由此提高了主观图像质量。进一步，不需要迭代调整每个区域的量化参数，以便符合位的给定数量，因此不需要较大的计算量。
虽然已经参照本发明优选实施例示出并说明了本发明，但是可以理解的是，在没有背离通过所附权利要求限定的本发明的实质和范围的情况下，本领域普通技术人员可以在形式和细节上对本发明做出各种改变。

Claims (64)

1、一种图像编码方法，包括：
(a)对在景象单元中的输入图像的图像质量分布进行建模以便使在景象单元中输入的图像的质量从评价区到背景区逐渐降低；
(b)根据该图像质量分布的建模结果确定构成一景象的每个区域的量化参数；
(c)根据该量化参数量化图像数据；和
(d)对该量化的图像数据的熵进行编码。
2、根据权利要求1的方法，其中该量化的图像数据是一图像，在该图像中对输入的图像进行预测编码和变换编码。
3、根据权利要求1的方法，其中在(a)中执行的对图像质量分布的建模具有高斯分布，该分布中在评价区的中心获得最好的图像质量，且图像质量在背景区中逐渐降低。
4、根据权利要求1的方法，其中在(a)中执行的对图像质量分布的建模中，将预定区域集中设定在评价区的中心，并确定一量化参数以便在评价区的中心获得最好的图像质量且每个区域的图像质量在背景区中降低。
5、根据权利要求4的方法，其中根据(b)中执行的图像质量变化的量化参数是线性变化的。
6、根据权利要求4的方法，其中根据在(b)中执行的图像质量变化的量化参数是非线性变化的。
7、一种记录介质，在该记录介质上，根据权利要求1所述的图像编码方法被记录为可通过计算机执行的程序代码。
8、一种图像编码装置，包括：
一图像质量建模单元，对在景象单元中的输入图像的图像质量分布进行建模以便在景象单元中输入的图像的质量从评价区到背景区逐渐降低，且根据图像质量分布的建模结果确定构成一景象的每个区域的量化参数；
一自适应量化单元，用于根据由图像质量建模单元确定的量化参数来量化图像数据；和
一熵编码单元，用于对通过自适应量化单元量化的图像数据的熵进行编码。
9、根据权利要求8的装置，其中该图像数据是一图像，在该图像中对输入的图像进行预测编码和变换编码。
10、根据权利要求8的装置，其中该图像质量建模单元确定量化参数以便使图像质量分布具有高斯分布。
11、根据权利要求8的装置，其中该图像质量建模单元设置一预定区域，该预定区域集中在每个景象的评价区的中心，并确定量化参数以便在评价区的中心获得最好的图像质量且每个区域的图像质量在背景区中降低。
12、根据权利要求11的装置，其中根据图像质量变化的量化参数是线性变化的。
13、根据权利要求11的装置，其中根据图像质量变化的量化参数是非线性变化的。
14、一种图像解码方法，包括：
(a)解码图像数据，该图像数据包括每个区域的位置和大小信息以及在一接收位流中一量化参数的值；
(b)使用每个区域的位置和大小信息以及在(a)中恢复的一量化参数的值来确定每个区域的量化参数的值，以便使图像质量从评价区到背景区逐渐降低；
(c)使用量化参数的值对解码的图像数据进行逆量化；和
(d)根据每个区域与在(a)中恢复的每个区域的位置值相符的相应位置，为每个区域增加恢复的图像并构建一景象。
15、根据权利要求14的方法，进一步包括对逆量化图像执行逆变换并补偿预测的信息。
16、根据权利14的方法，其中在(b)中，确定量化参数以便使图像质量分布具有高斯分布，该分布中在评价区的中心获得最好的图像质量且图像质量在背景区中逐渐降低。
17、根据权利要求14的方法，其中在(b)中，将预定区域集中设置在评价区的中心，且确定量化参数以便在评价区的中心获得最好的图像质量并且每个区域的图像质量在背景区中逐渐降低。
18、根据权利要求17的方法，其中量化参数的值相对于图像质量和位的数量是线性变化的。
19、根据权利要求17的方法，其中量化参数的值相对于图像质量和位的数量是非线性变化的。
20、一种记录介质，在该记录介质上，根据权利要求14的图像解码方法被记录为通过计算机可执行的程序代码。
21、一种图像解码装置，包括：
一熵解码单元，用于对图像数据的熵进行解码，该图像数据包括每个区域的位置和大小信息以及在一接收位流中的量化参数的值；
一图像质量建模单元，使用每个区域的位置和大小信息以及通过熵解码单元恢复的量化参数的值来确定量化参数，以便图像质量从评价区到背景区逐渐降低；
一自适应逆量化单元，根据由图像质量建模单元确定的每个区域的量化参数的值，对通过熵解码单元提供的图像数据进行逆量化；和
一图像构建单元，根据与由熵解码单元提供的每个区域的位置的值相符的相应位置，为每个区域增加恢复的图像并构建一景象。
22、根据权利要求21的装置，进一步包括一图像恢复单元，对通过自适应逆量化单元恢复的图像执行逆变换，补偿预测信息并恢复该图像。
23、根据权利要求21的装置，其中通过图像模拟单元确定的每个区域的量化参数的值被确定以便使图像质量分布具有高斯分布，该分布中在评价区的中心获得最好的图像质量且图像质量在背景区中逐渐降低。
24、根据权利要求21的装置，其中通过图像模拟单元确定的每个区域的量化参数的值被确定以便将一评价区、一插入区和一背景区集中设置在评价区的中心且图像质量从背景区到评价区增加。
25、根据权利要求24的装置，其中在插入区中的量化参数的值相对于图像质量和位的数量是线性变化的。
26、根据权利要求24的装置，其中在插入区中的量化参数的值相对于图像质量和位的数量是非线性变化的。
27、一种图像编码装置，包括：
一切片建模单元，将每个图像分割成至少一个独立的矩形切片；
一图片首部编码单元，将通过切片建模单元分割的切片的位置和大小信息连同其他信息一起编码成一图片首部；和
一切片编码单元，通过参照图片首部信息，对各切片单元中的图像进行编码。
28、根据权利要求27的装置，其中切片建模单元设置一包括评价区的内矩形区域和包括该内矩形区域的一外矩形区域，将排除外矩形区域的区域设置为一背景区，并将该内矩形区域、在该内矩形区域和该外矩形区域之间的一区域和背景区分割成至少一个独立的切片。
29、根据权利要求28的装置，其中该外矩形区域是一插入的插入区，以便使在该内矩形区域和该背景区之间不出现边界。
30、根据权利要求28的装置，其中该切片编码单元使用构建该内矩形区域的切片设置具有小尺寸的画中画(PIP)，并使用构建该内矩形区域的该切片和构建在该内矩形区域和该外矩形区域之间区域的切片设置另一个画中画。
31、根据权利要求27的装置，其中切片建模单元：设置多个内矩形区域，每个内矩形区域包括多个评价区；设置包括该多个内矩形区域的一外矩形区域；将排除外矩形区域的一区域设置为一背景区，并将该多个内矩形区域、在该多个内矩形区域和该外矩形区域之间的区域以及背景区分割成至少一个独立的切片。
32、根据权利要求31的装置，其中外矩形区域是一插入的插入区以便使在该多个内矩形区域和该背景区之间不出现边界。
33、根据权利要求27的装置，其中该切片编码单元包括：
一空间/时间预测编码部分，对在切片单元中的图像执行空间/时间预测编码；
一变换和量化部分，对通过空间/时间预测编码部分预测编码的信息执行预定的变换和量化；和
一熵编码部分，对通过变换和量化部分获得的信息的熵进行编码。
34、一种图像解码装置，包括：
一图片首部解码单元，对在一位流中的图片首部进行解码；
一切片构建单元，使用图片首部信息中的切片的位置和大小信息构建切片；
一切片解码单元，通过参照图片首部，对切片单元的图像进行解码；和
一图像构建单元，通过参照由切片构建单元获得的切片的位置和大小信息，将通过切片解码单元恢复的切片单元的图像构建为图像的一部分。
35、根据权利要求34的装置，其中该切片构建单元：设置包括一评价区的一内矩形区域、一包括该内矩形区域的外矩形区域、一背景区，该背景区包括通过参照图片首部排除该外矩形区域的一区域；并将该内矩形区域、在该内矩形区域和该外矩形区域之间的区域和该背景区分割成至少一个独立的切片。
36、根据权利要求35的装置，其中该外矩形区域是一插入的插入区，以便使在内矩形区和背景区之间不出现边界。
37、根据权利要求35的装置，其中该切片解码单元使用构建该内矩形区域的切片构建具有小尺寸的画中画(PIP)，并使用构建该内矩形区域的切片和构建该内矩形区域和该外矩形区域之间的区域的切片来构建另一个画中画。
38、根据权利要求34的装置，其中该切片建模单元：设置包括多个评价区的多个内矩形区域、包括该多个内矩形区域的一外矩形区域、一背景区，该背景区包括通过参照图片首部排除该外矩形区域的一区域；并将该多个内矩形区域、在该多个内矩形区域和该外矩形区域之间的区域以及背景区分割成至少一个独立的切片。
39、根据权利要求38的装置，其中该外矩形区域是一插入的插入区，以便使在该多个内矩形区域和背景区之间不出现边界。
40、根据权利要求34的装置，其中该切片解码单元包括：
一熵解码部分，用于对位流的熵进行解码；
一逆量化和逆变换部分，对通过熵解码部分解码的信息执行逆量化和逆变换；和
一图像恢复部分，对通过逆量化和逆变换部分获得的信息进行空间/时间预测补偿并恢复在切片单元中的图像。
41、一种图像编码的方法，包括：
(a)设置一部分图像中切片的位置和大小；
(b)将在(a)中设置的切片的位置和大小信息连同其他信息一起编码为一图片首部；和
(c)通过参照在(b)中编码的图片首部信息，对切片单元中的图像进行编码。
42、根据权利要求41的方法，其中在(a)中，设置包括一评价区的一内矩形区域，设置包括该内矩形区域的一外矩形区域，将排除该外矩形区域的区域设置为一背景区，并将该内矩形区域、在该内矩形区域和该外矩形区域之间一区域以及背景区分割成至少一个独立的切片。
43、根据权利要求42的方法，其中该外矩形区域是一插入的插入区，以便使该内矩形区域和该背景区之间不出现边界。
44、根据权利要求42的方法，其中在(c)中，使用构建该内矩形区域的切片设置具有小尺寸的画中画(PIP)，并使用构建该内矩形区域的切片和构建在该内矩形区域和该外矩形区域之间的区域的切片设置另一个画中画。
45、根据权利要求41的方法，其中在(a)中，设置包括多个评价区的多个内矩形区域，设置包括该多个内矩形区域的一外矩形区域，将排除该外矩形区域的区域设置为一背景区，并将该多个内矩形区域、在该多个内矩形区域和该外矩形区域之间的区域以及该背景区分割成至少一个独立的切片。
46、根据权利要求45的方法，其中该外矩形区域是一插入的插入区，以便使在该多个内矩形区域和该背景区之间不出现边界。
47、根据权利要求41的方法，其中(c)包括：
(c1)对在切片单元中的图像进行空间/时间预测编码；
(c2)对在(c1)中预测编码的信息执行预定变换和量化；
(c3)对在(c2)中获得的信息的熵进行编码。
48、一种记录介质，在该记录介质上，根据权利要求41的图像编码方法记录为一通过计算机可执行的程序代码。
49、一种图像解码方法，包括：
(a)对在一位流中的图片首部进行解码；
(b)使用包括(a)中解码的图片首部的切片的位置和大小信息来构建切片；
(c)通过参照在(a)中解码的图片首部，对在切片单元中的图像进行解码；
(d)通过参照切片的位置和大小信息，将在(c)中解码的切片单元中的图像构建为一部分图像。
50、根据权利要求49的方法，其中在(b)中，通过参照图片首部，设置包括一评价区的一内矩形区域、包括该内矩形区域的一外矩形区域、包括将该外矩形区域排除的区域的一背景区，并将该内矩形区域、在该内矩形区域和该外矩形区域之间的区域以及该背景区分割成至少一个独立的切片。
51、根据权利要求50的方法，其中该外矩形区域是一插入的插入区，以便使在内矩形区域和背景区之间不出现边界。
52、根据权利要求50的方法，其中在(c)中，使用构建该内矩形区域的切片设置具有小尺寸的画中画(PIP)，并使用构建该内矩形区域的切片和构建在该内矩形区域和该外矩形区域之间的区域的切片来设置另一个画中画。
53、根据权利要求49的方法，其中在(b)中，通过参照图片首部，设置包括多个评价区的多个内矩形区域、包括该多个内矩形区域的一外矩形区域、包括将该外矩形区域排除的区域的一背景区，并将该多个内矩形区域、在该多个内矩形区域和该外矩形区域之间的区域以及该背景区分割成至少一个独立的切片。
54、根据权利要求53的方法，其中该外矩形区域是一插入的插入区，以便使在该多个内矩形区域和背景区之间不出现边界。
55、根据权利要求49的方法，其中(c)包括：
(c1)对位流中的熵进行解码；
(c2)对在(c1)中解码的信息执行逆量化和逆变换；和
(c3)对在(c2)中获得的信息进行空间/时间预测补偿并恢复在切片单元中的图像。
56、一种记录介质，在该记录介质上，将根据权利要求49的图像解码方法记录为通过计算机可执行的程序代码。
57、一种图像编码方法，其中将一图像分割成具有预定大小的切片单元并对其进行编码，该方法包括：
限定多个矩形区域的位置和大小信息，其中评价区包括在该图像中且一较大的矩形包括一较小的矩形；
对包括在多个矩形区域中最小的内矩形区域中的所有切片进行编码；
对排除该内矩形区域的外矩形区域没有与较小的内矩形重叠的切片进行编码；
将没有包括在最外边的外矩形区域的区域限定为一背景区并对包括在背景区中的切片进行编码。
58、根据权利要求57的方法，其中包括评价区的多个矩形区域的每个的位置和大小通过每个矩形的左上边缘和右下边缘位置来表示。
59、据权利要求57的方法，其中将具有预定顺序的固有数字分配给包括评价区和背景区的多个矩形区域。
60、一种记录介质，在该记录介质上，将根据权利要求57所述的图像编码方法记录为通过计算机可执行的程序代码。
61、一种图像解码方法，其中将一图像分割成具有预定大小的切片单元并对其进行编码，将该图像分割成一背景区和一评价区，并将该图像在位流中进行解码，该位流通过多个矩形区域来限定，这多个矩形区域中，将评价区包括在该图像中且一较大的矩形包括一较小的矩形，该方法包括：
从位流中提取包括评价区的多个矩形区域的每个的位置和大小的信息；
对在多个矩形区域中包括在最小的内矩形区域中的所有切片进行解码；
仅对在其中排除该内矩形的外矩形没有与较小的内矩形重叠的切片进行解码；和
对没有包括在多个矩形区域中的背景区中的所有切片进行解码。
62、根据权利要求61的方法，其中从位流中提取位于在多个矩形区域每一个的左上和右下边缘的切片的信息以便限定多个矩形区域的每个的位置和大小。
63、根据权利要求61的方法，其中限定该位流以便将具有预定顺序的固有数字分配给包括该评价区和该背景区的该多个矩形区域。
64、一种记录介质，在该记录介质上，将根据权利要求61的图像解码方法记录为通过计算机可执行的程序代码。
CNB031075029A 2002-01-05 2003-01-05 考虑人类视觉特征的图像编码和解码方法及装置 Expired - Lifetime CN1250008C (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
KR1020020000602A KR100624404B1 (ko) 2002-01-05 2002-01-05 사람의 시각적 특성을 고려한 적응적 부호화 방법 및 장치
KR602/2002 2002-01-05
KR602/02 2002-01-05
KR51883/02 2002-08-30
KR10-2002-0051883A KR100528324B1 (ko) 2002-08-30 2002-08-30 겹치는 사각 슬라이스 구조를 이용한 영상 부호화 및 복호화 장치 및 방법
KR51883/2002 2002-08-30

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN2006100067204A Division CN1809166B (zh) 2002-01-05 2003-01-05 图像编码和解码装置及其方法

Publications (2)

Publication Number Publication Date
CN1437408A true CN1437408A (zh) 2003-08-20
CN1250008C CN1250008C (zh) 2006-04-05

Family

ID=36261837

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB031075029A Expired - Lifetime CN1250008C (zh) 2002-01-05 2003-01-05 考虑人类视觉特征的图像编码和解码方法及装置

Country Status (4)

Country Link
US (29) US7277484B2 (zh)
JP (6) JP4488679B2 (zh)
CN (1) CN1250008C (zh)
DE (1) DE10300048B4 (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100366091C (zh) * 2004-06-24 2008-01-30 华为技术有限公司 一种视频压缩方法
CN101404778B (zh) * 2008-07-16 2011-01-19 河北师范大学 综合的无参考视频质量评价方法
CN101406064B (zh) * 2006-04-03 2011-10-26 三星电子株式会社 量化和反量化输入信号的方法和设备以及对输入信号编码和解码的方法和设备
CN102595131A (zh) * 2004-06-18 2012-07-18 汤姆逊许可公司 用于对图像块的视频信号数据进行编码的编码器
US8290057B2 (en) 2005-02-18 2012-10-16 Mediatek Incorporation Method of decoding a digital video sequence and related apparatus
CN103118254A (zh) * 2005-09-26 2013-05-22 三菱电机株式会社 运动图像编码装置以及运动图像译码装置
CN104735464A (zh) * 2015-03-31 2015-06-24 华为技术有限公司 一种全景视频交互传输方法、服务器和客户端
CN106095357A (zh) * 2011-12-06 2016-11-09 杜比实验室特许公司 改进不同显示能力之间基于感知照度非线性的图像数据交换的装置和方法
CN107846576A (zh) * 2017-09-30 2018-03-27 北京大学 用于视觉特征数据编解码的方法及系统
CN109905748A (zh) * 2013-09-20 2019-06-18 松下电器（美国）知识产权公司 图像编码方法及装置、图像解码方法及装置
US10621952B2 (en) 2011-12-06 2020-04-14 Dolby Laboratories Licensing Corporation Perceptual luminance nonlinearity-based image data exchange across different display capabilities

Families Citing this family (70)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1655620B (zh) 2004-02-09 2010-09-22 三洋电机株式会社 图像显示装置
US8855059B2 (en) 2004-05-13 2014-10-07 Qualcomm Incorporated Method and apparatus for allocation of information to channels of a communication system
JP4189358B2 (ja) 2004-06-17 2008-12-03 株式会社東芝 画像符号化装置及び方法
WO2005125215A1 (ja) * 2004-06-18 2005-12-29 Fujitsu Limited 画像データ符号化装置、および符号化方法
JP2006014121A (ja) * 2004-06-29 2006-01-12 Sanyo Electric Co Ltd 画像符号化方法、画像符号化装置および撮像装置
US20060062478A1 (en) * 2004-08-16 2006-03-23 Grandeye, Ltd., Region-sensitive compression of digital video
EP1585327A1 (de) * 2004-10-02 2005-10-12 Siemens Schweiz AG Verfahren zur Datenreduktion bei Videoübertragung eines Hauptbildes
CN101147174B (zh) * 2004-10-15 2011-06-08 微软公司 用于管理图像数据的传送和/或存储的系统和方法
JP2006129248A (ja) * 2004-10-29 2006-05-18 Sanyo Electric Co Ltd 画像符号化方法および装置、ならびに画像復号方法および装置
JP4656912B2 (ja) 2004-10-29 2011-03-23 三洋電機株式会社 画像符号化装置
CN101080931B (zh) * 2004-12-14 2010-06-16 三星电子株式会社 用于对图像编码和解码的设备及其方法
JP4150730B2 (ja) * 2005-02-14 2008-09-17 株式会社東芝 画像符号化装置、および画像符号化方法
US7894531B1 (en) * 2005-02-15 2011-02-22 Grandeye Ltd. Method of compression for wide angle digital video
US8768084B2 (en) * 2005-03-01 2014-07-01 Qualcomm Incorporated Region-of-interest coding in video telephony using RHO domain bit allocation
US8693537B2 (en) * 2005-03-01 2014-04-08 Qualcomm Incorporated Region-of-interest coding with background skipping for video telephony
US7724972B2 (en) * 2005-03-01 2010-05-25 Qualcomm Incorporated Quality metric-biased region-of-interest coding for video telephony
TWI256776B (en) * 2005-10-25 2006-06-11 Novatek Microelectronics Corp Method and apparatus for calculating cost functions and the interpolation method thereof
US7711199B2 (en) * 2006-03-16 2010-05-04 Samsung Electronics Co., Ltd. Method for estimating quantization factor of compressed digital image
GB2438006A (en) * 2006-05-09 2007-11-14 Tandberg Television Asa Adaptive quantisation for border processing
WO2008057285A2 (en) * 2006-10-27 2008-05-15 Vidient Systems, Inc. An apparatus for image capture with automatic and manual field of interest processing with a multi-resolution camera
JP2008118533A (ja) * 2006-11-07 2008-05-22 Toshiba Corp 復号化器、方法およびプログラム
US8315466B2 (en) * 2006-12-22 2012-11-20 Qualcomm Incorporated Decoder-side region of interest video processing
US20080165843A1 (en) * 2007-01-03 2008-07-10 Human Monitoring Ltd. Architecture for image compression in a video hardware
US8019167B2 (en) * 2007-01-03 2011-09-13 Human Monitoring Ltd. Compressing high resolution images in a low resolution video
US20080285645A1 (en) * 2007-05-17 2008-11-20 Tandberg Television Asa Adaptive border processing
JP4841504B2 (ja) * 2007-05-31 2011-12-21 三洋電機株式会社 画像符号化装置および方法
TWI370440B (en) * 2007-07-05 2012-08-11 Novatek Microelectronics Corp Image-information processing method and image display apparatus
US20100278236A1 (en) * 2008-01-17 2010-11-04 Hua Yang Reduced video flicker
FR2929797A1 (fr) * 2008-04-03 2009-10-09 Thomson Licensing Sas Procede et dispositif de codage d'une sequence d'images
US8239896B2 (en) * 2008-05-28 2012-08-07 Sony Computer Entertainment America Inc. Integration of control data into digital broadcast content for access to ancillary information
JP5063548B2 (ja) * 2008-09-25 2012-10-31 キヤノン株式会社 符号化装置および符号化方法
US9113169B2 (en) * 2009-05-07 2015-08-18 Qualcomm Incorporated Video encoding with temporally constrained spatial dependency for localized decoding
US8724707B2 (en) * 2009-05-07 2014-05-13 Qualcomm Incorporated Video decoding using temporally constrained spatial dependency
JP5303399B2 (ja) * 2009-08-18 2013-10-02 日本放送協会 動画像ビット深度削減装置及びプログラム
US9516335B2 (en) 2009-12-24 2016-12-06 Intel Corporation Wireless display encoder architecture
KR101828625B1 (ko) * 2010-06-04 2018-02-12 소니 주식회사 화상 처리 장치 및 방법
JP2010206847A (ja) * 2010-06-23 2010-09-16 Sanyo Electric Co Ltd 画像処理装置
WO2012050808A1 (en) * 2010-09-29 2012-04-19 Dolby Laboratories Licensing Corporation Region based asymmetric coding for 3d video compression
JP5748463B2 (ja) * 2010-12-02 2015-07-15 キヤノン株式会社 符号化装置およびプログラム
US20120170648A1 (en) * 2011-01-05 2012-07-05 Qualcomm Incorporated Frame splitting in video coding
US9247203B2 (en) * 2011-04-11 2016-01-26 Intel Corporation Object of interest based image processing
US9066070B2 (en) 2011-04-25 2015-06-23 Dolby Laboratories Licensing Corporation Non-linear VDR residual quantizer
HUE052633T2 (hu) * 2011-06-30 2021-05-28 Jvc Kenwood Corp Képdekódoló készülék, képdekódoló eljárás és képdekódoló program
FR2978639B1 (fr) * 2011-07-29 2015-09-25 Cassidian Sas Procedes de compression et de decompression d'images animees
US8761543B2 (en) * 2011-08-30 2014-06-24 Microsoft Corporation Image processing using bounds adjustment
JP2012085350A (ja) * 2011-12-22 2012-04-26 Fujifilm Corp 画像処理装置、画像処理方法、及びプログラム
US10205953B2 (en) * 2012-01-26 2019-02-12 Apple Inc. Object detection informed encoding
JP5973766B2 (ja) * 2012-03-30 2016-08-23 キヤノン株式会社 画像処理装置
US9756327B2 (en) * 2012-04-03 2017-09-05 Qualcomm Incorporated Quantization matrix and deblocking filter adjustments for video coding
JP5866256B2 (ja) * 2012-05-28 2016-02-17 富士フイルム株式会社 印刷管理装置及び方法、印刷管理システム、印刷システム、情報処理装置並びにプログラム
JPWO2014002900A1 (ja) * 2012-06-29 2016-05-30 ソニー株式会社 画像処理装置および画像処理方法
US11425395B2 (en) 2013-08-20 2022-08-23 Google Llc Encoding and decoding using tiling
CN104270638A (zh) * 2014-07-29 2015-01-07 武汉飞脉科技有限责任公司 一种ct影像感兴趣区域压缩与质量评估方法
US9749649B2 (en) * 2014-08-27 2017-08-29 Fingram Co., Ltd. Method and system for generating and displaying thumbnail images from original images
EP3029937B1 (en) 2014-12-03 2016-11-16 Axis AB Method and encoder for video encoding of a sequence of frames
US20160173897A1 (en) * 2014-12-10 2016-06-16 Haihua Wu High Parallelism Dependency Pattern for GPU Based Deblock
US9860535B2 (en) * 2015-05-20 2018-01-02 Integrated Device Technology, Inc. Method for time-dependent visual quality encoding for broadcast services
CN105611378B (zh) * 2015-12-28 2018-12-18 上海集成电路研发中心有限公司 一种基于fpga来扩展dsp处理图像数据位宽的方法
CN106162177B (zh) * 2016-07-08 2018-11-09 腾讯科技（深圳）有限公司 视频编码方法和装置
JP6945632B2 (ja) 2016-12-29 2021-10-13 株式会社ソニー・インタラクティブエンタテインメント 視線追跡を用いたｖｒ、低遅延、無線ｈｍｄビデオストリーミングのためのフォービエイテッドビデオリンク
US10121337B2 (en) * 2016-12-30 2018-11-06 Axis Ab Gaze controlled bit rate
US11172208B2 (en) * 2017-02-28 2021-11-09 Nokia Technologies Oy Method and apparatus for improving the visual quality of viewport-based omnidirectional video streaming
CN108668130A (zh) * 2017-03-31 2018-10-16 晨星半导体股份有限公司 重组影像文件的方法
JP6985609B2 (ja) * 2018-05-21 2021-12-22 日本電信電話株式会社 符号化装置、画像補間システム及び符号化プログラム
US11570440B2 (en) * 2018-11-21 2023-01-31 Electronics And Telecommunications Research Institute Image encoding/decoding method and apparatus, and recording medium storing bitstream
US10880354B2 (en) * 2018-11-28 2020-12-29 Netflix, Inc. Techniques for encoding a media title while constraining quality variations
WO2020150374A1 (en) 2019-01-15 2020-07-23 More Than Halfway, L.L.C. Encoding and decoding visual information
CN109951706B (zh) * 2019-04-22 2021-01-01 湖南国科微电子股份有限公司 一种视频编码方法、装置及编码器
CN111935484B (zh) * 2020-09-28 2021-01-19 广州佰锐网络科技有限公司 一种视频帧压缩编码方法及装置
CN113630599B (zh) * 2021-07-08 2023-09-08 微梦创科网络科技（中国）有限公司 一种基于roi的视频码率控制方法及系统

Family Cites Families (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4468074A (en) * 1978-05-22 1984-08-28 Rogers Corporation Solderless connection technique and apparatus
US4645280A (en) * 1985-08-08 1987-02-24 Rogers Corporation Solderless connection technique between data/servo flex circuits and magnetic disc heads
JPS63263982A (ja) 1987-04-22 1988-10-31 Nec Corp 静止画像伝送装置
JPS6429074A (en) 1987-07-24 1989-01-31 Toshiba Corp Picture transmission system
JP2647929B2 (ja) 1988-10-28 1997-08-27 日本電信電話株式会社 ２地点間画像符号化方式
JPH03255792A (ja) * 1990-03-05 1991-11-14 Mitsubishi Electric Corp 画質制御装置
US6104863A (en) * 1990-08-17 2000-08-15 Samsung Electronics Co., Ltd. Video signal encoded with additional detail information
JPH04331592A (ja) * 1991-05-07 1992-11-19 Oki Electric Ind Co Ltd 動画像符号化装置
US5614952A (en) * 1994-10-11 1997-03-25 Hitachi America, Ltd. Digital video decoder for decoding digital high definition and/or digital standard definition television signals
AU5632394A (en) 1993-03-05 1994-09-08 Sony Corporation Apparatus and method for reproducing a prediction-encoded video signal
EP1069778A3 (en) * 1993-04-09 2004-10-20 Sony Corporation Picture encoding method, picture encoding apparatus and picture recording medium
GB2283876B (en) * 1993-11-09 1998-06-24 Matsushita Electric Ind Co Ltd Encoding and decoding code sequences and frames
US5537440A (en) 1994-01-07 1996-07-16 Motorola, Inc. Efficient transcoding device and method
JPH07322252A (ja) * 1994-05-23 1995-12-08 Canon Inc 画像符号化装置
US5828421A (en) * 1994-10-11 1998-10-27 Hitachi America, Ltd. Implementation efficient digital picture-in-picture decoding methods and apparatus
JP3086396B2 (ja) 1995-03-10 2000-09-11 シャープ株式会社 画像符号化装置及び画像復号装置
US5812787A (en) * 1995-06-30 1998-09-22 Intel Corporation Video coding scheme with foreground/background separation
US5745178A (en) * 1996-01-22 1998-04-28 Lucent Technologies Inc. Global rate control for model-assisted coding of low bit rate video
US5764803A (en) 1996-04-03 1998-06-09 Lucent Technologies Inc. Motion-adaptive modelling of scene content for very low bit rate model-assisted coding of video sequences
US5847771A (en) 1996-08-14 1998-12-08 Bell Atlantic Network Services, Inc. Digital entertainment terminal providing multiple digital pictures
US6097853A (en) 1996-09-11 2000-08-01 Da Vinci Systems, Inc. User definable windows for selecting image processing regions
US5844420A (en) * 1997-01-27 1998-12-01 Read-Rite Corporation Fixture for testing a head gimbal assembly employing a flex interconnect circuit
US5920359A (en) * 1997-05-19 1999-07-06 International Business Machines Corporation Video encoding method, system and computer program product for optimizing center of picture quality
US6516094B1 (en) 1997-07-11 2003-02-04 Matsushita Electric Industrial Co., Ltd. Digital image coding method and digital image decoding method
US5867208A (en) 1997-10-28 1999-02-02 Sun Microsystems, Inc. Encoding system and method for scrolling encoded MPEG stills in an interactive television application
US6178204B1 (en) 1998-03-30 2001-01-23 Intel Corporation Adaptive control of video encoder's bit allocation based on user-selected region-of-interest indication feedback from video decoder
US6256423B1 (en) * 1998-09-18 2001-07-03 Sarnoff Corporation Intra-frame quantizer selection for video compression
US6304295B1 (en) 1998-09-18 2001-10-16 Sarnoff Corporation Region-based refresh strategy for video compression
US6570922B1 (en) * 1998-11-24 2003-05-27 General Instrument Corporation Rate control for an MPEG transcoder without a priori knowledge of picture type
AU762996B2 (en) * 1999-02-09 2003-07-10 Motorola Australia Pty Ltd An image compression system and method of determining quantisation parameters therefor
US6493023B1 (en) * 1999-03-12 2002-12-10 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Method and apparatus for evaluating the visual quality of processed digital video sequences
US6675387B1 (en) 1999-04-06 2004-01-06 Liberate Technologies System and methods for preparing multimedia data using digital video data compression
US6634008B1 (en) 1999-06-20 2003-10-14 Fujitsu Limited Methodology server based integrated circuit design
US6263022B1 (en) 1999-07-06 2001-07-17 Philips Electronics North America Corp. System and method for fine granular scalable video with selective quality enhancement
KR100608036B1 (ko) 1999-08-27 2006-08-02 삼성전자주식회사 영상 데이터 세그먼테이션 방법 및 장치
US6937773B1 (en) 1999-10-20 2005-08-30 Canon Kabushiki Kaisha Image encoding method and apparatus
US6507618B1 (en) * 2000-04-25 2003-01-14 Hewlett-Packard Company Compressed video signal including independently coded regions
JP2002064709A (ja) * 2000-06-06 2002-02-28 Canon Inc 画像処理装置及びその方法とそのコンピュータプログラム及び記憶媒体
JP2002084540A (ja) 2000-06-28 2002-03-22 Canon Inc 画像処理装置、画像処理方法、電子カメラ、及び、プログラム
US6754270B1 (en) * 2000-09-29 2004-06-22 Lucent Technologies, Inc. Encoding high-definition video using overlapping panels
JP2002290843A (ja) 2001-03-26 2002-10-04 Olympus Optical Co Ltd 画像入力装置
JP2004530249A (ja) * 2001-06-08 2004-09-30 シーゲイト テクノロジー エルエルシー Ｚ軸導電性接着フィルムを使用したヘッド・ジンバル・アセンブリのプリント回路板への取付け
KR100643453B1 (ko) * 2001-11-17 2006-11-10 엘지전자 주식회사 오브젝트 기반 비트율 제어방법
KR100643454B1 (ko) * 2001-11-17 2006-11-10 엘지전자 주식회사 영상 데이터 전송 제어방법
US7386049B2 (en) * 2002-05-29 2008-06-10 Innovation Management Sciences, Llc Predictive interpolation of a video signal
US6873341B1 (en) 2002-11-04 2005-03-29 Silicon Image, Inc. Detection of video windows and graphics windows
US7286710B2 (en) * 2003-10-01 2007-10-23 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Coding of a syntax element contained in a pre-coded video signal
WO2006005221A1 (en) * 2004-07-09 2006-01-19 Sae Magnetics (H. K.) Ltd. “2-step contact” clamping fixture for the flexible print circuit on a head gimbal assembly
US9094681B1 (en) 2012-02-28 2015-07-28 Google Inc. Adaptive segmentation

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102595131A (zh) * 2004-06-18 2012-07-18 汤姆逊许可公司 用于对图像块的视频信号数据进行编码的编码器
CN102595131B (zh) * 2004-06-18 2015-02-04 汤姆逊许可公司 用于对图像块的视频信号数据进行编码的编码器
CN100366091C (zh) * 2004-06-24 2008-01-30 华为技术有限公司 一种视频压缩方法
US8290057B2 (en) 2005-02-18 2012-10-16 Mediatek Incorporation Method of decoding a digital video sequence and related apparatus
US8811493B2 (en) 2005-02-18 2014-08-19 Mediatek Incorporation Method of decoding a digital video sequence and related apparatus
CN103118254B (zh) * 2005-09-26 2016-01-20 三菱电机株式会社 运动图像编码装置以及运动图像译码装置
CN103118254A (zh) * 2005-09-26 2013-05-22 三菱电机株式会社 运动图像编码装置以及运动图像译码装置
CN101406064B (zh) * 2006-04-03 2011-10-26 三星电子株式会社 量化和反量化输入信号的方法和设备以及对输入信号编码和解码的方法和设备
CN101404778B (zh) * 2008-07-16 2011-01-19 河北师范大学 综合的无参考视频质量评价方法
CN106095358A (zh) * 2011-12-06 2016-11-09 杜比实验室特许公司 改进不同显示能力之间基于感知照度非线性的图像数据交换的装置和方法
CN106095358B (zh) * 2011-12-06 2019-05-14 杜比实验室特许公司 改进不同显示能力之间基于感知照度非线性的图像数据交换的装置和方法
CN106095356A (zh) * 2011-12-06 2016-11-09 杜比实验室特许公司 改进不同显示能力之间基于感知照度非线性的图像数据交换的装置和方法
US10957283B2 (en) 2011-12-06 2021-03-23 Dolby Laboratories Licensing Corporation Perceptual luminance nonlinearity-based image data exchange across different display capabilities
US11887560B2 (en) 2011-12-06 2024-01-30 Dolby Laboratories Licensing Corporation Perceptual luminance nonlinearity-based image data exchange across different display capabilities
CN106095357A (zh) * 2011-12-06 2016-11-09 杜比实验室特许公司 改进不同显示能力之间基于感知照度非线性的图像数据交换的装置和方法
CN106095356B (zh) * 2011-12-06 2019-05-14 杜比实验室特许公司 改进不同显示能力之间基于感知照度非线性的图像数据交换的装置和方法
US11587529B2 (en) 2011-12-06 2023-02-21 Dolby Laboratories Licensing Corporation Perceptual luminance nonlinearity-based image data exchange across different display capabilities
US10621952B2 (en) 2011-12-06 2020-04-14 Dolby Laboratories Licensing Corporation Perceptual luminance nonlinearity-based image data exchange across different display capabilities
US11600244B2 (en) 2011-12-06 2023-03-07 Dolby Laboratories Licensing Corporation Perceptual luminance nonlinearity-based image data exchange across different display capabilities
CN106095357B (zh) * 2011-12-06 2020-02-21 杜比实验室特许公司 改进不同显示能力之间基于感知照度非线性的图像数据交换的装置和方法
CN109905748A (zh) * 2013-09-20 2019-06-18 松下电器（美国）知识产权公司 图像编码方法及装置、图像解码方法及装置
CN109905748B (zh) * 2013-09-20 2022-05-10 松下电器（美国）知识产权公司 图像编码方法及装置、图像解码方法及装置
CN104735464A (zh) * 2015-03-31 2015-06-24 华为技术有限公司 一种全景视频交互传输方法、服务器和客户端
WO2019061836A1 (zh) * 2017-09-30 2019-04-04 北京大学 用于视觉特征数据编解码的方法及系统
US11490134B2 (en) 2017-09-30 2022-11-01 Peking University Method and system for codec of visual feature data
CN107846576B (zh) * 2017-09-30 2019-12-10 北京大学 用于视觉特征数据编解码的方法及系统
CN107846576A (zh) * 2017-09-30 2018-03-27 北京大学 用于视觉特征数据编解码的方法及系统

Also Published As

Publication number Publication date
US9774859B2 (en) 2017-09-26
US20100226586A1 (en) 2010-09-09
DE10300048B4 (de) 2005-05-12
US9800871B2 (en) 2017-10-24
US9807394B2 (en) 2017-10-31
US9781428B2 (en) 2017-10-03
US9843806B2 (en) 2017-12-12
US20030128882A1 (en) 2003-07-10
US20150281719A1 (en) 2015-10-01
US9774860B2 (en) 2017-09-26
US20150163522A1 (en) 2015-06-11
US8948268B2 (en) 2015-02-03
US20150288967A1 (en) 2015-10-08
US9106912B2 (en) 2015-08-11
JP4495743B2 (ja) 2010-07-07
US20150043654A1 (en) 2015-02-12
US20150172672A1 (en) 2015-06-18
US20070189394A1 (en) 2007-08-16
US8599928B2 (en) 2013-12-03
US20150281721A1 (en) 2015-10-01
US20150172674A1 (en) 2015-06-18
US9781430B2 (en) 2017-10-03
US20060093034A1 (en) 2006-05-04
US20060093035A1 (en) 2006-05-04
US8036280B2 (en) 2011-10-11
US20150281723A1 (en) 2015-10-01
CN1250008C (zh) 2006-04-05
US8599927B2 (en) 2013-12-03
US9781431B2 (en) 2017-10-03
US20070127567A1 (en) 2007-06-07
US20070195890A1 (en) 2007-08-23
US9774862B2 (en) 2017-09-26
JP2007228614A (ja) 2007-09-06
US8345771B2 (en) 2013-01-01
US9781425B2 (en) 2017-10-03
DE10300048A1 (de) 2003-08-14
JP5284920B2 (ja) 2013-09-11
US20160021372A1 (en) 2016-01-21
US8045621B2 (en) 2011-10-25
US20150288966A1 (en) 2015-10-08
US20150281722A1 (en) 2015-10-01
JP2008125118A (ja) 2008-05-29
US8345773B2 (en) 2013-01-01
US20150281718A1 (en) 2015-10-01
JP2003284071A (ja) 2003-10-03
US9774858B2 (en) 2017-09-26
US20150163489A1 (en) 2015-06-11
US20150172673A1 (en) 2015-06-18
US9781426B2 (en) 2017-10-03
JP4495702B2 (ja) 2010-07-07
US7277484B2 (en) 2007-10-02
US20150172659A1 (en) 2015-06-18
JP2007020199A (ja) 2007-01-25
US20150281694A1 (en) 2015-10-01
JP4488679B2 (ja) 2010-06-23
US9774861B2 (en) 2017-09-26
US9774857B2 (en) 2017-09-26
US9414075B2 (en) 2016-08-09
US20150156493A1 (en) 2015-06-04
US9781429B2 (en) 2017-10-03
US9848194B2 (en) 2017-12-19
JP4495701B2 (ja) 2010-07-07
US20070291838A1 (en) 2007-12-20
US20060114991A1 (en) 2006-06-01
US20150281720A1 (en) 2015-10-01
US8345772B2 (en) 2013-01-01
US20150172675A1 (en) 2015-06-18
JP2010011499A (ja) 2010-01-14
US20060093033A1 (en) 2006-05-04
US8599930B2 (en) 2013-12-03
JP2007020198A (ja) 2007-01-25
US9781432B2 (en) 2017-10-03

Similar Documents

Publication Publication Date Title
CN1250008C (zh) 考虑人类视觉特征的图像编码和解码方法及装置
CN108028919B (zh) 一种视频或者图像编解码的方法及装置
CN1303820C (zh) 基于质量的图像压缩
CN1230001C (zh) 过滤数字视频图像的方法和相关装置
EP1729520A2 (en) Apparatus and method for image encoding and decoding with non square macroblocks
CN101040532A (zh) 去块滤波器
EP1995971A1 (en) A method and device for realizing quantization in coding-decoding
TWI439138B (zh) 呈現影像圖框之非圖框邊緣區塊的強化壓縮
CN1206964A (zh) 图象编码方法及图象编码装置
CN1757240A (zh) 视频编码
CN1151662A (zh) 用于消除dct编码的振铃现象的后滤波器
CN102792695A (zh) 通过使用大变换单元对图像进行编码和解码的方法和设备
CN1695168A (zh) 视频信息编码方法和视频信息解码方法
CN1593064A (zh) 可配置的图形优化器
CN103563374A (zh) 图像处理设备及方法
CN101098473A (zh) 一种图像编码方法及装置
JP2010534015A (ja) 画像処理方法及び対応する電子装置
CN1085471C (zh) 图象
WO2008020672A1 (en) Apparatus for encoding and decoding image using adaptive dct coefficient scanning based on pixel similarity and method therefor
US20100034473A1 (en) Image processing apparatus, image processing method, and computer program product
CN1809166A (zh) 图像编码和解码装置及其方法
CN1246242A (zh) 用于从压缩图像数据恢复高频成分的改进的估算器
CN1211146A (zh) 图象压缩
CN1914926A (zh) 运动图像编码方法和设备以及运动图像解码方法和设备
CN1929609A (zh) 运动图像信号编码装置、运行图像信号编码方法以及计算机可读记录介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CX01 Expiry of patent term
CX01 Expiry of patent term

Granted publication date: 20060405