图像编码方法及图像编码装置

本发明涉及图像编码方法以及图像解码方法。

作为以往的图像编码方式，周知的有被称为H.26x的ITU-T标准或者被称为MPEG-x 的ISO/IEC标准(例如，参考非专利文献1)。

此外，作为新的标准正在讨论HEVC(High Efficiency Video Coding)方式(例如， 参考非专利文献2)。

(现有技术文献)

(非专利文献)

非专利文献1：ISO/IEC 14496-10「MPEG-4Part 10Advanced Video Coding」

非专利文献2：Joint Collaborative Team on Video Coding(JCT-VC)of ITU-T SG16WP3and ISO/IEC JTC1/SC29/WG117th Meeting∶Geneva,CH,21-30November,2011, JCTVC-G1103,“Working Draft 5of High Efficiency Video Coding”，http:// phenix.it-sudparis.eu/jct/doc_end_user/documents/7_Geneva/wg11/JCTVC-G1103- v2.zip

发明概要

发明要解决的问题

这样，在图像编码方法以及图像解码方法中，将1张图像分割为多个区域，并且对 被分割的区域进行并行处理。

于是本发明的目的在于提供一种能够简单地实现并行处理的图像编码方法以及 图像解码方法。

用于解决问题的手段

为了达成所述目的，本发明的一个方案涉及的图像编码方法，将流进行编码，包 括：第一生成步骤，生成分片限制信息，该分片限制信息示出针对将图片分割而得到的多个 分片中相邻的分片的分片边界的滤波处理是否有限制；第一存放步骤，将所述分片限制信 息存放到序列参数集；第二生成步骤，针对多个分片边界的每一个生成滤波信息，该滤波信 息示出针对所述分片边界是否执行滤波处理；以及第二存放步骤，将多个所述滤波信息存 放到图片参数集；所述第二生成步骤中，在所述分片限制信息示出所述滤波处理有限制的 情况下，生成示出相同的内容的所述多个滤波信息，该相同的内容是执行所述滤波处理和 不执行所述滤波处理中的任意一方。

另外，这些全体或具体的实施例，可以用系统、方法、集成电路、计算机程序或计算 机可读取的CD-ROM等记录介质来实现，也可以任意组合系统、方法、集成电路、计算机程序 以及记录介质来实现。

发明效果

本发明能够提供简单地实现并行处理的图像编码方法以及图像解码方法。

图1是表示实施例涉及的扫描顺序的一例的图。

图2是表示实施例涉及的扫描顺序的一例的图。

图3是表示实施例涉及的分片(tile)以及切片(slice)的分割例的图。

图4是表示实施例涉及的分片(tile)以及切片(slice)的分割例的图。

图5是表示实施例1涉及的解码处理的流程图。

图6是实施例1的比较例涉及的判断处理的流程图。

图7是实施例1涉及的判断处理的流程图。

图8是表示实施例1涉及的切片头的句法(syntax)的图。

图9是表示实施例1涉及的流的构成例的图。

图10是表示实施例1的比较例涉及的流的构成例的图。

图11是实施例1涉及的解码处理的流程图。

图12是表示实施例1涉及的图像解码装置的方框图。

图13是表示实施例2涉及的图像编码装置的方框图。

图14是实施例3的比较例涉及的解码处理的流程图。

图15是实施例3涉及的解码处理的流程图。

图16是表示实施例3涉及的序列参数集的句法的图。

图17是表示实施例3涉及的图片参数集的句法的图。

图18是表示实施例3涉及的标志的一例的图。

图19A是实施例3涉及的解码处理的流程图。

图19B是实施例3涉及的解码处理的流程图。

图19C是实施例3涉及的解码处理的流程图。

图19D是实施例3涉及的解码处理的流程图。

图20A是表示实施例4的比较例涉及的切片头的构成例的图。

图20B是表示实施例4涉及的切片头的构成例的图。

图21是实施例4涉及的解码处理的流程图。

图22是表示实施例5涉及的数据构成的概念图。

图23是实施例5涉及的编码以及解码处理的流程图。

图24是实施例6涉及的编码以及解码处理的流程图。

图25是实现内容分发服务的内容提供系统的全体构成图。

图26是数字广播用系统的全体构成图。

图27是表示电视机的构成例的方框图。

图28是表示作为激光盘的记录介质进行信息的读写的信息再生/记录部的构成例 的方框图。

图29是表示作为激光盘的记录介质的构成例的图。

图30A是表示便携式电话的一例的图。

图30B是表示便携式电话的构成例的方框图。

图31是表示多路复用数据的构成的图。

图32是表示在多路复用数据中各流怎样被多路复用的模式图。

图33是更加详细地表示在PES数据包列中视频流怎样被存储的图。

图34是表示在多路复用数据中的TS数据包和源数据包的构造的图。

图35是表示PMT的数据构成的图。

图36是表示多路复用数据信息的内部构成的图。

图37是表示流属性信息的内部构成的图。

图38是表示识别影像数据的步骤的图。

图39是表示实现各个实施例的运动图像编码方法及运动图像解码方法的集成电 路的构成例的方框图。

图40是表示切换驱动频率的构成的图。

图41是表示识别影像数据、切换驱动频率的步骤的图。

图42是表示使影像数据的标准与驱动频率相对应的一览表的一例的图。

图43A是表示将信号处理部的模块共享的构成的一例的图。

图43B是表示将信号处理部的模块共享的构成的其他例的图。

(成为本发明的基础的见解)

本发明者关于以往的技术发现了会产生以下的问题。

在被称为H.26x的ITU-T标准或者被称为MPEG-x的ISO/IEC标准中，1张图像信号以 图1示出的光栅扫描顺序被处理。此外，1张图像信号分割为被称为切片的多个单位。各切片 包含所述的光栅扫描顺序上连续的信号。而且，以切片单位，进行编码。

此外在HEVC方式中也可以考虑分片方式。该分片方式中，1张图像信号被分割为长 方形的多个单位(分片)。而且，按照该被分割的每个长方形，该长方形中包含的信号以光栅 扫描顺序进行处理(参考图2)。这个分片方式，能够以垂直方向分割画面，所以能够减少用 户线路存储器。

例如，如图3示出的例子中，用实线圈围的部分表示分片，用虚线圈围的部分表示 切片，该切片通过分割分片而得到。另外，图3是分片边界不跨过切片边界的例子，不过，如 图4所示有时分片边界跨过切片的内部。

然而，本发明者发现在所述方式中，对被分割为分片的区域分别进行并行处理时， 存在这样的课题，难以出作为并行处理对象的区域的开头的分片的开头部分。

更详细地说明，为了判断图像解码装置是否能够对解码对象的比特流进行并行处 理(并行解码)，就需要进行预处理。根据该预处理，处理时间增加，因而实现高速处理存在 困难。或者存在为了高速进行该预处理而需要增加电路规模的课题。

在本实施例中说明如下图像解码装置，该图像解码装置是能够进行并行解码处理 的装置，该图像解码装置能够高速判断解码对象的比特流是不是能够进行并行解码处理的 流，并且在能够进行并行解码处理的情况下，高速判断能够从哪个点分别进行并行解码处 理。

本实施例的一个方案涉及的图像编码方法，包括：限制信息生成步骤，生成分片限 制信息，并对该分片限制信息进行编码，该分片限制信息示出针对多个分片的处理是否有 限制，所述多个分片是分割了图片而获得的；以及决定步骤，在所述分片限制信息示出处理 有限制的情况下，根据示出针对多个分片边界中的一个分片边界是否执行滤波处理的滤波 信息，来决定针对所述多个分片边界是否执行滤波处理。

根据这个，能够按照每个分片边界切换滤波处理的执行/不执行。这样，该图像编 码方法能够简单地实现并行处理。

例如，在所述限制信息生成步骤中，按每个图片生成所述分片限制信息，并且对每 个图片的所述分片限制信息进行编码。

例如，所述图像编码方法还包括编码步骤，在所述编码步骤中，在所述分片限制信 息示出处理有限制的情况下，对示出对一个分片边界是否执行滤波处理的滤波信息进行编 码，并且跳过对如下信息的编码，该信息示出对所述多个分片边界中除了所述一个分片边 界以外的分片边界是否执行滤波处理。

例如，所述图像编码方法还包括编码步骤，在所述编码步骤中，在所述分片限制信 息示出处理有限制的情况下，将示出相同的内容的所述滤波信息与所述多个分片边界的每 一个相对应地进行编码。

此外，本实施例的一个方案涉及的图像解码方法，包括：限制信息解码步骤，对分 片限制信息进行解码，该分片限制信息示出针对多个分片的处理是否有限制，所述多个分 片是分割了图片而获得的；以及决定步骤，在所述分片限制信息示出处理有限制的情况下， 根据示出对多个分片边界中的一个分片边界是否执行滤波处理的滤波信息，来决定针对所 述多个分片边界是否执行滤波处理。

根据这个，能够按照每个分片边界切换滤波处理的执行/不执行。这样，该图像解 码方法能够简单地实现并行处理。

例如，在所述限制信息解码步骤中，对按每个图片而设置的所述分片限制信息进 行解码。

例如，所述图像解码方法还包括解码步骤，在所述解码步骤中，在所述分片限制信 息示出处理有限制的情况下，对示出对一个分片边界是否执行滤波处理的滤波信息进行解 码，并且跳过对如下信息的解码，该信息示出对所述多个分片边界中除了所述一个分片边 界以外的分片边界是否执行滤波处理。

例如，所述图像解码方法还包括解码步骤，在所述解码步骤中，在所述分片限制信 息示出处理有限制的情况下，解码多个所述滤波信息，多个所述滤波信息是与所述多个分 片边界的每一个相对应的、示出相同的内容的信息。

此外，本实施例的一个方案涉及的图像编码装置，具备：编码部，生成分片限制信 息，并对该分片限制信息进行编码，该分片限制信息示出针对多个分片的处理是否有限制， 所述多个分片是分割了图片而获得的；以及决定部，在所述分片限制信息示出处理有限制 的情况下，根据示出针对多个分片边界中的一个分片边界是否执行滤波处理的滤波信息， 来决定针对所述多个分片边界是否执行滤波处理。

根据这个构成，能够按照每个分片边界切换滤波处理的执行/不执行。这样，该图 像编码装置能够简单地实现并行处理。

此外，本实施例的一个方案涉及的图像解码装置，具备：解码部，对分片限制信息 进行解码，该分片限制信息示出针对多个分片的处理是否有限制，所述多个分片是分割了 图片而获得的；以及决定部，在所述分片限制信息示出处理有限制的情况下，根据示出针对 多个分片边界中的一个分片边界是否执行滤波处理的滤波信息，来决定针对所述多个分片 边界是否执行滤波处理。

根据这个构成，能够按照每个分片边界切换滤波处理的执行/不执行。这样，该图 像解码装置能够简单地实现并行处理。

此外，本实施例的一个方案涉及的图像编解码装置具备所述图像编码装置和所述 图像解码装置。

另外，这些全体或具体的实施例，可以用系统、方法、集成电路、计算机程序或计算 机能够读取的CD-ROM等记录介质来实现，也可以任意组合系统、方法、集成电路、计算机程 序以及记录介质来实现。

下面，参考附图来说明本发明的实施方式。

另外，下面说明的实施例都是示出全体的或者具体的例子。以下的实施例中示出 的数值、形状、材料、构成要素、构成要素的配置位置以及连接形式、步骤、步骤的顺序等，都 是本发明的一个例子，主旨不是限制本发明。并且，以下的实施例的构成要素中，示出最上 位概念的独立权利要求中没有记载的构成要素，可以说明是任意的构成要素。

(实施例1)

在本实施例中，说明能够进行并行解码处理的图像解码装置中的并行解码处理。 在本实施例中，比特流包含使图像解码装置容易进行并行处理的信息。

首先，说明如图3所示的在分片的开头一定配置有切片头的情况下的解码处理。

在分片方式中能够将画面均等地分割为长方形状(矩阵状)，所以能够使分割后的 区域的横方向的宽度变小。这样，分片方式有这样的优点，针对横方向的宽度大的图像(例 如被称为4k或者8k的分辨率的图像)，所需要的存储器尺寸少。此外，能够简单地对分片区 域内的像素数据进行均等分割，所以并行处理也容易进行。因此，从分片的开头开始并行解 码，对有效地进行并行解码处理很重要。

另外，切片头的开头位置是熵解码部能够容易把握的构成，使得熵解码部预先只 搜索切片头，就能获得头信息。因此，通过限定为这个构造，从而在分片的开头位置上一定 存在切片头。因而，图像解码装置，利用该切片头，能够简单地确定分片的初始点、即并行解 码处理的开始地点。加之，这个切片头中包含解码处理所需要的信息，在解码时也没有必要 预先缓冲切片头的信息。

另外，关于容易实现这个构成的方法，在实施例3中说明。

图5是表示该构成的情况下的并行解码处理的流程的流程图。首先，图像解码装置 解码切片头(S101)。下面，图像解码装置判断这个切片是不是位于分片的开头(S102)。例 如，如图3示出的切片头X的情况下，该切片没有位于分片的开头(S102中的“否”)，图像解码 装置进行下一个切片头的解码(S101)。另一方面，在如图3示出的切片头Y的情况下，该切片 位于分片的开头(S102中的“是”)，所以图像解码装置从该位置开始进行并行解码处理 (S103)。另外，该一连串的处理在对1个画面的处理结束为止重复执行。此外，图像解码装置 具有的并行解码部的功能全部被使用的情况下，图像解码装置进行等候，直到并行解码部 能够使用为止。在其以外的情况下，与切片内部的解码处理并行地执行下一个切片头的获 得。这样通过获得切片头，来设定并行解码处理的开始。

接着，对判断切片头是否位于分片的开头的方法进行说明。

首先利用图6说明在本实施例的比较例的判断方法。该判断方法中，首先，图像解 码装置，获得示出切片头中包含的切片位置的位置信息(S201)。此外，图像解码装置，预先 获得分片分割信息，存放到存储器，存储器表示分片怎么被分割。而且，图像解码装置利用 分片分割信息，获得下一个分片的开头位置(S202)。最后，图像解码装置，比较处理对象的 切片位置(切片的开头位置)和分片的开头位置，两个位置相同的情况下，判别为切片头在 分片开头。另一方面，两个位置不同的情况下，判断为切片头不在分片开头(S203)。

这样，本比较例涉及的判断方法中，为了开始并行解码需要很多的步骤：经常掌握 处理中的位置的处理，存取存储器的处理，以及比较两个位置的处理等。这样，该判断方法 中，发生处理时间的损失。

下面，利用图7来说明本实施例涉及的判断方法。在本实施例中，在切片头中包含1 比特的标志，该标志表示这个切片是不是位于分片的开头。如图7所示，图像解码装置获得 该标志(S111)，确认该标志的值(S112)，从而能够判断切片是不是位于分片的开头。这样， 本实施例涉及的图像解码方法，以少的处理量能够判断切片是不是位于分片的开头位置。

图8是表示切片头的句法的图。所述的1比特标志例如是，图8示出的start_tile_ in_slice_flag。start_tile_in_slice_flag是“1”的情况下，该切片从分片左上角的位置 (分片的开头)开始。除此以外的情况下(start_tile_in_slice_flag是“0”的情况)，该切片 不从分片的左上角的位置开始。另外，在此示出了这个标志被配置在切片头的开头的例子， 不过，该标志的位置不只限于此。但是，这个标志的位置越靠近切片头的开头，越能够高速 地开始并行解码处理。

图9是表示这个情况下的流的构成例的图。图10是表示不使用这个标志的情况下 的流的构成例的图。表示切片的位置的位置信息(或者分片分割信息)配置在切片头的中 段。因而，图像解码装置为了获得这个位置信息，该图像解码装置在切片不在分片的开头的 情况下(从切片的开头不进行并行解码处理的情况)，则获得无用的信息。因而不用所述标 志的情况下，产生冗余的处理。另一方面，如图9所示在切片头的开头，或者靠近开头的部分 配置1比特的标志，从而图像解码装置，能够马上开始并行解码处理。

下面说明如图4所示，在切片头没有位于分片的开头的情况。在分片方式中，能够 将画面均等地分割为长方形状，所以如前述一样，从分片的开头开始并行解码处理，对有效 地进行并行解码处理很重要。

在该构成中，分片的开头不一定就有切片的开头，所以需要获得分片的开头位置、 以及获得为了开始分片的解码处理而需要的切片头的信息。因此，与图3的情况相同，需要 扫描切片头。

利用图11来说明这个处理的流程。首先，图像解码装置解码切片头(S121)。在这 里，例如如图4示出的切片头A的情况下，切片头的开头位置和分片的开头位置一致(S122中 的“是”)，所以图像解码装置开始对这个分片进行并行解码处理(S123)。

另一方面，在图4示出的切片头B的情况下，因为切片头的开头位置和分片的开头 位置不一致(S122中的“否”)，所以处理进入步骤S124。

下面，图像解码装置确认是否包含分片为止的位置信息(S124)。这个位置信息，表 示在1个切片中包含多个分片的情况下的从该分片到下一个分片的距离。在有位置信息的 情况下(S124中的“是”)，图像解码装置，解码该位置信息(S125)，按照通过解码而得到的位 置信息，到下一个分片为止进行文件查(搜索)，进行并行解码处理(S126)。另一方面，在 没有位置信息的情况下(S124中的“否”)，图像解码装置，解码下一个切片的头(S121)。另 外，该一连串的处理直到针对1个画面的处理结束为止重复执行。此外，图像解码装置具有 的并行解码部的功能全部被使用的情况下，图像解码装置进行等候，直到并行解码部能够 使用为止。

这样，切片头不一定位于分片的开头的情况下，比较与切片头一定位于分片的开 头的情况相比，需要复杂的处理。即使在这个情况下，将前述的图8示出的start_tile_in_ slice_flag配置到切片的开头，能够减少该复杂的处理的处理量。这样，能够实现更高速的 解码处理。

另外，本实施例涉及的并行解码处理，由图像解码装置进行，该图像解码装置是对 被压缩编码的编码图像数据进行解码的装置。图12是示出本实施例涉及的图像解码装置 400的构成的一例的方框图。另外，图5，图7或者图11示出的并行解码处理，由熵解码部410 进行。

图像解码装置400，对被压缩编码的编码图像数据(输入信号)进行解码来生成解 码信号。例如，在图像解码装置400中，编码图像数据按每个块作为输入信号而被输入。图像 解码装置400通过对输入信号进行可变长解码、逆量化以及逆变换，从而恢复图像数据。

如图12所示，图像解码装置400具备：熵解码部410、逆量化及逆变换部420、加法器 425、去块滤波器430、存储器440、帧内预测部450、运动补偿部460、帧内/帧间切换开关470。

熵解码部410通过对输入信号(输入流)进行可变长解码，从而恢复量化系数。另 外，在此，输入信号(输入流)是解码对象信号，相当于编码图像数据的每个块的数据。此外， 熵解码部410，从输入信号获得运动数据，将获得的运动数据输出到运动补偿部460。

逆量化及逆变换部420，对由熵解码部410进行了复原的量化系数进行逆量化，从 而复原变换系数。而且，逆量化及逆变换部420，通过对已复原的变换系数进行反向变换，从 而复原预测误差。

加法器425，通过对被复原的预测误差和预测信号进行加算，从而生成解码图像。

去块滤波器430，针对被生成的解码图像进行去块滤波处理。进行了去块滤波处理 的解码图像，作为解码信号而输出。

存储器440是用于存放在运动补偿中使用的参考图像的存储器。具体而言，存储器 440存放进行了去块滤波处理的解码图像。

帧内预测部450通过进行帧内预测，从而生成预测信号(帧内预测信号)。具体而 言，帧内预测部450，参考由加法器425生成的解码图像的、解码对象块(输入信号)的周围的 图像进行帧内预测，从而生成帧内预测信号。

运动补偿部460，根据从熵解码部410输出的运动数据，进行运动补偿，从而生成预 测信号(帧间预测信号)。

帧内/帧间切换开关470，选择帧内预测信号以及帧间预测信号的某一个，将选择 的信号作为预测信号输出到加法器425。

根据以上的构成，本实施例涉及的图像解码装置400，对被进行了压缩编码的编码 图像数据进行解码。

如上所述，本实施例涉及的图像解码装置以及图像解码方法，能够简单地判断与 图像解码装置的构成对应的比特流的处理开始点。即，该图像解码装置以及图像解码方法， 能够简单地判断在切片头进行珀斯(分析)的位置是否是分片的开头。这样，能够实现图像 解码装置的高速化。

还有，根据这些构成，能够容易推定处理时间。这样，例如通过高分辨率的影像的 即时再生处理等中使用的高速运算电路，能够实现图像解码装置。

(实施例2)

在本实施例中说明通过编码生成代码串并传输的图像编码方法以及图像编码装 置，该代码串是能够容易执行并行解码的代码串。该图像编码装置将表示切片头的位置是 否在分片的开头的信息，传输到图像解码装置。这样，该图像编码装置，能够生成能够提高 解码处理的并行度的比特流。

本实施例涉及的图像编码装置，在编码切片头的时候，判断切片头的位置是不是 分片的开头位置。切片头的位置是分片的开头的情况下，例如，将图8示出的start_tile_ in_slice_flag记载在切片头。

通过上述，该图像编码装置是如实施例1示出能够并行解码的图像解码装置，能够 生成简单地开始并行解码的代码串。

图13是示出本实施例的图像编码装置的构成例的方框图。图13示出的图像编码装 置200具备：减法器205、变换及量化部210、熵编码部220、逆量化及逆变换部230、加法器 235、去块滤波器240、存储器250、帧内预测部260、运动检测部270、运动补偿部280、帧内/帧 间切换开关290。

减法器205计算输入信号与预测信号的差分，即预测误差。

变换及量化部210通过变换空间区域的预测误差，从而生成频域的变换系数。例 如，变换及量化部210，对预测误差进行DCT(Discrete Cosine Transform)变换，从而生成 变换系数。加之，变换及量化部210，通过对变换系数进行量化，从而生成量化系数。

熵编码部220，通过对量化系数进行可变长编码，从而生成编码信号。此外，熵编码 部220，对由运动检测部270检测出的运动数据(例如，运动矢量)进行编码，包含在编码信号 上进行输出。

逆量化及逆变换部230通过对量化系数进行逆量化，从而对变换系数进行复原。加 之，逆量化及逆变换部230，通过对复原的变换系数进行逆变换，从而复原预测误差。另外， 被复原的预测误差因为进行量化，信息丢失，所以与减法器205生成的预测误差不一致。即， 被复原的预测误差包含量化误差。

加法器235，通过对被复原的预测误差和预测信号进行加算，从而生成本地解码图 像。

去块滤波器240，对被生成的本地解码图像进行去块滤波处理。

存储器250是用于存放在运动补偿中使用的参考图像的存储器。具体而言，存储器 250中存放实施了去块滤波处理的本地解码图像。

帧内预测部260通过进行帧内预测，从而生成预测信号(帧内预测信号)。具体而 言，帧内预测部260，参考由加法器235生成的本地解码图像中的、编码对象块(输入信号)的 周围的图像进行帧内预测，从而生成帧内预测信号。

运动检测部270检测输入信号和存储器250中存放的参考图像之间的运动数据(例 如，运动矢量)。

运动补偿部280，根据被检测的运动数据进行运动补偿，从而生成预测信号(帧间 预测信号)。

帧内/帧间切换开关290，选择帧内预测信号以及帧间预测信号的某一个，将选择 的信号作为预测信号，输出到减法器205及加法器235。

根据以上的构成，本实施例涉及的图像编码装置200，对图像数据进行压缩编码。

另外，由熵编码部220进行判别切片头是不是分片的开头的处理、以及所述标志的 编码处理。

如上所述，本实施例涉及的图像编码装置以及图像编码方法，将与解码处理顺序 相关的信息传输到图像解码装置。这样，该图像编码装置以及图像编码方法，能够生成在图 像解码装置能够进行高速处理的编码信号(比特流)。

(实施例3)

在本实施例中，说明如前述的图3所示在分片的开头必定在切片头的情况下，能够 容易地进行并行处理的代码串的构成。

首先用图14来说明本实施例的比较例的处理。首先，图像解码装置获得SPS(序列 参数集)(S231)。接着，图像解码装置对SPS中包含的标志A进行解码，该标志A用于容易进行 并行处理(S232)。接着，图像解码装置对PPS(图片参数集)中包含的标志B进行解码，该标志 B用于容易进行并行处理(S233)。此外，图像解码装置对PPS中包含的标志C进行解码，该标 志C用于容易进行并行处理(S234)。

这些标志A～C全部都是用于容易进行并行处理的参数。接着图像解码装置，判断 这些参数是否符合该图像解码装置具有的并行处理条件(也称为constraint_tile集) (S235)。换言之，图像解码装置，利用这些参数来判断该图像解码装置是否具有对处理对象 的流进行并行解码处理的功能。如果这些参数，符合该图像解码装置具有的并行处理条件 的情况下(S235中的“是”)，图像解码装置判断处理对象的流是能够进行并行解码，对该流 进行并行解码处理(S236)。在这里，并行解码处理具体是指实施例1示出的处理。

另一方面，这些参数不符合该图像解码装置具有的并行处理条件的情况下(S235 中的“否”)，图像编码装置不进行并行解码处理，进行普通的解码处理(S237)。

可是，上述中为了判断是否能够进行并行解码所需要的标志多。还有，管理对应的 能够进行并行解码的参数关系，存在困难。于是，本实施例中，在SPS加上标志，该标志表示 constraint_tile_flag这样的在并行解码中所需要的条件。

图15是本实施例涉及的图像解码处理的流程图。

如图15所示，图像解码装置获得SPS，对SPS中包含的所述标志进行解码(S131)。在 这个标志示出能够并行解码的情况下(S132中的“是”)，图像解码装置设置容易进行预先决 定的并行解码处理的参数集(S133)，执行并行解码处理(S134)。

另一方面，所述标志示出不能并行解码的情况下(S132中的“否”)，图像解码装置 与图14同样地获得参数(标志A～C)(S135～S137)，利用获得的参数进行判断(S138)。另外， 在这个判断中，仅在流符合图像解码装置时，才被判断为能够并行解码。而且，与图14同样 按照判断结果，执行并行解码处理(S134)或者普通解码处理(S139)。

另外，代替表示能够并行解码的标志，可以用指数(index)，以0，1，2，3的形状表示 并行程度的级别。这个情况下，在步骤S132中，由该指数所示出的值，表示与图像解码装置 对应的并行程度不一致的情况下，进入步骤S133，不是那样的情况下，进入步骤S135。

图16，图17及图18示出标志A，B，C的具体例。另外，没有特别说明的情况下参数的 含义如非专利文献2所述。

在这里，loop_filter_across_tile_flag、loop_filter_across_slice_flag、以 及tile_boundary_independence_flag，表示在分片或者切片边界上是否进行滤波。在进行 滤波的情况下，需要在存储器上存储前面的解码图像，不合适高速的并行处理。此外，在相 同的图片内切换按每个分片的边界是否执行滤波，则并行处理变得更加困难。

此外，使分片之间不存在依存关系，从而使并行处理变得更容易进行。另外，在分 片的开头放置切片头，从而算数编码处理的状态也能够复位，所以根据本构成，能够实现高 速并行解码。

图19A示出这个情况下的处理例。在SPS有constraint_tile_flag的情况下(S141 中的“是”)，图像解码装置(或者图像编码装置)，跳过tile_boundary_independence_flag、 loop_filter_across_tile_flag、loop_filter_across_slice_flag的解码处理(或编码处 理)(S142)。另一方面，SPS没有constraint_tile_flag的情况下(S141中的“否”)，图像解码 装置(或图像编码装置)进行tile_boundary_independence_flag、loop_filter_across_ tile_flag、loop_filter_across_slice_flag的参数的解码处理(或编码处理)(S143)。

在这里，tile_boundary_independence_flag是示出如下的信息：是否禁止参考超 越分片边界的信息。loop_filter_across_tile_flag是示出针对分片边界是否执行滤波处 理的信息。loop_filter_across_slice_flag是示出针对切片边界是否执行滤波处理的信 息。

这样，不需要编码或解码无用的代码，从而能够削减编码量。

如上所述，本实施例涉及的图像编码装置，生成分片限制信息(constraint_tile_ flag)，编码该分片限制信息，该分片限制信息示出针对多个分片的编码处理或者解码处理 是否有限制，所述多个分片是分割了图片而获得的。此外，该图像编码装置，在分片限制信 息示出编码处理或者解码处理有限制的情况下，跳过滤波信息(loop_filter_across_ tile_flag)的编码处理或者解码处理，所述滤波信息示出针对多个分片边界是否执行滤波 处理。

在这里，滤波信息的编码处理或者解码处理被跳过的情况下，在图像编码装置以 及图像解码装置中，对多个分片边界的每一个，不能切换执行/不执行滤波处理。换言之，对 多个分片边界使用相同的处理(执行/不执行滤波处理)。这样，通过禁止每个分片边界的处 理的切换，能够减少处理量。

图19B示出这个情况下的图像编码装置或者图像解码装置的工作。如图19B所示， 本实施例涉及的图像编码装置，生成分片限制信息，编码该分片限制信息，该分片限制信息 示出针对多个分片的处理是否有限制，所述多个分片是分割了图片而获得的(S140A)。分片 限制信息示出处理有限制的情况下(S141A中的“是”)，图像编码装置对多个分片边界进行 相同的处理(执行/不执行滤波处理)(S142A)。另一方面，分片限制信息示出处理没有限制 的情况下(S141A中的“否”)，图像编码装置，对多个分片边界进行相同或者不同的处理(执 行/不执行滤波处理)(S143A)。

此外，图像解码装置解码分片限制信息，该分片限制信息示出针对多个分片的处 理是否有限制，所述多个分片是分割了图片而获得的(S140A)。在分片限制信息示出处理有 限制的情况下(S141A中的“是”)，图像解码装置对多个分片边界进行相同的处理(执行/不 执行滤波处理)(S142A)。另一方面，在分片限制信息示出处理没有限制的情况下(S141A中 的“否”)，图像解码装置，对多个分片边界进行相同或者不同的处理(执行/不执行滤波处 理)(S143A)。

另外，这样对多个分片边界进行相同的处理，图像编码装置或者图像解码装置，也 可以不是跳过对多个分片边界的多个滤波信息的全部的编码处理或者解码处理，而是只对 某一个分片边界的一个滤波信息进行编码或者解码。换言之，在这个情况下，图像编码装置 或者图像解码装置，根据该一个滤波信息，来决定对多个分片边界是否执行滤波处理。具体 而言，图像编码装置或者图像解码装置，在该一个滤波信息示出针对分片边界执行滤波处 理的情况下，对多个分片边界的全部执行滤波处理。另一方面，图像编码装置或者图像解码 装置，在该一个滤波信息示出针对分片边界不执行滤波处理的情况下，对多个分片边界的 全部不执行滤波处理。

图19C示出这个情况下的图像编码装置或者图像解码装置的工作。如图19C所示， 分片限制信息示出处理有限制的情况下(S141A中的“是”)，图像编码装置或者图像解码装 置，根据示出对多个分片边界中的一个分片边界是否执行滤波处理的滤波信息，来决定对 多个分片边界是否执行滤波处理(S142B)。此外，分片限制信息示出处理没有限制的情况下 (S141A中的“否”)，图像编码装置或者图像解码装置，根据示出对多个分片边界中的一个分 片边界是否执行滤波处理的多个滤波信息，来决定对多个分片边界是否执行滤波处理 (S143B)。

换言之，图像编码装置，在分片限制信息示出处理有限制的情况下，编码示出一个 分片边界是否执行滤波处理的滤波信息，跳过对如下信息的编码，该信息是示出对多个分 片边界中的所述一个分片边界以外的分片边界是否执行滤波处理的信息。此外，图像解码 装置，在分片限制信息示出处理有限制的情况下，解码示出一个分片边界是否执行滤波处 理的滤波信息，跳过对如下信息的解码，该信息是示出对多个分片边界中的所述一个分片 边界以外的分片边界是否执行滤波处理的信息。

或者，也可以是多个滤波信息的全部被设定为同一个值。换言之，图像编码装置， 在分片限制信息示出处理有限制的情况下，将示出相同的内容(滤波处理被进行/不被进 行)的滤波信息，与多个滤波器边界的每一个相对应地进行编码。

图19D示出这个情况下的图像编码装置或者图像解码装置的工作。如图19D所示， 在分片限制信息示出处理有限制的情况下(S141A中的“是”)，图像编码装置将示出相同的 内容的滤波信息，与多个分片边界的每一个相对应地进行编码(S142C)。另一方面，在分片 限制信息示出处理没有限制的情况下(S141A中的“否”)，图像编码装置将示出相同或者不 同的内容的滤波信息，与多个分片边界的每一个相对应地编码(S143C)。

此外，图像解码装置，在分片限制信息示出处理有限制的情况下(S141A中的 “是”)，解码多个滤波信息，该多个滤波信息示出与多个分片边界的每一个相对应的相同的 内容(S142C)。另一方面，在分片限制信息示出处理没有限制的情况下(S141A中的“否”)，图 像解码装置解码多个滤波信息，该多个滤波信息示出与多个分片边界的每一个相对应的相 同或者不同的内容(S143C)。

另外，分片限制信息可以按每个图片而设置。换言之，图像编码装置按每个图片生 成分片限制信息，并且对每个图片的分片限制信息进行编码。此外，图像解码装置对按每个 图片而设置的分片限制信息进行解码。

此外，所述处理由图像编码装置具备的编码部及决定部，或图像解码装置具备的 解码部以及决定部进行。例如，该编码部及决定部包含在图13示出的熵编码部220中。此外， 解码部以及决定部包含在图12示出的熵解码部410中。

(实施例4)

在本实施例中，更详细地说明在切片头上记载start_tile_in_slice_flag的情况 下，削减信息量的构成。

图20A是表示本实施例的比较例中的切片头的构成例的图。与此相对，图20B是表 示本实施例中的切片头的构成例的图。此外，图21是示出在本实施例涉及的工作的流程的 流程图。

首先，图像编码装置(或图像解码装置)，对示出处理对象的切片是不是第一个切 片的标志(图20B的first_slice_in_pic_flag)进行编码(或者解码)(S151)。接着，在该标 志不是0的情况下(first_slice_in_pic_flag！＝0)，即，处理对象的切片是第一个切片的 情况下(S152中的“是”)，图像编码装置(或图像解码装置)，跳过以后的切片的位置信息或 者分片的初始位置信息等的编码处理(或解码处理)(S153)。

另一方面，在这个标志是0的情况下(first_slice_in_pic_flag＝0)，即处理对象 的切片不是第一个切片的情况下(S152中的“否”)，图像编码装置(或图像解码装置)，对示 出处理对象的切片是不是分片的开头的信息(start_tile_in_slice_flag)进行编码(或者 解码)(S154)。

接着，在这个标志是1的情况下(start_tile_in_slice_flag＝1)，即处理对象切 片是分片的开头的情况下(S155中的“是”)，图像编码装置(或图像解码装置)，对示出处理 对象的分片是第几个分片的信息(tile_idx_minus1)进行编码(或者解码)(S156)。

另一方面，在这个标志是0的情况下(start_tile_in_slice_flag＝0)，即处理对 象的切片不是分片的开头的情况下(S155中的“否”)，图像编码装置(或图像解码装置)，因 为不知道这个切片的位置，所以对切片的位置信息(slice_address)进行编码(或者解码) (S157)。通过这样做，图像编码装置(或图像解码装置)，不需要传输冗余的信息，能够有效 地进行编码处理(或解码处理)，能够提高并行度并且提高压缩率。此外，图像解码装置能够 正确地解码该流。

另外，与分片的分割有关的信息，例如被配置在管理流整体的信息的被称为序列 参数集的部分。此外，这个信息可以示出例如分割帧的垂直方向上的个数以及水平方向上 的个数。或者，这个信息可以示出将帧分割为几个处理单位。但是，在编码及解码侧预先决 定被分割的各分片根据预先决定的扫描顺序(例如光栅顺序)被处理。因此，处理对象的切 片是分片的开头的情况下，通过知道处理对象的分片是第几个分片，能够知道处理对象的 切片的帧内的空间上的位置信息。这样，能够削减切片的地址信息。

此外，处理对象切片是图片的开头的情况下，分片的编号必定是1号，切片的地址 也是(0，0)，所以这些信息可以不进行编码。通过这样，能够削减信息量。

(实施例5)

本实施例中将保持分片的顺序的信息(tile_idx_minus1)的分片头，作为示出分 片的开始的信息来使用。

图22是表示本实施例中的数据构成的概念图。如图22所示表示分片的开始的信息 的分片头总是配置在切片头的紧之前。图23是示出这个情况下的图像编码装置(或图像解 码装置)的工作的流程的流程图。

首先，图像编码装置(或图像解码装置)，对分片头(tile_header())进行编码(或 者解码)(S161)。这样，图像编码装置(或图像解码装置)，从前述的序列参数集获得分片的 开头位置的信息，确定在帧内的分片的位置。

下面，图像编码装置(或图像解码装置)，对与这个分片有关的切片头(slice_ header())进行编码或者解码(S162)。这样，因为分片的解码所需要的信息包含在切片头 中，所以能够立即判断图像解码装置如何进行本分片的解码。因而，图像解码装置能够执行 高速并行处理。另外，这样tile_header()配置在slice_header()的紧之前的情况下，例如 能够省略切片头的开始代码。

通常，tile_header()与slice_header()是不同的头，分配了不同的开始代码。另 一方面，如本实施例一样，分片头的紧之后总是配置切片头的情况下，能够省略切片头的开 始代码。通常开始代码使用固定长的特殊的代码，通过省略该开始代码，能够大幅度削减冗 长的代码。此外，即使在头的加载中搜索开始代码的情况下，也不需要这个多余的搜索。因 而能够使处理高速化。

(实施例6)

在本实施例中还说明如下情况，根据profile_idc变更参数的编码及解码的情况。 profile_idc是简介信息，其示出对流进行编码或者解码的情况下的构成。

图24是示出这个情况下的工作的流程的流程图。例如，这个简介信息示出使用限 制分片的情况下(S171中的“是”)，图像编码装置(或图像解码装置)，跳过在处理对象的分 片是限制分片的情况下使用的有关限制的信息(关联参数)的编码(或者解码)，设置参数从 而进行该限制(S172)。在这里，限制是指：在边界不进行滤波处理，以及在分片内的编码(或 者解码)中不参照其他分片的信息等。

简介信息不示出利用限制分片的情况下(S171中的“否”)，图像编码装置(或图像 解码装置)，对信息(关联参数)进行编码(或者解码)，该信息是示出对哪个信息进行限制的 信息(S173)。

另外，图像编码装置(或图像解码装置)，例如，有的简介信息，示出不利用分片的 情况下，跳过全部的序列参数集、图片参数集、以及在切片头等的头中的、有关分片的信息 的编码处理(或解码处理)。这样，能够削减冗余的信息的编码处理或者解码处理，所以能够 实现高速处理和高的压缩能力。

以上，说明了实施例涉及的图像编码装置以及图像解码装置，不过本发明不被这 些实施例所限定。

此外，所述实施例涉及的图像编码装置以及图像解码装置包含的各处理部典型地 可以作为集成电路的LSI来实现。这些可以将每一个制成一个芯片，也可以将一部分或者全 部制成一个芯片。

还有，集成电路化的方法不局限于LSI，也可以用专用电路或者通用处理器来实 现。也可以利用在LSI制造之后可编程的现场可编程门阵列(FPGA∶Field Programmable Gate Array)或可动态地重构LSI内部的电路单元的连接和设定的可重构处理器。

在所述各个实施例，各构成要素可以用专用的硬件来构成，或者通过执行适合各 构成要素的软件程序来实现。各构成要素，通过CPU或处理器等的程序执行部读出并执行硬 盘或半导体存储器等记录介质上记录的软件程序来实现。

加之，本发明可以是所述软件程序，也可以是所述程序被记录的非一时的计算机 可读取的记录介质。此外，所述程序能够经由互联网等的传输介质来流通。

此外，所述使用的数字都是为了具体地说明本发明的示例，本发明不被例示的数 字所限制。

此外，在方框图中的功能块的分割只是一例，可以将多个功能块作为一个功能块 来实现，或者将一个功能块分割为多个，或者将一部分功能转移到其他的功能块。此外，将 具有类似的功能的多个功能块的功能，用单一的硬件或者软件并行或者分时地处理。

此外，所述的图像编码方法或者图像解码方法中包含的步骤执行的顺序，是为了 具体地说明本发明示出的例子的顺序，也可以是所述以外的顺序。此外，所述步骤的一部分 可以与其他的步骤同时(并行)执行。

以上，针对本发明的一个或多个方案涉及的图像编码装置以及图像解码装置，根 据实施例来进行了说明，不过，本发明不是被这些实施例所限制的。只要不超出本发明的宗 旨，则技术者想出的各种变形例实施在各个实施例的例子，对不同实施例中的构成要素进 行组合而构筑的例子也都包括在本发明的一个或者多个方案的范围中。

(实施例7)

将用于实现所述各个实施例示出的运动图像编码方法(图像编码方法)或运动图 像解码方法(图像解码方法)的构成的程序记录到存储媒体，从而所述各个实施例示出的处 理，能够在独立的计算机系统简单地实施。记录介质可以是磁盘、光盘、磁光盘、IC卡、半导 体存储器等，只要能够记录程序就可以。

加之在这里说明，所述各个实施例示出的运动图像编码方法(图像编码方法)和运 动图像解码方法(图像解码方法)的应用例以及使用那些的系统。该系统的特征是具有图像 编解码装置，该图像编解码装置由利用图像编码方法的图像编码装置以及利用图像解码方 法的图像解码装置组成。关于系统中的其外构成，按照情况能够恰当地变更。

图25是示出实现内容分发服务的内容提供系统ex100的全体构成图。将通信服务 的提供区域划分为所希望的大小，在各单元内分别设置有作为固定无线局的ex106、 ex107、ex108、ex109、ex110。

在该内容提供系统ex100中，计算机ex111、PDA(个人数字助理：personal digital assistant)ex112、摄像机ex113、便携式电话ex114、游戏机ex115等各种设备通过互联网服 务提供商ex102和电话网ex104、以及ex106～ex110，与互联网ex101相连接。

然而，内容提供系统ex100并非局限于图25所示的构成，也可以对任意的要素进行 组合后连接。并且，可以不通过作为固定无线局的ex106至ex110，而是各个设备直接与 电话网ex104相连接。并且，也可以是各个设备通过近场无线等而彼此直接连接。

摄像机ex113是数字摄像机等能够拍摄运动图像的设备，摄像机ex116是数字照相 机等能够拍摄静止图像以及运动图像的设备。并且便携式电话ex114是GSM(注册商标) (Global System for Mobile Communications：全球移动通讯系统)方式、CDMA(Code Division Multiple Access：码分多址)方式、W－CDMA(Wideband－Code Division Multiple Access：宽带码分多址)方式、LTE(Long Term Evolution：长期演进)方式、HSPA (High－Speed Packet Access：高速分组接入)的便携式电话，或PHS(Personal Handy－ phone System：个人手持式电话系统)等，可以是其中任一个。

在内容提供系统ex100中，摄像机ex113等通过ex109、电话网ex104与流播放 服务器ex103连接，从而进行实况分发等。在实况分发中，针对用户利用摄像机ex113拍摄的 内容(例如音乐实况的影像等)进行在上述的各实施例所说明的编码处理(即作为本发明的 图像编码装置来发挥作用)，并发送到流播放服务器ex103。另外，流播放服务器ex103针对 提出请求的客户端，对被发送的内容数据进行流的分发。作为客户端，包括可以解码上述的 被编码处理的数据的计算机ex111、PDAex112、摄像机ex113、便携式电话ex114、以及游戏机 ex115等。在接收了被分发的数据的各个设备，对接收的数据进行解码处理并再生(即作为 本发明的图像解码装置来发挥作用)。

并且，拍摄的数据的编码处理可以在摄像机ex113进行，也可以在进行数据的发送 处理的流播放服务器ex103进行，也可以相互分担进行。同样，被分发的数据的解码处理可 以由客户端进行，也可以在流播放服务器ex103进行，也可以相互分担进行。并且，不仅限于 摄像机ex113，由摄像机ex116拍摄的静止图像数据以及/或者运动图像数据，也可以通过计 算机ex111而发送到流播放服务器ex103。此时的编码处理可以在摄像机ex116、计算机 ex111、流播放服务器ex103的任一个中进行，也可以相互分担进行。

并且，这些编码处理以及解码处理通常在计算机ex111以及各个设备所具有的LSI (Large Scale Integration：大规模集成电路)ex500中处理。LSIex500可以由一个芯片构 成，也可以由多个芯片构成。另外，也可以将运动图像编码用以及运动图像解码用的软件安 装到能够由计算机ex111等读取的某种记录介质(CD－ROM、软盘、硬盘等)中，并利用该软件 来进行编码处理以及解码处理。而且，在便携式电话ex114是附带有相机的情况下，也可以 发送由该相机获得的运动图像数据。在这种情况下的运动图像数据是由便携式电话ex114 所具有的LSIex500进行编码处理后的数据。

并且，流播放服务器ex103是多个服务器或多个计算机，也可以是对数据进行分散 地处理、记录、分发的装置。

如以上所述，在内容提供系统ex100中，客户端能够接收并再生被编码的数据。在 这样的内容提供系统ex100中，在客户端能够实时地接收并解码由用户发送的信息并且能 够再生，这样，即使是没有特殊权利或设备的用户也能够实现个人播放。

并且，不仅限于内容供给系统ex100的例子，如图26所示，在数字广播用系统ex200 上也能够组装上述各个实施例所示的运动图像编码装置(图像编码装置)以及运动图像解 码装置(图像解码装置)中的任一个。具体而言，在广播电台ex201，影像数据上多路复用了 音乐数据的多路复用数据通过电波来通信或被传输到卫星ex202。这个影像数据是根据所 述各个实施例说明的运动图像编码方法被编码的数据(即根据本发明的图像编码装置被编 码的数据)。接收了这些的广播卫星ex202发送用于广播的电波，这些电波由能够进行卫星 广播接收的家庭的天线ex204来接收。接收的多路复用数据由电视机(接收机)ex300或机顶 盒(STB)ex217等装置进行解码并再生(即作为本发明的一个方案涉及的图像解码装置发挥 作用)。

并且，在用于读取并解码DVD、BD(Blu－ray Disc)等记录介质ex215中所记录的多 路复用数据、或者将影像信号编码、进而有时与音乐信号多路复用后进行写入的阅读器/记 录器ex218上，也能够安装上述各个实施例所示的运动图像解码装置或运动图像编码装置。 在这种情况下，被再生的影像信号能够被显示在监视器ex219，并且能够由记录了多路复用 数据的记录介质ex215在其他的装置或系统中再生影像信号。并且，也可以将运动图像解码 装置安装到与有线电视用的电缆ex203或卫星/地波广播的天线ex204连接的机顶盒ex217 内，并在电视机的监视器ex219上显示。此时，可以不组装到机顶盒，而将运动图像解码装置 组装到电视机内。

图27示出了利用了在上述的各个实施例中说明的运动图像解码方法以及运动图 像编码方法的电视机(接收机)ex300。电视机ex300包括：调谐器ex301，通过接收上述广播 的天线ex204或电缆ex203等获得或者输出影像数据上多路复用了声音数据的多路复用数 据；调制/解调部ex302，解调接收的多路复用数据，或者为了将多路复用数据发送到外部而 进行调制；以及多路复用/分离部ex303，对解调的多路复用数据分为影像数据和声音数据， 或者在信号处理部ex306进行了编码的影像数据和声音数据进行多路复用。

并且，电视机ex300具有信号处理部ex306和输出部ex309，所述信号处理部ex306 具有分别对声音信号和影像信号进行解码或者对各个信息分别进行编码的声音信号处理 部ex304和影像信号处理部ex305(作为本发明的图像编码装置或者图像解码装置发挥作 用)；所述输出部ex309具有对被解码的声音信号进行输出的扬声器ex307，以及对被解码的 影像信号进行显示的显示器等显示部ex308。进而，电视机ex300具有接口部ex317，该接口 部ex317具有接受用户的操作输入的操作输入部ex312等。进而，电视机ex300具有统括控制 各个部的控制部ex310，以及向各个部提供电力的电源电路部ex311。接口部ex317除可以具 有操作输入部ex312以外，还可以具有与阅读器/记录器ex218等外部设备连接的电桥 ex313、用于安装SD卡等记录介质ex216的插槽部ex314、用于与硬盘等外部记录介质连接的 驱动器ex315、以及与电话网连接的调制解调器ex316等。并且，记录介质ex216能够通过存 储的非易失性/易失性的半导体存储器元件进行信息的电记录。电视机ex300的各个部通过 同步总线相互连接。

首先，对电视机ex300通过天线ex204等从外部获得的多路复用数据进行解码并再 生的构成进行说明。电视机ex300接受来自远程控制器ex220等的用户的操作，并根据具有 CPU等的控制部ex310的控制，将在调制/解调部ex302解调的多路复用数据，在多路复用/分 离部ex303进行分离。并且，电视机ex300将分离的声音数据在声音信号处理部ex304进行解 码，利用上述的实施例中说明的解码方法，将分离的影像数据在影像信号处理部ex305进行 解码。解码的声音信号和影像信号分别从输出部ex309被输出到外部。在进行输出时，为了 使声音信号和影像信号同步再生，而可以在缓冲器ex318、ex319等暂时蓄积这些信号。并 且，电视机ex300可以不从广播等读出多路复用数据，而是从磁性/光盘、SD卡等记录介质 ex215、ex216中读出多路复用数据。以下将要说明的构成是，电视机ex300对声音信号以及 影像信号进行编码，并发送到外部或写入到记录介质等的构成。电视机ex300接受来自远程 控制器ex220等的用户的操作，并根据控制部ex310的控制，利用在上述的实施例中说明的 编码方法，在声音信号处理部ex304对声音信号进行编码，并在影像信号处理部ex305对影 像信号进行编码。被编码的声音信号和影像信号在多路复用/分离部ex303被多路复用，并 被输出到外部。在进行多路复用时，为了使声音信号和影像信号同步，而可以将这些信号暂 时蓄积到缓冲器ex320、ex321等。另外，关于缓冲器ex318至ex321，可以如图中所示那样具 备多个，也可以是共享一个以上的缓冲器的构成。而且，除图中所示以外，例如可以在调制/ 解调部ex302与多路复用/分离部ex303之间等，作为回避系统的上溢和下溢的缓冲部分，在 缓冲器中蓄积数据。

并且，电视机ex300除具有获得来自广播以及记录介质等的声音数据以及影像数 据的构成以外，还可以具有接受麦克风以及摄像机的AV输入的构成，并且也可以对从这些 获得的数据进行编码处理。并且，在此虽然对电视机ex300能够进行上述的编码处理、多路 复用以及外部输出的构成进行了说明，不过也可以是不进行上述的全部的处理，而仅进行 上述的接收、解码处理以及外部输出的构成。

并且，在阅读器/记录器ex218从记录介质中读出或写入多路复用数据的情况下， 上述的解码处理或编码处理也可以在电视机ex300以及阅读器/记录器ex218的某一个中进 行，也可以是电视机ex300和阅读器/记录器ex218彼此分担进行。

作为一个例子，图28示出了从光盘进行数据的读取或写入的情况下的信息再生/ 记录部ex400的构成。信息再生/记录部ex400包括以下将要说明的要素ex401、ex402、 ex403、ex404、ex405、ex406、ex407。光学头ex401将激光照射到作为光盘的记录介质ex215 的记录面并写入信息，并且检测来自记录介质ex215的记录面的反射光并读取信息。调制记 录部ex402对被内藏于光学头ex401的半导体激光进行电驱动，并按照记录数据来进行激光 的调制。再生解调部ex403对由被内藏于光学头ex401的光电探测器对来自记录面的反射光 进行电检测而得到的再生信号进行放大，对被记录在记录介质ex215的信号成分进行分离、 解调，并再生必要的信息。缓冲器ex404对用于在记录介质ex215进行记录的信息以及从记 录介质ex215再生的信息进行暂时保持。盘式电机ex405使记录介质ex215旋转。伺服控制部 ex406在对盘式电机ex405的旋转驱动进行控制的同时，将光学头ex401移动到规定的代码 道，进行激光的光点的追踪处理。系统控制部ex407对信息再生/记录部ex400进行整体控 制。上述的读出以及写入处理可以通过以下的方法来实现，即：系统控制部ex407利用被保 持在缓冲器ex404的各种信息，并且按照需要在进行新的信息的生成以及追加的同时，一边 使调制记录部ex402、再生解调部ex403以及伺服控制部ex406协调工作，一边通过光学头 ex401来进行信息的记录再生。系统控制部ex407例如以微处理器构成，通过执行读出以及 写入的程序来执行这些处理。

以上，以光学头ex401照射激光光点为例进行了说明，不过也可以利用近场光学 (near-field optical)来进行高密度的记录。

图29是作为光盘的记录介质ex215的模式图。在记录介质ex215的记录面上，导槽 (槽)被形成为螺旋状，在代码道ex230上预先被记录有按照槽的形状的变化示出盘上的绝 对位置的地址信息。该地址信息包括用于确定记录块ex231的位置的信息，该记录块ex231 是记录数据的单位，在进行记录以及再生的装置能够通过再生代码道ex230以及读取地址 信息，来确定记录块。并且，记录介质ex215包括：数据记录区域ex233、内周区域ex232、以及 外周区域ex234。用于记录用户数据的区域为数据记录区域ex233，被配置在数据记录区域 ex233的内周或外周的内周区域ex232和外周区域ex234被用于用户数据的记录以外的特殊 用途。信息再生/记录部ex400针对这种记录介质ex215的数据记录区域ex233，进行被编码 的声音数据、影像数据或对这些数据进行多路复用后的多路复用数据的读写。

以上以具有一层结构的DVD、BD等光盘为例进行了说明，但并非受此所限，也可以 是多层结构的能够在表面以外进行记录的光盘。并且，也可以在盘的同一位置上记录利用 了各种不同波长的颜的光的信息，或者可以是从各种角度记录不同的信息的层等的具有 进行多维的记录/再生的构成的光盘。

此外，在数字广播用系统ex200，能够在具有天线ex205的车辆ex210从卫星ex202 等接收数据，并在车辆ex210具有的车辆导航系统211等的显示装置再生运动图像。另外，关 于车辆导航系统ex211的构成可以考虑成在图27示出的构成中添加GPS接收部，同样也可以 考虑在计算机ex111和便携式电话ex114等上。

图30A是示出了利用了在上述的实施例所说明的运动图像编码方法和运动图像解 码方法的便携式电话ex114的图。便携式电话ex114具有：天线ex350，用于在与ex110之 间进行电波的收发；摄像机部ex365，能够拍摄影像和静止图像；显示部ex358，是用于显示 在摄像机部ex365拍摄的影像以及由天线ex350接收的影像等被解码后的数据的液晶显示 器等。便携式电话ex114还具有：具有操作键部ex366的主体部、声音输出部ex357，是用于输 出声音的扬声器等；声音输入部ex356，是用于输入声音的麦克风等；存储器部ex367，用于 保存拍摄的影像、静止图像、录音的声音、或者接收的影像、静止图像、邮件等被编码或被解 码的数据；或者同样是保存数据的记录介质之间的接口的插槽部ex364。

进一步利用图30B对便携式电话ex114的构成例进行说明。在便携式电话ex114中， 针对用于统括控制具有显示部ex358以及操作键部ex366的主体部的各个部的主控制部 ex360，电源电路部ex361、操作输入控制部ex362、影像信号处理部ex355、摄像机接口部 ex363、LCD(Liquid Crystal Display：液晶显示器)控制部ex359、调制/解调部ex352、多路 复用/分离部ex353、声音信号处理部ex354、插槽部ex364、以及存储器部ex367经由总线 ex370相互连接。

电源电路部ex361在通过用户的操作而成为通话结束以及电源键成为导通状态 下，通过从电池组向各个部提供电力，从而启动便携式电话ex114，使其成为能够工作的状 态。

便携式电话ex114根据由CPU、ROM以及RAM等构成的主控制部ex360的控制，在声音 通话模式时，由声音信号处理部ex354将在声音输入部ex356收集的声音信号转换为数字声 音信号，并在调制/解调部ex352进行扩频(Spread Spectrum)处理，在发送/接收部ex351进 行数模转换处理以及频率转换处理之后，经由天线ex350发送。并且，便携式电话ex114在声 音通话模式时，对通过天线ex350接收的接收数据进行放大并进行频率转换处理以及模数 转换处理，在调制/解调部ex352进行扩频处理的逆处理，在由声音信号处理部ex354转换为 模拟声音信号之后，将其从声音输出部ex356输出。

并且，在数据通信模式时发送的情况下，通过主体部的操作键部ex366等 的操作被输入的的文本数据经由操作输入控制部ex362被发送到主控制部ex360。 主控制部ex360，由调制/解调部ex352对文本数据进行扩频处理，在发送/接收部ex351进行 数模转换处理以及频率转换处理之后，经由天线ex350发送到ex110。在接收 的情况下、针对接收的数据进行与上述几乎相反的处理，发送到显示部ex358。

在数据通信模式时发送影像、静止图像、或影像和声音的情况下，影像信号处理部 ex355，将从摄像机部ex365提供的影像信号，按照所述各实施例表示的运动图像编码方法 来进行压缩编码(即，作为本发明的一个方式涉及的图像编码装置来发挥作用)，并将被编 码的影像数据发送到多路复用/分离部ex353。此外，声音信号处理部ex354，对摄像机部 ex365拍摄影像、静止图像等中，由声音输入部ex356收集的声音信号进行编码，并将被编码 的声音数据发送到多路复用/分离部ex353。

多路复用/分离部ex353以规定的方式，对从影像信号处理部ex355提供来的被编 码的影像数据和从声音信号处理部ex354提供来的被编码的声音数据进行多路复用，将通 过多路复用而得到的多路复用数据在调制/解调部(调制/解调电路部)ex352进行扩频处 理，并在发送/接收部ex351进行数模转换处理以及频率转换处理之后，经由天线ex350发 送。

在数据通信模式时，接收被链接在主页等的运动图像文件的数据的情况下，或者 接收被添加了影像及/或声音的的情况下，为了经由天线ex350解码被接收的多路 复用数据，多路复用/分离部ex353，通过分割多路复用数据来分为影像数据的比特流和声 音数据的比特流，经由同步总线ex370将被编码的影像数据提供给影像信号处理部ex355， 并且将被编码的声音数据提供给声音信号处理部ex354。影像信号处理部ex355根据与所述 各实施例示出的运动图像编码方法对应的运动图像解码方法进行解码来解码影像信号 (即，作为本发明的图像解码装置来发挥作用)，通过LCD控制部ex359在显示部ex358显示例 如被链接在主页的运动图像文件中包含的影像、静止图像。此外，声音信号处理部ex354解 码声音信号，从声音输出部ex357输出声音。

并且，上述便携式电话ex114等终端与电视机ex300同样，除可以考虑到是具有编 码器以及解码器双方的收发信型终端的形式以外，还可以考虑到是仅具有编码器的发送终 端，以及仅具有解码器的接收终端的共三种形式。并且，上述说明了在数字广播用系统 ex200，接收以及发送在影像数据上多路复用了音乐数据等的多路复用数据，不过可以是除 了声音数据以外多路复用了有关影像的文字数据等的数据，也可以是影像数据本身，而不 是多路复用数据。

这样，在上述的实施例所示的图像编码方法或图像解码方法能够适用于上述的任 一个设备以及系统，这样，能够得到在上述的实施例中说明的效果。

此外，本发明不被以上所述的实施例所限定，可以不脱离本发明的范围而进行各 种变形或修改。

(实施例8)

可以按照需要适宜地切换上述的各个实施例所示的运动图像编码方法或装置与 依照MPEG－2、MPEG4－AVC、VC－1等不同的标准的运动图像编码方法或装置，来生成影像数 据。

在这里，在根据各自不同的标准生成了多个影像数据的情况下，需要在解码时选 择与各自的标准对应的解码方法。然而，不能识别要解码的影像数据是依据了哪个标准的 数据，所以产生不能选择恰当的解码方法这样的课题。

为了解决这个课题可以是在影像数据上多路复用了声音数据等的多路复用数据 包含识别信息的构成，该识别信息表示影像数据是依据了哪个标准。下面说明包含由上述 的各个实施例所示的运动图像编码方法或装置生成的影像数据的多路复用数据的具体构 成。多路复用数据是MPEG－2传输流形式的数字流。

图31是表示多路复用数据的构成的图。如图22所示多路复用数据是通过对如下流 中的一个以上进行多路复用而得到的数据：视频流，音频流，字幕流(presentation graphics：PG)，交互式图形流(interactive graphics stream)。视频流表示电影的主影像 以及副影像，音频流(IG)表示电影的主声音部分和与主声音混合的副声音，字幕流表示电 影的字幕。在这里，主影像表示在画面显示的通常的影像，副影像是指在主影像中以小画面 显示的影像。还有，交互式图形流示出通过在画面上配置图形用户界面元件而作成的对话 画面。视频流，根据上述的各个实施例所示的运动图像编码方法或装置，以及以往的MPEG－ 2、MPEG4－AVC、VC－1等标准的运动图像编码方法或装置被编码。音频流，根据杜比AC－3、 Dolby Digital Plus、MLP、DTS、DTS－HD、或线性PCM等方式被编码。

多路复用数据中包含的各个流由PID被识别。例如，针对用于电影的影像的视频流 分配0x1011，针对音频流分配从0x1100到0x111F，针对字幕流分配从0x1200到0x121F，针对 交互式图形流分配从0x1400到0x141F，针对用于电影的副影像的视频流分配从0x1B00到 0x1B1F，针对用于与主声音混合的副声音的音频流分配从0x1A00到0x1A1F。

图32是表示多路复用数据怎样被多路复用的模式图。首先，由多个视频帧组成的 视频流ex235、由多个音频帧组成的音频流ex238，分别变换为PES数据包列ex236以及 ex239，变换为TS数据包ex237以及ex240。同样地将字幕流ex241及交互式图形ex244的数 据，分别变换为PES数据包列ex242以及ex245，进一步变换为TS数据包ex243以及ex246。多 路复用数据ex247，将这些TS数据包多路复用在1个流上而被构成。

图33是更加详细地表示在PES数据包列中视频流怎样被存储的图。在图33的第一 段示出视频流的视频帧列。第二段示出PES数据包列。如图33的箭头yy1,yy2,yy3,yy4所示， 作为视频流中的多个Video Presentation Unit的I图片，B图片，P图片，按每个图片被分 割，存储到PES数据包的有效负载中。各个PES数据包拥有PES头，PES头中存储了作为图片的 显示时刻的PTS(Presentation Time－Stamp：显示时间戳)、作为图片的解码时刻的DTS (Decoding Time－Stamp：解码时间戳)。

图34示出最终被写入到多路复用数据中的TS数据包的形式。TS数据包是具有识别 流的PID等的信息的4Byte的TS头以及存储数据的184Byte的TS有效负载所构成的188Byte 定长的数据包，所述PES数据包被分割被存储到TS有效负载。在是BD－ROM的情况下，TS数据 包被赋予4Byte的TP_Extra_Header，构成192Byte的源数据包，被写入到多路复用数据。在 TP_Extra_Header上记载了ATS(Arrival_Time_Stamp)等的信息。ATS表示该TS数据包向解 码器的PID滤波器的传输开始时刻。在多路复用数据中如图25的下段所示排列了源数据包， 从多路复用数据的开头增加的编号被称为SPN(源数据包编号)。

此外，多路复用数据中包含的TS数据包中除了影像、声音、字幕等各个流以外，还 有PAT(Program Association Table：节目关联表)、PMT(Program Map Table：节目映射 表)、PCR(Program Clock Reference：节目时钟基准)等。PAT表示多路复用数据中所利用的 PMT的PID是什么，PAT自身的PID登记为0。PMT具有多路复用数据中包含的影像、声音、字幕 等的各个流的PID以及与各个PID对应的流的属性信息，并且具有与多路复用数据有关的各 种描述符。描述符具有复制控制信息等，该复制控制信息指示多路复用数据的复制许可、不 许可。PCR为了使作为ATS的时间轴的ATC(Arrival Time Clock)与作为PTS、DTS的时间轴的 STC(System Time Clock)同步，具有与该PCR数据包传输到解码器的ATS对应的STC时间的 信息。

图35是详细地说明PMT的数据构成的图。PMT的开头设置了PMT头，用于记载该PMT 中包含的数据的长度等。在其之后设置了多个与多路复用数据有关的描述符。上述复制控 制信息等作为描述符被记载。在描述符之后设置了多个与多路复用数据中包含的各个流有 关的流信息。流信息，为了识别流的压缩编解码等，由记载了流类型、流的PID、流的属性信 息(帧速率、纵横比等)的流描述符所构成。流描述符的数量与在多路复用数据中存在的流 的数量相同。

在记录介质等记录的情况下，上述多路复用数据与多路复用数据信息文件一起被 记录。

如图36所示多路复用数据信息文件是多路复用数据的管理信息，与多路复用数据 1对1地对应，其由多路复用数据信息、流属性信息以及项映射(entry map)所构成。

多路复用数据信息如图36所示，由系统速率、再生开始时刻、再生结束时刻所构 成。系统速率表示多路复用数据向着后述的系统目标解码器的PID滤波器的最大传输速率。 多路复用数据中包含的ATS的间隔，被设定为是系统速率以下。再生开始时刻是多路复用数 据的开头的视频帧的PTS，再生结束时刻被设定为，在多路复用数据的尾端的视频帧的PTS 加上1帧的再生间隔。

流属性信息如图37所示，按每个PID登记包含在多路复用数据中的各个流的属性 信息。属性信息按照每个视频流、音频流、字幕流、交互式图形流，具有不同的信息。视频流 属性信息具有如下信息：该视频流以怎样的压缩编解码被压缩、构成视频流的各个图片数 据的分辨率是多少、纵横比是多少、帧速率是多少等信息。音频流属性信息，具有如下信息： 该音频流以怎样的压缩编解码被压缩、该音频流中包含的频道数是多少、与什么语言对应、 采样频率是多少等信息。这些信息，用于在播放器再生之前的解码器的初始化等。

在本实施例，利用所述多路复用数据中的PMT中包含的流类型。此外，在记录介质 中记录了多路复用数据的情况下，利用多路复用数据信息中包含的视频流属性信息。具体 而言，在上述各个实施例表示的运动图像编码方法或装置中，针对PMT中包含的流类型、或 视频流属性信息，设置设定固有的信息的步骤或单元，该固有的信息表示由上述各个实施 例示出的运动图像编码方法或装置所生成的影像数据。根据该构成，能够识别由所述各个 实施例表示的运动图像编码方法或装置所生成的影像数据与依据其他的标准的影像数据。

此外，图38表示在本实施例的运动图像解码方法的步骤。在步骤exS100，从多路复 用数据中获得PMT中包含的流类型、或者多路复用数据信息中包含的视频流属性信息。接 着，在步骤exS101，判断流类型或视频流属性信息是否表示是由所述各个实施例表示的运 动图像编码方法或装置所生成的多路复用数据。而且，在判断为流类型或视频流属性信息 表示是由所述各个实施例表示的运动图像编码方法或装置所生成的数据的情况下，在步骤 exS102，所述各实施例表示的运动图像解码方法进行解码。此外，流类型或视频流属性信息 表示是以往的MPEG－2、MPEG4－AVC、VC－1等的标准的数据的情况下，在步骤exS103，根据 所依据的以往的标准的运动图像解码方法来进行解码。

这样，通过在流类型或视频流属性信息设定新的固有值，从而在解码时，能够判断 根据所述各个实施例表示的运动图像解码方法或装置是否能够解码。从而，即时被输入了 依据不同的标准的多路复用数据时，也能够选择恰当的解码方法或装置，因此能够不产生 错误地进行解码。此外，本实施例表示的运动图像编码方法或装置，或者运动图像解码方法 或装置，能够用在上述的任一个设备以及系统。

(实施例9)

上述的各个实施例所示的运动图像编码方法以及装置、运动图像解码方法以及装 置，典型的能够以作为集成电路的LSI来实现。作为一个例子，图39示出了被制成一个芯片 的LSIex500的构成。LSIex500包括以下将要说明的要素ex501至ex509，各个要素通过总线 ex510连接。电源电路部ex505在电源为打开状态的情况下，通过向各个部提供电力，从而启 动为能够工作的状态。

例如，在进行编码处理的情况下，LSIex500，根据具有CPUex502、存储器控制器 ex503、流控制器ex504、驱动频率控制部ex512等的控制部ex501的控制，根据AV输入输出 ex509从麦克风ex117和摄像机ex113等输入AV信号。被输入的AV信号被暂时蓄积到SDRAM等 的外部的存储器ex511。根据控制部ex501的控制，存储的数据按照处理量和处理速度适当 地分为多个被发送到信号处理部ex507，在信号处理部ex507被进行声音信号的编码及/或 影像信号的编码。在这里，影像信号的编码处理是所述各个实施例说明的编码处理。在信号 处理部ex507还根据情况对被编码的声音数据以及被编码的影像数据进行多路复用等处 理，从流输入输出ex506输出到外部。该被输出的多路复用数据被发送到ex107，或者被 写入到记录介质ex215。并且，为了在多路复用时能够同步进行，而可以将数据暂时蓄积到 缓冲器ex508。

另外，以上虽然对存储器ex511作为LSIex500的外部构成进行了说明，不过也可以 被包括在LSIex500的内部。缓冲器ex508也可以不限于一个，可以具备多个缓冲器。并且， LSIex500可以被制成一个芯片，也可以是多个芯片。

此外，在上述说明中，控制部ex501具有CPUex502、存储器控制器ex503、流控制器 ex504、驱动频率控制部ex512等，不过，控制部ex501的构成，不限于这个构成。例如，可以是 信号处理部ex507还具备CPU的构成。通过在信号处理部ex507的内部也设置CPU，可以使处 理速度提高。此外，作为其他的例子，可以是CPUex502具备信号处理部ex507、或者具备信号 处理部ex507的一部分例如声音信号处理部的构成。在这样的情况下，控制部ex501是具备 信号处理部ex507或具有其一部分的CPUex502的构成。

在此，虽然例示了LSI，不过根据集成度的不同，也可以称为IC、系统LSI、超级LSI、 极超级LSI。

还有，集成电路化的方法不局限于LSI，也可以用专用电路或者通用处理器来实 现。也可以利用在LSI制造之后可编程的现场可编程门阵列(FPGA∶Field Programmable Gate Array)或可动态地重构LSI内部的电路单元的连接和设定的可重构处理器。这样的可 编程逻辑装置，典型的是加载或者从存储器等读入构成软件或者固件的程序，从而能够执 行所述各个实施例示出的运动图像编码方法、或运动图像解码方法。

而且，随着半导体技术的进步或派生出的其他的技术，若出现了能够取代LSI的集 成电路化的技术，当然也可以利用这些技术来对功能块进行集成化。有可能适用生物技术 等。

(实施例10)

在对根据所述各个实施例表示的运动图像编码方法或装置所生成的影像数据进 行解码的情况下，可以想到与对依据以往的MPEG－2、MPEG4－AVC、VC－1等标准的影像数据 进行解码的情况相比，处理量增加。因此，在LSIex500中需要设定比解码依据以往的标准的 影像数据时的CPUex502的驱动频率高的驱动频率。但是驱动频率高，则产生电力消耗高这 样的课题。

为了解决这个课题，设电视ex300、LSIex500等运动图像解码装置为如下构成，识 别影像数据依据了哪个标准，按照标准切换驱动频率的构成。图40表示在本实施例的构成 ex800。驱动频率切换部ex803，在影像数据是由所述各个实施例表示的运动图像编码方法 或装置所生成的情况下，设定高的驱动频率。而且，对执行所述各个实施例表示的运动图像 解码方法的解码处理部ex801进行指示，以解码影像数据。另一方面，在影像数据是依据以 往的标准的影像数据的情况的情况下，与影像数据由所述各实施例示出的运动图像编码方 法或装置所生成的情况相比，设定低的驱动频率。而且，指示依据以往的标准的解码处理部 ex802，对影像数据进行解码。

更具体而言，驱动频率切换部ex803由图39的CPUex502与驱动频率控制部ex512所 构成。此外，执行所述各个实施例示出的运动图像解码方法的解码处理部ex801，以及依据 以往的标准的解码处理部ex802，相当于图39的信号处理部ex507。CPUex502识别影像数据 依据哪个标准。而且，根据来自CPUex502的信号，驱动频率控制部ex512设定驱动频率。此 外，根据来自CPUex502的信号，信号处理部ex507进行影像数据的解码。在这里，可以考虑在 影像数据的识别中利用例如在实施例8记载的识别信息。有关识别信息，不仅限于在实施例 8记载的信息，只要是能够识别影像数据是依据哪个标准的信息就可以。例如，在根据识别 影像数据是否用于电视，是否用于盘等的外部信号，能够识别影像数据是依据哪个标准的 情况下，可以根据这样的外部信号进行识别。此外，在CPUex502的驱动频率的选择，可以考 虑根据例如如图33一样的使影像数据的标准和驱动频率对应的一览表来进行。将一览表预 先存储在缓冲器ex508和LSI的内存储器中，通过CPUex502参考这个一览表，能够选择驱动 频率。

图41示出了实施本实施例的方法的步骤。首先，在步骤exS200中，由信号处理部 ex507从多路复用数据中获得识别信息。接着，在步骤exS201中，CPUex502根据识别信息，识 别影像数据是不是由所述各个实施例示出的编码方法或装置所生成的数据。在影像数据是 由所述各个实施例示出的编码方法或装置所生成的数据情况下，在步骤exS202中，将设定 高的驱动频率的信号，由CPUex502发送到驱动频率控制部ex512。而且，在驱动频率控制部 ex512设定高的驱动频率。另一方面，在示出了是依据以往的MPEG－2、MPEG4－AVC、VC－1等 的标准的影像数据的情况下，在步骤exS203中，将设定低的驱动频率的信号，由CPUex502发 送到驱动频率控制部ex512。而且，在驱动频率控制部ex512，设定与影像数据由所述各个实 施例示出的编码方法或装置所生成的情况相比低的驱动频率。

加之，与驱动频率的切换联动，通过变更对LSIex500或包含LSIex500的装置施加 的电压，可以提高省电效果。例如，在设定低驱动频率的情况下，随之与设定高驱动频率的 情况相比，可以考虑使对LSIex500或包含LSIex500的装置施加的电压设定为低电压。

此外，关于驱动频率的设定方法，只要在解码时的处理量大的情况下，设定高的驱 动频率，在解码时的处理量小的情况下，设定低的驱动频率就可以，不限于上述的设定方 法。例如对依据MPEG4－AVC标准的影像数据进行解码的处理量，大于对由所述各个实施例 示出的运动图像编码方法或装置所生成的影像数据进行解码的处理量的情况下，可以考虑 将驱动频率的设定与上述的情况相反地进行。

加之，驱动频率的设定方法不限于使驱动频率设为低的构成。例如，可以考虑在识 别信息示出是由所述各个实施例示出的运动图像编码方法或装置所生成的影像数据的情 况下，对LSIex500或包含LSIex500的装置施加的电压设定为高的电压，在示出是依据以往 的MPEG－2、MPEG4－AVC、VC－1等的标准的影像数据的情况下，对LSIex500或包含LSIex500 的装置施加的电压设定为低的电压。此外，作为其他的例子，可以考虑在识别信息示出是由 所述各个实施例示出的运动图像编码方法或装置所生成的影像数据的情况下，不停止 CPUex502的驱动，在示出是依据以往的MPEG－2、MPEG4－AVC、VC－1等的标准的影像数据的 情况下，因为处理有余量，可以暂时停止CPUex502的驱动。即使在识别信息示出是由所述各 个实施例示出的运动图像编码方法或装置所生成的影像数据的情况下，如果处理有余量， 也可以考虑暂时停止CPUex502的驱动。这个情况下，可以考虑与识别信息示出是依据以往 的MPEG－2、MPEG4－AVC、VC－1等的标准的影像数据的情况相比，停止时间设定地较短。

这样，按照影像数据依据的标准来切换驱动频率，从而能够达到省电化。此外，在 利用电池驱动LSIex500或包含LSIex500的装置的情况下，随着省电化还可以延长电池的寿 命。

(实施例11)

电视和便携式电话等上述的设备以及系统，有时被输入依据不同标准的多个影像 数据。这样，即使在被输入了依据不同标准的多个影像数据的情况下也能进行解码，从而 LSIex500的信号处理部ex507需要与多个标准对应。但是，与各个标准对应的信号处理部 ex507个别利用时，使LSIex500的电路规模变大，还产生成本增加这样的课题。

为了解决上述课题可以是如下的构成，将用于执行所述各个实施例示出的运动图 像解码方法的解码处理部与依据以往的MPEG－2、MPEG4－AVC、VC－1等的标准的解码处理 部，进行一部分共享。图43A的ex900示出该构成例。例如，所述各个实施例示出的运动图像 解码方法和依据MPEG4－AVC标准的运动图像解码方法，在熵编码、逆量化、解块及滤波器、 运动补偿等处理中，一部分处理内容是共同的。关于共同的处理内容，可以考虑共享与 MPEG4－AVC标准对应的解码处理部ex902，关于与MPEG4－AVC标准不对应的本发明特有的 其他处理内容，使用专用的解码处理部ex901这样的构成。尤其是本发明的一个方案中，熵 解码具有特征，从而可以考虑如下，例如熵解码中利用专用的解码处理部ex901，除此之外 的逆量化、解块滤波器、运动补偿的任一个或全部的处理中共用解码处理部。对于解码处理 部的共享化，关于共同的处理内容，共享用于执行所述各个实施例示出的运动图像解码方 法的解码处理部，关于MPEG4－AVC标准特有的处理内容，使用专用的解码处理部。

此外，图43B的ex1000示出了处理的部分共享化的其他例子。在这个例子的构成 是，使用与本发明特有的处理内容对应的专用的解码处理部ex1001、与其他的以往标准特 有的处理内容对应的专用的解码处理部ex1002、与本发明的运动图像解码方法及其他的以 往标准的运动图像解码方法共同的处理内容相对应的共用的解码处理部ex1003。在这里， 专用的解码处理部ex1001、ex1002，不一定是本发明或其他以往标准特有的处理内容所特 有的，可以是能够执行其他通用处理的部。此外，也可以是在LSIex500安装本实施例的构 成。

这样，关于本发明的一个方案涉及地运动图像解码方法与以往的标准的运动图像 解码方法共同的处理内容，通过共享解码处理部，可以使LSI的电路规模变小，并且能够减 少成本。

工业实用性

本发明能够适用于图像编码方法、图像解码方法、图像编码装置及图像解码装置。 此外，本发明能够利用于数据的存储、传输、通信等各种用途。例如，本发明能够用于电视 机、数字录像机、汽车导航系统、便携式电话、数字图片相机以及数字摄像机等信息显示设 备及摄像设备。

符号说明

200 图像编码装置

205 减法器

210 变换及量化部

220 熵编码部

230，420 逆量化及逆变换部

235，425 加法器

240，430 去块滤波器

250，440 存储器

260，450 帧内预测部

270 运动检测部

280，460 运动补偿部

290，470 帧内/帧间切换开关

400 图像解码装置

410 熵解码部