JP-2026077657-A - サブピクチャに基づく映像コーディング装置及び方法

JP2026077657AJP 2026077657 AJP2026077657 AJP 2026077657AJP-2026077657-A

Abstract

【課題】シグナリング効率を高めたサブピクチャに基づく映像コーディング装置を提供する。【解決手段】本文書の実施形態によると、サブピクチャ情報が存在するかどうかに基づいて仮想境界関連情報（例えば、仮想境界位置関連情報）がシーケンスパラメータセットでシグナリングされるかどうかが決定できる。例えば、サブピクチャ情報が当該シーケンスに対して存在する場合、仮想境界関連情報（例えば、仮想境界位置関連情報）がシーケンスパラメータセットでシグナリングされることができる。【選択図】図５

Inventors

ヘンドリーヘンドリー

Assignees

エルジーエレクトロニクスインコーポレイティド

Dates

Publication Date: 20260513
Application Date: 20260205
Priority Date: 20191223

Claims (3)

デコード装置により実行される映像デコード方法において、ビットストリームを介してレジデュアル情報を含む映像情報を取得するステップと、前記レジデュアル情報に基づいて現在ピクチャの復元サンプルを生成するステップと、前記復元サンプルに対するインループフィルタリング手順に基づいて修正された復元サンプルを生成するステップと、を含み、前記映像情報は、シーケンスパラメータセット（ＳＰＳ）及びピクチャヘッダを含み、前記ＳＰＳは、サブピクチャ関連情報が前記ＳＰＳに含まれるかどうかを示すサブピクチャ存在フラグを含み、前記サブピクチャ関連情報が前記ＳＰＳに含まれることを前記サブピクチャ存在フラグが示す場合、前記現在ピクチャ内のサブピクチャの数は１であり、仮想境界の位置に関する情報は、前記ピクチャヘッダに含まれないが、前記ＳＰＳに含まれると決定され、前記仮想境界の位置に関する情報は、垂直の仮想境界の位置に関する情報及び水平の仮想境界の位置に関する情報を含む、映像デコード方法。
エンコード装置により実行される映像エンコード方法において、現在ブロックに対するレジデュアルサンプルを生成するステップと、前記現在ブロックに対する前記レジデュアルサンプルに基づいてレジデュアル情報を生成するステップと、現在ピクチャの復元サンプルのためのインループフィルタリング関連情報を生成するステップと、前記レジデュアル情報及び前記インループフィルタリング関連情報を含む映像情報をエンコードするステップと、を含み、前記映像情報は、シーケンスパラメータセット（ＳＰＳ）及びピクチャヘッダを含み、前記ＳＰＳは、サブピクチャ関連情報が前記ＳＰＳに含まれるかどうかを示すサブピクチャ存在フラグを含み、前記サブピクチャ関連情報が前記ＳＰＳに含まれることを前記サブピクチャ存在フラグが示す場合、前記現在ピクチャ内のサブピクチャの数は１であり、仮想境界の位置に関する情報は、前記ピクチャヘッダに含まれないが、前記ＳＰＳに含まれると決定され、前記仮想境界の位置に関する情報は、垂直の仮想境界の位置に関する情報及び水平の仮想境界の位置に関する情報を含む、映像エンコード方法。
映像に対するデータの送信方法において、前記映像に対するビットストリームを取得するステップであって、前記ビットストリームは、現在ブロックに対するレジデュアルサンプルを生成し、前記現在ブロックに対する前記レジデュアルサンプルに基づいてレジデュアル情報を生成し、現在ピクチャの復元サンプルのためのインループフィルタリング関連情報を生成し、前記レジデュアル情報及び前記インループフィルタリング関連情報を含む映像情報をエンコードすることに基づいて生成される、ステップと、前記ビットストリームを含む前記データを送信するステップと、を含み、前記映像情報は、シーケンスパラメータセット（ＳＰＳ）及びピクチャヘッダを含み、前記ＳＰＳは、サブピクチャ関連情報が前記ＳＰＳに含まれるかどうかを示すサブピクチャ存在フラグを含み、前記サブピクチャ関連情報が前記ＳＰＳに含まれることを前記サブピクチャ存在フラグが示す場合、前記現在ピクチャ内のサブピクチャの数は１であり、仮想境界の位置に関する情報は、前記ピクチャヘッダに含まれないが、前記ＳＰＳに含まれると決定され、前記仮想境界の位置に関する情報は、垂直の仮想境界の位置に関する情報及び水平の仮想境界の位置に関する情報を含む、データ送信方法。

Description

本文書は、サブピクチャに基づく映像コーディング装置及び方法に関する。近年、４Ｋ又は８Ｋ以上のＵＨＤ（ＵｌｔｒａＨｉｇｈＤｅｆｉｎｉｔｉｏｎ）映像／ビデオのような高解像度、高品質の映像／ビデオに対する需要が様々な分野で増加している。映像／ビデオデータが高解像度、高品質になるほど、既存の映像／ビデオデータに比べて相対的に送信される情報量又はビット量が増加するので、既存の有無線広帯域回線のような媒体を利用して映像データを送信するか、既存の格納媒体を利用して映像／ビデオデータを格納する場合、送信費用と格納費用が増加される。また、近年、ＶＲ（ＶｉｒｔｕａｌＲｅａｌｉｔｙ）、ＡＲ（ＡｒｔｉｆｉｃｉａｌＲｅａｌｔｉｙ）コンテンツやホログラムなどの実感メディア（ＩｍｍｅｒｓｉｖｅＭｅｄｉａ）に対する関心及び需要が増加しており、ゲーム映像のように、現実映像と異なる映像特性を有する映像／ビデオに対する放送が増加している。これにより、前記のような様々な特性を有する高解像度・高品質の映像／ビデオの情報を効果的に圧縮して送信するか、格納し、再生するために高効率の映像／ビデオ圧縮技術が求められる。具体的に、主観的／客観的ビジュアルの品質を高めるために、ピクチャはサブピクチャで構成され、サブピクチャ関連情報のシグナリングの効率を高めるための案に対する議論がある。本文書の実施形態に適用されることができるビデオ／映像コーディングシステムの例を概略的に示す。本文書の実施形態に適用されることができるビデオ／映像エンコード装置の構成を概略的に説明する図面である。本文書の実施形態に適用されることができるビデオ／映像デコード装置の構成を概略的に説明する図面である。コーディングされた映像／ビデオに対する階層構造を例示的に示す。本文書の一実施形態によるピクチャを示す。本文書の一実施形態によるサブピクチャ／スライス／タイルに基づくエンコード方法を示す。本文書の一実施形態によるサブピクチャ／スライス／タイルに基づくデコード方法を示す。エンコード装置におけるフィルタリングに基づくエンコード方法を説明するためのフローチャートである。デコード装置におけるフィルタリングに基づくデコード方法を説明するためのフローチャートである。本文書の実施形態によるビデオ／映像エンコード方法及び関連コンポーネントの一例を概略的に示す。本文書の実施形態によるビデオ／映像エンコード方法及び関連コンポーネントの一例を概略的に示す。本文書の実施形態による映像／ビデオデコード方法及び関連コンポーネントの一例を概略的に示す。本文書の実施形態による映像／ビデオデコード方法及び関連コンポーネントの一例を概略的に示す。本文書で開示された実施形態が適用され得るコンテンツストリーミングシステムの例を示す。本文書は、様々な変更を加えることができ、種々の実施形態を有することができ、特定実施形態を図面に例示し、詳細に説明しようとする。しかしながら、これは、本文書を特定実施形態に限定しようとするものではない。本明細書で常用する用語は、単に特定の実施形態を説明するために使用されたものであって、本文書の技術的思想を限定しようとする意図で使用されるものではない。単数の表現は、文脈上明白に異なるように意味しない限り、複数の表現を含む。本明細書において「含む」または「有する」などの用語は、明細書上に記載された特徴、数字、ステップ、動作、構成要素、部品、またはこれらを組み合わせたものが存在することを指定しようとするものであり、１つまたはそれ以上の他の特徴や数字、ステップ、動作、構成要素、部品、またはこれらを組み合わせたものなどの存在または付加可能性を予め排除しないことと理解されるべきである。一方、本文書で説明される図面上の各構成は、互いに異なる特徴的な機能に関する説明の都合上、独立的に図示されたものであって、各構成が互いに別個のハードウェアや別個のソフトウェアで具現されるということを意味するものではない。例えば、各構成のうち、２つ以上の構成が結合されて１つの構成をなすこともでき、１つの構成を複数の構成に分けることもできる。各構成が統合及び／又は分離された実施形態も本文書の本質から外れない限り、本文書の権利範囲に含まれる。以下、添付の図面を参照して、本文書の好ましい実施形態をより詳細に説明する。以下、図面上の同一の構成要素に対しては同一の参照符号を使用し、同一の構成要素について重複した説明は省略する。この文書は、ビデオ／映像コーディングに関する。例えば、この文書において開示された方法／実施形態は、ＶＶＣ（ＶｅｒｓａｔｉｌｅＶｉｄｅｏＣｏｄｉｎｇ）標準（ＩＴＵ－ＴＲｅｃ．Ｈ．２６６）、ＶＶＣ以後の次世代ビデオ／イメージコーディング標準、またはそれ以外のビデオコーディング関連標準（例えば、ＨＥＶＣ（ＨｉｇｈＥｆｆｉｃｉｅｎｃｙＶｉｄｅｏＣｏｄｉｎｇ）標準（ＩＴＵ－ＴＲｅｃ．Ｈ．２６５）、ＥＶＣ（ｅｓｓｅｎｔｉａｌｖｉｄｅｏｃｏｄｉｎｇ）標準、ＡＶＳ２標準など）に関連する。この文書ではビデオ／映像コーディングに関する多様な実施形態を提示し、他の言及がない限り、前記実施形態は、互いに組み合わせて実行されることもできる。この文書においてビデオ（ｖｉｄｅｏ）は、時間の流れによる一連の映像（ｉｍａｇｅ）の集合を意味し得る。ピクチャ（ｐｉｃｔｕｒｅ）は、一般に特定の時間帯の１つの映像を示す単位を意味し、スライス（ｓｌｉｃｅ）／タイル（ｔｉｌｅ）はコーディングにおいてピクチャの一部を構成する単位である。スライス／タイルは、１つ以上のＣＴＵ（ｃｏｄｉｎｇｔｒｅｅｕｎｉｔ）を含んでもよい。１つのピクチャは１つ以上のスライス／タイルで構成されてもよい。１つのピクチャは１つ以上のタイルグループで構成されてもよい。１つのタイルグループは１つ以上のタイルを含んでもよい。ピクセル（ｐｉｘｅｌ）又はペル（ｐｅｌ）は、１つのピクチャ（又は、映像）を構成する最小の単位を意味し得る。また、ピクセルに対応する用語として「サンプル（ｓａｍｐｌｅ）」が使用されてもよい。サンプルは、一般的にピクセル又はピクセルの値を示し、ルマ（ｌｕｍａ）成分のピクセル／ピクセル値のみを示すこともでき、クロマ（ｃｈｒｏｍａ）成分のピクセル／ピクセル値のみを示すこともできる。または、サンプルは、空間ドメインでのピクセル値を意味することもでき、このようなピクセル値が周波数ドメインに変換されると、周波数ドメインでの変換係数を意味することもできる。ユニット（ｕｎｉｔ）は、映像処理の基本単位を示す。ユニットは、ピクチャの特定領域及び当該領域に関する情報のうち少なくとも１つを含む。１つのユニットは、１つのルマブロック及び２つのクロマ（例えば、ｃｂ、ｃｒ）ブロックを含む。ユニットは、場合によって、ブロック（ｂｌｏｃｋ）または領域（ａｒｅａ）などの用語と混用して使用されてもよい。一般的な場合、Ｍ×Ｎブロックは、Ｍ個の列とＮ個の行からなるサンプル（または、サンプルアレイ）または変換係数（ｔｒａｎｓｆｏｒｍｃｏｅｆｆｉｃｉｅｎｔ）の集合（又は、アレイ）を含む。本文書において、「／」と「、」は、「及び／又は」と解釈される。例えば、「Ａ／Ｂ」は「Ａ及び／又はＢ」と解釈され、「Ａ、Ｂ」は「Ａ及び／又はＢ」と解釈される。追加的に、「Ａ／Ｂ／Ｃ」は「Ａ、Ｂ及び／又はＣの少なくとも１つ」を意味する。また、「Ａ、Ｂ、Ｃ」も「Ａ、Ｂ及び／又はＣの少なくとも１つ」を意味する。追加的に、本文書において「又は」は「及び／又は」と解釈される。例えば、「Ａ又はＢ」は、１）「Ａ」のみを意味し、２）「Ｂ」のみを意味するか、３）「Ａ及びＢ」を意味し得る。言い換えれば、本文書の「又は」は「追加的に又は代替的に（ａｄｉｔｉｏｎａｌｌｙｏｒａｌｔｅｒｎａｔｉｖｅｌｙ）」を意味し得る。本明細書において「少なくとも１つのＡ及びＢ（ａｔｌｅａｓｔｏｎｅｏｆＡａｎｄＢ）」は、「Ａのみ」、「Ｂのみ」又は「ＡとＢの両方」を意味し得る。また、本明細書において「少なくとも１つのＡ又はＢ（ａｔｌｅａｓｔｏｎｅｏｆＡｏｒＢ）」や「少なくとも１つのＡ及び／又はＢ（ａｔｌｅａｓｔｏｎｅｏｆＡａｎｄ／ｏｒＢ）」という表現は、「少なくとも１つのＡ及びＢ（ａｔｌｅａｓｔｏｎｅｏｆＡａｎｄＢ）」と同様に解釈され得る。また、本明細書において、「少なくとも１つのＡ、Ｂ及びＣ（ａｔｌｅａｓｔｏｎｅｏｆＡ，ＢａｎｄＣ）」は、「Ａのみ」、「Ｂのみ」、「Ｃのみ」又は「Ａ、Ｂ及びＣの任意の全ての組み合わせ（ａｎｙｃｏｍｂｉｎａｔｉｏｎｏｆＡ，ＢａｎｄＣ）」を意味し得る。また、「少なくとも１つのＡ、Ｂ又はＣ（ａｔｌｅａｓｔｏｎｅｏｆＡ，ＢｏｒＣ）」や「少なくとも１つのＡ、Ｂ及び／又はＣ（ａｔｌｅａｓｔｏｎｅｏｆＡ，ＢａｎｄＣ）」は「少なくとも１つのＡ、Ｂ及びＣ（ａｔｌｅａｓｔｏｎｅｏｆＡ，ＢａｎｄＣ））」を意味し得る。また、本明細書において用いられる括弧は「例えば（ｆｏｒｅｘａｍｐｌｅ）」を意味し得る。具体的に、「予測（イントラ予測）」と表示されている場合、「予測」の一例として「イントラ予測」が提案されたものであり得る。言い換えると、本明細書の「予測」は「イントラ予測」に制限（ｌｉｍｉｔ）されることなく、「イントラ予測」が「予測」の一例として提案されるものであり得る。また、「予測（すなわち、イントラ予測）」と表示されている場合にも、「予測」の一例として「イントラ予測」が提案されたものであり得る。本明細書において１つの図面内において個別に説明される技術的特徴は、個別に実現されてもよく、同時に実現されてもよい。図１は、本文書が適用されることができるビデオ／映像コーディングシステムの例を概略的に示す。図１に示すように、ビデオ／映像コーディングシステムはソースデバイス及び第受信デバイスを備えることができる。ソースデバイスは、エンコードされたビデオ（ｖｉｄｅｏ）／映像（ｉｍａｇｅ）情報又はデータをファイル又はストリーミング形態でデジタル格納媒体又はネットワークを介して受信デバイスに伝達することができる。前記ソースデバイスは、ビデオソース、エンコード装置、送信部を備えることができる。前記受信デバイスは、受信部、デコード装置、及びレンダラを備えることができる。前記エンコード装置は、ビデオ／映像エンコード装置と呼ばれることができ、前記デコード装置は、ビデオ／映像デコード装置と呼ばれることができる。送信機は、エンコード装置に備えられることができる。受信機は、デコード装置に備えられることができる。レンダラは、ディスプレイ部を備えることができ、ディスプレイ部は、別個のデバイス又は外部コンポーネントで構成されることもできる。ビデオソースは、ビデオ／映像のキャプチャ、合成、又は生成過程などを介してビデオ／映像を取得することができる。ビデオソースは、ビデオ／映像キャプチャデバイス及び／又はビデオ／映像生成デバイスを含むことができる。ビデオ／映像キャプチャデバイスは、例えば、１つ以上のカメラ、以前にキャプチャされたビデオ／映像を含むビデオ／映像アーカイブなどを含むことができる。ビデオ／映像生成デバイスは、例えば、コンピュータ、タブレット、及びスマートフォンなどを含むことができ、（電子的に）ビデオ／映像を生成することができる。例えば、コンピュータなどを介して仮想のビデオ／映像が生成され得るし、この場合、関連データが生成される過程にビデオ／映像キャプチャ過程が代替されることができ