Search

JP-2026077849-A - 符号化装置、復号装置及び送信装置

JP2026077849AJP 2026077849 AJP2026077849 AJP 2026077849AJP-2026077849-A

Abstract

【課題】更なる改善を実現する。 【解決手段】符号化装置１００は、回路１６０と、回路１６０に接続されたメモリ１６２と、を備え、回路１６０は、動作において、カレントブロックの動きベクトルをブロック単位で導出し、カレントブロックに含まれる複数のサブブロックの各々に対して、サブブロック単位で動きベクトルの周辺領域を探索して動きベクトルを補正するＤＭＶＲ処理を行い（Ｓ３１１）、ＤＭＶＲ処理を行った複数のサブブロックで、且つ、各々が互いに隣接するサブブロック間の境界である複数のサブブロック境界のそれぞれに対してデブロックフィルタ処理を適用するかどうかを判定し（Ｓ３１２）、判定結果に基づき、当該境界にデブロックフィルタ処理を適用し（Ｓ３１３）、デブロックフィルタ処理を適用するかどうかの判定に、デブロッキングフィルタの強度を示すＢｓ値が用いられる。 【選択図】図５５

Inventors

  • 遠間 正真
  • 西 孝啓
  • 安倍 清史
  • 加藤 祐介

Assignees

  • パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ

Dates

Publication Date
20260513
Application Date
20260219
Priority Date
20190208

Claims (3)

  1. 画像を符号化する符号化装置であって、 回路と、 前記回路に接続されたメモリと、を備え、 前記回路は、動作において、 カレントブロックの動きベクトルをブロック単位で導出し、 前記カレントブロックに含まれる複数のサブブロックの各々に対して、サブブロック単位で前記動きベクトルの周辺領域を探索して前記動きベクトルを補正するＤＭＶＲ（Dynamic Motion Vector Refreshing）処理を行い、 前記ＤＭＶＲ処理を行った前記複数のサブブロックで、且つ、各々が互いに隣接するサブブロック間の境界である複数のサブブロック境界のそれぞれに対してデブロックフィルタ処理を適用するかどうかを判定し、 判定結果に基づき、当該境界に前記デブロックフィルタ処理を適用し、 前記デブロックフィルタ処理を適用するかどうかの判定に、デブロッキングフィルタの強度を示すＢｓ（Boundary Strength）値が用いられる、 符号化装置。
  2. 画像を復号する復号装置であって、 回路と、 前記回路に接続されたメモリと、を備え、 前記回路は、動作において、 カレントブロックの動きベクトルをブロック単位で導出し、 前記カレントブロックに含まれる複数のサブブロックの各々に対して、サブブロック単位で前記動きベクトルの周辺領域を探索して前記動きベクトルを補正するＤＭＶＲ（Dynamic Motion Vector Refreshing）処理を行い、 前記ＤＭＶＲ処理を行った前記複数のサブブロックで、且つ、各々が互いに隣接するサブブロック間の境界である複数のサブブロック境界のそれぞれに対してデブロックフィルタ処理を適用するかどうかを判定し、 判定結果に基づき、当該境界に前記デブロックフィルタ処理を適用し、 前記デブロックフィルタ処理を適用するかどうかの判定に、デブロッキングフィルタの強度を示すＢｓ（Boundary Strength）値が用いられる、 復号装置。
  3. ビットストリームを送信する送信装置であって、 前記ビットストリームは、符号化方法により生成され、 前記符号化方法は、 カレントブロックの動きベクトルをブロック単位で導出し、 前記カレントブロックに含まれる複数のサブブロックの各々に対して、サブブロック単位で前記動きベクトルの周辺領域を探索して前記動きベクトルを補正するＤＭＶＲ（Dynamic Motion Vector Refreshing）処理を行い、 前記ＤＭＶＲ処理を行った前記複数のサブブロックで、且つ、各々が互いに隣接するサブブロック間の境界である複数のサブブロック境界のそれぞれに対してデブロックフィルタ処理を適用するかどうかを判定し、 判定結果に基づき、当該境界に前記デブロックフィルタ処理を適用し、 前記デブロックフィルタ処理を適用するかどうかの判定に、デブロッキングフィルタの強度を示すＢｓ（Boundary Strength）値が用いられる、 送信装置。

Description

本開示は、ビデオコーディングに関し、例えば、動画像の符号化及び復号におけるシステム、構成要素、ならびに方法などに関する。 ビデオコーディング技術は、Ｈ．２６１及びＭＰＥＧ－１から、Ｈ．２６４／ＡＶＣ（Ａｄｖａｎｃｅｄ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）、ＭＰＥＧ－ＬＡ、Ｈ．２６５／ＨＥＶＣ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）、及びＨ．２６６／ＶＶＣ（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｅｃ）へ進歩している。この進歩に伴い、様々な用途において増え続けるデジタルビデオデータ量を処理するために、ビデオコーディング技術の改良及び最適化を提供することが常に必要とされている。 Ｈ．２６５（ＩＳＯ／ＩＥＣ ２３００８－２ ＨＥＶＣ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）） 図１は、実施の形態に係る符号化装置の機能構成を示すブロック図である。図２は、符号化装置による全体的な符号化処理の一例を示すフローチャートである。図３は、ブロック分割の一例を示す概念図である。図４Ａは、スライスの構成の一例を示す概念図である。図４Ｂは、タイルの構成の一例を示す概念図である。図５Ａは、様々な変換タイプに対応する変換基底関数を示す表である。図５Ｂは、ＳＶＴ（Ｓｐａｔｉａｌｌｙ Ｖａｒｙｉｎｇ Ｔｒａｎｓｆｏｒｍ）の一例を示す概念図である。図６Ａは、ＡＬＦ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）で用いられるフィルタの形状の一例を示す概念図である。図６Ｂは、ＡＬＦで用いられるフィルタの形状の他の一例を示す概念図である。図６Ｃは、ＡＬＦで用いられるフィルタの形状の他の一例を示す概念図である。図７は、ＤＢＦ（ｄｅｂｌｏｃｋｉｎｇ ｆｉｌｔｅｒ）として機能するループフィルタ部の詳細な構成の一例を示すブロック図である。図８は、ブロック境界に対して対称なフィルタ特性を有するデブロッキング・フィルタの例を示す概念図である。図９は、デブロッキング・フィルタ処理が行われるブロック境界を説明するための概念図である。図１０は、Ｂｓ値の一例を示す概念図である。図１１は、符号化装置の予測処理部で行われる処理の一例を示すフローチャートである。図１２は、符号化装置の予測処理部で行われる処理の他の例を示すフローチャートである。図１３は、符号化装置の予測処理部で行われる処理の他の例を示すフローチャートである。図１４は、実施の形態のイントラ予測における６７個のイントラ予測モードの一例を示す概念図である。図１５は、インター予測の基本的な処理の流れの一例を示すフローチャートである。図１６は、動きベクトル導出の一例を示すフローチャートである。図１７は、動きベクトル導出の他の例を示すフローチャートである。図１８は、動きベクトル導出の他の例を示すフローチャートである。図１９は、ノーマルインターモードによるインター予測の例を示すフローチャートである。図２０は、マージモードによるインター予測の例を示すフローチャートである。図２１は、マージモードによる動きベクトル導出処理の一例を説明するための概念図である。図２２は、ＦＲＵＣ（ｆｒａｍｅ ｒａｔｅ ｕｐ ｃｏｎｖｅｒｓｉｏｎ）処理の一例を示すフローチャートである。図２３は、動き軌道に沿う２つのブロック間でのパターンマッチング（バイラテラルマッチング）の一例を説明するための概念図である。図２４は、カレントピクチャ内のテンプレートと参照ピクチャ内のブロックとの間でのパターンマッチング（テンプレートマッチング）の一例を説明するための概念図である。図２５Ａは、複数の隣接ブロックの動きベクトルに基づくサブブロック単位の動きベクトルの導出の一例を説明するための概念図である。図２５Ｂは、３つの制御ポイントを有するアフィンモードにおけるサブブロック単位の動きベクトルの導出の一例を説明するための概念図である。図２６Ａは、アフィンマージモードを説明するための概念図である。図２６Ｂは、２つの制御ポイントを有するアフィンマージモードを説明するための概念図である。図２６Ｃは、３つの制御ポイントを有するアフィンマージモードを説明するための概念図である。図２７は、アフィンマージモードの処理の一例を示すフローチャートである。図２８Ａは、２つの制御ポイントを有するアフィンインターモードを説明するための概念図である。図２８Ｂは、３つの制御ポイントを有するアフィンインターモードを説明するための概念図である。図２９は、アフィンインターモードの処理の一例を示すフローチャートである。図３０Ａは、カレントブロックが３つの制御ポイントを有し、隣接ブロックが２つの制御ポイントを有するアフィンインターモードを説明するための概念図である。図３０Ｂは、カレントブロックが２つの制御ポイントを有し、隣接ブロックが３つの制御ポイントを有するアフィンインターモードを説明するための概念図である。図３１Ａは、ＤＭＶＲ（ｄｅｃｏｄｅｒ ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｒｅｆｉｎｅｍｅｎｔ）を含むマージモードを示すフローチャートである。図３１Ｂは、ＤＭＶＲ処理の一例を説明するための概念図である。図３２は、予測画像の生成の一例を示すフローチャートである。図３３は、予測画像の生成の他の例を示すフローチャートである。図３４は、予測画像の生成の他の例を示すフローチャートである。図３５は、ＯＢＭＣ（ｏｖｅｒｌａｐｐｅｄ ｂｌｏｃｋ ｍｏｔｉｏｎ ｃｏｍｐｅｎｓａｔｉｏｎ）処理による予測画像補正処理の一例を説明するためのフローチャートである。図３６は、ＯＢＭＣ処理による予測画像補正処理の一例を説明するための概念図である。図３７は、２つの三角形の予測画像の生成を説明するための概念図である。図３８は、等速直線運動を仮定したモデルを説明するための概念図である。図３９は、ＬＩＣ（ｌｏｃａｌ ｉｌｌｕｍｉｎａｔｉｏｎ ｃｏｍｐｅｎｓａｔｉｏｎ）処理による輝度補正処理を用いた予測画像生成方法の一例を説明するための概念図である。図４０は、符号化装置の実装例を示すブロック図である。図４１は、実施の形態に係る復号装置の機能構成を示すブロック図である。図４２は、復号装置による全体的な復号処理の一例を示すフローチャートである。図４３は、復号装置の予測処理部で行われる処理の一例を示すフローチャートである。図４４は、復号装置の予測処理部で行われる処理の他の例を示すフローチャートである。図４５は、復号装置におけるノーマルインターモードによるインター予測の例を示すフローチャートである。図４６は、復号装置の実装例を示すブロック図である。図４７は、ＤＭＶＲ処理における復号装置側での動き探索処理の一例を示す図である。図４８Ａは、ＤＭＶＲ処理における復号装置側での動き探索処理における探索アルゴリズムの一例を示す図である。図４８Ｂは、ＤＭＶＲ処理における復号装置側での動き探索処理における探索アルゴリズムの一例を示す図である。図４８Ｃは、ＤＭＶＲ処理における復号装置側での動き探索処理における探索アルゴリズムの一例を示す図である。図４９は、第１態様に係るサブブロック単位でのＤＭＶＲ処理の説明図である。図５０は、第１態様における符号化装置および復号装置のデブロックフィルタ処理の処理フローを示す図である。図５１は、第１態様におけるサブブロック境界に対するデブロックフィルタ処理の適用条件の一例を示す図である。図５２は、第１態様における符号化装置および復号装置のデブロックフィルタ処理の処理フローを示す図である。図５３は、図５２の処理フローにおける隣接するサブブロックと参照ブロックに対する補正後のＭＶの一例を示す図である。図５４は、実施の形態に係る符号化装置の実装例を示すブロック図である。図５５は、図５４に示された符号化装置の動作例を示すフローチャートである。図５６は、実施の形態に係る復号装置の実装例を示すブロック図である。図５７は、図５６に示された復号装置の動作例を示すフローチャートである。図５８は、コンテンツ配信サービスを実現するコンテンツ供給システムの全体構成を示すブロック図である。図５９は、スケーラブル符号化時の符号化構造の一例を示す概念図である。図６０は、スケーラブル符号化時の符号化構造の一例を示す概念図である。図６１は、ｗｅｂページの表示画面例を示す概念図である。図６２は、ｗｅｂページの表示画面例を示す概念図である。図６３は、スマートフォンの一例を示すブロック図である。図６４は、スマートフォンの構成例を示すブロック図である。 例えば、本開示の一態様に係る符号化装置は、動画像を符号化する符号化装置であって、回路と、前記回路に接続されたメモリと、を備え、前記回路は、動作において、カレントブロックが属するピクチャと異なる少なくとも１つの参照ピクチャを参照して、前記カレントブロックの動きベクトルを導出し、前記カレントブロックを分割したサブブロック単位で前記動きベクトルの周辺領域を探索して前記動きベクトルを補正するモードを実行し、隣接するサブブロックの境界それぞれに対してデブロックフィルタ処理を適用するかどうかを判定し、判定結果に基づき、当該境界に前記デブロックフィルタ処理を適用する。 これによれば、符号化装置は、サブブロックの境界において画素値が不連続な歪が発生し得たとしても、デブロックフィルタ処理により当該歪を低減できる可能性があり、画質改善できる可能性がある。 また、例えば、前記モードは、サブブロック単位でのＤＭＶＲ（Dynamic Motion Vector Refreshing）処理である。 また、例えば、前記サブブロック単位におけるサブブロックのサイズは、１６×１６画素である。 また、例えば、前記回路は、前記隣接するサブブロックの動きベクトルの差分値が閾値以上であるかどうかに基づいて、前記デブロックフィルタ処理の強度を判定する。 また、例えば、判定される前記デブロックフィルタ処理の強度には、前記デブロックフィルタ処理を行わない強度を含む。 また、例えば、前記回路は、当該境界にデブロックフィルタ処理を適用する際、当該境界に適用される前記デブロックフィルタ処理の強度は、前記カレントブロックのブロック境界に適用されるデブロックフィルタ処理の強度と同じである。 また、本開示の一態様に係る復号装置は、動画像を復号する復号装置であって、回路と、前記回路に接続されたメモリと、を備え、前記回路は、動作において、カレントブロックが属するピクチャと異なる少なくとも１つの参照ピクチャを参照して、前記カレントブロックの動きベクトルを導出し、前記カレントブロックを分割したサブブロック単位で前記動きベクトルの周辺領域を探索して前記動きベクトルを補正するモードを実行し、隣接するサブブロックの境界それぞれに対してデブロックフィルタ処理を適用するかどうかを判定し、判定結果に基づき、当該境界に前記デブロックフィルタ処理を適用する。 これによれば、サブブロックの境界において画素値が不連続な歪が発生し得たとしても、デブロックフィルタ処理により当該歪を低減できる可能性があり、画質改善できる可能性がある。 また、例えば、前記モードは、サブブロック単位でのＤＭＶＲ（Dynamic Motion Vector Refreshing）処理である。 また、例えば、前記サブブロック単位におけるサブブロックのサイズは、１６×１６画素である。 また、例えば、前記回路は、前記隣接するサブブロックの動きベクトルの差分値が閾値以上であるかどうかに基づいて、前記デブロックフィルタ処理の強度を判定する。 また、例えば、前記デブロックフィルタ処理の強度には、前記デブロックフィルタ処理を行わない強度を含む。 また、例えば、前記回路は、当該境界にデブロックフィルタ処理を適用する際、当該境界に適用される前記デブロックフィルタ処理の強度は、前記カレントブ