Search

JP-2026077504-A - メッシュ復号装置、メッシュ復号方法及びプログラム

JP2026077504AJP 2026077504 AJP2026077504 AJP 2026077504AJP-2026077504-A

Abstract

【課題】算術復号を用いた変位量の復号において、ランダムアクセスによる並列処理による高速化やレート制御を可能とすること。 【解決手段】本発明に係るメッシュ復号装置２００の変位量復号部２０５は、変位量ビットストリームにおいて、並列処理可能な単位である各変位量ＩＤに対応する変位量ビットストリームに単一のＬｏＤ値が含まれるか否かについて判別する含有ＬｏＤ種別判別部２０５Ａと、変位量ＩＤに対応する変位量ビットストリームが単一のＬｏＤ値で構成されている場合、単一のＬｏＤ値を取得するＬｏＤ値取得部２０５Ｂと、変位量ＩＤに対応する変位量ビットストリームごとに算術復号を行うことによって係数レベル値を生成する変位量算術復号部２０５Ｆとを備える。 【選択図】図１１

Inventors

  • 明堂 絵美
  • 海野 恭平
  • 西村 仁志
  • 河村 圭
  • 加藤 晴久

Assignees

  • ＫＤＤＩ株式会社

Dates

Publication Date
20260513
Application Date
20241025

Claims (6)

  1. メッシュ復号装置であって、 変位量ビットストリームを復号して変位量を生成して出力する変位量復号部を備え、 前記変位量復号部は、 前記変位量ビットストリームにおいて、並列処理可能な単位である各変位量ＩＤに対応する変位量ビットストリームに単一のＬｏＤ値が含まれるか否かについて判別する含有ＬｏＤ種別判別部と、 前記変位量ＩＤに対応する変位量ビットストリームが単一のＬｏＤ値で構成されている場合、前記単一のＬｏＤ値を取得するＬｏＤ値取得部と、 前記変位量ＩＤに対応する変位量ビットストリームごとに算術復号を行うことによって係数レベル値を生成する変位量算術復号部と、を備えることを特徴とするメッシュ復号装置。
  2. 前記変位量復号部は、前記変位量ＩＤに対応する変位量ビットストリームに含まれるＬｏＤ値の範囲を指定する含有ＬｏＤ値範囲指定部を備えることを特徴とする請求項１に記載のメッシュ復号装置。
  3. 前記変位量復号部は、 復号をスキップするＬｏＤ値を指定することができるＬｏＤスキップ指定部と、 復号するＬｏＤ値が存在するか否かについて判別する復号有無判定部と、を備え、 前記復号有無判別部によって前記復号するＬｏＤ値が存在しないと判別された場合に、前記変位量算術復号部は、前記係数レベル値を生成する処理をスキップすることを特徴とする請求項１又は２に記載のメッシュ復号装置。
  4. 前記ＬｏＤ値は、前記変位量ＩＤの示すヘッダー内にあることを特徴とする請求項１に記載のメッシュ復号装置。
  5. メッシュ復号方法であって、 変位量ビットストリームを復号して変位量を生成して出力する工程を有し、 前記工程は、 前記変位量ビットストリームにおいて、並列処理可能な単位である各変位量ＩＤに単一のＬｏＤ値が含まれるか否かについて判別する工程と、 前記変位量ＩＤに対応する変位量ビットストリームが単一のＬｏＤ値で構成されている場合、前記単一のＬｏＤ値を取得する工程と、 前記変位量ＩＤに対応する変位量ビットストリームごとに算術復号を行うことによって係数レベル値を生成する工程と、を有することを特徴とするメッシュ復号方法。
  6. コンピュータを、メッシュ復号装置として機能させるプログラムであって、 前記メッシュ復号装置は、変位量ビットストリームを復号して変位量を生成して出力する変位量復号部を備え、 前記変位量復号部は、 前記変位量ビットストリームにおいて、並列処理可能な単位である各変位量ＩＤに対応する変位量ビットストリームに単一のＬｏＤ値が含まれるか否かについて判別する含有ＬｏＤ種別判別部と、 前記変位量ＩＤに対応する変位量ビットストリームが単一のＬｏＤ値で構成されている場合、前記単一のＬｏＤ値を取得するＬｏＤ値取得部と、 前記変位量ＩＤに対応する変位量ビットストリームごとに算術復号を行うことによって係数レベル値を生成する変位量算術復号部と、を備えることを特徴とするプログラム。

Description

本発明は、メッシュ復号装置、メッシュ復号方法及びプログラムに関する。 非特許文献１には、メッシュを大まかな基本メッシュと詳細な変位量とに分けて復号し、変位量について２次元映像に変換した後で映像コーデックによって復号する技術について開示されている。 非特許文献２には、非特許文献１における映像コーデックの代替え手段として、変位量を算術復号によって復号する技術について開示されている。 Khaled Mammou, Jungsun Kim, Alexis Tourapis, Dimitri Podborski, Krasimir Kolarov, “[V-CG] Apple’s Dynamic Mesh Coding CfP Response,” ISO/IEC JTC 1/SC 29/WG 7 m5928, April 2022.Study of technologies for Video-based mesh coding,” ISO/IEC JTC 1/SC 29/WG7 N00960, July 2024 図１は、一実施形態に係るメッシュ処理システム１の構成の一例を示す図である。図２は、一実施形態に係るメッシュ復号装置２００の機能ブロックの一例を示す図である。図３は、入力されるビットストリームの一例を示す図である。図４は、変位量ビットストリームの構成の一例を示す図である。図５は、第１実施形態に係るＤＳＰＳのシンタックス構成の一例を示す図である。図６は、第１実施形態に係るＤＨのシンタックス構成の一例を示す図である。図７は、第１実施形態に係るＤＤＵのシンタックス構成の一例を示す図である。図８は、第１実施形態に係るＡＳＰＳのシンタックス構成の一例を示す図である。図９は、第１実施形態に係るＭＤＵのシンタックス構成の一例を示す図である。図１０は、第１実施形態に係るＩＭＤＵのシンタックス構成の一例を示す図である。図１１は、第１実施形態に係る変位量復号部２０５の機能ブロックの一例を示す図である。図１２は、第１実施形態に係る変位量復号部２０５の変位量算術復号部２０５Ｆの機能ブロックの一例を示す図である。図１３は、第１実施形態に係る変位量復号部２０５の動作の一例について示すフローチャートである。図１４は、第２実施形態に係るＤＨのシンタックス構成の一例を示す図である。図１５は、第２実施形態に係るＤＤＵの一部であるＤＤのシンタックス構成の一例を示す図である。図１６は、第２実施形態に係るＤＤＵの一部であるＤＳＤＵのシンタックス構成の一例を示す図である。図１７は、第２実施形態に係る変位量復号部２０５の機能ブロックの一例を示す図である。図１８は、第２実施形態に係る変位量復号部２０５の動作の一例について示すフローチャートである。図１９は、第２実施形態に係る変位量復号部２０５の動作の一例について示すフローチャートである。図２０は、第２実施形態に係る変位量復号部２０５の動作の一例について示すフローチャートである。図２１は、第２実施形態に係る変位量復号部２０５の動作の一例について示すフローチャートである。 以下、本発明の実施の形態について、図面を参照しながら説明する。なお、以下の実施形態における構成要素は、適宜、既存の構成要素等との置き換えが可能であり、また、他の既存の構成要素との組み合わせを含む様々なバリエーションが可能である。したがって、以下の実施形態の記載をもって、特許請求の範囲に記載された発明の内容を限定するものではない。 ＜第１実施形態＞ 以下、図１～図１３を参照して、本実施形態に係るメッシュ処理システム１について説明する。 図１は、本実施形態に係るメッシュ処理システム１の構成の一例を示す図である。図１に示すように、メッシュ処理システム１は、メッシュ符号化装置１００及びメッシュ復号装置２００を備えている。 図２は、本実施形態に係るメッシュ復号装置２００の機能ブロックの一例を示す図である。 図２に示すように、メッシュ復号装置２００は、多重分離部２０１と、アトラス復号部２０２と、基本メッシュ復号部２０３と、テクスチャ復号部２０４と、変位量復号部２０５と、メッシュ再構成部２０６とを有する。 多重分離部２０１は、多重化されたビットストリームを、基本メッシュビットストリームと変位量ビットストリームとテクスチャビットストリームとアトラスビットストリームに分離するように構成されている。 アトラスデータ復号部２０２は、アトラスビットストリームを復号するように構成されている。 基本メッシュ復号部２０３は、基本メッシュビットストリームを復号し、基本メッシュを生成して出力するように構成されている。 テクスチャ復号部２０４は、映像符号化によってテクスチャを復号して出力するように構成されている。例えば、テクスチャ復号部２０４は、ＨＥＶＣを用いてもよい。 変位量復号部２０５は、変位量ビットストリームを復号して変位量を生成して出力するように構成されている。 メッシュ再構成部２０６は、復号メッシュを生成して出力するように構成されている。メッシュ再構成部２０６は、後述する変位量ＩＤ（又は、変位量ＩＤとＬｏＤ値のセット）に対応付けられた基本メッシュのサブメッシュやアトラスから出力されるパッチより、メッシュを再構成することができる。 （ビットストリーム） 図３に、入力されるビットストリームの一例を示す。図３に示すように、かかるビットストリームは、Ｖ３Ｃパラメータセット、アトラスビットストリーム、基本メッシュビットストリーム、変位量ビットストリーム及びテクスチャビットストリームを含む。 （変位量ビットストリーム） 以下、図４を参照して、変位量ビットストリームの構成の一例について説明する。図４は、変位量ビットストリームの構成の一例について示す図である。 図４に示すように、第１に、変位量ビットストリームは、変位量の復号に関する制御情報の集合であるＤＳＰＳ（Ｄｉｓｐｌａｃｅｍｅｎｔ Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ：ディスプレイスメントシーケンスパラメータセット）及びＤＦＰＳ（Ｄｉｓｐｌａｃｅｍｅｎｔ Ｆｒａｍｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ：ディスプレイスメントフレームパラメータセット）を含んでいてもよい。 第２に、変位量ビットストリームは、フレームに対応する制御情報の集合であるＤＦＨ（Ｄｉｓｐｌａｃｅｍｅｎｔ Ｆｒａｍｅ Ｈｅａｄｅｒ：ディスプレイスメントフレームヘッダ）を含んでいてもよい。 第３に、変位量ビットストリームは、ＤＦＨの次に、フレームに対応する符号化された変位量であるＤＤＵ（Ｄｉｓｐｌａｃｅｍｅｎｔ Ｄａｔａ Ｕｎｉｔ：ディスプレイスメントデータユニット）を含んでいてもよい。 （ＤＳＰＳ） 図５に、ディスプレイスメントシーケンスパラメータセット（ＤＳＰＳ）のシンタックス構成の一例を示す。 フレーム内の変位量は、複数の変位量のまとまりに分けられてもよい。変位量は、頂点の集合で分けられてもよい。これをサブメッシュと呼ぶ。また、変位量は、後述するＬｏＤ値によって分けられてもよい。それぞれの変位量のまとまりに重複しないＩＤが割り当てられ、それを変位量ＩＤと呼ぶ。ＬｏＤ値によって後述するＤＤＵが分けられるが、サブメッシュごとに変位量ＩＤを割り当てる場合は、変位量ＩＤとＬｏＤ値（後述するｄｈ_ｌｏｄ_ｉｄｘやｄｕ_ｌｏｄ_ｉｄｘ）のセットで識別できる。その場合、ＬｏＤ値が異なっても変位量ＩＤは厳密には同じ値となるが、変位量ＩＤとＬｏＤ値のセットも以下では代表して変位量ＩＤと呼ぶ。変位量ＩＤは、ＤＤＵを識別可能な単一の値、またはセットの値を以下では示すものとする。また、変位量ＩＤ（変位量ＩＤとＬｏＤ値のセット）に対応する変位量ビットストリームのことを略し、単に変位量ＩＤと呼ぶ場合もある。 ＤＳＰＳは、各変位量ＩＤに対応する変位量ビットストリームが、詳細度を示すＬｏＤ（Ｌｅｖｅｌ ｏｆ Ｄｉｔａｉｌ）の値であるＬｏＤ値をどのように含むかを示す含有ＬｏＤ種別を判別するｄｓｐｓ_ｌｏｄ_ｄｉｓｐｌａｃｅｍｅｎｔ_ｉｄｓ_ｅｎａｂｌｅ_ｆｌａｇを含んでもよい。 ｄｓｐｓ_ｌｏｄ_ｄｉｓｐｌａｃｅｍｅｎｔ_ｉｄｓ_ｅｎａｂｌｅ_ｆｌａｇが１の場合、各変位量ＩＤに対応する変位量ビットストリームに単一のＬｏＤ値のデータが含まれていることを示し、ｄｓｐｓ_ｌｏｄ_ｄｉｓｐｌａｃｅｍｅｎｔ_ｉｄｓ_ｅｎａｂｌｅ_ｆｌａｇが０の場合、各変位量ＩＤに対応する変位量ビットストリームに全てのＬｏＤ値のデータが含まれていることを示してもよい。データは、係数レベル値に関してもよい。 （ＤＨ） 図６に、ディスプレイスメントヘッダ（ＤＨ）のシンタックス構成の一例を示す。 図６に示すように、ＤＨは、変位量ＩＤであるｄｈ_ｉｄを含んでもよい。また、ｄｉｓｐｌＩＤに、ｄｈ_ｉｄの値が代入されてもよい。 また、ＤＨは、処理対象となっている変位量ＩＤに対応する変位量ビットストリームに含まれるＬｏＤ値を示すｄｈ_ｌｏｄ_ｉｄｘ［ｄｉｓｐｌＩＤ］を含んでもよい。ｄｈ_ｌｏｄ_ｉｄｘ［ｄｉｓｐｌＩＤ］は、ＬｏＤ値を示してもよい。 例えば、ｄｓｐｓ_ｌｏｄ_ｄｉｓｐｌａｃｅｍｅｎｔ_ｉｄｓ_ｅｎａｂｌｅ_ｆｌａｇが１の場合、ｄｈ_ｌｏｄ_ｉｄｘ［ｄｉｓｐｌＩＤ］は、単一のＬｏＤ値を示してもよい。 ディスプレイスメントデータユニット（ＤＤＵ）でなく、ディスプレイスメントヘッダ（ＤＨ）内に、ｄｈ_ｌｏｄ_ｉｄｘ［ｄｉｓｐｌＩＤ］があることで、算術符号化されているＤＤＵを全く復号することなく、後述するＬｏＤスキップを行うことができるという利点がある。一方、ＤＨのビット量を減らすために、ｄｈ＿ｌｏｄ＿ｉｄｘ［ｄｉｓｐｌＩＤ］でなく、ＤＤＵに含まれても良い。その場合、ｄｄｕ＿ｌｏｄ＿ｉｄｘ［ｄｉｓｐｌＩＤ］となる。 ｄｓｐｓ_ｏｄ_ｄｉｓｐｌａｃｅｍｅｎｔ_ｉｄｓ_ｅｎａｂｌｅ_ｆｌａｇが０の場合、ｄｈ_ｌｏｄ_ｉｄｘ［ｄｉｓｐｌＩＤ］は、０を示してもよい。 （ＤＤＵ） 図７に、ディスプレイスメントデータユニット（ＤＤＵ）のシンタックス構成の一例を示す。 ＤＤＵは、変位量ＩＤに対応する変位量ビットストリームに含有されるＬｏＤ値の範囲を指定してもよい。 ｄｓｐｓ_ｌｏｄ_ｄｉｓｐｌａｃｅｍｅｎｔ_ｉｄｓ_ｅｎａｂｌｅ_ｆｌａｇが０の場合、ｄｄｕ_ｌｏｄ_ｃｏｕｎｔ［ｄｉｓｐｌＩＤ］に、全てのＬｏＤの数（細分割したレベルの数）が格納されてもよい。 ｄｓｐｓ_ｌｏｄ_ｄｉｓｐｌａｃｅｍｅｎｔ_ｉｄｓ_ｅｎａｂｌｅ_ｆｌａｇが１の場合、ｄｈ_ｌｏｄ_ｉｄｘで指定された単一又は一部のＬｏＤ値における係数レベル値のみ復号されてもよい。 ｄｓｐｓ_ｌｏｄ_ｄｉｓｐｌａｃｅｍｅｎｔ_ｉｄｓ_ｅｎａｂｌｅ_ｆｌａｇが０の場合、全てのＬｏＤ値における係数レベル値が復号されてもよい。 以上のように復号するため、ＤＤＵは、対象の変位量ＩＤに対応する変位量ビットストリームが含有するＬｏＤ値や範囲を指定してもよい。 例えば、ｄｓｐｓ_ｌｏｄ_ｄｉｓｐｌａｃｅｍｅｎｔ_ｉｄｓ_ｅｎａｂｌｅ_ｆｌａｇが１の場合、ｓｔａｒｔＬｅｖｅｌ＝ｄｈ_ｌｏｄ_ｉｄｘ［ｄｉｓｐｌＩＤ］，ｅｎｄＬｅｖｅｌ＝ｄｈ_ｌｏｄ_ｉｄｘ［ｄｉｓｐｌＩＤ］＋１とし、ｄｓｐｓ_ｌｏｄ_ｄｉｓｐｌａｃｅｍｅｎｔ_ｉｄｓ_ｅｎａｂｌｅ_ｆｌａｇが０の場合、ｓｔａｒｔＬｅｖｅｌ＝０，ｅｎｄＬｅｖｅｌ＝ｄｄｕ_ｌｏｄ_ｃｏｕｎｔ［ｄｉｓｐｌＩＤ］として範囲を指定する。 図７に示すように、ｓｔａｒｔＬｅｖｅｌ以上、ｅｎｄＬｅｖｅｌ未満でループ処理を行い、変位量を復号することで、１つの記述で指定した範囲の復号をしてもよい。 ループ処理では、ＬｏＤ値のループが外側、次元のループが内側となっているが、外側と内側とを交換しても全く問題ない。 （アトラスシー