Search

JP-2026077501-A - メッシュ復号装置、メッシュ復号方法及びプログラム

JP2026077501AJP 2026077501 AJP2026077501 AJP 2026077501AJP-2026077501-A

Abstract

【課題】符号量を削減したメッシュ復号装置、メッシュ復号方法及びプログラムを提供する。 【解決手段】メッシュ復号装置２００は、変位量ビットストリームを入力して、ＬｏＤごとの変位量量子化値を生成して出力する変位量復号部を備え、変位量復号部は、シーケンスごとに細分割を行うかどうかを表すフラグである細分割フラグを表す制御信号が１のとき、シーケンスごとの細分割回数を表す制御信号を復号して出力する。また、変位量復号部は、シーケンスごとの細分割回数を表す制御信号に整数Ｎを加算することにより、シーケンスごとの細分割回数を復号して出力する。 【選択図】図２

Inventors

  • 岸本 広輝
  • 河村 圭

Assignees

  • ＫＤＤＩ株式会社

Dates

Publication Date
20260513
Application Date
20241025

Claims (10)

  1. メッシュ復号装置であって、 変位量ビットストリームを入力して、ＬｏＤごとの変位量量子化値を生成して出力するように構成されている変位量復号部を備えることを特徴とするメッシュ復号装置。
  2. 前記変位量復号部は、シーケンスごとに細分割を行うかどうかを表すフラグである細分割フラグを表す制御信号が１のとき、シーケンスごとの細分割回数を表す制御信号を復号して出力することを特徴とする請求項１に記載のメッシュ復号装置。
  3. 前記変位量復号部は、シーケンスごとの細分割回数を表す制御信号に整数Ｎを加算することにより、前記シーケンスごとの細分割回数を復号して出力することを特徴とする請求項１に記載のメッシュ復号装置。
  4. 前記変位量復号部は、フレームごとに細分割を行うかどうかを表すフラグである細分割フラグを表す制御信号が１のとき、フレームごとの細分割回数を表す制御信号を復号して出力することを特徴とする請求項１に記載のメッシュ復号装置。
  5. 前記変位量復号部は、フレームごとの細分割回数を表す制御信号に整数Ｎを加算することにより、前記フレームごとの細分割回数を復号して出力することを特徴とする請求項１に記載のメッシュ復号装置。
  6. 前記変位量復号部は、ヘッダごとに細分割を行うかどうかを表すフラグである細分割フラグを表す制御信号が１のとき、ヘッダごとの細分割回数を表す制御信号を復号して出力することを特徴とする請求項１に記載のメッシュ復号装置。
  7. 前記変位量復号部は、ヘッダごとの細分割回数を表す制御信号に整数Ｎを加算することにより、前記ヘッダごとの細分割回数を復号して出力することを特徴とする請求項１に記載のメッシュ復号装置。
  8. 前記変位量復号部は、量子化値インデックスが０のとき、変位量参照量子化値を表す制御信号を復号して出力することを特徴とする請求項１に記載のメッシュ復号装置。
  9. メッシュ復号方法であって、 変位量ビットストリームを入力して、ＬｏＤごとの変位量量子化値を生成して出力する工程を有することを特徴とするメッシュ復号方法。
  10. コンピュータを、メッシュ復号装置として機能させるプログラムであって、 前記メッシュ復号装置は、 変位量ビットストリームを入力して、ＬｏＤごとの変位量量子化値を生成して出力するように構成されている変位量復号部を備えることを特徴とするプログラム。

Description

本発明は、メッシュ復号装置、メッシュ復号方法及びプログラムに関する。 非特許文献１では、メッシュを大まかな情報を表す基本メッシュと詳細な情報を表す変位量に分けて復号しており、映像コーデックによって変位量を復号している。 Ｋｈａｌｅｄ Ｍａｍｍｏｕ、 Ｊｕｎｇｓｕｎ Ｋｉｍ、 Ａｌｅｘｉｓ Ｔｏｕｒａｐｉｓ、 Ｄｉｍｉｔｒｉ Ｐｏｄｂｏｒｓｋｉ、 Ｋｒａｓｉｍｉｒ Ｋｏｌａｒｏｖ、 “［Ｖ－ＣＧ］ Ａｐｐｌｅ’ｓ Ｄｙｎａｍｉｃ Ｍｅｓｈ Ｃｏｄｉｎｇ ＣｆＰ Ｒｅｓｐｏｎｓｅ、” ＩＳＯ/ＩＥＣ ＪＴＣ １/ＳＣ ２９/ＷＧ ７ ｍ５９２８１、 Ａｐｒｉｌ ２０２２.Ｇｏｏｇｌｅ Ｄｒａｃｏ、２０２２年５月２６日アクセス［Ｏｎｌｉｎｅ］、https://google.github.io/draco 図１は、一実施形態に係るメッシュ処理システム１の構成の一例を示す図である。図２は、一実施形態に係るメッシュ復号装置２００の機能ブロックの一例を示す図である。図３は、ｄｉｓｐｌ_ｓｅｑｕｅｎｃｅ_ｐａｒａｍｅｔｅｒ_ｓｅｔ_ｒｂｓｐのシンタックス構成の一例を示す図である。図４は、ｄｉｓｐｌ_ｆｒａｍｅ_ｐａｒａｍｅｔｅｒ_ｓｅｔ_ｒｂｓｐのシンタックス構成の一例を示す図である。図５は、ｄｉｓｐｌ_ｈｅａｄｅｒのシンタックス構成の一例を示す図である。図６は、ｄｉｓｐｌ_ｑｕａｎｔｉｚａｔｉｏｎ_ｐａｒａｍｅｔｅｒｓのシンタックス構成の一例を示す図である。図７は、Ｚｉｐｐｅｒｉｎｇのシンタックス構成の一例を示す図である。図８は、基本メッシュの一例を示す図である。図９は、細分割部２０３における細分割メッシュの復号方法の一例を説明するための図である。図１０は、境界補正部２０８の機能ブロックの一例を示す図である。図１１は、サブメッシュごとに細分割数が異なる場合の境界補正の方法の一例について説明するためのフローチャートである。図１２は、図１１のステップＳ２０８Ｂ-１３における補正を模式的に表した図である。 以下、本発明の実施の形態について、図面を参照しながら説明する。なお、以下の実施形態における構成要素は、適宜、既存の構成要素等との置き換えが可能であり、また、他の既存の構成要素との組み合わせを含む様々なバリエーションが可能である。したがって、以下の実施形態の記載をもって、特許請求の範囲に記載された発明の内容を限定するものではない。 ＜第１実施形態＞ 以下、図１～図１２を参照して、本実施形態に係るメッシュ処理システム１について説明する。 図１は、本実施形態に係るメッシュ処理システム１の構成の一例を示す図である。図１に示すように、メッシュ処理システム１は、メッシュ符号化装置１００及びメッシュ復号装置２００を備えている。 図２は、本実施形態に係るメッシュ復号装置２００の機能ブロックの一例を示す図である。 図２に示すように、メッシュ復号装置２００は、多重分離部２０１と、基本メッシュ復号部２０２と、細分割部２０３と、メッシュ復号部２０４と、変位量復号部２０５と、映像復号部２０６と、アトラスデータ復号部２０７と、境界補正部２０８と、ＳＥＩメッセージ復号部２０９とを有する。 多重分離部２０１は、多重化されたビットストリームを、ＳＥＩビットストリームとアトラスビットストリームと基本メッシュビットストリームと変位量ビットストリームとテクスチャビットストリームとに分離するように構成されている。 基本メッシュ復号部２０２は、基本メッシュビットストリームを復号し、基本メッシュを生成して出力するように構成されている。 基本メッシュは、符号化前のメッシュに対して面の数を減らすことで簡素化されたメッシュであり、メッシュの基本的な形状を表すために使用される。 また、基本メッシュは、１つのサブメッシュ又は複数のサブメッシュから構成されている。サブメッシュは、基本メッシュの一領域として定義される。 細分割部２０３は、アトラス制御情報によって示された細分割手法により、基本メッシュ復号部２０２によって復号された基本メッシュから、細分割メッシュを生成して出力するように構成されている。 ここで、基本メッシュ、追加された細分割頂点及びそれらの接続情報を、併せて「細分割メッシュ」と呼ぶ。 メッシュ復号部２０４は、アトラスデータ復号部２０７で復号されたアトラス制御情報と細分割部２０３で生成された細分割メッシュと変位量復号部２０５で復号された変位量とを用いて、復号メッシュを生成して出力するように構成されている。 変位量復号部２０５は、変位量ビットストリームを復号して変位量を生成して出力するように構成されている。 映像復号部２０６は、映像コーデックによって復号テクスチャを生成して出力するように構成されている。 アトラスデータ復号部２０７は、アトラスビットストリームを復号し、アトラス制御情報を出力するように構成されている。 境界補正部２０８は、アトラスデータ復号部２０７で復号されたアトラス制御情報及びメッシュ復号部２０４で復号された復号メッシュを用いて、境界補正復号メッシュを復号して出力するように構成されている。 ＳＥＩメッセージ復号部２０９は、ＳＥＩビットストリームを復号してＳＥＩ制御情報を復号して出力するように構成されている。 （変位量復号部２０５） 変位量復号部２０５は、変位量ビットストリームを復号して変位量を出力するように構成されている。 変位量は、サブメッシュごとに独立に復号されるように定義されていてもよい。 図３～図６を参照して、変位量復号部２０５で復号される制御情報について説明する。 第１に、変位量ビットストリームは、シーケンスごとの変位量に関する制御信号の集合であるシーケンス変位量パラメータセットｄｉｓｐｌ_ｓｅｑｕｅｎｃｅ_ｐａｒａｍｅｔｅｒ_ｓｅｔ_ｒｂｓｐを含む。 第２に、変位量ビットストリームは、フレームごとの変位量に関する制御信号の集合であるフレーム変位量パラメータセットｄｉｓｐｌ_ｆｒａｍｅ_ｐａｒａｍｅｔｅｒ_ｓｅｔ_ｒｂｓｐを含む。 第３に、変位量ビットストリームは、ヘッダごとの変位量に関する制御信号の集合であるヘッダ変位量パラメータセットｄｉｓｐｌ_ｈｅａｄｅｒを含む。 ｄｉｓｐｌ_ｈｅａｄｅｒは、サブメッシュやＬｏＤ単位等で定義された変位量のためのヘッダである。 ここで、ＬｏＤは、細かさの度合いを表しており、細分割の回数等に応じてその度合いが変化する。 図３は、ｄｉｓｐｌ_ｓｅｑｕｅｎｃｅ_ｐａｒａｍｅｔｅｒ_ｓｅｔ_ｒｂｓｐのシンタックス構成の一例を示す図である。ここで、シンタックスの機能が同様であれば、図３に示すシンタックス名と異なるシンタックス名が用いられてもよい。 図３に示すｄｉｓｐｌ_ｓｅｑｕｅｎｃｅ_ｐａｒａｍｅｔｅｒ_ｓｅｔ_ｒｂｓｐのシンタックス構成において、Ｄｅｓｃｒｉｐｔｉｏｎ欄は、各シンタックスが、どのように符号化されているかを意味し、ｕｅ（ｖ）は、符号無し０次指数ゴロム符号であることを意味し、ｕ（ｎ）は、ｎビットのフラグであることを意味する。 Ｄｅｓｃｒｉｐｔｉｏｎは、あくまで一例であり、ｕ（ｎ）やｕｅ（ｖ）やａｅ（ｖ）等の図表のＤｅｓｃｒｉｐｔｉｏｎ以外の符号化方式を選択されてもよい。 ｄｉｓｐｌ_ｓｅｑｕｅｎｃｅ_ｐａｒａｍｅｔｅｒ_ｓｅｔ_ｒｂｓｐは、シーケンスごとに細分割を行うかどうかを表すフラグである細分割フラグを表す制御信号ｄｓｐｓ_ｓｕｂｄｉｖｉｓｉｏｎ_ｆｌａｇを含む。 細分割方式ではなく、細分割を行うかどうかのフラグを符号化することによって、変位量ビットストリームの符号量を削減する効果が期待できる。 ｄｉｓｐｌ_ｓｅｑｕｅｎｃｅ_ｐａｒａｍｅｔｅｒ_ｓｅｔ_ｒｂｓｐは、ｄｓｐｓ_ｓｕｂｄｉｖｉｓｉｏｎ_ｆｌａｇが１のとき、シーケンスごとの細分割回数を表す制御信号ｄｓｐｓ＿ｓｕｂｄｉｖｉｓｉｏｎ_ｉｔｅｒａｔｉｏｎ_ｃｏｕｎｔ_ｍｉｎｕｓ１を含む。 ｄｓｐｓ_ｓｕｂｄｉｖｉｓｉｏｎ_ｆｌａｇが１のとき、シーケンスごとの細分割回数ＤｓｐｓＳｕｂｄｉｖｉｓｉｏｎＣｏｕｎｔは、ｄｓｐｓ_ｓｕｂｄｉｖｉｓｉｏｎ_ｉｔｅｒａｔｉｏｎ_ｃｏｕｎｔ_ｍｉｎｕｓ１に１を加算して復号されるように構成されている。 ＤｓｐｓＳｕｂｄｉｖｉｓｉｏｎＣｏｕｎｔは、ｄｓｐｓ_ｓｕｂｄｉｖｉｓｉｏｎ_ｉｔｅｒａｔｉｏｎ_ｃｏｕｎｔ_ｍｉｎｕｓ１に整数Ｎを加算して復号されるように構成されていてもよい。 ｄｓｐｓ_ｓｕｂｄｉｖｉｓｉｏｎ_ｉｔｅｒａｔｉｏｎ_ｃｏｕｎｔ_ｍｉｎｕｓ１に整数Ｎを加算することで、細分割回数の範囲を拡張することができ、変位量ビットストリームの符号量を削減する効果が期待できる。 ｄｓｐｓ_ｓｕｂｄｉｖｉｓｉｏｎ_ｆｌａｇが０のとき、シーケンスごとの細分割回数ＤｓｐｓＳｕｂｄｉｖｉｓｉｏｎＣｏｕｎｔは、０で復号されるように構成されている。 ｄｉｓｐｌ_ｓｅｑｕｅｎｃｅ_ｐａｒａｍｅｔｅｒ_ｓｅｔ_ｒｂｓｐは、変位量量子化パラメータセットｄｉｓｐｌ_ｑｕａｎｔｉｚａｔｉｏｎ_ｐａｒａｍｅｔｅｒｓ（０，ＤｓｐｓＳｕｂｄｉｖｉｓｉｏｎＣｏｕｎｔ）を含む。 図４は、ｄｉｓｐｌ_ｆｒａｍｅ_ｐａｒａｍｅｔｅｒ_ｓｅｔ_ｒｂｓｐのシンタックス構成の一例を示す図である。ここで、シンタックスの機能が同様であれば、図４に示すシンタックス名と異なるシンタックス名が用いられてもよい。 図４に示すｄｉｓｐｌ_ｆｒａｍｅ_ｐａｒａｍｅｔｅｒ_ｓｅｔ_ｒｂｓｐのシンタックス構成において、Ｄｅｓｃｒｉｐｔｉｏｎ欄は、ｄｉｓｐｌ_ｓｅｑｕｅｎｃｅ_ｐａｒａｍｅｔｅｒ_ｓｅｔ_ｒｂｓｐと同様である。 ｄｉｓｐｌ_ｆｒａｍｅ_ｐａｒａｍｅｔｅｒ_ｓｅｔ_ｒｂｓｐは、フレームごとに細分割を行うかどうかを表すフラグである細分割フラグを表す制御信号ｄｆｐｓ_ｓｕｂｄｉｖｉｓｉｏｎ_ｆｌａｇを含む。 細分割方式ではなく、細分割を行うかどうかのフラグを符号化することによって、変位量ビットストリームの符号量を削減する効果が期待できる。 ｄｉｓｐｌ_ｆｒａｍｅ_ｐａｒａｍｅｔｅｒ_ｓｅｔ_ｒｂｓｐは、ｄｆｐｓ_ｓｕｂｄｉｖｉｓｉｏｎ_ｆｌａｇが１のとき、フレームごとの細分割回数を表す制御信号ｄｆｐｓ_ｓｕｂｄｉｖｉｓｉｏｎ_ｉｔｅｒａｔｉｏｎ_ｃｏｕｎｔ_ｍｉｎｕｓ１を含む。 ｄｆｐｓ_ｓｕｂｄｉｖｉｓｉｏｎ_ｆｌａｇが１のとき、フレームごとの細分割回数ＤｆｐｓＳｕｂｄｉｖｉｓｉｏｎＣｏｕｎｔは、ｄｆｐｓ_ｓｕｂｄｉｖｉｓｉｏｎ_ｉｔｅｒａｔｉｏｎ_ｃｏｕｎｔ_ｍｉｎｕｓ１に１を加算して復号されるように構成されている。 ＤｆｐｓＳｕｂｄｉｖｉｓｉｏｎＣｏｕｎｔは、ｄｆｐｓ_ｓｕｂｄｉｖｉｓｉｏｎ_ｉｔｅｒａｔｉｏｎ_ｃｏｕｎｔ_ｍｉｎｕｓ１に整数Ｎを加算して復号されるように構成されていてもよい。 ｄｆｐｓ_ｓｕｂｄｉｖｉｓｉｏｎ_ｉｔｅｒａｔｉｏｎ_ｃｏｕｎｔ_ｍｉｎｕｓ１に整数Ｎを加算することで、細分割回数の範囲を拡張することができ、変位量ビットストリームの符号量を削減する効果が期待できる。 ｄｆｐｓ_ｓｕｂｄｉｖｉｓｉｏｎ_ｆｌａｇが０のとき、フレームごとの細分割回数ＤｆｐｓＳｕｂｄｉｖｉｓｉｏｎＣｏｕｎｔは、０で復号されるように構成されている。 図５は、ｄｉｓｐｌ＿ｈｅａｄｅｒのシンタックス構成の一例を示す図である。ここで、シンタックスの機能が同様であれば、図５に示すシンタックス名と異なるシンタックス名が用いられてもよい。 図５に示すｄｉｓｐｌ_ｈｅａｄｅｒのシンタックス構成においてＤｅｓｃｒｉｐｔｉｏｎ欄は、ｄｉｓｐｌ_ｓｅｑｕｅｎｃｅ_ｐａｒａｍｅｔｅｒ_ｓｅｔ_ｒｂｓｐと同様である。 ｄｉｓｐｌ_ｈｅａｄｅｒは、ヘッダごとに細分割を行うかどうかを表すフラグである細分割フラグを表す制御信号ｄｈ_ｓｕｂｄ