Search

JP-2026077400-A - デジタル化方法、プログラム及び電子機器

JP2026077400AJP 2026077400 AJP2026077400 AJP 2026077400AJP-2026077400-A

Abstract

【課題】スクロール文字列の全体を優れた精度でデジタル化することができるデジタル化方法を提供する。 【解決手段】複数の画像からスクロール文字列のテキストデータを生成するデジタル化方法であって、画像Ａに含まれるスクロール文字列の一部である文字列Ａを変換することにより得られたテキストデータＡを構成する複数の文字にその順に従って連続番号をつけるステップと、画像Ｂに含まれるスクロール文字列の一部である文字列Ｂを変換することにより得られたテキストデータＢに含まれる文字のうちテキストデータＡ又はテキストデータＡに基づき生成されたテキストデータとの共通性が高い文字に同じ番号がつけられるように、テキストデータＢを構成する複数の文字にその順に従って連続番号をつけるステップと、テキストデータＡ及び前記テキストデータＢに基づき、連続番号の順で並んだ統合テキストデータを生成するステップと、を含む。 【選択図】図１

Inventors

  • 岩村 雅一
  • 田川 直弥
  • 南谷 和範
  • 黄瀬 浩一

Assignees

  • 公立大学法人大阪

Dates

Publication Date
20260513
Application Date
20241025

Claims (6)

  1. スクロール文字列の一部を有する複数の画像から前記スクロール文字列のテキストデータを生成するデジタル化方法であって、 画像Ａに含まれる前記スクロール文字列の一部である文字列Ａを変換することにより得られたテキストデータＡを構成する複数の文字にその順に従って連続番号をつけるステップと、 画像Ｂに含まれる前記スクロール文字列の一部である文字列Ｂを変換することにより得られたテキストデータＢに含まれる文字のうち前記テキストデータＡ又は前記テキストデータＡに基づき生成されたテキストデータとの共通性が高い文字に同じ番号がつけられるように、前記テキストデータＢを構成する複数の文字にその順に従って連続番号をつけるステップと、 前記テキストデータＡ及び前記テキストデータＢに基づき、連続番号の順で並んだ統合テキストデータを生成するステップとを含むデジタル化方法。
  2. 画像Ｃに含まれる前記スクロール文字列の一部である文字列Ｃを変換することにより得られたテキストデータＣに含まれる文字のうち前記テキストデータＡ及び前記テキストデータＢ又は前記テキストデータＡ及び前記テキストデータＢに基づき生成されたテキストデータとの共通性が高い文字に同じ番号がつけられるように、テキストデータＣを構成する複数の文字にその順に従って連続番号をつけるステップをさらに含み、 前記統合テキストデータは、前記テキストデータＡ、前記テキストデータＢ及び前記テキストデータＣに基づき生成される請求項１に記載のデジタル化方法。
  3. 同じ番号をつけた３つ以上の文字に含まれる最も多い文字をその番号の文字として前記統合テキストデータを生成する請求項２に記載のデジタル化方法。
  4. 請求項１～３のいずれか１つに記載のデジタル化方法をコンピューターに実行させるように設けられたプログラム。
  5. 請求項１～３のいずれか１つに記載のデジタル化方法を用いて生成された前記統合テキストデータを音声出力するように設けられた制御部及びスピーカーを備える電子機器。
  6. 請求項１～３のいずれか１つに記載のデジタル化方法を用いて生成された前記統合テキストデータを翻訳した他の言語の翻訳テキストデータを文字列として表示するように設けられた画面と、前記翻訳テキストデータを音声出力するように設けられたスピーカーとのうち少なくとも１つを備える電子機器。

Description

本発明は、デジタル化方法、プログラム及び電子機器に関する。 横方向又は縦方向に流れるスクロール文字列を表示するデバイスの表示部、電光掲示板、電子看板などが知られている（例えば、特許文献１参照）。文字列をスクロールさせることにより表示部などの幅又は高さよりの長い文字列を表示部などに表示することが可能になる。 また、画像に含まれる文字列をデジタル化し音声出力する情報処理装置（例えば、特許文献２参照）やカメラで撮像した画像に含まれる文字列をデジタル化し所定の言語に翻訳し表示する翻訳装置（例えば、特許文献３参照）が知られている。 特開平１１－３２７５０９号公報特開２０２４－０７１９５１号公報特開２０１５－１０４０８６号公報 本発明の一実施形態のデジタル化方法のフローチャートである。本発明の一実施形態のデジタル化方法のフローチャートである。本発明の一実施形態の電子機器の構成を示すブロック図である。（ａ）～（ｅ）はそれぞれ第１～第５画像である。（ａ）～（ｇ）は第１～第５画像に含まれるスクロール文字列をデジタル化する方法の説明図である。 以下、図面を用いて本発明の一実施形態を説明する。図面や以下の記述中で示す構成は、例示であって、本発明の範囲は、図面や以下の記述中で示すものに限定されない。 図１、図２は本実施形態のデジタル化方法のフローチャートであり、図３は本実施形態のデジタル化方法の少なくとも一部を実施可能な電子機器の構成を示すブロック図である。 本実施形態のデジタル化方法は、スクロール文字列の一部を有する複数の画像から前記スクロール文字列のテキストデータを生成するデジタル化方法である。本発明のデジタル化方法は、画像Ａに含まれる前記スクロール文字列の一部である文字列Ａを変換することにより得られたテキストデータＡを構成する複数の文字にその順に従って連続番号をつけるステップと、画像Ｂに含まれる前記スクロール文字列の一部である文字列Ｂを変換することにより得られたテキストデータＢに含まれる文字のうち前記テキストデータＡ又は前記テキストデータＡに基づき生成されたテキストデータとの共通性が高い文字に同じ番号がつけられるように、前記テキストデータＢを構成する複数の文字にその順に従って連続番号をつけるステップと、前記テキストデータＡ及び前記テキストデータＢに基づき、連続番号の順で並んだ統合テキストデータを生成するステップとを含む。 また、本実施形態のデジタル化方法は、画像Ｃに含まれる前記スクロール文字列の一部である文字列Ｃを変換することにより得られたテキストデータＣに含まれる文字のうち前記テキストデータＡ及び前記テキストデータＢ又は前記テキストデータＡ及び前記テキストデータＢに基づき生成されたテキストデータとの共通性が高い文字に同じ番号がつけられるように、テキストデータＣを構成する複数の文字にその順に従って連続番号をつけるステップをさらに含んでもよい。この場合、前記統合テキストデータは、前記テキストデータＡ、前記テキストデータＢ及び前記テキストデータＣに基づき生成される。 スクロール文字列とは、デバイスの表示部、電光掲示板、電子看板、パソコンのスクリーンなど（以下、表示部という）にスクロールしながら表示される文字列である。スクロール文字列は、下側から上側に向けてスクロールする文字列であってもよく、右側から左側に向けてスクロールする文字列であってもよい。スクロール文字列の全体は表示部には表示されず、最初の段階では、スクロール文字列の最初からスクロール文字列の途中までが表示部に表示され、スクロール文字列は時間の経過とともに表示部を移動していく。具体的には、スクロール文字列の先頭の文字から順にスクロールアウトしていき、スクロール文字列の続きの文字が順にスクロールインしていく。スクロール文字列は、文であってもよく、フレーズであってもよく、単語であってもよい。スクロール文字列を構成する文字は、文字コードを用いてデジタル化可能な文字（アルファベット、漢字、ひらがななど）、数字、符号又は記号である。 テキストデータとは、文字コードに従って文字列を表したデータであり、コンピューターや通信で利用できるデジタルデータである。 電子機器１０は、本実施形態のデジタル化方法の少なくとも一部を実施可能なものであれば特に限定されないが、例えば、スマートフォン、携帯電話、視覚障害者支援用電子機器、翻訳機、パソコン、ネットワークサーバーなどである。本実施形態のデジタル化方法は、これらの電子機器が共同して実施してもよい。また、これらの電子機器１０は、コンピューターに含まれる。 電子機器１０は、記憶部３を有する制御部２、カメラ４、画面５、スピーカー６、通信部７、操作部などを備えることができる。 制御部２は、電子機器１０を制御する部分である。制御部２は、例えば、演算処理装置（例えば、ＣＰＵ）、記憶部３（例えば、ＲＡＭ、ストレージデバイスなど）、ネットワークコントローラ、ビデオコントローラ、電源部などを有することができる。また、制御部２は複数の電子回路を有してもよい。記憶部３には、本実施形態のデジタル化方法を実施することができるプログラムやアプリが記憶されていてもよい。また、電子機器１０は通信部７を介してインターネット網のサーバー８に接続していてもよい。 図４（ａ）～（ｅ）は、第１～第４メニュー項目を表示する表示部の図である。表示部の左端に「＞」で示されたカーソルを動かし、メニュー項目を選択すると、そのメニュー項目の画面へと移行する。また、第３及び第４メニュー項目は、その文字列の全部は表示部には表示されておらず、カーソルをそのメニュー項目に合わせると、その文字列がスクロール表示される。図４（ａ）はカーソルを第３メニュー項目に合わせてすぐの画像であり、第３メニュー項目として「apple_banana_orange」と表示されている。図４（ｂ）では、第３メニュー項目の最初の２文字がスクロールアウトし続きの２文字がスクロールインして「ple_banana_orange_d」と表示されている。図４（ｃ）では、さらに第３メニュー項目の２文字がスクロールアウトし続きの２文字がスクロールインして「e_banana_orange_dog」と表示されている。図４（ｄ）では、さらに第３メニュー項目の２文字がスクロールアウトし続きの２文字がスクロールインして「banana_orange_dog_c」と表示されている。図４（ｅ）では、さらに第３メニュー項目の２文字がスクロールアウトし続きの２文字がスクロールインして「nana_orange_dog_cat」と表示されている。このように、文字列をスクロールさせることにより「apple_banana_orange_dog_cat」というスクロール文字列のすべてを表示することができる。 このようなスクロール文字列をデジタル化する方法について図１、図２に示したフローチャートを用いて説明する。 まず、ステップＳ１において、スクロール文字列を撮影し第１～第ｎ画像を取得する。画像の数ｎは特に限定されないが、例えば３以上５０以下である。例えば、電子機器１０のカメラ４を用いて静止画又は動画を撮影し画像を取得することができる。また、パソコンなど画面出力をキャプチャすることにより画像を取得してもよい。動画の場合は、動画から画像を抜き出すことにより画像を取得してもよい。第１～第ｎ画像は、スクロール文字列を順に撮影した画像であり、例えば、１文字以上４文字以下の文字がスクリーンインするごとに取得した画像であってもよい。 また、画像Ａ、画像Ｂ、画像Ｃは、第１～第ｎ画像に含まれる画像である。画像Ｂは画像Ａよりも後に取得した画像であり、画像Ｃは画像Ｂよりも後に取得した画像である。 ここでは、図４（ａ）を第１画像とし、図４（ｂ）を第２画像とし、図４（ｃ）を第３画像とし、図４（ｄ）を第４画像とし、図４（ｅ）を第５画像とする。画像Ａは、第１画像であってもよく、第２画像であってもよく、第３画像であってもよい。例えば第１画像を画像Ａとした場合、第２画像を画像Ｂとすることができ、第３画像を画像Ｃとすることができる。 また、ステップＳ１は、ステップＳ２～Ｓ９と並行して行われてもよい。具体的には、ステップＳ１において第１画像を取得した後、その後の画像を取得するまでの間に、ステップＳ２、Ｓ３を行ってもよい。また、ステップＳ１において第２画像を取得した後、その後の画像を取得するまでの間に、ステップＳ２、Ｓ４～Ｓ６を行ってもよい。また、ステップＳ１において第３画像以後の画像を取得した後、その後の画像を取得するまでの間に、ステップＳ２、Ｓ７～Ｓ９を行ってもよい。また、第１画像についてステップＳ１～Ｓ３を行い、その後第２画像についてステップＳ１、Ｓ２、Ｓ４、Ｓ５、Ｓ６を行い、その後第３画像についてステップＳ１、Ｓ２、Ｓ７、Ｓ８、Ｓ９を行ってもよい。第４以上番号の画像についても順に同様にステップＳ１、Ｓ２、Ｓ７、Ｓ８、Ｓ９を行ってもよい。 ステップＳ２において第１～第ｎ画像に含まれる文字列をそれぞれ第１～第ｎテキストデータに変換する。この変換には、光学式文字認識（ＯＣＲ）技術を用いることができる。例えば、電子機器１０の制御部２を用いて画像に含まれる文字列の光学式文字認識を行いテキストデータを生成してもよい。また、ステップＳ２～Ｓ９を電子機器１０の制御部２が行ってもよい。また、電子機器１０の制御部２は、通信部７を介して画像をインターネット網にあるサーバー８に送信し、サーバー８により画像に含まれる文字列の光学式文字認識を行うことにより生成されたテキストデータを通信部７を介して受信してもよい。また、ステップＳ２～Ｓ９をサーバー８において行い、生成された統合テキストデータを電子機器１０の制御部２が通信部７を介して受信してもよい。 ここでは、画像とテキストデータには同じ番号が付けられる。具体的には、第１画像に含まれる文字列を光学文字認識することにより生成されたデータが第１テキストデータであり、第２画像に含まれる文字列を光学文字認識することにより生成されたデータが第２テキストデータである。他の番号も同様である。また、画像Ａに含まれる文字列を光学文字認識することにより生成されたデータがテキストデータＡであり、画像Ｂに含まれる文字列を光学文字認識することにより生成されたデータがテキストデータＢであり、画像Ｃに含まれる文字列を光学文字認識することにより生成されたデータがテキストデータＣである。 ステップＳ３において、第１テキストデータを構成する複数の文字に連続番号をつける。例えば、図４（ａ）に示した第１画像に含まれる第３メニュー項目の文字列を光学文字認識することにより生成された第１テキストデータ「apple_banana_orange」を構成する複数の文字にその順に従って図５（ａ）のように１から始まる連続番号（１～１９）をつける。この明細書や図面では、テキストデータをその表す文字として記載している。 ステップＳ４において、第２テキストデータを構成する複数の文字に仮の連続番号を順次つけていき、それぞれの仮の連続番号をつけたときに第２テキストデータを構成する文字と同じである、対応する番号を有する第１テキストデータを構成する文字の数を数える。 例えば、まず、図４（ｂ）に示した第２画像に含まれる第３メニュー項目の文字列を光学文字認識することにより得られた第２テキストデータ「ple_banana_oran9e_d」を構成する複数の文字にその順に従って図５（ｂ）のように１から始まる仮の連続番号（１～１９）をつける。この第２テキストデータでは、ステップＳ２において「ｇ」を「９」と誤変換している（文字認識誤り）。そして、連続番号のそれぞれについて第１テキストデータと第２テキストデータとを比較し、同じ文字を数