Search

JP-2026076647-A - 揺動補正装置及び撮像システム

JP2026076647AJP 2026076647 AJP2026076647 AJP 2026076647AJP-2026076647-A

Abstract

【課題】躍動感や臨場感の高い映像の撮影を可能とする撮像システムを提供する。 【解決手段】撮像システム500は、撮像装置1と、撮像装置1を保持する装着台27と、撮像装置1によって撮影される主被写体52を検出する被写体検出部83と、装着台27を第1の方向に並進駆動する並進駆動部36と、撮像装置1による撮影映像における主被写体52の位置と予め設定された基準位置との差分を求め、求めた差分が撮影映像でゼロとなるように主被写体52の動きに合わせて並進駆動部36の駆動を制御する並進位置制御部63を有する。 【選択図】図10

Inventors

  • 二宮 俊輔

Assignees

  • キヤノン株式会社

Dates

Publication Date
20260512
Application Date
20241024

Claims (15)

  1. 撮像装置と、 前記撮像装置を保持する保持部材と、 前記撮像装置によって撮影される主被写体を検出する被写体検出手段と、 前記保持部材を第1の方向に並進駆動する第1の駆動手段と、 前記撮像装置による撮影映像における前記主被写体の位置と予め設定された基準位置との差分を求める演算手段と、 前記撮影映像での前記差分がゼロとなるように前記主被写体の動きに合わせて前記第1の駆動手段の駆動を制御する制御手段と、を備えることを特徴とする撮像システム。
  2. 前記被写体検出手段は、前記撮像装置による撮影映像から前記主被写体を検出することを特徴とする請求項1に記載の撮像システム。
  3. 前記撮像装置が前記被写体検出手段を備えることを特徴とする請求項2に記載の撮像システム。
  4. 前記撮像装置とは異なる別の撮像装置を備え、 前記被写体検出手段は、前記別の撮像装置による撮像画像から前記主被写体を検出することを特徴とする請求項1に記載の撮像システム。
  5. 前記被写体検出手段は前記主被写体に装備されて前記主被写体の位置と動きを検出し、 前記演算手段は、前記被写体検出手段が検出した情報を通信により前記被写体検出手段から取得することを特徴とする請求項1に記載の撮像システム。
  6. 前記撮像装置の前記第1の方向での揺れ量を検出する揺れ検出手段を備え、 前記制御手段は、前記差分と前記揺れ量に応じて前記第1の駆動手段の駆動を制御することを特徴とする請求項1乃至5のいずれか1項に記載の撮像システム。
  7. 前記第1の方向と直交し且つ前記撮像装置の撮影方向と直交する軸まわりに前記撮像装置を回転駆動する第2の駆動手段を備え、 前記撮像装置と前記保持部材は前記第2の駆動手段を介して連結され、 前記制御手段は、前記撮影映像での前記差分がゼロとなるように前記主被写体の動きに合わせて前記第1の駆動手段と前記第2の駆動手段の駆動を制御することを特徴とする請求項1乃至5のいずれか1項に記載の撮像システム。
  8. 前記制御手段は、前記差分が前記差分に対して設けられた閾値を超えない場合に前記第1の駆動手段のみを駆動し、前記差分が前記閾値を超える場合に前記第1の駆動手段と前記第2の駆動手段を駆動することを特徴とする請求項7に記載の撮像システム。
  9. 前記制御手段は、前記閾値は第1の駆動手段により前記撮像装置が前記第1の方向に移動可能な最大並進位置に対応する値であることを特徴とする請求項8に記載の撮像システム。
  10. 撮影者が把持する把持部を備え、 前記第1の駆動手段は、 前記把持部に対して相対的に前記第1の方向に並進するように前記把持部と前記保持部材とを連結する平行リンクと、 前記平行リンクを駆動するアクチュエータと、を有することを特徴とする請求項1乃至5のいずれか1項に記載の撮像システム。
  11. 前記第1の方向は鉛直方向と略平行であることを特徴とする請求項1乃至5のいずれか1項に記載の撮像システム。
  12. 撮像装置を保持する保持部材と、 前記撮像装置によって撮影される主被写体を検出する被写体検出手段と、 前記保持部材を第1の方向に並進駆動する第1の駆動手段と、 前記撮像装置による撮影映像における前記主被写体の位置と予め設定された基準位置との差分を求める演算手段と、 前記撮影映像での前記差分がゼロとなるように前記主被写体の動きに合わせて前記第1の駆動手段の駆動を制御する制御手段と、を備えることを特徴とする揺動補正装置。
  13. 撮像装置と、 前記撮像装置による撮影映像から主被写体の位置を検出する検出手段と、 前記撮像装置を第1の方向に並進駆動する駆動手段と、 前記撮像装置による撮影映像において前記主被写体の位置が予め設定された位置に留まるように前記主被写体の動きに合わせて前記駆動手段の駆動を制御する制御手段と、を備えることを特徴とする撮像システム。
  14. 撮像装置と、 前記撮像装置を少なくとも第1の方向に変位させる揺動補正装置と、 前記揺動補正装置の駆動を制御する制御装置と、を備える撮像システムであって、 前記揺動補正装置は、 前記撮像装置が固定され、前記撮像装置の撮影方向を変更する回転補正ユニットと、 前記回転補正ユニットを保持し、前記第1の方向に前記回転補正ユニットを変位させる並進補正ユニットと、を有し、 前記並進補正ユニットは、 前記回転補正ユニットが装着される装着台と、 前記装着台を前記第1の方向に並進駆動する駆動手段と、を有し、 前記制御装置は、 前記撮像装置によって撮影される主被写体を検出する被写体検出手段と、 前記撮像装置による撮影映像における前記主被写体の位置と予め設定された基準位置との差分を求める演算手段と、 前記撮影映像での前記差分がゼロとなるように前記主被写体の動きに合わせて前記駆動手段の駆動を制御する制御手段と、を備えることを特徴とする撮像システム。
  15. 前記回転補正ユニットは、 前記撮像装置の撮像光軸と平行な第1軸と、前記第1軸と直交する平面内で互いに直交する第2軸および第3軸の各軸まわりに前記撮像装置を回転駆動する回転駆動手段と、 前記撮像装置の回転揺れを検知する回転検知手段と、を有し、 前記制御装置は前記回転揺れがゼロとなるよう前記回転駆動手段の駆動を制御する回転位置制御手段を有することを特徴とする請求項14に記載の撮像システム。

Description

本発明は、撮像装置の揺れを補正する揺動補正装置と、揺動補正装置と撮像装置を備える撮像システムに関する。 撮影者が歩行しながら撮像装置による撮影を行った際の撮像装置の揺れを低減させる技術が知られている。例えば、特許文献1には、持ち手等が設けられる基台と撮像装置との間にリンク機構と駆動手段が設けられ、基台に生じる運動が撮像装置に与える影響が低減されるように駆動手段の動作を制御する運動制御装置が開示されている。 特開2017-90758号公報 第1実施形態に係る撮像システムの概略構成を示す側面図である。撮像システムの制御系の概略構成を示すブロック図である。撮像システムを構成する回転補正ユニットの概略構成を示す図である。撮像システムを構成する並進補正ユニットの概略構成を示す図である。撮像装置の回転揺れ補正制御を説明する図である。撮像システムを用いた撮影状況の一例を示す図である。撮像装置による撮影映像の一場面を示す図である。制御ユニットの並進位置制御部が実行する制御フローチャートである。撮像装置の並進揺れ補正制御を説明する図である。並進位置制御と並進揺れ補正制御を行った場合の撮像装置の並進変位と主被写体の縦方向位置の変化を説明する図である。図6に対応する同じ撮影状況での従来の制御による撮像装置の動きを説明する図である。従来の制御を行った場合の撮像装置の並進変位と主被写体の縦方向位置の変化を説明する図である。第2実施形態に係る撮像システムによる撮影状況を示す図である。第3実施形態での回転補正ユニットの動作の一例を示す図である。第3実施形態での並進位置制御及び回転位置制御のフローチャートである。並進位置制御と回転位置制御を行った場合の撮像装置の並進変位と主被写体の縦方向位置の変化を説明する図である。 以下、本発明の実施形態について添付図面を参照して詳細に説明する。 <第1実施形態> 図1は第1実施形態に係る撮像システム500の概略構成を示す側面図である。図2は撮像システム500の制御系の概略構成を示すブロック図である。撮像システム500は大略的に、撮像装置1、揺動補正装置100及び制御ユニット60から構成されている。そして、揺動補正装置100は、撮像装置1を保持する保持手段であり、回転補正ユニット110と並進補正ユニット120から構成されている。 撮像システム500を説明する便宜上、図1に示される直交座標系を定義する。並進補正ユニット120は撮影者が撮像システム500を取り扱う際に把持する把持部34を有する。把持部34は一方向が他の方向より長く、その長手方向と平行にy軸(y方向)を定義し、y軸と直交する同一平面内において互いに直交するx軸(x方向)及びz軸(z方向)を定義する。図1に示されるように、並進補正ユニット120を構成する第2リンク32(詳細は後述する)の長手方向及び撮像装置1の撮像光軸Oがy方向と直交する状態を「撮像システム500の標準姿勢」と定義する。そして、z方向は標準姿勢時における第2リンク32の長手方向であると定義する。x軸は、標準姿勢時においてy軸及びz軸と直交する。なお、x方向、y方向及びz方向それぞれの正方向は、図1において座標系を表す矢印の向かう方向とする。 撮像装置1は、具体的には動画撮影が可能な公知のデジタルカメラ又はデジタルビデオカメラであるが、これらに限られず、スマートフォン等の撮像機能を備えた電子機器を用いてもよい。撮像装置1は公知のものでよいため、その詳細についての説明は省略するが、図2には、後述する並進駆動部36の駆動制御に関係する撮像部81、画像処理部82及び被写体検出部83が示されている。 撮像部81は、レンズ装置及びCMOSセンサ等の撮像素子を有し、レンズ装置を通して撮像素子に結像する被写体の光学像を電気信号に変換する。画像処理部82は、撮像部81から出力される電気信号を画像データに変換する。被写体検出部83は、画像処理部82が生成した画像データを用いて主被写体(詳細は後述)の検出を行う。被写体検出部83が検出した主被写体に関する情報は制御ユニット60の並進位置制御部63へ送信される。並進位置制御部63の詳細については後述する。 なお、ここでは、主被写体の検出を撮像装置1で実行する構成としているが、制御ユニット60に被写体検出部を設け、画像処理部82が生成した画像データが制御ユニット60の被写体処理部へ送信され、そこで主被写体の検出が行われる構成であってもよい。 次に、揺動補正装置100の構成について説明する。最初に、回転補正ユニット110の構成について説明する。図3(a)は標準姿勢時の回転補正ユニット110を+z側から見た場合の概略構成を示す図(正面図)である。図3(b)は標準姿勢時の回転補正ユニット110を-x側から見た場合の概略構成を示す図(側面図)である。図3(c)は標準姿勢時の回転補正ユニット110を+y側から見た場合の概略構成を示す図(上面図)である。 回転補正ユニット110は、第1アーム21、第1回転駆動部22、第2アーム23、第2回転駆動部24、第3アーム25、第3回転駆動部26、回転検出センサ28を有する。 第1アーム21は撮像装置1を保持する保持部材であり、撮像装置1は第1アーム21に対して着脱可能である。撮像装置1は、第1アーム21に対して、直接固定され又は所定のアタッチメントを介して固定される。回転検出センサ28は、第1アーム21に取り付けられているが、これに限られず、第1アーム21に内蔵されていてもよい。回転検出センサ28は、例えばジャイロセンサ等であり、撮像装置1の回転揺れ(回転ブレ)を検出し、検出信号を制御ユニット60の回転揺れ補正部61へ出力する。 第1回転駆動部22、第2回転駆動部24及び第3回転駆動部26はそれぞれ、具体的には回転駆動型のアクチュエータ(モータ)であり、これらは独立して駆動可能となっている。ここで、図3に示されるように、第1回転駆動部22、第2回転駆動部24及び第3回転駆動部26の各回転軸を、第1回転軸R1、第2回転軸R2及び第3回転軸R3と定義する。 第1回転駆動部22は、第2アーム23に固定されている。第1回転駆動部22は、第1回転駆動部22に連結された第1アーム21を第1回転軸R1まわりに(第1回転軸R1を回転中心軸として)回転させる。標準姿勢時には第1回転軸R1はx軸と平行であるため、標準姿勢で第1回転駆動部22を駆動することにより、並進補正ユニット120に対して撮像装置1をx軸まわりに回転(チルト駆動)させることができる。 第2回転駆動部24は、第3アーム25に固定されている。第2回転駆動部24は、第2回転駆動部24に連結された第2アーム23を第2回転軸R2まわりに回転駆動する。標準姿勢時には第2回転軸R2はz軸と平行であるため、標準姿勢で第2回転駆動部24のみを駆動することにより、並進補正ユニット120に対して撮像装置1をz軸まわりに回転(ロール駆動)させることができる。 第3回転駆動部26は、並進補正ユニット120を構成する装着台27に固定されており、第3回転駆動部26に連結された第3アーム25を第3回転軸R3まわりに回転駆動する。標準姿勢時には第3回転軸R3はy軸と平行であるため、標準姿勢の状態から第3回転駆動部26のみを駆動することにより、並進補正ユニット120に対して撮像装置1をy軸まわりに回転(パン駆動)させることができる。 図2に示されるように、第1回転駆動部22、第2回転駆動部24及び第3回転駆動部26の駆動制御は、制御ユニット60の回転揺れ補正部61により行われる。回転揺れ補正部61は、概略、把持部34の動きに起因して装着台27を介して撮像装置1に生じるにピッチ、ヨー及びロールの各方向での揺れの撮影映像への影響を低減させるために各回転駆動部の駆動制御を行うが、その詳細については後述する。 続いて、並進補正ユニット120の構成について説明する。図4(a)は標準姿勢時の並進補正ユニット120の側面図である。図4(b)は把持部34に+y側への変位が生じた状態を示す側面図である。 並進補正ユニット120は、装着台27、第1リンク31、第2リンク32、第3リンク33、把持部34、シャフト35、並進駆動部36、調整ねじ37、引張ばね38、測距センサ39及びばね掛け部材40を有する。 装着台27は第1リンク31に固定されている。装着台27と第1リンク31は、結合可能な個別の部材であってもよいし、所定の材料(例えば金属や樹脂)で一体的に形成されていてもよい。回転補正ユニット110は、第3アーム25において装着台27に対して着脱可能となっている。なお、本実施形態では装着台27を並進補正ユニット120の構成要素としているが、装着台27は回転補正ユニット110の構成要素であってもよい。その場合、装着台27と第1リンク31とが結合及び分離可能に構成される。 並進補正ユニット120では、第1リンク31、第2リンク32、第3リンク33及びシャフト35によって平行リンク機構が構成されている。つまり、第3リンク33は把持部34に固定され、第1リンク31と第3リンク33を連結する第2リンク32は平行リンクとして構成されている。そのため、第1リンク31は、把持部34に対して相対的に、互いの長手方向が平行な状態を保ってy方向に動くことができる。 把持部34に対する第1リンク31の相対的なy方向での動きは、回転補正ユニット110及び装着台27を介した撮像装置1のy方向の動きとなる。本説明において「並進」とは、撮像装置1が第1リンク31、装着台27及び回転補正ユニット110と一体的に±y方向に動くことを指す。なお、第3リンク33と把持部34は、結合可能な個別の部材であってもよいし、所定の材料(例えば金属や樹脂)で一体的に形成されていてもよい。 測距センサ39は第1リンク31に固定されている。測距センサ39は、例えば2つの撮像ユニットで構成されており、2つの撮像ユニットは-y側にある撮像対象(図6を参照して後述する使用方法の場合には地面)を撮像し、得られるステレオ画像を制御ユニット60の並進揺れ補正部62へ送信する。並進揺れ補正部62での処理の内容については後述するが、並進揺れ補正部62は取得したステレオ画像を用いて、測距センサ39から撮影対象までの距離を演算する。測距センサ39から撮影対象までの距離の変化は、撮像装置1のy方向での揺れを表す。つまり、測距センサ39は撮像装置1のy方向での揺れを検出する揺れ検出手段である。なお、測距センサ39は、撮像により測距を行うものに限られず、例えば赤外線等を照射してその反射光を検知するものであってもよい。 引張ばね38は、第1リンク31において第1リンク31と第2リンク32を相対的に可動に連結する2つのシャフト35のうちの-y側のシャフト35とばね掛け部材40のばね掛け部40aとの間に引張荷重F1が生じるように取り付けられている。なお、図4(a)では、引張荷重F1のうちシャフト35に作用するもののみを図示し、ばね掛け部40aに作用する荷重の図示を省略している。 引張荷重F1によって+y方向の荷重(以下「持ち上げ荷重F2」という)が第1リンク31に発生する。持ち上げ荷重F2の大きさは、ばね掛け部40aの位置に応じて変化する。ここで、調整ねじ37が第3リンク33に取り付けられており、調整ねじ37のねじ部はばね掛け部材40と螺合しているため、調整ねじ37を回転させてばね掛け部材40をy方向に移動させることで、持ち上げ荷重F2の大きさを調整することができる。したがって、持ち上げ荷重F2が撮像装置1及び回転補正ユニット110の重量と釣り合うようにばね掛け部材40の位置を調整することにより、並進補正ユニット120を第2リンク32の長手方向と把持部34の長手方向が直交する標準姿勢とすることができる。 撮影者が把持