画像処理方法，画像処理装置およびそれを搭載した水中検査装置
【課題】本発明の目的は、画像情報のみを用いて、画像の振れを修正し、画像を安定化でき、水中検査装置の操作性が向上する画像処理方法，画像処理装置およびそれを搭載した水中検査装置を提供することにある。
【解決手段】本発明は、表示する時刻の取得画像と直前の時刻の取得画像の画像相関演算により算出した画像振れ量を算出し、予め設定した時間分の画像振れ量の移動平均を算出し、直前の時刻の取得画像を画像振れ量の移動平均に相当する画素分だけ移動させて補正画像を算出し、補正画像を表示することを特徴とする。
【効果】本発明によれば、画像情報のみを用いて、画像の振れを修正し、画像を安定化でき、水中検査装置の操作性が向上するものとなる。
【解決手段】本発明は、表示する時刻の取得画像と直前の時刻の取得画像の画像相関演算により算出した画像振れ量を算出し、予め設定した時間分の画像振れ量の移動平均を算出し、直前の時刻の取得画像を画像振れ量の移動平均に相当する画素分だけ移動させて補正画像を算出し、補正画像を表示することを特徴とする。
【効果】本発明によれば、画像情報のみを用いて、画像の振れを修正し、画像を安定化でき、水中検査装置の操作性が向上するものとなる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理方法，画像処理装置およびそれを搭載した水中検査装置に関する。
【背景技術】
【０００２】
従来の移動体に搭載したカメラの撮影画像処理に関し、第１に、人間が頭部に装着するカメラの視認性を安定させる技術が知られている（例えば、特許文献１参照）。
【０００３】
また、第２に、撮影画像から動きベクトルを検出し、撮影画像のみを用いて画像の振れを抑止する技術が知られている（例えば、特許文献２参照）。
【０００４】
一方、水中検査装置に動き検出センサを搭載し、任意の方向に操舵する技術が知られている（例えば、特許文献３参照）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０００−９７６３７号公報
【特許文献２】特開平５−２１９４２０号公報
【特許文献３】特開２００６−２２４８６３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
特許文献１は、人間が頭部に装着するカメラの視認性を安定させる装置に関して、搭載したジャイロセンサを用いて、動きを検出する技術である。また、特許文献２の技術は、画像の相関処理により、動きを検出している。このように、特許文献１及び特許文献２は、画像の安定化を図るために、画像の振れを検出し、振れの分だけ補正する技術である。
【０００７】
しかしながら、本発明で対象としている水中検査装置は、装置が振れるだけでなく、装置の姿勢を故意に変換させる場合もあるため、正対する向きに画像を追従させる必要がある。従って、特許文献１，特許文献２記載の技術では、水中検査装置には適用できないものである。
【０００８】
また、特許文献３は、ジャイロ等の内界センサを用いて姿勢を検出し、フィードバック制御することで、水中検査装置の姿勢を制御する装置であり、画像のみを安定化させる技術ではない。
【０００９】
本発明の目的は、画像情報のみを用いて、画像の振れを修正し、画像を安定化でき、水中検査装置の操作性が向上する画像処理方法，画像処理装置およびそれを搭載した水中検査装置を提供することにある。
【課題を解決するための手段】
【００１０】
本発明は、表示する時刻の取得画像と直前の時刻の取得画像の画像相関演算により算出した画像振れ量を算出し、予め設定した時間分の画像振れ量の移動平均を算出し、直前の時刻の取得画像を画像振れ量の移動平均に相当する画素分だけ移動させて補正画像を算出し、補正画像を表示することを特徴とする。
【発明の効果】
【００１１】
本発明によれば、画像情報のみを用いて、画像の振れを修正し、画像を安定化でき、水中検査装置の操作性が向上するものとなる。
【図面の簡単な説明】
【００１２】
【図１】実施例１による水中検査作業中における水中検査装置の機器配置を示す図である。
【図２】実施例１における検査用ビークルの構成を示す図である。
【図３】実施例１における画像振れ量の定義を示す図である。
【図４】実施例１における画像振れ量の算出イメージを示す図である。
【図５】実施例１における表示画像範囲のイメージを示す図である。
【図６】実施例１における画像処理の流れを示す図である。
【図７】実施例２における水中カメラの構成を示す図である。
【発明を実施するための形態】
【００１３】
本発明は、水中移動体に搭載した撮影装置で撮影した画像を処理する画像処理方法，画像処理装置およびそれを搭載した水中検査装置に係り、特に、原子炉内を検査する水中検査装置，原子炉内のシュラウドや圧力容器の他、ジェットポンプ等の炉内機器を目視点検する遊泳型の水中検査装置に好適な画像処理方法，画像処理装置およびそれを搭載した水中検査装置に関する。
【実施例１】
【００１４】
図１〜図６を用いて、本実施例の水中検査装置の構成及び動作について説明する。本実施例の水中検査装置は、原子炉内の欠陥検査、特に構造物を目視検査する際に用いられる装置である。
【００１５】
最初に、本実施例による水中検査装置を用いた、水中検査作業時の機器配置を図１で説明する。
図１は、本実施例の水中検査装置を用いた水中検査作業時の機器配置図である。原子炉１内には、シュラウド２，上部格子板３，炉心支持板４，シュラウドサポート５等の構造物がある。また、原子炉１の上部には、作業スペースであるオペレーションフロア６があり、また同じく上方には、燃料交換装置７がある。
【００１６】
原子炉１内に進入させた検査用ビークル８は、ビークル用ケーブル９を介して制御装置１０に接続される。制御装置１０は、検査用ビークル８を水中で泳動させて航行させるための電力を供給するとともに、検査対象箇所において目視検査を実施するために映像の通信を行う。また、制御装置１０には表示装置１１が接続され、検査用ビークル８に搭載した撮像手段が撮像する画像を表示する。さらに、制御装置１０にはコントローラ１２を接続し、ビークル操作員１３ａが操作する。なお、燃料交換装置７の上では、操作補助員１３ｂがビークル用ケーブル９を捌く。
【００１７】
制御装置１０の内部には、検査用ビークル８の位置移動を制御する位置制御手段と、検査用ビークル９に搭載された撮像手段により撮像された画像を表示装置１１に表示するために表示画像を生成する画像表示処理手段とを備えている。
【００１８】
次に、図２を用いて、本実施例の水中検査装置に用いる検査用ビークル８の構成について説明する。図２は、水中検査装置に用いる検査用ビークル８の構成を示す鳥瞰図である。
【００１９】
検査用ビークル８には、前部に撮像手段としてカメラユニット２０を搭載している。なお、カメラユニット２０内部には、カメラおよび照明が収納されている。図１に示したビークル操作員１３ａは、カメラユニット２０からの映像を確認しながら、検査用ビークル８の移動等を操作できる構成となっている。
【００２０】
また、検査用ビークル８は、水中を移動するための駆動機構を搭載している。この駆動機構は、上下に移動するための昇降用スラスタ２１と、前後に進行するための推進用スラスタ２２と、左右に移動及び旋回するための並進旋回用スラスタ２３ａ，２３ｂを搭載している。ここで、並進旋回用スラスタ２３ａ，２３ｂは、左右に移動させる場合には同一方向に回転させ、旋回させる場合には逆方向に回転させる。
【００２１】
次に、図３から図５を用いて、本実施例の水中検査装置による画像処理方法の概念を説明する。
図３は、画像振れ量の定義を示したものである。図３は、カメラユニット２０で撮影した画像を制御装置１０に取り込んだイメージである。取り込み画像３０において、時刻Ｔi-1における特徴点３１が、次の時刻Ｔiにおける特徴点３２の位置に移動したとする。この時の移動量（ａ，ｂ）を画像振れ量３３として定義する。この画像振れ量３３は、後述する画像相関処理により算出するものであり、（ａ，ｂ）は、画像のＸ方向，Ｙ方向の振れ量を示している。図３は、２つの画像間における特徴点の変化を説明したものである。そして、連続する複数の画像の集合である映像で画像振れ量を考えると、特徴点は連続した振れとなる。この特徴点の振れの要因は、操作員が意図した方向変化と、意図しない振れに分けられる。このうち、操作員が意図した方向変化は周波数が低く、意図しない振れは周波数が高いと考えられる。
【００２２】
図４は、画像の振れの高周波成分のみを除去し、操作員が意図した方向変化のみを画像の表示に反映させる方式のイメージを示したものである。図４において、画像振れ量の変化４０は実線で示したように振動（振れ幅）が大きい。ここで、予め設定した時間、例えば３サンプルの画像振れ量の移動平均４１を算出する。この処理の結果、高周波成分は除去され、操作員が意図した変化のみが残ることになる。移動平均を実施しない場合の時刻Ｔi-1からＴiへの変化量４２と比べ、移動平均を実施した場合の変化量は小さくなる。この量を、時刻Ｔiにおける画像補正量４３として用いる。なお、画像補正量４３は、図３のａ，ｂすなわち、Ｘ方向，Ｙ方向で独立に算出し、その値をＡ，Ｂとする。
【００２３】
図５は、表示画像範囲のイメージを示す図である。時刻Ｔi-1における表示画像５０に対し、時刻Ｔiにおける表示画像５１は、Ｘ方向の画像シフト量５２，Ｙ方向の画像シフト量５３の分だけ、ずらして表示する。なお、時刻Ｔi-1，時刻Ｔiいずれの場合でも、表示サイズの変化は無い。そのため、表示画像をシフトさせた分だけ、画像情報が無い部分が生じる。そこで、時刻Ｔiにおいて、ブランク領域５４を挿入する。
【００２４】
次に、図６を用いて、本実施例の水中検査装置による画像表示方法の処理内容について説明する。これらの処理は、図１に示した制御装置１０の画像表示処理手段により実行され、図３から図５までの方法を具現化するフローチャートである。
【００２５】
ステップＳ００で処理開始後、ステップＳ０１において時定数Ｎを入力する。この時定数は、図４で示した移動平均の幅を示すもので、具体的には移動平均サンプル数である。次に、ステップＳ０２において、時刻Ｔ0における初期画像処理を行う。ステップＳ０３で初期撮影画像を読み込み、ステップＳ０４でカメラのレンズによる歪みを補正し、ステップＳ０５で初期画像を保存する。次に、ステップＳ０６で、時定数Ｎにより定められる範囲の初期画像相関を算出する。具体的には、ステップＳ０７からステップＳ０８の画像振れ量算出のサブルーチンを呼び出し、繰返し演算をする。ステップＳ０８では、まず、ステップＳ０９で現時刻Ｔiの画像を取得する。詳細には、ステップＳ１０で現時刻の画像を取り込み、ステップＳ１１で歪みを補正し、ステップＳ１２で現画像として保存する。次に、ステップＳ１３で前時刻Ｔi-1の画像を読み込み、ステップＳ１４で画像相関演算をする。その結果、ステップＳ１５において、図３で示した画像振れ量（ａ，ｂ）を決定する。ステップＳ１６は画像振れ量（ａ，ｂ）を保存する。
【００２６】
次に、ステップＳ１７で時刻をインクリメントし、ステップＳ１８で画像補正処理を行う。ここで、ステップＳ１８の画像補正処理を説明する。まず、現時刻の画像振れ量を算出するために、ステップ１９はサブルーチンステップＳ０８を呼び出し、ステップＳ０９からステップＳ１６の処理を実施する。次に、ステップＳ２０において、ステップＳ１６で保存した過去の画像振れ量を読み込む。ここで読み込むのは、現時刻ｉに対し、ｉ−Ｎからｉ−１までの時間の結果である。例えば、時定数Ｎ＝３の場合、ステップＳ２０は、ｉ−３からｉ−１までの時間の結果を読み込む。但し、現時刻がＴ1、又はＴ2のとき、過去の取得画像数は時定数（Ｎ＝３）に満たない。そのため、現時刻がＴ1、又はＴ2の場合、ステップＳ２０はスキップされる。
【００２７】
ステップＳ２１は、ステップＳ２０の結果を用いて画像振れ量の移動平均（Ａ，Ｂ）を算出し、ステップＳ２２は前時刻Ｔi-1の画像を（Ａ，Ｂ）の画素数だけシフトさせる。このステップは、図５で示した方式による。ステップＳ２３は、その結果を補正画像として表示する。この時、図５で示した通り、ブランク領域を画面の端に挿入して表示する。最後に、次のステップＳ２４においてループ判定を行う。ステップＳ２５において、操作員から終了の入力が無ければ、ステップＳ２６から、ステップＳ２７にジャンプし、ステップＳ１７からステップＳ２３までの処理を繰り返す。操作員から終了の入力があれば、ステップＳ２８において終了処理を行う。
【００２８】
このように、本実施例では、表示する時刻の取得画像と直前の時刻の取得画像の画像相関演算（Ｓ１４）により算出した画像振れ量を算出し、予め設定した時間分の画像振れ量の移動平均（Ｓ２１）を算出し、直前の時刻の取得画像を画像振れ量の移動平均に相当する画素分だけ移動させて補正画像を算出（Ｓ２２）し、補正画像を表示する（Ｓ２３）。画像振れ量の移動平均（Ｓ２１）を用いることにより、画像振れ量の高周波成分は除去され、操作員が意図した変化のみを画像表示に反映させることが可能である。そのため、画像情報のみを用いて、画像の振れを修正し、なおかつ、意図した姿勢の変化にも追従することが可能になる。その結果、移動体に搭載した撮影画像を安定化させることが可能になり、移動時における操作性を向上する。
【００２９】
また、水中検査装置に搭載したカメラの画像を安定化させることが可能になり、目視点検における検査効率を向上できる。
【実施例２】
【００３０】
次に、図７を用いて、本実施例の水中検査装置の構成及び動作について説明する。本実施例による水中検査装置を用いた水中検査作業時の機器配置は、図１と比較して、検査用ビークル８の代わりに水中カメラ７０を用いる点、及びビークル用ケーブルの代わりにケーブルを内包した保持治具７１を用いている点が異なる。なお、他の構成，画像処理方法，表示方法は、図１と同一である。水中カメラ７０は、カメラユニット７２とランプユニット７３ａ，７３ｂを搭載している。制御装置１０は、カメラユニット７２で撮影した映像の画像処理を行い、表示装置１１にて表示する。
【００３１】
本実施例は、実施例１と同一目的を達成しようとするものである。但し、カメラを搭載する機器が、泳動型である検査用ビークル８と異なり、上下方法の振れの少ない保持治具を用いている。そのため、操作員が所望しない振れは、主に水平方向の振れとなる。この場合、画像振れ量（図４）を算出する時に、画像の水平方向すなわちＸ方向のみについて補正を行って同様の効果が得られるため、画像処理に掛かる演算時間を短縮し応答性を向上することも可能になる。
【００３２】
以上説明したように、本実施例によれば、画像情報のみを用いて、画像の振れを修正し、なおかつ、意図した姿勢の変化にも追従することが可能になる。その結果、移動体に搭載した撮影画像を安定化させることが可能になり、移動時における操作性を向上する。
【００３３】
また、水中検査装置に搭載したカメラの画像をより安定化させることが可能になり、目視点検における検査効率を向上できる。
【符号の説明】
【００３４】
１ 原子炉
２ シュラウド
３ 上部格子板
４ 炉心支持板
５ シュラウドサポート
６ オペレーションフロア
７ 燃料交換装置
８ 検査用ビークル
９ ビークル用ケーブル
１０ 制御装置
１１ 表示装置
１２ コントローラ
２０ カメラユニット
２１ 昇降用スラスタ
２２ 推進用スラスタ
２３ａ，２３ｂ 並進旋回用スラスタ
３０ 取り込み画像
３１ 時刻Ｔi-1における特徴点
３２ 時刻Ｔiにおける特徴点
３３ 画像振れ量
４０ 画像振れ量の変化
４１ 画像振れ量の移動平均
４２ 時刻Ｔi-1からＴiへの変化量
４３ 時刻Ｔiにおける画像補正量
５０ 時刻Ｔi-1における表示画像
５１ 時刻Ｔiにおける表示画像
５２ Ｘ方向の画像のシフト量
５３ Ｙ方向の画像のシフト量
５４ 時刻Ｔiにおけるブランク領域
７０ 水中カメラ
７１ 保持治具
７２ カメラ
７３ａ，７３ｂ ランプユニット
【技術分野】
【０００１】
本発明は、画像処理方法，画像処理装置およびそれを搭載した水中検査装置に関する。
【背景技術】
【０００２】
従来の移動体に搭載したカメラの撮影画像処理に関し、第１に、人間が頭部に装着するカメラの視認性を安定させる技術が知られている（例えば、特許文献１参照）。
【０００３】
また、第２に、撮影画像から動きベクトルを検出し、撮影画像のみを用いて画像の振れを抑止する技術が知られている（例えば、特許文献２参照）。
【０００４】
一方、水中検査装置に動き検出センサを搭載し、任意の方向に操舵する技術が知られている（例えば、特許文献３参照）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０００−９７６３７号公報
【特許文献２】特開平５−２１９４２０号公報
【特許文献３】特開２００６−２２４８６３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
特許文献１は、人間が頭部に装着するカメラの視認性を安定させる装置に関して、搭載したジャイロセンサを用いて、動きを検出する技術である。また、特許文献２の技術は、画像の相関処理により、動きを検出している。このように、特許文献１及び特許文献２は、画像の安定化を図るために、画像の振れを検出し、振れの分だけ補正する技術である。
【０００７】
しかしながら、本発明で対象としている水中検査装置は、装置が振れるだけでなく、装置の姿勢を故意に変換させる場合もあるため、正対する向きに画像を追従させる必要がある。従って、特許文献１，特許文献２記載の技術では、水中検査装置には適用できないものである。
【０００８】
また、特許文献３は、ジャイロ等の内界センサを用いて姿勢を検出し、フィードバック制御することで、水中検査装置の姿勢を制御する装置であり、画像のみを安定化させる技術ではない。
【０００９】
本発明の目的は、画像情報のみを用いて、画像の振れを修正し、画像を安定化でき、水中検査装置の操作性が向上する画像処理方法，画像処理装置およびそれを搭載した水中検査装置を提供することにある。
【課題を解決するための手段】
【００１０】
本発明は、表示する時刻の取得画像と直前の時刻の取得画像の画像相関演算により算出した画像振れ量を算出し、予め設定した時間分の画像振れ量の移動平均を算出し、直前の時刻の取得画像を画像振れ量の移動平均に相当する画素分だけ移動させて補正画像を算出し、補正画像を表示することを特徴とする。
【発明の効果】
【００１１】
本発明によれば、画像情報のみを用いて、画像の振れを修正し、画像を安定化でき、水中検査装置の操作性が向上するものとなる。
【図面の簡単な説明】
【００１２】
【図１】実施例１による水中検査作業中における水中検査装置の機器配置を示す図である。
【図２】実施例１における検査用ビークルの構成を示す図である。
【図３】実施例１における画像振れ量の定義を示す図である。
【図４】実施例１における画像振れ量の算出イメージを示す図である。
【図５】実施例１における表示画像範囲のイメージを示す図である。
【図６】実施例１における画像処理の流れを示す図である。
【図７】実施例２における水中カメラの構成を示す図である。
【発明を実施するための形態】
【００１３】
本発明は、水中移動体に搭載した撮影装置で撮影した画像を処理する画像処理方法，画像処理装置およびそれを搭載した水中検査装置に係り、特に、原子炉内を検査する水中検査装置，原子炉内のシュラウドや圧力容器の他、ジェットポンプ等の炉内機器を目視点検する遊泳型の水中検査装置に好適な画像処理方法，画像処理装置およびそれを搭載した水中検査装置に関する。
【実施例１】
【００１４】
図１〜図６を用いて、本実施例の水中検査装置の構成及び動作について説明する。本実施例の水中検査装置は、原子炉内の欠陥検査、特に構造物を目視検査する際に用いられる装置である。
【００１５】
最初に、本実施例による水中検査装置を用いた、水中検査作業時の機器配置を図１で説明する。
図１は、本実施例の水中検査装置を用いた水中検査作業時の機器配置図である。原子炉１内には、シュラウド２，上部格子板３，炉心支持板４，シュラウドサポート５等の構造物がある。また、原子炉１の上部には、作業スペースであるオペレーションフロア６があり、また同じく上方には、燃料交換装置７がある。
【００１６】
原子炉１内に進入させた検査用ビークル８は、ビークル用ケーブル９を介して制御装置１０に接続される。制御装置１０は、検査用ビークル８を水中で泳動させて航行させるための電力を供給するとともに、検査対象箇所において目視検査を実施するために映像の通信を行う。また、制御装置１０には表示装置１１が接続され、検査用ビークル８に搭載した撮像手段が撮像する画像を表示する。さらに、制御装置１０にはコントローラ１２を接続し、ビークル操作員１３ａが操作する。なお、燃料交換装置７の上では、操作補助員１３ｂがビークル用ケーブル９を捌く。
【００１７】
制御装置１０の内部には、検査用ビークル８の位置移動を制御する位置制御手段と、検査用ビークル９に搭載された撮像手段により撮像された画像を表示装置１１に表示するために表示画像を生成する画像表示処理手段とを備えている。
【００１８】
次に、図２を用いて、本実施例の水中検査装置に用いる検査用ビークル８の構成について説明する。図２は、水中検査装置に用いる検査用ビークル８の構成を示す鳥瞰図である。
【００１９】
検査用ビークル８には、前部に撮像手段としてカメラユニット２０を搭載している。なお、カメラユニット２０内部には、カメラおよび照明が収納されている。図１に示したビークル操作員１３ａは、カメラユニット２０からの映像を確認しながら、検査用ビークル８の移動等を操作できる構成となっている。
【００２０】
また、検査用ビークル８は、水中を移動するための駆動機構を搭載している。この駆動機構は、上下に移動するための昇降用スラスタ２１と、前後に進行するための推進用スラスタ２２と、左右に移動及び旋回するための並進旋回用スラスタ２３ａ，２３ｂを搭載している。ここで、並進旋回用スラスタ２３ａ，２３ｂは、左右に移動させる場合には同一方向に回転させ、旋回させる場合には逆方向に回転させる。
【００２１】
次に、図３から図５を用いて、本実施例の水中検査装置による画像処理方法の概念を説明する。
図３は、画像振れ量の定義を示したものである。図３は、カメラユニット２０で撮影した画像を制御装置１０に取り込んだイメージである。取り込み画像３０において、時刻Ｔi-1における特徴点３１が、次の時刻Ｔiにおける特徴点３２の位置に移動したとする。この時の移動量（ａ，ｂ）を画像振れ量３３として定義する。この画像振れ量３３は、後述する画像相関処理により算出するものであり、（ａ，ｂ）は、画像のＸ方向，Ｙ方向の振れ量を示している。図３は、２つの画像間における特徴点の変化を説明したものである。そして、連続する複数の画像の集合である映像で画像振れ量を考えると、特徴点は連続した振れとなる。この特徴点の振れの要因は、操作員が意図した方向変化と、意図しない振れに分けられる。このうち、操作員が意図した方向変化は周波数が低く、意図しない振れは周波数が高いと考えられる。
【００２２】
図４は、画像の振れの高周波成分のみを除去し、操作員が意図した方向変化のみを画像の表示に反映させる方式のイメージを示したものである。図４において、画像振れ量の変化４０は実線で示したように振動（振れ幅）が大きい。ここで、予め設定した時間、例えば３サンプルの画像振れ量の移動平均４１を算出する。この処理の結果、高周波成分は除去され、操作員が意図した変化のみが残ることになる。移動平均を実施しない場合の時刻Ｔi-1からＴiへの変化量４２と比べ、移動平均を実施した場合の変化量は小さくなる。この量を、時刻Ｔiにおける画像補正量４３として用いる。なお、画像補正量４３は、図３のａ，ｂすなわち、Ｘ方向，Ｙ方向で独立に算出し、その値をＡ，Ｂとする。
【００２３】
図５は、表示画像範囲のイメージを示す図である。時刻Ｔi-1における表示画像５０に対し、時刻Ｔiにおける表示画像５１は、Ｘ方向の画像シフト量５２，Ｙ方向の画像シフト量５３の分だけ、ずらして表示する。なお、時刻Ｔi-1，時刻Ｔiいずれの場合でも、表示サイズの変化は無い。そのため、表示画像をシフトさせた分だけ、画像情報が無い部分が生じる。そこで、時刻Ｔiにおいて、ブランク領域５４を挿入する。
【００２４】
次に、図６を用いて、本実施例の水中検査装置による画像表示方法の処理内容について説明する。これらの処理は、図１に示した制御装置１０の画像表示処理手段により実行され、図３から図５までの方法を具現化するフローチャートである。
【００２５】
ステップＳ００で処理開始後、ステップＳ０１において時定数Ｎを入力する。この時定数は、図４で示した移動平均の幅を示すもので、具体的には移動平均サンプル数である。次に、ステップＳ０２において、時刻Ｔ0における初期画像処理を行う。ステップＳ０３で初期撮影画像を読み込み、ステップＳ０４でカメラのレンズによる歪みを補正し、ステップＳ０５で初期画像を保存する。次に、ステップＳ０６で、時定数Ｎにより定められる範囲の初期画像相関を算出する。具体的には、ステップＳ０７からステップＳ０８の画像振れ量算出のサブルーチンを呼び出し、繰返し演算をする。ステップＳ０８では、まず、ステップＳ０９で現時刻Ｔiの画像を取得する。詳細には、ステップＳ１０で現時刻の画像を取り込み、ステップＳ１１で歪みを補正し、ステップＳ１２で現画像として保存する。次に、ステップＳ１３で前時刻Ｔi-1の画像を読み込み、ステップＳ１４で画像相関演算をする。その結果、ステップＳ１５において、図３で示した画像振れ量（ａ，ｂ）を決定する。ステップＳ１６は画像振れ量（ａ，ｂ）を保存する。
【００２６】
次に、ステップＳ１７で時刻をインクリメントし、ステップＳ１８で画像補正処理を行う。ここで、ステップＳ１８の画像補正処理を説明する。まず、現時刻の画像振れ量を算出するために、ステップ１９はサブルーチンステップＳ０８を呼び出し、ステップＳ０９からステップＳ１６の処理を実施する。次に、ステップＳ２０において、ステップＳ１６で保存した過去の画像振れ量を読み込む。ここで読み込むのは、現時刻ｉに対し、ｉ−Ｎからｉ−１までの時間の結果である。例えば、時定数Ｎ＝３の場合、ステップＳ２０は、ｉ−３からｉ−１までの時間の結果を読み込む。但し、現時刻がＴ1、又はＴ2のとき、過去の取得画像数は時定数（Ｎ＝３）に満たない。そのため、現時刻がＴ1、又はＴ2の場合、ステップＳ２０はスキップされる。
【００２７】
ステップＳ２１は、ステップＳ２０の結果を用いて画像振れ量の移動平均（Ａ，Ｂ）を算出し、ステップＳ２２は前時刻Ｔi-1の画像を（Ａ，Ｂ）の画素数だけシフトさせる。このステップは、図５で示した方式による。ステップＳ２３は、その結果を補正画像として表示する。この時、図５で示した通り、ブランク領域を画面の端に挿入して表示する。最後に、次のステップＳ２４においてループ判定を行う。ステップＳ２５において、操作員から終了の入力が無ければ、ステップＳ２６から、ステップＳ２７にジャンプし、ステップＳ１７からステップＳ２３までの処理を繰り返す。操作員から終了の入力があれば、ステップＳ２８において終了処理を行う。
【００２８】
このように、本実施例では、表示する時刻の取得画像と直前の時刻の取得画像の画像相関演算（Ｓ１４）により算出した画像振れ量を算出し、予め設定した時間分の画像振れ量の移動平均（Ｓ２１）を算出し、直前の時刻の取得画像を画像振れ量の移動平均に相当する画素分だけ移動させて補正画像を算出（Ｓ２２）し、補正画像を表示する（Ｓ２３）。画像振れ量の移動平均（Ｓ２１）を用いることにより、画像振れ量の高周波成分は除去され、操作員が意図した変化のみを画像表示に反映させることが可能である。そのため、画像情報のみを用いて、画像の振れを修正し、なおかつ、意図した姿勢の変化にも追従することが可能になる。その結果、移動体に搭載した撮影画像を安定化させることが可能になり、移動時における操作性を向上する。
【００２９】
また、水中検査装置に搭載したカメラの画像を安定化させることが可能になり、目視点検における検査効率を向上できる。
【実施例２】
【００３０】
次に、図７を用いて、本実施例の水中検査装置の構成及び動作について説明する。本実施例による水中検査装置を用いた水中検査作業時の機器配置は、図１と比較して、検査用ビークル８の代わりに水中カメラ７０を用いる点、及びビークル用ケーブルの代わりにケーブルを内包した保持治具７１を用いている点が異なる。なお、他の構成，画像処理方法，表示方法は、図１と同一である。水中カメラ７０は、カメラユニット７２とランプユニット７３ａ，７３ｂを搭載している。制御装置１０は、カメラユニット７２で撮影した映像の画像処理を行い、表示装置１１にて表示する。
【００３１】
本実施例は、実施例１と同一目的を達成しようとするものである。但し、カメラを搭載する機器が、泳動型である検査用ビークル８と異なり、上下方法の振れの少ない保持治具を用いている。そのため、操作員が所望しない振れは、主に水平方向の振れとなる。この場合、画像振れ量（図４）を算出する時に、画像の水平方向すなわちＸ方向のみについて補正を行って同様の効果が得られるため、画像処理に掛かる演算時間を短縮し応答性を向上することも可能になる。
【００３２】
以上説明したように、本実施例によれば、画像情報のみを用いて、画像の振れを修正し、なおかつ、意図した姿勢の変化にも追従することが可能になる。その結果、移動体に搭載した撮影画像を安定化させることが可能になり、移動時における操作性を向上する。
【００３３】
また、水中検査装置に搭載したカメラの画像をより安定化させることが可能になり、目視点検における検査効率を向上できる。
【符号の説明】
【００３４】
１ 原子炉
２ シュラウド
３ 上部格子板
４ 炉心支持板
５ シュラウドサポート
６ オペレーションフロア
７ 燃料交換装置
８ 検査用ビークル
９ ビークル用ケーブル
１０ 制御装置
１１ 表示装置
１２ コントローラ
２０ カメラユニット
２１ 昇降用スラスタ
２２ 推進用スラスタ
２３ａ，２３ｂ 並進旋回用スラスタ
３０ 取り込み画像
３１ 時刻Ｔi-1における特徴点
３２ 時刻Ｔiにおける特徴点
３３ 画像振れ量
４０ 画像振れ量の変化
４１ 画像振れ量の移動平均
４２ 時刻Ｔi-1からＴiへの変化量
４３ 時刻Ｔiにおける画像補正量
５０ 時刻Ｔi-1における表示画像
５１ 時刻Ｔiにおける表示画像
５２ Ｘ方向の画像のシフト量
５３ Ｙ方向の画像のシフト量
５４ 時刻Ｔiにおけるブランク領域
７０ 水中カメラ
７１ 保持治具
７２ カメラ
７３ａ，７３ｂ ランプユニット
【特許請求の範囲】
【請求項１】
移動体に搭載した撮像手段により撮影された取得画像を用いて補正画像を表示する画像処理方法であって、
表示する時刻の取得画像と直前の時刻の取得画像の画像相関演算により算出した画像振れ量を算出し、
予め設定した時間分の前記画像振れ量の移動平均を算出し、
前記直前の時刻の取得画像を前記画像振れ量の移動平均に相当する画素分だけ移動させて補正画像を算出し、前記補正画像を表示することを特徴とする画像処理方法。
【請求項２】
請求項１記載の画像処理方法において、
前記移動平均を計算する時間は、時定数だけ遡った時間であることを特徴とする画像処理方法。
【請求項３】
請求項１記載の画像処理方法において、
前記補正画像は、前記直前の時刻の取得画像を移動させたことにより生じる、前記画像振れ量の移動平均分のデータ空白領域にブランク領域を挿入することを特徴とする画像処理方法。
【請求項４】
移動体に搭載した撮影手段により撮影された取得画像を用いて補正画像を表示する画像処理装置であって、
表示する時刻の取得画像と直前の時刻の取得画像の画像相関処理により算出した画像振れ量を算出する手段と、
予め設定した時間分の前記画像振れ量の移動平均を算出する手段と、
前記直前の時刻の取得画像を前記画像振れ量の移動平均に相当する画素分だけ移動させて補正画像を算出する手段と、
前記補正画像を表示する手段を有することを特徴とする画像処理装置。
【請求項５】
三次元に泳動可能な駆動機構と水中において構造物を視認できる撮影手段を有する検査用ビークルと、前記撮影手段での撮影画像から予め設定した画像表示サイズの画像を切出し、振れを補正した画像を表示する画像表示処理手段とを有する水中検査装置であって、
前記画像表示処理手段は、表示する時刻の取得画像と直前の時刻の取得画像の画像相関処理により算出した画像振れ量を算出する手段と、
予め設定した時間分の前記画像振れ量の移動平均を算出する手段と、
前記直前の時刻の取得画像を前記画像振れ量の移動平均に相当する画素分だけ移動させて補正画像を算出する手段と、
前記補正画像を表示する手段を有することを特徴とする水中検査装置。
【請求項１】
移動体に搭載した撮像手段により撮影された取得画像を用いて補正画像を表示する画像処理方法であって、
表示する時刻の取得画像と直前の時刻の取得画像の画像相関演算により算出した画像振れ量を算出し、
予め設定した時間分の前記画像振れ量の移動平均を算出し、
前記直前の時刻の取得画像を前記画像振れ量の移動平均に相当する画素分だけ移動させて補正画像を算出し、前記補正画像を表示することを特徴とする画像処理方法。
【請求項２】
請求項１記載の画像処理方法において、
前記移動平均を計算する時間は、時定数だけ遡った時間であることを特徴とする画像処理方法。
【請求項３】
請求項１記載の画像処理方法において、
前記補正画像は、前記直前の時刻の取得画像を移動させたことにより生じる、前記画像振れ量の移動平均分のデータ空白領域にブランク領域を挿入することを特徴とする画像処理方法。
【請求項４】
移動体に搭載した撮影手段により撮影された取得画像を用いて補正画像を表示する画像処理装置であって、
表示する時刻の取得画像と直前の時刻の取得画像の画像相関処理により算出した画像振れ量を算出する手段と、
予め設定した時間分の前記画像振れ量の移動平均を算出する手段と、
前記直前の時刻の取得画像を前記画像振れ量の移動平均に相当する画素分だけ移動させて補正画像を算出する手段と、
前記補正画像を表示する手段を有することを特徴とする画像処理装置。
【請求項５】
三次元に泳動可能な駆動機構と水中において構造物を視認できる撮影手段を有する検査用ビークルと、前記撮影手段での撮影画像から予め設定した画像表示サイズの画像を切出し、振れを補正した画像を表示する画像表示処理手段とを有する水中検査装置であって、
前記画像表示処理手段は、表示する時刻の取得画像と直前の時刻の取得画像の画像相関処理により算出した画像振れ量を算出する手段と、
予め設定した時間分の前記画像振れ量の移動平均を算出する手段と、
前記直前の時刻の取得画像を前記画像振れ量の移動平均に相当する画素分だけ移動させて補正画像を算出する手段と、
前記補正画像を表示する手段を有することを特徴とする水中検査装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【公開番号】特開２０１１−１８１９８４（Ｐ２０１１−１８１９８４Ａ）
【公開日】平成２３年９月１５日（２０１１．９．１５）
【国際特許分類】
【出願番号】特願２０１０−４１２４８（Ｐ２０１０−４１２４８）
【出願日】平成２２年２月２６日（２０１０．２．２６）
【出願人】（５０７２５０４２７）日立ＧＥニュークリア・エナジー株式会社 (858)
【Ｆターム（参考）】
【公開日】平成２３年９月１５日（２０１１．９．１５）
【国際特許分類】
【出願日】平成２２年２月２６日（２０１０．２．２６）
【出願人】（５０７２５０４２７）日立ＧＥニュークリア・エナジー株式会社 (858)
【Ｆターム（参考）】
[ Back to top ]