表示器の表示状態評価システム
【課題】表示器の表示状態を評価システムにおいて、人が違和感を感じる種々の表示状態の異常を判定する。
【解決手段】カメラ１０によって撮像した画像を取得し（Ｓ４１）、取得した画像を複数の領域に分割し（Ｓ４２）、領域別に輝度値を算出する（Ｓ４３）。その輝度値に基づいて、輝度差分を算出し（Ｓ４４）、さらに、輝度差分の変化パターンを決定する（Ｓ４５）。また、擬似信号を取得するとともに、その擬似信号の差分の変化パターンを決定する（Ｓ４６）。そして、両変化パターンの相関度を算出し（Ｓ４７）、この相関度に基づいて表示状態が異常か否かを判定する（Ｓ４８）。
【解決手段】カメラ１０によって撮像した画像を取得し（Ｓ４１）、取得した画像を複数の領域に分割し（Ｓ４２）、領域別に輝度値を算出する（Ｓ４３）。その輝度値に基づいて、輝度差分を算出し（Ｓ４４）、さらに、輝度差分の変化パターンを決定する（Ｓ４５）。また、擬似信号を取得するとともに、その擬似信号の差分の変化パターンを決定する（Ｓ４６）。そして、両変化パターンの相関度を算出し（Ｓ４７）、この相関度に基づいて表示状態が異常か否かを判定する（Ｓ４８）。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示器の表示状態評価システムに関し、特に、表示状態の異常を自動で判定するシステムに関する。
【背景技術】
【０００２】
表示装置の表示異常を自動で判定する装置として、従来、特許文献１の装置が知られている。特許文献１の装置は、表示装置を撮影するカメラと、そのカメラによって撮像された画像を解析するパソコンとを備えている。パソコンはメモリを備えており、このメモリに、カメラによって撮像された映像の絵素毎の輝度が記憶される。そして、その絵素毎の輝度の標準偏差から、表示装置の表示のちらつきを判定している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−１０６４１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１のように、標準偏差によりちらつきを判定する場合、標準偏差に有意な差として現れる輝度変化でなければ、ちらつきがあると判定することができない。すなわち、輝度変化が、ある程度の回数は繰り返されるようなちらつき（周期的なちらつき）でなければ、ちらつきがあると判定することができない。
【０００５】
一方、人が違和感を感じる表示異常には、周期的なちらつき以外のものもある。たとえば、瞬間的な点灯・消灯などの一瞬だけの輝度変化や、表示器としてメータの針などを表示する車載用表示器を考えた場合、メータの針がスムーズに動作しないときも違和感を感じる。しかし、特許文献１の装置では、周期的な輝度変化を示すちらつきしか判定できず、それ以外の種々の表示異常を判定することはできなかった。
【０００６】
本発明は、この事情に基づいて成されたものであり、その目的とするところは、表示器の表示状態を評価システムにおいて、人が違和感を感じる種々の表示状態の異常を判定することにある。
【課題を解決するための手段】
【０００７】
その目的を達成するための請求項１記載の発明では、カメラは経時的に表示器を撮像し、情報処理装置は、カメラによって撮像された画像を取得して、その画像の輝度を経時的に算出し、さらに、その経時的に算出した輝度に基づいて輝度差分の変化パターンを決定する。そして、表示異常判定手段は、この輝度差分の変化パターンと所定の参照パターンとの比較に基づいて、表示器の表示状態に異常があるかを判定する。
【０００８】
瞬間的な点灯・消灯が生じた場合には、輝度の変化が生じる。また、表示器に表示された図形の動作が異常動作である場合にも、輝度の変化が生じる。輝度の変化は輝度差分により判断できることから、本発明のように、輝度差分の変化パターンを用い、この輝度差分の変化パターンと参照用パターンとの比較により表示器の表示状態に異常があるかを判定するようにすれば、人が違和感を感じる種々の表示状態の異常を判定することができる。
【０００９】
請求項２記載の発明では、表示異常判定手段は、参照パターンとして、予め設定した異常変化パターンを用いる。このように、予め設定した異常変化パターンを用いれば、輝度差分の変化パターンが、予め設定した異常変化パターンと似ている場合に異常と判定できる。
【００１０】
さらに、請求項３記載の発明のように、異常変化パターンとして、表示状態の複数種類の異常にそれぞれ対応した複数種類の異常変化パターンを用いることもできる。
【００１１】
請求項４記載の発明では、表示器の表示状態を変化させる信号である表示変化信号を、擬似的に生成して表示器に出力する擬似信号生成装置をさらに備える。そして、表示異常判定手段は、参照パターンとして、擬似的に生成した表示変化信号の差分の変化パターンを用いる。このようにすれば、表示器が車両に搭載された場合と同様の条件を設定して表示器の表示異常の有無を判定することができる。
【００１２】
表示異常判定手段における判定は、具体的には、請求項５のように、輝度差分の変化パターンにおける特徴点の発生時点と、参照パターンにおける特徴点の発生時点との比較に基づいて行うことができる。この特徴点とは、たとえば、請求項６記載のように、変化パターンにおける信号の立ち上がり点および立ち下がり点の少なくともいずれか一方である。
【００１３】
また、表示異常判定手段における判定は、請求項７のように、異常変化パターンの所定時間における輝度差分の変化と、輝度差分の変化パターンの所定時間における輝度差分の変化との比較に基づいて行ってもよい。
【００１４】
請求項８記載の発明では、画像を複数の領域に分割し、一部または全部の領域に対して領域別に輝度を経時的に算出する。そして、輝度差分の変化パターンは、予め設定された１つまたは複数の領域に対して決定する。このようにすれば、輝度差分の変化パターンを、画像の一部分に対して決定することから、画像の一部分に限定した詳細な輝度差分の変化パターンを決定することができる。
【００１５】
請求項９記載の発明では、複数の領域に対して領域別に輝度差分の変化パターンを決定する。また、それら複数の輝度差分の変化パターンと比較する参照パターンも、輝度差分の変化パターン別に異なる参照パターンとする。このようにすれば、複数の領域に対して、異なる表示状態の異常を判定することができる。
【００１６】
請求項１０記載の発明では、１つの輝度差分の変化パターンを、異なる複数の参照パターンと比較して判定を行う。このようにすれば、１つの領域に対して、複数の種類の表示状態の異常を判定することができる。
【図面の簡単な説明】
【００１７】
【図１】本発明が適用された表示状態評価システムの全体構成を示す図である。
【図２】図１の表示状態評価システム１を用いて行う表示器Ｄの表示状態テストの手順を示すフローチャートである。
【図３】表示器Ｄの表示状態の異常の例を示す図である。
【図４】オペレーションＰＣ４０が実行する表示異常判定処理を詳しく示すフローチャートである。
【図５】図４の表示異常判定処理の具体例を説明する図である。
【図６】図４のステップＳ４７で算出する相関度を説明する図である。
【図７】第１実施形態における異常判定の具体的事例であって、図５とは別の例を説明する図である。
【図８】第２実施形態においてオペレーションＰＣ４０が実行する表示異常判定処理を詳しく示すフローチャートである。
【図９】第２実施形態における表示異常判定処理の具体例を説明する図である。
【図１０】合致度の算出方法を説明する図である。
【図１１】第２実施形態における異常判定の具体的事例であって、図９とは別の例を説明する図である。
【図１２】その他の具体的事例１を説明する図である。
【図１３】その他の具体的事例２を説明する図である。
【図１４】その他の具体的事例３を説明する図である。
【図１５】その他の具体的事例４を説明する図である。
【図１６】その他の具体的事例５を説明する図である。
【図１７】その他の具体的事例６を説明する図である。
【図１８】その他の具体的事例７を説明する図である。
【発明を実施するための形態】
【００１８】
（第１実施形態）
以下、本発明の実施形態を図面に基づいて説明する。図１は、本発明が適用された表示状態評価システム１の全体構成を示す図である。図１に示すように、本実施形態の表示状態評価システム１は、カメラ１０、シミュレータ２０、オペレーションＰＣ４０を備えている。
【００１９】
カメラ１０は、評価対象の表示器Ｄの画面を連続的に撮像するものであり、撮像した画像をオペレーションＰＣ４０へ出力する。このカメラ１０の台数は、図１では２台が示されているが、カメラ１０の台数には特に制限はなく、１台でもよいし、また３台以上でもよい。このカメラ１０が撮像する表示器Ｄは、本実施形態では、車両に搭載される表示器（車載用表示器）であり、速度メータ、タコメータなどを表示するものである。
【００２０】
シミュレータ２０は、表示器Ｄに対して、表示器Ｄが車両に搭載された場合の環境を模擬的に生成する装置であり、たとえば、模擬的な電源や通信線を備える。また、シミュレータ２０は、特許請求の範囲の擬似信号生成装置としての機能も備えており、表示器Ｄが車両に搭載された場合に表示器Ｄに入力される信号であって、表示器Ｄの表示状態の変化を指示する信号である表示変化信号を擬似的に生成して表示器Ｄに出力する（以下、この擬似的に生成した表示変化信号を擬似信号という）。
【００２１】
シミュレータ２０は、表示状態テストプログラムによる自動操作または、操作者の直接入力操作に基づいて、種々のテスト条件（電源条件、通信条件など）を生成し、また、種々の擬似信号を生成する。この擬似信号としては、たとえば、表示器Ｄの方向指示表示灯（方向指示灯が点灯していることを示すもの）をオンオフさせる信号に相当する擬似信号、ＡＦＳ(Adaptive Front-Lighting System)のオンオフを示す信号に相当する擬似信号などがある。
【００２２】
オペレーションＰＣ４０は、表示状態テストプログラム４１、カメラ操作部４２、シミュレータ操作部４３、画像処理部４４、画像解析部４５、画像判定部４６、画像判定結果出力部４７、擬似信号処理部４８、記憶部４９を備えている。
【００２３】
表示状態テストプログラム４１が実行されることで、そのプログラムに従ってオペレーションＰＣ４０の各部４２〜４９が作動して表示器Ｄの表示状態の異常を判定する。
【００２４】
カメラ操作部４２は、表示状態テストプログラム４１に従って、カメラ１０による表示器Ｄの画面の録画開始、終了等のカメラ１０の操作を行う。シミュレータ操作部４３は、シミュレータ２０に対する操作を行うとともに、シミュレータ２０が表示器Ｄへ出力する信号を計測する。画像処理部４４は、カメラ１０が撮像した画像を取得し、その取得した画像に対して、画像解析部４５において画像解析するための前処理を行う。画像解析部４５は、画像処理部４４が処理を行った画像を解析して、画像の所定部分の輝度を決定する。
画像判定部４６は、画像解析部４５が解析した輝度に基づいて、輝度差分の変化パターンを決定し、さらに、その輝度差分の変化パターンを所定の参照パターンと比較することで、表示器Ｄの表示状態に異常があるかを判定する。画像判定結果出力部４７は、たとえば、モニタであり、画像判定部４６での判定結果を出力する。擬似信号処理部４８は、シミュレータ操作部４３から擬似信号を取得して、擬似信号の差分の変化パターンを作成する。記憶部４９は、書き込み可能な記憶部であり、オペレーションＰＣ４０の各部４２〜４８の処理結果を記憶する。また、記憶部４９には、カメラ１０によって撮像された画像を示す信号（以下、撮像画像信号）や後述する輝度差分の変化パターンも記憶される。なお、オペレーションＰＣ４０は特許請求の範囲の情報処理装置に相当する。
【００２５】
図２は、図１の表示状態評価システム１を用いて行う表示器Ｄの表示状態テストの手順を示すフローチャートである。表示状態テストにおいては、まず、ステップＳ１に示すように、カメラ１０によって表示器Ｄの録画を開始する。この開始は、操作者のスイッチ操作により開始するようになっていてもよいし、また、オペレーションＰＣ４０がカメラ１０を制御して自動的に録画を開始させるようになっていてもよい。このステップＳ１の後は、カメラ１０から撮像画像信号がオペレーションＰＣ４０へ逐次入力され、オペレーションＰＣ４０は、入力された撮像画像信号を記憶部４９へ記憶する。
【００２６】
続くステップＳ２ではテスト条件を生成する。このテスト条件は、たとえば、断線、ショートなどである。また各種のセンサ信号の擬似信号も生成する。このステップＳ２は、操作者がシミュレータ２０を操作することにより行う。シミュレータ２０が生成した擬似信号は表示器Ｄへ入力される。また、オペレーションＰＣ４０は、シミュレータ２０から表示器Ｄへ入力される擬似信号を計測して記憶部４９へ記憶する。
【００２７】
続くステップＳ３では、カメラ１０による表示器Ｄの録画を終了する。このステップＳも操作者が行ってもよいし、また、所定の時間が経過したことをオペレーションＰＣ４０が判断し、オペレーションＰＣ４０がカメラ１０を制御して録画を終了させてもよい。
【００２８】
続くステップＳ４は、オペレーションＰＣ４０が行う処理であり、ステップＳ１の後、ステップＳ３を実行するまでの間に取得した撮像画像信号、擬似信号に基づいて、表示器Ｄの表示状態の異常を判定する。このステップＳ４の処理は、図４を用いて後述する。
【００２９】
続くステップＳ５もオペレーションＰＣ４０の処理であり、ステップＳ４において判定した判定結果を、画像判定結果出力部４７から出力する。以上で、表示状態のテストの一連の手順が終了する。
【００３０】
上述のステップＳ４における表示異常判定処理を説明する前に、そのステップＳ４で判定する表示状態の異常の例を説明する。図３は、表示器Ｄの表示状態の異常の例であり、図３（Ａ）は、ある機器の状態を示すランプが、ｔ２時点において一瞬だけ点灯したことを示している。図３（Ｂ）は、ブレーキ異常を示す文字が、ｔ２時点において一瞬だけ点灯したことを示している。
【００３１】
オペレーションＰＣ４０は、図３に例示した表示異常やその他の種々の表示異常を、表示異常判定処理を実行することで判定する。図４は、オペレーションＰＣ４０が実行する表示異常判定処理を詳しく示すフローチャートである。まず、ステップＳ４１では、図２のステップＳ１〜Ｓ３の間に録画された撮像画像信号を、記憶部４９から取得する。
【００３２】
続くステップＳ４２では画面分割を行う。この画面分割は、表示器Ｄを撮像した撮像画像を複数の領域に分割するものであり、どのように分割するかは予め設定されている。図５は、このステップＳ４２の画面分割処理など、図４の表示異常判定処理の一連の処理の具体例を説明する図である。ステップＳ４２における画面分割の一例は、図５（Ａ）に示されており、この例では、縦及び横に等間隔に分割線が設定されており、分割線により囲まれた矩形範囲が各分割領域である。
【００３３】
続くステップＳ４３は、特許請求の範囲の輝度算出手段に相当する処理であり、録画を開始してから終了するまでの全期間に渡り、分割領域の輝度値を所定時間間隔毎（図５では５０ｍｓ毎）に算出する。輝度値を算出する分割領域は、ステップＳ４２で分割した分割領域の全てである。ここでは、説明を簡略にするために、図５（Ａ）に示す領域Ｒの輝度値を算出する。
図５（Ｂ）には、このステップＳ４３で算出した輝度値の時間変化が示されており、図５（Ｂ）の例では、５０ｍｓ毎に、点灯を示す輝度値（＝７０）と、消灯を示す輝度値（＝０）とが繰り返されている。
【００３４】
続くステップＳ４４では、ステップＳ４３で所定時間間隔で算出した輝度値を用いて、各輝度算出時点の輝度から、直前の輝度算出時点の輝度を引くことで輝度差分を算出する。輝度差分を算出することで、輝度の絶対値が０→１００→０と変化する場合も１５０→２５０→１５０と変化する場合も同じ条件で表示異常を判定できることから、輝度値をそのまま用いる場合に比べて、汎用性が高くなる。図５（Ｃ）には、このステップＳ４４で算出した輝度差分の一例が示されている。
【００３５】
続くステップＳ４５は、特許請求の範囲の変化パターン決定手段に相当し、ステップＳ４４で算出した輝度差分の時間変化を示す輝度差分の変化パターンを決定する。そして、続くステップＳ４６では、擬似信号の変化パターンを取得するとともに、擬似信号の差分の変化パターンを決定する。
【００３６】
図５（Ｄ）、（Ｅ）は、それぞれ、擬似信号としてのスイッチ信号の時間変化、および、そのスイッチ信号の差分を示している。なお、スイッチ信号の差分を算出する時間間隔は、前述の輝度差分を算出する時間間隔と同等か、もしくは、それよりも短い時間間隔とする。ここでは、上記時間間隔よりも十分に短い時間間隔となっているので、図５（Ｅ）に示すように、スイッチ信号の差分は、輝度差分の算出周期（５０ｍｓ毎）とは異なる時点でも値が変化している。
【００３７】
続くステップＳ４７では、ステップＳ４５で決定した輝度差分の変化パターンと、ステップＳ４６で決定した擬似信号の差分の変化パターンとの相関度を算出する。この相関度の算出においては、輝度差分の変化パターンの特徴を抽出するとともに、擬似信号の差分の変化パターンからも、輝度差分の変化パターンに対応する特徴を抽出する。そして、抽出した特徴から上記相関度を算出する。抽出する特徴としては、たとえば、プラス値を示す輝度差分の出現時点、マイナス値を示す輝度差分の出現時点、輝度差分の極大値、極小値などがあり、どのような特徴を抽出するかは予め設定されている。
【００３８】
図６は、このステップＳ４７で算出する相関度を説明する図であり、本実施形態では、プラス値の出現時点の時間差およびマイナス値の出現時点の時間差を算出する。そして、相関度は、これら２つの時間差を用いて算出する。ここでは、２つの時間差の平均値を相関度として以下を説明する。このようにして算出する相関度は、値が小さいほど、輝度差分と擬似信号の差分とが相関することを意味する。
【００３９】
続くステップＳ４８では、上記ステップＳ４７で算出した相関度に基づいて表示器Ｄの表示状態の異常を判定する。たとえば、相関度が予め設定された閾値よりも小さければ、すなわち、輝度差分と擬似信号の差分との相関が高ければ、擬似信号に応じて表示器Ｄの表示状態が変化したと考えられることから、表示器Ｄの表示状態は正常であると判定する。逆に、相関度が予め設定された閾値以上であれば、表示器Ｄの表示状態が擬似信号と対応しない変化を示したと考えられることから、表示器Ｄの表示状態が異常であると判定する。なお、ステップＳ４６〜Ｓ４８が特許請求の範囲の表示異常判定手段に相当する処理である。
【００４０】
このステップＳ４８を実行したら、図４に示す処理を終了する。その後は、図２のステップＳ５により、判定結果が、オペレーションＰＣ４０の表示画面等から出力される。
（第１実施形態の具体事例２）
次に、第１実施形態における異常判定の具体的事例であって、図５とは別の例を図７を用いて説明する。図７において、（Ａ）はカメラ１０が撮像した撮像画像であり、この具体事例では、４０ｍｓ周期で撮像している。（Ｂ）は、各撮像画像に対応する輝度であり、この例では、画像を小さな正方形に分割し、分割領域毎の平均の輝度を決定している。（Ｃ）は、輝度差分であり、この図７には、図に示す分割領域のうちの右下の領域の輝度差分を示している。これら図７（Ａ）〜（Ｃ）から分かるように、この事例は、短時間（たとえば１００ｍｓ以下）の間、「ＡＦＳ ＯＦＦ」のランプが消灯した事例である。最後の（Ｄ）は擬似信号であるスイッチ（ＳＷ）信号と、そのＳＷ信号の差分を示している。なお、このＳＷ信号は、撮像画像における「ＡＦＳ ＯＦＦ」の点灯を指示する信号である。ＳＷ信号は、この図７に示す期間中ＯＮ状態のまま変化がなく、そのためＳＷ信号の差分は、一定値のゼロのままである。
【００４１】
図７（Ｃ）の輝度差分は、１２０ｍｓと２００ｍｓにおいて値の変化がある一方で、ＳＷ信号の差分には変化がない。すなわち、両者には相関がない。よって、表示器Ｄの表示状態は異常であると判定することができる。
【００４２】
以上、説明した第１実施形態によれば、カメラ１０で撮像した表示器Ｄの画像から輝度差分の変化パターン（すなわち、表示器Ｄの輝度差分の経時的な変化）を決定しており、この輝度差分の変化パターンを擬似信号の差分の変化パターンと比較している。よって、表示器Ｄの輝度変化が、表示器Ｄへ入力される信号に対応した正常な変化であるか否かを判断することができる。また、表示器Ｄに、瞬間的な点灯・消灯が生じた場合にも輝度の変化が生じることから、瞬間的な点灯・消灯が生じたことは輝度差分の変化パターンに反映される。従って、本実施形態のように、輝度差分の変化パターンを擬似信号の差分の変化パターンと比較することにより、瞬間的な点灯・消灯が、表示器Ｄの異常により生じたか否かを自動で判定することができる。
【００４３】
（第２実施形態）
次に、本発明の第２実施形態を説明する。第２実施形態のシステム構成は第１実施形態と同じく図１に示す構成を有し、また、テスト手順も第１実施形態と同じく図２に示す手順である。ただし、図２のステップＳ４において実行する表示異常判定処理の内容が第１実施形態と相違する。第１実施形態では、輝度差分の変化パターンを擬似信号の差分の変化パターンと比較していたが、第２実施形態では、輝度差分の変化パターンを異常変化パターンと比較する。この異常変化パターンとは、表示器Ｄが異常状態となっているときの輝度差分の変化パターンであり、第２実施形態においては、記憶部４９に、異常変化パターンが１種類または複数種類記憶されている。なお、この異常変化パターンは、表示器Ｄが異常であったときの実際の輝度差分の変化パターンでもよいし、任意に設定したパターンでもよい。
【００４４】
図８は、第２実施形態においてオペレーションＰＣ４０が実行する表示異常判定処理を詳しく示すフローチャートである。図８において、図４と同じステップ番号を付したステップでは、図４と同じ処理を実行する。すなわち、図８においても、カメラ１０から画像を取得し（ステップＳ４１）、撮像画像の画面分割を行い（ステップＳ４２）、分割領域の輝度を算出し（ステップＳ４３）、輝度差分を算出し（ステップＳ４４）、輝度差分の変化パターンを決定する（ステップＳ４５）。
【００４５】
そして、ステップＳ４５を実行後は、ステップＳ４７−１にて、ステップＳ４５で決定した輝度差分の変化パターンと、記憶部４９に記憶されている異常変化パターンとの合致度を算出する。
【００４６】
図９は、第２実施形態における表示異常判定処理の具体例を説明する図であり、図９（Ａ）〜（Ｃ）は、それぞれ図５（Ａ）〜（Ｃ）と同じである。図９（Ｄ）は、図８のステップＳ４７−１にて用いる異常変化パターンの一例である。図９（Ｄ）に示す異常変化パターンは、過去の実際の異常事例（ちらつきありであり、輝度差分は、大きいプラス値（＋７０）→０→絶対値が大きいマイナス値（−７０）を、極めて短い周期で繰り返している。
【００４７】
ここで合致度について具体的に説明する。図１０は、合致度の算出方法を説明する図であり、変化パターンの一部を模式的に示している。第２実施形態で算出する合致度は、図１０に（１）、（２）で示すように、縦軸値（輝度差分値）の合致の程度（１）と、横軸値（時間）の合致の程度（２）をそれぞれ示す合致度である。（１）としては、それぞれの変化パターンにおいて、隣り合う信号の差、所定時間内における最大値と最小値の差などを算出し、それらの算出値の差を合致度とする。（２）としては、それぞれの変化パターンにおいて、輝度差分値がプラスに変化した時点とマイナスに変化した時点との時間差や、上記最大値を示す時点と上記最小値を示す時点との時間差を算出し、それらの算出値の差を合致度とする。なお、このようにして算出する合致度は、（１）の合致度も（２）の合致度も、いずれも、値が小さいほど両変化パターンが合致していることを意味している。
【００４８】
このようにして合致度を算出したらステップＳ４８に進む。ステップＳ４８では、ステップＳ４７で算出した合致度に基づいて表示器Ｄの表示状態が異常であったか否かを判定する。具体的には、前述のように、この実施形態の合致度は値が小さいほど合致していることを意味していることから、合致度の値が所定の判定値よりも小さい場合には、輝度差分の変化パターンは異常変化パターンと合致しており、表示器Ｄの表示状態は異常であったと判定する。なお、合致度は（１）、（２）の２つを算出しているので、判定値はそれぞれの合致度に対して設定する。また、（１）、（２）の２つとも判定値よりも小さい場合に合致していると判定するようになっていることが好ましいが、要求される判定精度によっては、（１）、（２）のいずれか少なくとも一方が判定値よりも小さい場合に合致していると判定するようにしてもよい。
【００４９】
図９に示した（Ｃ）、（Ｄ）の例の場合、輝度差分の変化パターンと異常変化パターンとは合致しておらず、表示器Ｄの表示状態は正常であると判定することになる。
【００５０】
（第２実施形態の具体事例２）
次に、第２実施形態における異常判定の具体的事例であって、図９とは別の例を図１１を用いて説明する。図１１において（Ａ）、（Ｂ）、（Ｃ）は図７と同じである。すなわち、図１１の事例も、短時間の間、「ＡＦＳ ＯＦＦ」のランプが消灯した事例である。図１１の（Ｄ）は異常変化パターンを示している。図１１の（Ｃ）と（Ｄ）を比較するために両者の合致度を算出する。この事例では、縦軸値の合致度として、輝度差分が減少している期間における輝度差分値（（１）−１）の合致度（すなわち（Ｃ）と（Ｄ）の差）、および、輝度差分が増加している期間における輝度差分値（（１）−２）の合致度を算出し、横軸値の合致度（２）として、輝度差分が減少傾向となってから増加傾向となるまでの期間の合致度を算出する。これらの合致度の具体的数値は示していないが、図１１（Ｃ）、（Ｄ）を比較すれば分かるように、上記合致度は、両変化パターンがよく合致することを示す値となる。すなわち、輝度差分の変化パターンが異常変化パターンとよく合致すると判定できる。よって、表示器Ｄの表示状態は異常であると判定することができる。
【００５１】
以上、説明した第２実施形態によれば、カメラ１０で撮像した表示器Ｄの画像から輝度差分の変化パターンを決定し、この輝度差分の変化パターンを、予め記憶されている異常変化パターンと比較している。よって、表示器Ｄの輝度変化が、異常な変化であるか否かを判断することができる。また、表示器Ｄに、瞬間的な点灯・消灯が生じた場合にも輝度の変化が生じることから、瞬間的な点灯・消灯が生じたことは輝度差分の変化パターンに反映される。従って、第２実施形態のように、輝度差分の変化パターンを異常変化パターンと比較することにより、表示器Ｄに生じた瞬間的な点灯・消灯が、異常であるか否かを自動で判定することができる。
【００５２】
（その他の具体的事例１）
さらに、具体的事例を説明する。図１２はその他の具体的事例１を説明する図である。この事例では、シミュレータ２０により、テスト条件として、図１２（Ａ）に示すように、表示器Ｄに供給する電源電圧を、一時的に１２Ｖから４Ｖまで低下させる。この事例では、これにより、図１２（Ｂ）に示すように、ｔ２時点において一瞬だけランプが消灯している。そのため、ランプ部分の領域の輝度差分は、図１２（Ｃ）に示すように、ランプが一瞬消灯したｔ２時点において低下し、ランプが再点灯したｔ３時点で増加するパターンとなっている。一方、このランプの点消灯を指示するスイッチ信号は、この事例では、図１２（Ｄ）に示すように、ずっとオフのままである。従って、図示していないが、スイッチ信号の差分も、ずっとゼロのままである。よって、第１実施形態と同様に、輝度差分の変化パターンと擬似信号（スイッチ信号）の差分の変化パターンとの相関度を算出すると、その相関度は、両変化パターンが相関しないことを示す値となる。よって、輝度差分の変化パターンはスイッチ信号の変化によるものではないと判定でき、この事例では、表示状態が異常であると判定することができる。
【００５３】
（その他の具体的事例２）
次にその他の具体的事例２を説明する。図１３はその他の具体的事例２を説明する図である。この事例では、シミュレータ２０により、テスト条件として、図１３（Ａ）に示すように、表示器Ｄへ情報を送信する通信線を一時的にショートさせる。この事例では、このショートにより、図１３（Ｂ）に示すように、表示器Ｄの画像の一部に、文字「ブレーキ」が一瞬だけ点灯している（ｔ２時点）。そのため、その文字の部分を含む領域の輝度差分の変化パターンは、図１３（Ｃ）に示すように、ｔ２時点で増加し、ｔ３時点で減少するパターンとなる。この事例では、第２実施形態と同様に、輝度差分の変化パターンを異常変化パターンと比較しており、図１１と同様に、輝度差分値が増減しているときの輝度差分値の合致度（（１）−１、（１）−２）と、輝度差分が減少傾向と増加傾向との間の期間の合致度（２）を算出する。この事例では、合致度は、両変化パターンがよく合致することを示す値となる。すなわち、輝度差分の変化パターンが異常変化パターンとよく合致すると判定できる。よって、表示器Ｄの表示状態は異常であると判定することができる。
【００５４】
（その他の具体的事例３）
次にその他の具体的事例３を説明する。図１４はその他の具体的事例３を説明する図である。この事例は、表示器Ｄが車両のメータであり、このメータには、点消灯可能な針５０が示される。この事例では、この針５０の動作が正常かどうかを判定する。
【００５５】
動作例としては、図１４（Ａ）に示すように、正常な動作と、３種類の異常な動作を例示している。正常な動作とは一定の速度で針５０が動作することである。また、異常な動作の例としては、跳ね上がるような急激な動作、スムーズさを欠いた動作（換言すれば、動作速度が一定ではない動作）、針が細かく振動する動作を例示している。また、この事例においては、（Ａ）に示す領域Ｒの輝度差分を用いる。
【００５６】
この領域Ｒの輝度差分は、メータの針５０が正常に動作する場合、図１４（Ｂ）の最左欄に示すようになる。このような輝度差分の変化パターンになる理由を説明する。まず、針５０が差し掛かることにより輝度が上昇するので、輝度差分にプラスのピークＰ（＋）が生じる。その後、針５０が通過している時間Ｔ１は略一定の輝度となるので、輝度差分は略ゼロとなる。そして、針５０が領域Ｒを過ぎてしまうと領域Ｒの輝度が低下することから、輝度差分にマイナスのピークＰ（−）が生じる。よって、メータの針５０が正常に動作する場合、輝度差分は図１４（Ｂ）の最左欄に示すように変化する。
【００５７】
これに対して、メータの針５０が跳ね上がるような急激な動作をする場合、針５０が領域Ｒを通過するのに要する時間が短くなることから、図１４（Ｂ）の左から２番目の欄に示すような変化パターンとなる。また、メータの針５０がスムーズさを欠いた動作をする場合には、プラスのピークＰ（＋）とマイナスのピークＰ（−）との間隔が変動することから、図１４（Ｂ）の左から３番目の欄に示すような変化パターンとなる。また、メータの針５０が細かく振動する場合には、プラスのピークＰ（＋）とマイナスのピークＰ（−）との間隔が狭い状態が継続することから、図１４（Ｂ）の最右欄に示すような変化パターンとなる。
【００５８】
これらの異常に対する変化パターンは予め用意しておくことができるので、その予め用意した異常変化パターンとの合致度を算出して、算出した合致度に基づいて異常判定を行うことにより、これら３種の異常を自動的に異常と判定することができる。このように、本発明では、表示器Ｄに表示されて、動作をする図形（ここではメータの針５０）の動作異常を判定することもできる。
【００５９】
（その他の具体的事例４）
次にその他の具体的事例４を説明する。図１５はその他の具体的事例４を説明する図である。この事例は、表示器Ｄのランプ（「Startup」、「End」）の表示状態を示す事例であり、いずれも、一定速度でゆっくり輝度変化をした事例である。図１５（Ａ）には、各ランプの表示状態の時間変化を示している。（Ａ−１）に示すように、ランプ「Startup」の事例は、消灯から点灯へ変化した事例であり、（Ａ−２）に示すように、ランプ「End」の事例は、点灯から消灯へ変化した事例である。図１５（Ｂ）には、この事例において輝度差分を抽出する領域を示している。この図１５（Ｂ）に示すように、この事例では、１文字分の表示領域の輝度差分を抽出する。図１５（Ｃ）は、輝度差分の変化パターンを示している。ランプが消灯状態から点灯状態へと一定速度でゆっくりと変化する場合、その変化過程では、輝度差分は一定のプラスの値となり、ランプが点灯状態となると、輝度差分はゼロで一定となる。よって、図１５（Ｃ−１）に示す変化パターンとなる。一方、ランプが消灯状態から点灯状態へと一定速度でゆっくりと変化する場合、その変化過程では、輝度差分は一定のマイナスの値となり、ランプが消灯状態となると、輝度差分はゼロで一定となる。よって、図１５（Ｃ−２）に示す変化パターンとなる。
【００６０】
図１５（Ｄ）には判定結果を示している。異常変化パターンは図示していないが、図１５に示す２つの事例は、いずれも、正常な表示状態の変化であり、異常変化パターンとは合致しない。よって、表示状態は正常であると判定することになる。このように、本発明では、表示器Ｄの表示状態がゆっくりと変化する場合（点灯から消灯、消灯から点灯のいずれも）であって、その変化が一度だけであっても、正しい判定を行うことができる。
【００６１】
（その他の具体的事例５）
次にその他の具体的事例５を説明する。図１６はその他の具体的事例５を説明する図である。この事例では、表示器Ｄに表示される特定の文字・図形の表示状態の異常を判定する事例であり、図１６（Ａ）に示すように、それら文字・図形よりもやや大きい領域が輝度差分を抽出する領域Ｒに設定されている。（Ａ−１）は、文字「Ａ」の事例であり、表示がされている状態から一時的に暗くなり、その後、元の輝度に戻っていることを示している。（Ａ−２）は、図形「○」の事例であり、表示状態の変化は文字「Ａ」の場合と同じである。
【００６２】
図１６（Ｂ）は、この事例における輝度差分の変化パターンを示している。表示がされている状態から一時的に暗くなることに対応してマイナスのピークＰ（−）が生じている。また、その後、元の輝度に戻ったことに対応してプラスのピークＰ（＋）が生じている。また、輝度差分の変化パターンは、輝度の変化が同じであれば、文字・図形の形状によらず、同じ変化パターンとなる。よって、図１６（Ｂ）に示すように、輝度差分の変化パターンは、文字「Ａ」の場合も図形「○」の場合も同じになる。この輝度差分の変化パターンを、擬似信号の差分の変化パターンや異常変化パターンと比較することで、特定の文字・図形の表示状態の異常を判定することができる。また、本発明では、文字や図形の形状に影響されず、表示器Ｄの表示状態の異常判定を行うことができる。
【００６３】
（その他の具体的事例６）
次にその他の具体的事例６を説明する。図１７はその他の具体的事例６を説明する図である。図１７（Ａ）の表示例は、いずれも、図１６の表示例（Ａ−１）と同じである。図１７において、右側と左側の違いは、図１７（Ｂ）に示すように、輝度差分の抽出領域の大きさにあり、右側では、図１６と同じ領域Ｒ（３画素×３画素）を輝度差分の抽出領域としているのに対して、左側では、上記領域Ｒのうちの１画素（より詳しくは、左上の画素）のみを輝度差分の抽出領域としている。このように抽出領域に違いがあるものの、輝度差分の変化パターンは、図１７（Ｃ）に示すように、互いに同じ傾向の変化パターンとなる。このように、本発明では、輝度差分を抽出する領域の大きさを適宜変更することもできる。
【００６４】
（その他の具体的事例７）
次にその他の具体的事例７を説明する。図１８はその他の具体的事例７を説明する図である。図１８の事例は、メータの表示状態を異常判定の対象とするが、その全体が判定対象ではなく、メータの針と、メータ内に設けられたランプを判定対象とする。そして、この事例では、メータの針に対する判定条件と、ランプに対する判定条件とを異ならせている。
【００６５】
図１８（Ｂ）に示す判定条件１では、メータの針に対して判定パターンＡを適用し、ランプに対して、それとは異なる判定パターンＢを適用する。なお、これら判定パターンは、擬似信号の差分の変化パターンまたは異常変化パターンのいずれかを用いるものである。また、図１８（Ｃ）に示す判定条件２では、メータの針に対して、異常変化パターンを用いて判定を行う判定パターンＣおよびスイッチ信号（擬似信号）の差分の変化パターンを用いて判定を行う判定パターンＤの２つを適用する。一方、ランプに対しては、判定パターンＣとは別の異常変化パターンを用いて判定を行う判定パターンＥおよび判定パターンＤとは別のスイッチ信号（擬似信号）の差分の変化パターンを用いて判定を行う判定パターンＦの２つを適用する。このように、表示状態を判定する領域により異なる判定パターンを適用することもでき、また、一つの表示領域の判定に対して複数の条件を設定することもできる。
【００６６】
以上、本発明の実施形態を説明したが、本発明は上述の実施形態に限定されるものではなく、次の実施形態も本発明の技術的範囲に含まれ、さらに、下記以外にも要旨を逸脱しない範囲内で種々変更して実施することができる。
【００６７】
たとえば、前述の第１実施形態では、変化パターンにおけるプラス値の出現時点の時間差およびマイナス値の出現時点の時間差を算出し、相関度は、これら２つの時間差の平均値としていたが、いずれか一方の時間差のみを算出し、それをそのまま相関度としてもよい。
【００６８】
また、変化パターンの比較として、相関度を算出する態様（第１実施形態）と、合致度を算出する態様（第２実施形態）を説明したが、比較の方法はこれに限られない。たとえば、２つのパターンの形状を比較してもよい。
【符号の説明】
【００６９】
１：表示状態評価システム、 １０：カメラ、 ２０：シミュレータ（擬似信号生成装置）、 ４０：オペレーションＰＣ（情報処理装置）、 ４１：表示状態テストプログラム、 ４２：カメラ操作部、 ４３：シミュレータ操作部、 ４４：画像処理部、 ４５：画像解析部、 ４６：画像判定部、 ４７：画像判定結果出力部、 ４８：擬似信号処理部、 ４９：記憶部、 ５０：針、 Ｄ：表示器、 Ｒ：領域、 Ｓ４３：輝度算出手段、 Ｓ４５：変化パターン決定手段、 Ｓ４６〜Ｓ４８：表示異常判定手段
【技術分野】
【０００１】
本発明は、表示器の表示状態評価システムに関し、特に、表示状態の異常を自動で判定するシステムに関する。
【背景技術】
【０００２】
表示装置の表示異常を自動で判定する装置として、従来、特許文献１の装置が知られている。特許文献１の装置は、表示装置を撮影するカメラと、そのカメラによって撮像された画像を解析するパソコンとを備えている。パソコンはメモリを備えており、このメモリに、カメラによって撮像された映像の絵素毎の輝度が記憶される。そして、その絵素毎の輝度の標準偏差から、表示装置の表示のちらつきを判定している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−１０６４１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１のように、標準偏差によりちらつきを判定する場合、標準偏差に有意な差として現れる輝度変化でなければ、ちらつきがあると判定することができない。すなわち、輝度変化が、ある程度の回数は繰り返されるようなちらつき（周期的なちらつき）でなければ、ちらつきがあると判定することができない。
【０００５】
一方、人が違和感を感じる表示異常には、周期的なちらつき以外のものもある。たとえば、瞬間的な点灯・消灯などの一瞬だけの輝度変化や、表示器としてメータの針などを表示する車載用表示器を考えた場合、メータの針がスムーズに動作しないときも違和感を感じる。しかし、特許文献１の装置では、周期的な輝度変化を示すちらつきしか判定できず、それ以外の種々の表示異常を判定することはできなかった。
【０００６】
本発明は、この事情に基づいて成されたものであり、その目的とするところは、表示器の表示状態を評価システムにおいて、人が違和感を感じる種々の表示状態の異常を判定することにある。
【課題を解決するための手段】
【０００７】
その目的を達成するための請求項１記載の発明では、カメラは経時的に表示器を撮像し、情報処理装置は、カメラによって撮像された画像を取得して、その画像の輝度を経時的に算出し、さらに、その経時的に算出した輝度に基づいて輝度差分の変化パターンを決定する。そして、表示異常判定手段は、この輝度差分の変化パターンと所定の参照パターンとの比較に基づいて、表示器の表示状態に異常があるかを判定する。
【０００８】
瞬間的な点灯・消灯が生じた場合には、輝度の変化が生じる。また、表示器に表示された図形の動作が異常動作である場合にも、輝度の変化が生じる。輝度の変化は輝度差分により判断できることから、本発明のように、輝度差分の変化パターンを用い、この輝度差分の変化パターンと参照用パターンとの比較により表示器の表示状態に異常があるかを判定するようにすれば、人が違和感を感じる種々の表示状態の異常を判定することができる。
【０００９】
請求項２記載の発明では、表示異常判定手段は、参照パターンとして、予め設定した異常変化パターンを用いる。このように、予め設定した異常変化パターンを用いれば、輝度差分の変化パターンが、予め設定した異常変化パターンと似ている場合に異常と判定できる。
【００１０】
さらに、請求項３記載の発明のように、異常変化パターンとして、表示状態の複数種類の異常にそれぞれ対応した複数種類の異常変化パターンを用いることもできる。
【００１１】
請求項４記載の発明では、表示器の表示状態を変化させる信号である表示変化信号を、擬似的に生成して表示器に出力する擬似信号生成装置をさらに備える。そして、表示異常判定手段は、参照パターンとして、擬似的に生成した表示変化信号の差分の変化パターンを用いる。このようにすれば、表示器が車両に搭載された場合と同様の条件を設定して表示器の表示異常の有無を判定することができる。
【００１２】
表示異常判定手段における判定は、具体的には、請求項５のように、輝度差分の変化パターンにおける特徴点の発生時点と、参照パターンにおける特徴点の発生時点との比較に基づいて行うことができる。この特徴点とは、たとえば、請求項６記載のように、変化パターンにおける信号の立ち上がり点および立ち下がり点の少なくともいずれか一方である。
【００１３】
また、表示異常判定手段における判定は、請求項７のように、異常変化パターンの所定時間における輝度差分の変化と、輝度差分の変化パターンの所定時間における輝度差分の変化との比較に基づいて行ってもよい。
【００１４】
請求項８記載の発明では、画像を複数の領域に分割し、一部または全部の領域に対して領域別に輝度を経時的に算出する。そして、輝度差分の変化パターンは、予め設定された１つまたは複数の領域に対して決定する。このようにすれば、輝度差分の変化パターンを、画像の一部分に対して決定することから、画像の一部分に限定した詳細な輝度差分の変化パターンを決定することができる。
【００１５】
請求項９記載の発明では、複数の領域に対して領域別に輝度差分の変化パターンを決定する。また、それら複数の輝度差分の変化パターンと比較する参照パターンも、輝度差分の変化パターン別に異なる参照パターンとする。このようにすれば、複数の領域に対して、異なる表示状態の異常を判定することができる。
【００１６】
請求項１０記載の発明では、１つの輝度差分の変化パターンを、異なる複数の参照パターンと比較して判定を行う。このようにすれば、１つの領域に対して、複数の種類の表示状態の異常を判定することができる。
【図面の簡単な説明】
【００１７】
【図１】本発明が適用された表示状態評価システムの全体構成を示す図である。
【図２】図１の表示状態評価システム１を用いて行う表示器Ｄの表示状態テストの手順を示すフローチャートである。
【図３】表示器Ｄの表示状態の異常の例を示す図である。
【図４】オペレーションＰＣ４０が実行する表示異常判定処理を詳しく示すフローチャートである。
【図５】図４の表示異常判定処理の具体例を説明する図である。
【図６】図４のステップＳ４７で算出する相関度を説明する図である。
【図７】第１実施形態における異常判定の具体的事例であって、図５とは別の例を説明する図である。
【図８】第２実施形態においてオペレーションＰＣ４０が実行する表示異常判定処理を詳しく示すフローチャートである。
【図９】第２実施形態における表示異常判定処理の具体例を説明する図である。
【図１０】合致度の算出方法を説明する図である。
【図１１】第２実施形態における異常判定の具体的事例であって、図９とは別の例を説明する図である。
【図１２】その他の具体的事例１を説明する図である。
【図１３】その他の具体的事例２を説明する図である。
【図１４】その他の具体的事例３を説明する図である。
【図１５】その他の具体的事例４を説明する図である。
【図１６】その他の具体的事例５を説明する図である。
【図１７】その他の具体的事例６を説明する図である。
【図１８】その他の具体的事例７を説明する図である。
【発明を実施するための形態】
【００１８】
（第１実施形態）
以下、本発明の実施形態を図面に基づいて説明する。図１は、本発明が適用された表示状態評価システム１の全体構成を示す図である。図１に示すように、本実施形態の表示状態評価システム１は、カメラ１０、シミュレータ２０、オペレーションＰＣ４０を備えている。
【００１９】
カメラ１０は、評価対象の表示器Ｄの画面を連続的に撮像するものであり、撮像した画像をオペレーションＰＣ４０へ出力する。このカメラ１０の台数は、図１では２台が示されているが、カメラ１０の台数には特に制限はなく、１台でもよいし、また３台以上でもよい。このカメラ１０が撮像する表示器Ｄは、本実施形態では、車両に搭載される表示器（車載用表示器）であり、速度メータ、タコメータなどを表示するものである。
【００２０】
シミュレータ２０は、表示器Ｄに対して、表示器Ｄが車両に搭載された場合の環境を模擬的に生成する装置であり、たとえば、模擬的な電源や通信線を備える。また、シミュレータ２０は、特許請求の範囲の擬似信号生成装置としての機能も備えており、表示器Ｄが車両に搭載された場合に表示器Ｄに入力される信号であって、表示器Ｄの表示状態の変化を指示する信号である表示変化信号を擬似的に生成して表示器Ｄに出力する（以下、この擬似的に生成した表示変化信号を擬似信号という）。
【００２１】
シミュレータ２０は、表示状態テストプログラムによる自動操作または、操作者の直接入力操作に基づいて、種々のテスト条件（電源条件、通信条件など）を生成し、また、種々の擬似信号を生成する。この擬似信号としては、たとえば、表示器Ｄの方向指示表示灯（方向指示灯が点灯していることを示すもの）をオンオフさせる信号に相当する擬似信号、ＡＦＳ(Adaptive Front-Lighting System)のオンオフを示す信号に相当する擬似信号などがある。
【００２２】
オペレーションＰＣ４０は、表示状態テストプログラム４１、カメラ操作部４２、シミュレータ操作部４３、画像処理部４４、画像解析部４５、画像判定部４６、画像判定結果出力部４７、擬似信号処理部４８、記憶部４９を備えている。
【００２３】
表示状態テストプログラム４１が実行されることで、そのプログラムに従ってオペレーションＰＣ４０の各部４２〜４９が作動して表示器Ｄの表示状態の異常を判定する。
【００２４】
カメラ操作部４２は、表示状態テストプログラム４１に従って、カメラ１０による表示器Ｄの画面の録画開始、終了等のカメラ１０の操作を行う。シミュレータ操作部４３は、シミュレータ２０に対する操作を行うとともに、シミュレータ２０が表示器Ｄへ出力する信号を計測する。画像処理部４４は、カメラ１０が撮像した画像を取得し、その取得した画像に対して、画像解析部４５において画像解析するための前処理を行う。画像解析部４５は、画像処理部４４が処理を行った画像を解析して、画像の所定部分の輝度を決定する。
画像判定部４６は、画像解析部４５が解析した輝度に基づいて、輝度差分の変化パターンを決定し、さらに、その輝度差分の変化パターンを所定の参照パターンと比較することで、表示器Ｄの表示状態に異常があるかを判定する。画像判定結果出力部４７は、たとえば、モニタであり、画像判定部４６での判定結果を出力する。擬似信号処理部４８は、シミュレータ操作部４３から擬似信号を取得して、擬似信号の差分の変化パターンを作成する。記憶部４９は、書き込み可能な記憶部であり、オペレーションＰＣ４０の各部４２〜４８の処理結果を記憶する。また、記憶部４９には、カメラ１０によって撮像された画像を示す信号（以下、撮像画像信号）や後述する輝度差分の変化パターンも記憶される。なお、オペレーションＰＣ４０は特許請求の範囲の情報処理装置に相当する。
【００２５】
図２は、図１の表示状態評価システム１を用いて行う表示器Ｄの表示状態テストの手順を示すフローチャートである。表示状態テストにおいては、まず、ステップＳ１に示すように、カメラ１０によって表示器Ｄの録画を開始する。この開始は、操作者のスイッチ操作により開始するようになっていてもよいし、また、オペレーションＰＣ４０がカメラ１０を制御して自動的に録画を開始させるようになっていてもよい。このステップＳ１の後は、カメラ１０から撮像画像信号がオペレーションＰＣ４０へ逐次入力され、オペレーションＰＣ４０は、入力された撮像画像信号を記憶部４９へ記憶する。
【００２６】
続くステップＳ２ではテスト条件を生成する。このテスト条件は、たとえば、断線、ショートなどである。また各種のセンサ信号の擬似信号も生成する。このステップＳ２は、操作者がシミュレータ２０を操作することにより行う。シミュレータ２０が生成した擬似信号は表示器Ｄへ入力される。また、オペレーションＰＣ４０は、シミュレータ２０から表示器Ｄへ入力される擬似信号を計測して記憶部４９へ記憶する。
【００２７】
続くステップＳ３では、カメラ１０による表示器Ｄの録画を終了する。このステップＳも操作者が行ってもよいし、また、所定の時間が経過したことをオペレーションＰＣ４０が判断し、オペレーションＰＣ４０がカメラ１０を制御して録画を終了させてもよい。
【００２８】
続くステップＳ４は、オペレーションＰＣ４０が行う処理であり、ステップＳ１の後、ステップＳ３を実行するまでの間に取得した撮像画像信号、擬似信号に基づいて、表示器Ｄの表示状態の異常を判定する。このステップＳ４の処理は、図４を用いて後述する。
【００２９】
続くステップＳ５もオペレーションＰＣ４０の処理であり、ステップＳ４において判定した判定結果を、画像判定結果出力部４７から出力する。以上で、表示状態のテストの一連の手順が終了する。
【００３０】
上述のステップＳ４における表示異常判定処理を説明する前に、そのステップＳ４で判定する表示状態の異常の例を説明する。図３は、表示器Ｄの表示状態の異常の例であり、図３（Ａ）は、ある機器の状態を示すランプが、ｔ２時点において一瞬だけ点灯したことを示している。図３（Ｂ）は、ブレーキ異常を示す文字が、ｔ２時点において一瞬だけ点灯したことを示している。
【００３１】
オペレーションＰＣ４０は、図３に例示した表示異常やその他の種々の表示異常を、表示異常判定処理を実行することで判定する。図４は、オペレーションＰＣ４０が実行する表示異常判定処理を詳しく示すフローチャートである。まず、ステップＳ４１では、図２のステップＳ１〜Ｓ３の間に録画された撮像画像信号を、記憶部４９から取得する。
【００３２】
続くステップＳ４２では画面分割を行う。この画面分割は、表示器Ｄを撮像した撮像画像を複数の領域に分割するものであり、どのように分割するかは予め設定されている。図５は、このステップＳ４２の画面分割処理など、図４の表示異常判定処理の一連の処理の具体例を説明する図である。ステップＳ４２における画面分割の一例は、図５（Ａ）に示されており、この例では、縦及び横に等間隔に分割線が設定されており、分割線により囲まれた矩形範囲が各分割領域である。
【００３３】
続くステップＳ４３は、特許請求の範囲の輝度算出手段に相当する処理であり、録画を開始してから終了するまでの全期間に渡り、分割領域の輝度値を所定時間間隔毎（図５では５０ｍｓ毎）に算出する。輝度値を算出する分割領域は、ステップＳ４２で分割した分割領域の全てである。ここでは、説明を簡略にするために、図５（Ａ）に示す領域Ｒの輝度値を算出する。
図５（Ｂ）には、このステップＳ４３で算出した輝度値の時間変化が示されており、図５（Ｂ）の例では、５０ｍｓ毎に、点灯を示す輝度値（＝７０）と、消灯を示す輝度値（＝０）とが繰り返されている。
【００３４】
続くステップＳ４４では、ステップＳ４３で所定時間間隔で算出した輝度値を用いて、各輝度算出時点の輝度から、直前の輝度算出時点の輝度を引くことで輝度差分を算出する。輝度差分を算出することで、輝度の絶対値が０→１００→０と変化する場合も１５０→２５０→１５０と変化する場合も同じ条件で表示異常を判定できることから、輝度値をそのまま用いる場合に比べて、汎用性が高くなる。図５（Ｃ）には、このステップＳ４４で算出した輝度差分の一例が示されている。
【００３５】
続くステップＳ４５は、特許請求の範囲の変化パターン決定手段に相当し、ステップＳ４４で算出した輝度差分の時間変化を示す輝度差分の変化パターンを決定する。そして、続くステップＳ４６では、擬似信号の変化パターンを取得するとともに、擬似信号の差分の変化パターンを決定する。
【００３６】
図５（Ｄ）、（Ｅ）は、それぞれ、擬似信号としてのスイッチ信号の時間変化、および、そのスイッチ信号の差分を示している。なお、スイッチ信号の差分を算出する時間間隔は、前述の輝度差分を算出する時間間隔と同等か、もしくは、それよりも短い時間間隔とする。ここでは、上記時間間隔よりも十分に短い時間間隔となっているので、図５（Ｅ）に示すように、スイッチ信号の差分は、輝度差分の算出周期（５０ｍｓ毎）とは異なる時点でも値が変化している。
【００３７】
続くステップＳ４７では、ステップＳ４５で決定した輝度差分の変化パターンと、ステップＳ４６で決定した擬似信号の差分の変化パターンとの相関度を算出する。この相関度の算出においては、輝度差分の変化パターンの特徴を抽出するとともに、擬似信号の差分の変化パターンからも、輝度差分の変化パターンに対応する特徴を抽出する。そして、抽出した特徴から上記相関度を算出する。抽出する特徴としては、たとえば、プラス値を示す輝度差分の出現時点、マイナス値を示す輝度差分の出現時点、輝度差分の極大値、極小値などがあり、どのような特徴を抽出するかは予め設定されている。
【００３８】
図６は、このステップＳ４７で算出する相関度を説明する図であり、本実施形態では、プラス値の出現時点の時間差およびマイナス値の出現時点の時間差を算出する。そして、相関度は、これら２つの時間差を用いて算出する。ここでは、２つの時間差の平均値を相関度として以下を説明する。このようにして算出する相関度は、値が小さいほど、輝度差分と擬似信号の差分とが相関することを意味する。
【００３９】
続くステップＳ４８では、上記ステップＳ４７で算出した相関度に基づいて表示器Ｄの表示状態の異常を判定する。たとえば、相関度が予め設定された閾値よりも小さければ、すなわち、輝度差分と擬似信号の差分との相関が高ければ、擬似信号に応じて表示器Ｄの表示状態が変化したと考えられることから、表示器Ｄの表示状態は正常であると判定する。逆に、相関度が予め設定された閾値以上であれば、表示器Ｄの表示状態が擬似信号と対応しない変化を示したと考えられることから、表示器Ｄの表示状態が異常であると判定する。なお、ステップＳ４６〜Ｓ４８が特許請求の範囲の表示異常判定手段に相当する処理である。
【００４０】
このステップＳ４８を実行したら、図４に示す処理を終了する。その後は、図２のステップＳ５により、判定結果が、オペレーションＰＣ４０の表示画面等から出力される。
（第１実施形態の具体事例２）
次に、第１実施形態における異常判定の具体的事例であって、図５とは別の例を図７を用いて説明する。図７において、（Ａ）はカメラ１０が撮像した撮像画像であり、この具体事例では、４０ｍｓ周期で撮像している。（Ｂ）は、各撮像画像に対応する輝度であり、この例では、画像を小さな正方形に分割し、分割領域毎の平均の輝度を決定している。（Ｃ）は、輝度差分であり、この図７には、図に示す分割領域のうちの右下の領域の輝度差分を示している。これら図７（Ａ）〜（Ｃ）から分かるように、この事例は、短時間（たとえば１００ｍｓ以下）の間、「ＡＦＳ ＯＦＦ」のランプが消灯した事例である。最後の（Ｄ）は擬似信号であるスイッチ（ＳＷ）信号と、そのＳＷ信号の差分を示している。なお、このＳＷ信号は、撮像画像における「ＡＦＳ ＯＦＦ」の点灯を指示する信号である。ＳＷ信号は、この図７に示す期間中ＯＮ状態のまま変化がなく、そのためＳＷ信号の差分は、一定値のゼロのままである。
【００４１】
図７（Ｃ）の輝度差分は、１２０ｍｓと２００ｍｓにおいて値の変化がある一方で、ＳＷ信号の差分には変化がない。すなわち、両者には相関がない。よって、表示器Ｄの表示状態は異常であると判定することができる。
【００４２】
以上、説明した第１実施形態によれば、カメラ１０で撮像した表示器Ｄの画像から輝度差分の変化パターン（すなわち、表示器Ｄの輝度差分の経時的な変化）を決定しており、この輝度差分の変化パターンを擬似信号の差分の変化パターンと比較している。よって、表示器Ｄの輝度変化が、表示器Ｄへ入力される信号に対応した正常な変化であるか否かを判断することができる。また、表示器Ｄに、瞬間的な点灯・消灯が生じた場合にも輝度の変化が生じることから、瞬間的な点灯・消灯が生じたことは輝度差分の変化パターンに反映される。従って、本実施形態のように、輝度差分の変化パターンを擬似信号の差分の変化パターンと比較することにより、瞬間的な点灯・消灯が、表示器Ｄの異常により生じたか否かを自動で判定することができる。
【００４３】
（第２実施形態）
次に、本発明の第２実施形態を説明する。第２実施形態のシステム構成は第１実施形態と同じく図１に示す構成を有し、また、テスト手順も第１実施形態と同じく図２に示す手順である。ただし、図２のステップＳ４において実行する表示異常判定処理の内容が第１実施形態と相違する。第１実施形態では、輝度差分の変化パターンを擬似信号の差分の変化パターンと比較していたが、第２実施形態では、輝度差分の変化パターンを異常変化パターンと比較する。この異常変化パターンとは、表示器Ｄが異常状態となっているときの輝度差分の変化パターンであり、第２実施形態においては、記憶部４９に、異常変化パターンが１種類または複数種類記憶されている。なお、この異常変化パターンは、表示器Ｄが異常であったときの実際の輝度差分の変化パターンでもよいし、任意に設定したパターンでもよい。
【００４４】
図８は、第２実施形態においてオペレーションＰＣ４０が実行する表示異常判定処理を詳しく示すフローチャートである。図８において、図４と同じステップ番号を付したステップでは、図４と同じ処理を実行する。すなわち、図８においても、カメラ１０から画像を取得し（ステップＳ４１）、撮像画像の画面分割を行い（ステップＳ４２）、分割領域の輝度を算出し（ステップＳ４３）、輝度差分を算出し（ステップＳ４４）、輝度差分の変化パターンを決定する（ステップＳ４５）。
【００４５】
そして、ステップＳ４５を実行後は、ステップＳ４７−１にて、ステップＳ４５で決定した輝度差分の変化パターンと、記憶部４９に記憶されている異常変化パターンとの合致度を算出する。
【００４６】
図９は、第２実施形態における表示異常判定処理の具体例を説明する図であり、図９（Ａ）〜（Ｃ）は、それぞれ図５（Ａ）〜（Ｃ）と同じである。図９（Ｄ）は、図８のステップＳ４７−１にて用いる異常変化パターンの一例である。図９（Ｄ）に示す異常変化パターンは、過去の実際の異常事例（ちらつきありであり、輝度差分は、大きいプラス値（＋７０）→０→絶対値が大きいマイナス値（−７０）を、極めて短い周期で繰り返している。
【００４７】
ここで合致度について具体的に説明する。図１０は、合致度の算出方法を説明する図であり、変化パターンの一部を模式的に示している。第２実施形態で算出する合致度は、図１０に（１）、（２）で示すように、縦軸値（輝度差分値）の合致の程度（１）と、横軸値（時間）の合致の程度（２）をそれぞれ示す合致度である。（１）としては、それぞれの変化パターンにおいて、隣り合う信号の差、所定時間内における最大値と最小値の差などを算出し、それらの算出値の差を合致度とする。（２）としては、それぞれの変化パターンにおいて、輝度差分値がプラスに変化した時点とマイナスに変化した時点との時間差や、上記最大値を示す時点と上記最小値を示す時点との時間差を算出し、それらの算出値の差を合致度とする。なお、このようにして算出する合致度は、（１）の合致度も（２）の合致度も、いずれも、値が小さいほど両変化パターンが合致していることを意味している。
【００４８】
このようにして合致度を算出したらステップＳ４８に進む。ステップＳ４８では、ステップＳ４７で算出した合致度に基づいて表示器Ｄの表示状態が異常であったか否かを判定する。具体的には、前述のように、この実施形態の合致度は値が小さいほど合致していることを意味していることから、合致度の値が所定の判定値よりも小さい場合には、輝度差分の変化パターンは異常変化パターンと合致しており、表示器Ｄの表示状態は異常であったと判定する。なお、合致度は（１）、（２）の２つを算出しているので、判定値はそれぞれの合致度に対して設定する。また、（１）、（２）の２つとも判定値よりも小さい場合に合致していると判定するようになっていることが好ましいが、要求される判定精度によっては、（１）、（２）のいずれか少なくとも一方が判定値よりも小さい場合に合致していると判定するようにしてもよい。
【００４９】
図９に示した（Ｃ）、（Ｄ）の例の場合、輝度差分の変化パターンと異常変化パターンとは合致しておらず、表示器Ｄの表示状態は正常であると判定することになる。
【００５０】
（第２実施形態の具体事例２）
次に、第２実施形態における異常判定の具体的事例であって、図９とは別の例を図１１を用いて説明する。図１１において（Ａ）、（Ｂ）、（Ｃ）は図７と同じである。すなわち、図１１の事例も、短時間の間、「ＡＦＳ ＯＦＦ」のランプが消灯した事例である。図１１の（Ｄ）は異常変化パターンを示している。図１１の（Ｃ）と（Ｄ）を比較するために両者の合致度を算出する。この事例では、縦軸値の合致度として、輝度差分が減少している期間における輝度差分値（（１）−１）の合致度（すなわち（Ｃ）と（Ｄ）の差）、および、輝度差分が増加している期間における輝度差分値（（１）−２）の合致度を算出し、横軸値の合致度（２）として、輝度差分が減少傾向となってから増加傾向となるまでの期間の合致度を算出する。これらの合致度の具体的数値は示していないが、図１１（Ｃ）、（Ｄ）を比較すれば分かるように、上記合致度は、両変化パターンがよく合致することを示す値となる。すなわち、輝度差分の変化パターンが異常変化パターンとよく合致すると判定できる。よって、表示器Ｄの表示状態は異常であると判定することができる。
【００５１】
以上、説明した第２実施形態によれば、カメラ１０で撮像した表示器Ｄの画像から輝度差分の変化パターンを決定し、この輝度差分の変化パターンを、予め記憶されている異常変化パターンと比較している。よって、表示器Ｄの輝度変化が、異常な変化であるか否かを判断することができる。また、表示器Ｄに、瞬間的な点灯・消灯が生じた場合にも輝度の変化が生じることから、瞬間的な点灯・消灯が生じたことは輝度差分の変化パターンに反映される。従って、第２実施形態のように、輝度差分の変化パターンを異常変化パターンと比較することにより、表示器Ｄに生じた瞬間的な点灯・消灯が、異常であるか否かを自動で判定することができる。
【００５２】
（その他の具体的事例１）
さらに、具体的事例を説明する。図１２はその他の具体的事例１を説明する図である。この事例では、シミュレータ２０により、テスト条件として、図１２（Ａ）に示すように、表示器Ｄに供給する電源電圧を、一時的に１２Ｖから４Ｖまで低下させる。この事例では、これにより、図１２（Ｂ）に示すように、ｔ２時点において一瞬だけランプが消灯している。そのため、ランプ部分の領域の輝度差分は、図１２（Ｃ）に示すように、ランプが一瞬消灯したｔ２時点において低下し、ランプが再点灯したｔ３時点で増加するパターンとなっている。一方、このランプの点消灯を指示するスイッチ信号は、この事例では、図１２（Ｄ）に示すように、ずっとオフのままである。従って、図示していないが、スイッチ信号の差分も、ずっとゼロのままである。よって、第１実施形態と同様に、輝度差分の変化パターンと擬似信号（スイッチ信号）の差分の変化パターンとの相関度を算出すると、その相関度は、両変化パターンが相関しないことを示す値となる。よって、輝度差分の変化パターンはスイッチ信号の変化によるものではないと判定でき、この事例では、表示状態が異常であると判定することができる。
【００５３】
（その他の具体的事例２）
次にその他の具体的事例２を説明する。図１３はその他の具体的事例２を説明する図である。この事例では、シミュレータ２０により、テスト条件として、図１３（Ａ）に示すように、表示器Ｄへ情報を送信する通信線を一時的にショートさせる。この事例では、このショートにより、図１３（Ｂ）に示すように、表示器Ｄの画像の一部に、文字「ブレーキ」が一瞬だけ点灯している（ｔ２時点）。そのため、その文字の部分を含む領域の輝度差分の変化パターンは、図１３（Ｃ）に示すように、ｔ２時点で増加し、ｔ３時点で減少するパターンとなる。この事例では、第２実施形態と同様に、輝度差分の変化パターンを異常変化パターンと比較しており、図１１と同様に、輝度差分値が増減しているときの輝度差分値の合致度（（１）−１、（１）−２）と、輝度差分が減少傾向と増加傾向との間の期間の合致度（２）を算出する。この事例では、合致度は、両変化パターンがよく合致することを示す値となる。すなわち、輝度差分の変化パターンが異常変化パターンとよく合致すると判定できる。よって、表示器Ｄの表示状態は異常であると判定することができる。
【００５４】
（その他の具体的事例３）
次にその他の具体的事例３を説明する。図１４はその他の具体的事例３を説明する図である。この事例は、表示器Ｄが車両のメータであり、このメータには、点消灯可能な針５０が示される。この事例では、この針５０の動作が正常かどうかを判定する。
【００５５】
動作例としては、図１４（Ａ）に示すように、正常な動作と、３種類の異常な動作を例示している。正常な動作とは一定の速度で針５０が動作することである。また、異常な動作の例としては、跳ね上がるような急激な動作、スムーズさを欠いた動作（換言すれば、動作速度が一定ではない動作）、針が細かく振動する動作を例示している。また、この事例においては、（Ａ）に示す領域Ｒの輝度差分を用いる。
【００５６】
この領域Ｒの輝度差分は、メータの針５０が正常に動作する場合、図１４（Ｂ）の最左欄に示すようになる。このような輝度差分の変化パターンになる理由を説明する。まず、針５０が差し掛かることにより輝度が上昇するので、輝度差分にプラスのピークＰ（＋）が生じる。その後、針５０が通過している時間Ｔ１は略一定の輝度となるので、輝度差分は略ゼロとなる。そして、針５０が領域Ｒを過ぎてしまうと領域Ｒの輝度が低下することから、輝度差分にマイナスのピークＰ（−）が生じる。よって、メータの針５０が正常に動作する場合、輝度差分は図１４（Ｂ）の最左欄に示すように変化する。
【００５７】
これに対して、メータの針５０が跳ね上がるような急激な動作をする場合、針５０が領域Ｒを通過するのに要する時間が短くなることから、図１４（Ｂ）の左から２番目の欄に示すような変化パターンとなる。また、メータの針５０がスムーズさを欠いた動作をする場合には、プラスのピークＰ（＋）とマイナスのピークＰ（−）との間隔が変動することから、図１４（Ｂ）の左から３番目の欄に示すような変化パターンとなる。また、メータの針５０が細かく振動する場合には、プラスのピークＰ（＋）とマイナスのピークＰ（−）との間隔が狭い状態が継続することから、図１４（Ｂ）の最右欄に示すような変化パターンとなる。
【００５８】
これらの異常に対する変化パターンは予め用意しておくことができるので、その予め用意した異常変化パターンとの合致度を算出して、算出した合致度に基づいて異常判定を行うことにより、これら３種の異常を自動的に異常と判定することができる。このように、本発明では、表示器Ｄに表示されて、動作をする図形（ここではメータの針５０）の動作異常を判定することもできる。
【００５９】
（その他の具体的事例４）
次にその他の具体的事例４を説明する。図１５はその他の具体的事例４を説明する図である。この事例は、表示器Ｄのランプ（「Startup」、「End」）の表示状態を示す事例であり、いずれも、一定速度でゆっくり輝度変化をした事例である。図１５（Ａ）には、各ランプの表示状態の時間変化を示している。（Ａ−１）に示すように、ランプ「Startup」の事例は、消灯から点灯へ変化した事例であり、（Ａ−２）に示すように、ランプ「End」の事例は、点灯から消灯へ変化した事例である。図１５（Ｂ）には、この事例において輝度差分を抽出する領域を示している。この図１５（Ｂ）に示すように、この事例では、１文字分の表示領域の輝度差分を抽出する。図１５（Ｃ）は、輝度差分の変化パターンを示している。ランプが消灯状態から点灯状態へと一定速度でゆっくりと変化する場合、その変化過程では、輝度差分は一定のプラスの値となり、ランプが点灯状態となると、輝度差分はゼロで一定となる。よって、図１５（Ｃ−１）に示す変化パターンとなる。一方、ランプが消灯状態から点灯状態へと一定速度でゆっくりと変化する場合、その変化過程では、輝度差分は一定のマイナスの値となり、ランプが消灯状態となると、輝度差分はゼロで一定となる。よって、図１５（Ｃ−２）に示す変化パターンとなる。
【００６０】
図１５（Ｄ）には判定結果を示している。異常変化パターンは図示していないが、図１５に示す２つの事例は、いずれも、正常な表示状態の変化であり、異常変化パターンとは合致しない。よって、表示状態は正常であると判定することになる。このように、本発明では、表示器Ｄの表示状態がゆっくりと変化する場合（点灯から消灯、消灯から点灯のいずれも）であって、その変化が一度だけであっても、正しい判定を行うことができる。
【００６１】
（その他の具体的事例５）
次にその他の具体的事例５を説明する。図１６はその他の具体的事例５を説明する図である。この事例では、表示器Ｄに表示される特定の文字・図形の表示状態の異常を判定する事例であり、図１６（Ａ）に示すように、それら文字・図形よりもやや大きい領域が輝度差分を抽出する領域Ｒに設定されている。（Ａ−１）は、文字「Ａ」の事例であり、表示がされている状態から一時的に暗くなり、その後、元の輝度に戻っていることを示している。（Ａ−２）は、図形「○」の事例であり、表示状態の変化は文字「Ａ」の場合と同じである。
【００６２】
図１６（Ｂ）は、この事例における輝度差分の変化パターンを示している。表示がされている状態から一時的に暗くなることに対応してマイナスのピークＰ（−）が生じている。また、その後、元の輝度に戻ったことに対応してプラスのピークＰ（＋）が生じている。また、輝度差分の変化パターンは、輝度の変化が同じであれば、文字・図形の形状によらず、同じ変化パターンとなる。よって、図１６（Ｂ）に示すように、輝度差分の変化パターンは、文字「Ａ」の場合も図形「○」の場合も同じになる。この輝度差分の変化パターンを、擬似信号の差分の変化パターンや異常変化パターンと比較することで、特定の文字・図形の表示状態の異常を判定することができる。また、本発明では、文字や図形の形状に影響されず、表示器Ｄの表示状態の異常判定を行うことができる。
【００６３】
（その他の具体的事例６）
次にその他の具体的事例６を説明する。図１７はその他の具体的事例６を説明する図である。図１７（Ａ）の表示例は、いずれも、図１６の表示例（Ａ−１）と同じである。図１７において、右側と左側の違いは、図１７（Ｂ）に示すように、輝度差分の抽出領域の大きさにあり、右側では、図１６と同じ領域Ｒ（３画素×３画素）を輝度差分の抽出領域としているのに対して、左側では、上記領域Ｒのうちの１画素（より詳しくは、左上の画素）のみを輝度差分の抽出領域としている。このように抽出領域に違いがあるものの、輝度差分の変化パターンは、図１７（Ｃ）に示すように、互いに同じ傾向の変化パターンとなる。このように、本発明では、輝度差分を抽出する領域の大きさを適宜変更することもできる。
【００６４】
（その他の具体的事例７）
次にその他の具体的事例７を説明する。図１８はその他の具体的事例７を説明する図である。図１８の事例は、メータの表示状態を異常判定の対象とするが、その全体が判定対象ではなく、メータの針と、メータ内に設けられたランプを判定対象とする。そして、この事例では、メータの針に対する判定条件と、ランプに対する判定条件とを異ならせている。
【００６５】
図１８（Ｂ）に示す判定条件１では、メータの針に対して判定パターンＡを適用し、ランプに対して、それとは異なる判定パターンＢを適用する。なお、これら判定パターンは、擬似信号の差分の変化パターンまたは異常変化パターンのいずれかを用いるものである。また、図１８（Ｃ）に示す判定条件２では、メータの針に対して、異常変化パターンを用いて判定を行う判定パターンＣおよびスイッチ信号（擬似信号）の差分の変化パターンを用いて判定を行う判定パターンＤの２つを適用する。一方、ランプに対しては、判定パターンＣとは別の異常変化パターンを用いて判定を行う判定パターンＥおよび判定パターンＤとは別のスイッチ信号（擬似信号）の差分の変化パターンを用いて判定を行う判定パターンＦの２つを適用する。このように、表示状態を判定する領域により異なる判定パターンを適用することもでき、また、一つの表示領域の判定に対して複数の条件を設定することもできる。
【００６６】
以上、本発明の実施形態を説明したが、本発明は上述の実施形態に限定されるものではなく、次の実施形態も本発明の技術的範囲に含まれ、さらに、下記以外にも要旨を逸脱しない範囲内で種々変更して実施することができる。
【００６７】
たとえば、前述の第１実施形態では、変化パターンにおけるプラス値の出現時点の時間差およびマイナス値の出現時点の時間差を算出し、相関度は、これら２つの時間差の平均値としていたが、いずれか一方の時間差のみを算出し、それをそのまま相関度としてもよい。
【００６８】
また、変化パターンの比較として、相関度を算出する態様（第１実施形態）と、合致度を算出する態様（第２実施形態）を説明したが、比較の方法はこれに限られない。たとえば、２つのパターンの形状を比較してもよい。
【符号の説明】
【００６９】
１：表示状態評価システム、 １０：カメラ、 ２０：シミュレータ（擬似信号生成装置）、 ４０：オペレーションＰＣ（情報処理装置）、 ４１：表示状態テストプログラム、 ４２：カメラ操作部、 ４３：シミュレータ操作部、 ４４：画像処理部、 ４５：画像解析部、 ４６：画像判定部、 ４７：画像判定結果出力部、 ４８：擬似信号処理部、 ４９：記憶部、 ５０：針、 Ｄ：表示器、 Ｒ：領域、 Ｓ４３：輝度算出手段、 Ｓ４５：変化パターン決定手段、 Ｓ４６〜Ｓ４８：表示異常判定手段
【特許請求の範囲】
【請求項１】
表示器を撮像するカメラと、前記カメラによって撮像された画像を取得して前記表示器の表示状態の異常を判定する情報処理装置とを備えた表示器の表示状態評価システムであって、
前記カメラは経時的に前記表示器を撮像し、
前記情報処理装置は、
前記カメラによって撮像された画像を取得して、その画像の輝度を経時的に算出する輝度算出手段と、
前記輝度算出手段が経時的に算出した輝度に基づいて、輝度差分の変化パターンを決定する変化パターン決定手段と、
その変化パターン決定手段が決定した輝度差分の変化パターンと、所定の参照パターンとの比較に基づいて、表示器の表示状態に異常があるかを判定する表示異常判定手段と、を備えることを特徴とする表示器の表示状態評価システム。
【請求項２】
請求項１において、
前記表示異常判定手段は、前記参照パターンとして、予め設定した異常変化パターンを用いることを特徴とする表示器の表示状態評価システム。
【請求項３】
請求項２において、
前記異常変化パターンとして、表示状態の複数種類の異常にそれぞれ対応した複数種類の異常変化パターンを用いることを特徴とする表示器の表示状態評価システム。
【請求項４】
請求項１において、
前記表示器の表示状態を変化させる信号である表示変化信号を、擬似的に生成して表示器に出力する擬似信号生成装置をさらに備え、
前記表示異常判定手段は、前記参照パターンとして、擬似的に生成した表示変化信号の差分の変化パターンを用いることを特徴とする表示器の表示状態評価システム。
【請求項５】
請求項１〜４のいずれか１項において、
前記表示異常判定手段は、輝度差分の変化パターンにおける特徴点の発生時点と、前記参照パターンにおける前記特徴点の発生時点との比較に基づいて前記判定を行うことを特徴とする表示器の表示状態評価システム。
【請求項６】
請求項５において、
前記特徴点は、前記変化パターンにおける信号の立ち上がり点および立ち下がり点の少なくともいずれか一方であることを特徴とする表示器の表示状態評価システム。
【請求項７】
請求項２、３、５、６のいずれか１項において、
前記表示異常判定手段は、異常変化パターンの所定時間における輝度差分の変化と、変化パターン決定手段が決定した輝度差分の変化パターンの所定時間における輝度差分の変化との比較に基づいて前記判定を行うことを特徴とする表示器の表示状態評価システム。
【請求項８】
請求項１〜７のいずれか１項において、
前記輝度算出手段は、前記画像を複数の領域に分割し、一部または全部の領域に対して領域別に輝度を経時的に算出し、
前記変化パターン決定手段は、前記輝度算出手段が経時的に算出した輝度に基づいて、予め設定された１つまたは複数の領域についての輝度差分の変化パターンを決定することを特徴とする表示器の表示状態評価システム。
【請求項９】
請求項８において、
前記変化パターン決定手段は、複数の領域に対して領域別に輝度差分の変化パターンを決定し、
前記表示異常判定手段は、前記変化パターン決定手段が決定した輝度差分の変化パターンと比較する参照パターンとして、輝度差分の変化パターン別に異なる参照パターンを用いることを特徴とする表示器の表示状態評価システム。
【請求項１０】
請求項８または９において、
前記表示異常判定手段は、１つの輝度差分の変化パターンを、異なる複数の参照パターンと比較して判定を行うことを特徴とする表示器の表示状態評価システム。
【請求項１】
表示器を撮像するカメラと、前記カメラによって撮像された画像を取得して前記表示器の表示状態の異常を判定する情報処理装置とを備えた表示器の表示状態評価システムであって、
前記カメラは経時的に前記表示器を撮像し、
前記情報処理装置は、
前記カメラによって撮像された画像を取得して、その画像の輝度を経時的に算出する輝度算出手段と、
前記輝度算出手段が経時的に算出した輝度に基づいて、輝度差分の変化パターンを決定する変化パターン決定手段と、
その変化パターン決定手段が決定した輝度差分の変化パターンと、所定の参照パターンとの比較に基づいて、表示器の表示状態に異常があるかを判定する表示異常判定手段と、を備えることを特徴とする表示器の表示状態評価システム。
【請求項２】
請求項１において、
前記表示異常判定手段は、前記参照パターンとして、予め設定した異常変化パターンを用いることを特徴とする表示器の表示状態評価システム。
【請求項３】
請求項２において、
前記異常変化パターンとして、表示状態の複数種類の異常にそれぞれ対応した複数種類の異常変化パターンを用いることを特徴とする表示器の表示状態評価システム。
【請求項４】
請求項１において、
前記表示器の表示状態を変化させる信号である表示変化信号を、擬似的に生成して表示器に出力する擬似信号生成装置をさらに備え、
前記表示異常判定手段は、前記参照パターンとして、擬似的に生成した表示変化信号の差分の変化パターンを用いることを特徴とする表示器の表示状態評価システム。
【請求項５】
請求項１〜４のいずれか１項において、
前記表示異常判定手段は、輝度差分の変化パターンにおける特徴点の発生時点と、前記参照パターンにおける前記特徴点の発生時点との比較に基づいて前記判定を行うことを特徴とする表示器の表示状態評価システム。
【請求項６】
請求項５において、
前記特徴点は、前記変化パターンにおける信号の立ち上がり点および立ち下がり点の少なくともいずれか一方であることを特徴とする表示器の表示状態評価システム。
【請求項７】
請求項２、３、５、６のいずれか１項において、
前記表示異常判定手段は、異常変化パターンの所定時間における輝度差分の変化と、変化パターン決定手段が決定した輝度差分の変化パターンの所定時間における輝度差分の変化との比較に基づいて前記判定を行うことを特徴とする表示器の表示状態評価システム。
【請求項８】
請求項１〜７のいずれか１項において、
前記輝度算出手段は、前記画像を複数の領域に分割し、一部または全部の領域に対して領域別に輝度を経時的に算出し、
前記変化パターン決定手段は、前記輝度算出手段が経時的に算出した輝度に基づいて、予め設定された１つまたは複数の領域についての輝度差分の変化パターンを決定することを特徴とする表示器の表示状態評価システム。
【請求項９】
請求項８において、
前記変化パターン決定手段は、複数の領域に対して領域別に輝度差分の変化パターンを決定し、
前記表示異常判定手段は、前記変化パターン決定手段が決定した輝度差分の変化パターンと比較する参照パターンとして、輝度差分の変化パターン別に異なる参照パターンを用いることを特徴とする表示器の表示状態評価システム。
【請求項１０】
請求項８または９において、
前記表示異常判定手段は、１つの輝度差分の変化パターンを、異なる複数の参照パターンと比較して判定を行うことを特徴とする表示器の表示状態評価システム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【公開番号】特開２０１２−１７５１８３（Ｐ２０１２−１７５１８３Ａ）
【公開日】平成２４年９月１０日（２０１２．９．１０）
【国際特許分類】
【出願番号】特願２０１１−３２４３７（Ｐ２０１１−３２４３７）
【出願日】平成２３年２月１７日（２０１１．２．１７）
【出願人】（０００００４２６０）株式会社デンソー (27,639)
【Ｆターム（参考）】
【公開日】平成２４年９月１０日（２０１２．９．１０）
【国際特許分類】
【出願日】平成２３年２月１７日（２０１１．２．１７）
【出願人】（０００００４２６０）株式会社デンソー (27,639)
【Ｆターム（参考）】
[ Back to top ]