画像処理システム、画像処理装置、および表示方法
【課題】画像処理装置のメンテナンスを適切にアシストすることができる画像処理システムを提供する。
【解決手段】ＭＦＰ１００のＣＰＵ１０は、携帯端末からの指示入力に基づいてメンテナンスの手順上の位置を特定し、携帯端末での撮影画像に合成されるタグ情報から上記メンテナンスの手順に応じたタグデーターを生成するためのタグデーター生成部１０３と、携帯端末の位置および向きとメンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツをタグデーターからメンテナンスの手順に沿って連続して再生される画面データーに切り替えて画面データーを生成するための画面データー生成部１０５とを備える。
【解決手段】ＭＦＰ１００のＣＰＵ１０は、携帯端末からの指示入力に基づいてメンテナンスの手順上の位置を特定し、携帯端末での撮影画像に合成されるタグ情報から上記メンテナンスの手順に応じたタグデーターを生成するためのタグデーター生成部１０３と、携帯端末の位置および向きとメンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツをタグデーターからメンテナンスの手順に沿って連続して再生される画面データーに切り替えて画面データーを生成するための画面データー生成部１０５とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は画像処理システム、画像処理装置、および表示方法に関し、特に、画像処理装置のメンテナンスに関連した情報を処理する画像処理システム、画像処理装置、および表示方法に関する。
【背景技術】
【０００２】
オフィス環境などにおいて、コピー機、プリンター、これらの複合機であるＭＦＰ（Multi-Functional Peripherals）等の画像形成装置が広く用いられている。
【０００３】
これら画像形成装置のメンテナンスを容易にする方法として、たとえば特開２００２−１７６５７１号公報（特許文献１）の開示しているカメラの修理をアシストする方法を応用することもできる。上記特許文献１には、修理モードにしてカメラ内のＨＤＤを取り出して他の表示デバイスに接続すると、当該カメラのメンテナンス用のアニメーション画像が表示デバイスで再生される技術が開示されている。この技術を応用すると、たとえばサービスマンの携帯する携帯端末と画像形成装置とを通信することで、携帯端末に当該画像形成装置のメンテナンスをアシストするアニメーション画像を表示させることが考えられる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００２−１７６５７１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
このように上記特許文献１に開示された方法を応用することで、サービスマンは表示されたアニメーション画像等を参照してメンテナンスを遂行することができるものの、たとえば当該サービスマンのメンテナンススキルが低いなどの場合には、表示された画像に従ってメンテナンスを遂行することが難しい場合もある。つまり、この方法では実際に行なっているメンテナンスに応じてアシストするものではないため、実際に行なっているメンテナンスと表示されているコンテンツとが解離してしまうことになり得る。そのため、適切なメンテナンスがなされない場合もある、という問題が生じる。
【０００６】
本発明はこのような問題に鑑みてなされたものであって、メンテナンスを適切にアシストすることができる画像処理システム、画像処理装置、および表示方法を提供することを目的としている。
【課題を解決するための手段】
【０００７】
上記目的を達成するために、本発明のある局面に従うと、画像処理システムは、撮影手段、表示手段、および入力手段を含む携帯端末と、画像処理装置と、携帯端末および画像処理装置と相互に通信可能なサーバーとを備える。画像処理装置は、当該画像処理装置の位置情報を記憶するための第１の記憶手段と、当該画像処理装置のメンテナンス対象の部品の位置を記憶するための第２の記憶手段と、画像処理装置でのメンテナンスに関するコンテンツを生成するための生成手段と、コンテンツを携帯端末に送信するための送信手段と、コンテンツの携帯端末への送信を制御するための制御手段とを含む。コンテンツは、メンテナンスの手順ごとのメンテナンスの内容を表わす画像データーおよび当該メンテナンス対象の部品を特定する情報を含むものであって、携帯端末での撮影画像に合成される第１のコンテンツと、メンテナンスの手順に沿って連続して再生される第２のコンテンツとを含む。制御手段は、携帯端末からの指示入力に基づいてメンテナンスの手順上の位置を特定し、当該位置に応じた第１のコンテンツを画像処理装置に送信する処理と、携帯端末の位置および向きとメンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツを第１のコンテンツから第２のコンテンツに切り替えて第２のコンテンツを画像処理装置に送信する処理とを実行する。
【０００８】
好ましくは、制御手段は、第２のコンテンツを画像処理装置に送信する処理において、第１のコンテンツを画像処理装置に送信する処理において特定されたメンテナンスの手順上の位置に基づいて、第１のコンテンツから切り替えた第２のコンテンツの再生開始点を特定する処理を行ない、再生開始点から第２のコンテンツを画像処理装置に送信する。
【０００９】
好ましくは、サーバーは、画像処理装置の位置を記憶するための第１の記憶手段と、携帯端末の位置および向きを取得するための取得手段と、携帯端末での撮影時の位置および向きに応じて、携帯端末での撮影範囲に含まれる画像処理装置をコンテンツの送信対象と特定し、画像処理装置に対してコンテンツの送信を要求する処理を行なうための処理手段とを備える。
【００１０】
好ましくは、携帯端末は、自身の位置情報を取得するための位置情報取得手段を備える。
【００１１】
好ましくは、画像処理装置は、自身の位置情報を取得するための位置情報取得手段を備える。
【００１２】
好ましくは、制御手段は、携帯端末での撮影範囲にメンテナンス対象の部品が含まれていない場合に、メンテナンスに関する第１のコンテンツを第２のコンテンツに切り替えて携帯端末に送信する。
【００１３】
好ましくは、制御手段は、携帯端末での撮影範囲にメンテナンス対象の部品が含まれていない場合に、第１のコンテンツの送信に先立って位置の変更を促す画面データーを携帯端末に送信する。
【００１４】
本発明の他の局面に従うと、画像処理装置は、撮影手段、表示手段、および入力手段を含む携帯端末と通信可能な画像処理装置であって、当該画像処理装置の位置情報を記憶するための第１の記憶手段と、当該画像処理装置のメンテナンス対象の部品の位置を記憶するための第２の記憶手段と、画像処理装置でのメンテナンスに関するコンテンツを生成するための生成手段と、コンテンツを携帯端末に送信するための送信手段と、コンテンツの携帯端末への送信を制御するための制御手段とを含む。コンテンツは、メンテナンスの手順ごとのメンテナンスの内容を表わす画像データーおよび当該メンテナンス対象の部品を特定する情報を含むものであって、携帯端末での撮影画像に合成される第１のコンテンツと、メンテナンスの手順に沿って連続して再生される第２のコンテンツとを含む。制御手段は、携帯端末からの指示入力に基づいて送信対象とするメンテナンスの手順上の位置を特定し、当該位置に応じた第１のコンテンツを画像処理装置に送信する処理と、携帯端末の位置および向きとメンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツを第１のコンテンツから第２のコンテンツに切り替えて第２のコンテンツを画像処理装置に送信する処理とを実行する。
【００１５】
本発明のさらに他の局面に従うと、表示方法は画像処理装置のメンテナンスに関するコンテンツを撮影手段および表示手段を含む携帯端末に表示させる方法であって、コンテンツは、メンテナンスの手順ごとのメンテナンスの内容を表わす画像データーおよび当該メンテナンス対象の部品を特定する情報を含むものであって、携帯端末での撮影画像に合成される第１のコンテンツと、メンテナンスの手順に沿って連続して再生される第２のコンテンツとを含み、携帯端末での撮影時の位置および向きを、携帯端末から、携帯端末の撮影範囲に存在する画像処理装置に送信するステップと、画像処理装置において携帯端末からの指示入力に基づいてメンテナンスの手順上の位置を特定し、当該位置に応じた第１のコンテンツを画像処理装置に送信するステップと、記携帯端末において、第１のコンテンツを携帯端末での撮影画像に合成して表示するステップと、画像処理装置において、携帯端末の位置および向きとメンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツを第１のコンテンツから第２のコンテンツに切り替えて第２のコンテンツを画像処理装置に送信するステップと、携帯端末において、撮影画像に合成された第１のコンテンツの表示を切り替えて、第２のコンテンツの再生を開始するステップとを備える。
【００１６】
本発明のさらに他の局面に従うと、表示プログラムは画像処理装置のメンテナンスに関するコンテンツを撮影手段および表示手段を含む携帯端末に表示させる処理を画像処理装置に実行させるためのプログラムであって、コンテンツは、メンテナンスの手順ごとのメンテナンスの内容を表わす画像データーおよび当該メンテナンス対象の部品を特定する情報を含むものであって、携帯端末での撮影画像に合成される第１のコンテンツと、メンテナンスの手順に沿って連続して再生される第２のコンテンツとを含み、携帯端末での撮影時の位置および向きを携帯端末から受信すると、携帯端末からの指示入力に基づいてメンテナンスの手順上の位置を特定し、当該位置に応じた第１のコンテンツを画像処理装置に送信するステップと、携帯端末の位置および向きとメンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツを第１のコンテンツから第２のコンテンツに切り替えて第２のコンテンツを画像処理装置に送信するステップとを画像処理装置に実行させる。
【発明の効果】
【００１７】
この発明によると、メンテナンス作業に応じた表示がなされるため、適切にメンテナンス作業をアシストすることができる。
【図面の簡単な説明】
【００１８】
【図１】実施の形態にかかる画像処理システムの構成の具体例を示す図である。
【図２】画像処理システムに含まれるＭＦＰのハードウェア構成の具体例を示す図である。
【図３】画像処理システムに含まれる携帯端末のハードウェア構成の具体例を示す図である。
【図４】画像処理システムに含まれるサーバーのハードウェア構成の具体例を示す図である。
【図５】画像処理システムでの、情報の流れを表わした図である。
【図６】画像処理システムでの動作概要を表わした図である。
【図７】ＭＦＰの機能構成の具体例を示すブロック図である。
【図８】携帯端末の機能構成の具体例を示すブロック図である。
【図９】サーバーの機能構成の具体例を示すブロック図である。
【図１０】サーバーでの動作の流れの具体例を表わすフローチャートである。
【図１１】携帯端末での動作の流れの具体例を表わすフローチャートである。
【図１２】ＭＦＰでの動作の流れを表わすフローチャートである。
【図１３】表示画面の具体例を示す図である。
【図１４】表示画面の具体例を示す図である。
【図１５】表示画面の具体例を示す図である。
【図１６】表示画面の具体例を示す図である。
【発明を実施するための形態】
【００１９】
以下に、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品および構成要素には同一の符号を付してある。それらの名称および機能も同じである。
【００２０】
＜システム構成＞
図１は、本実施の形態にかかる画像処理システムの構成の具体例を示す図である。
【００２１】
図１を参照して、本実施の形態にかかる画像処理システムは、画像処理装置としての、ＭＦＰ（Multi-Functional Peripheral）１００Ａと、携帯端末２００と、サーバー３００とを含む。
【００２２】
画像処理装置はＭＦＰに限定されず、プリンターやファクシミリ送受信機やコピー機などのその他の装置であってもよい。ＭＦＰ１００は、これら機能を複合的に備えた画像処理装置である。
【００２３】
携帯端末２００は、たとえば携帯電話機などが該当し、少なくともカメラ機能と、指示入力機能と、通信機能とを備えていれば、他の装置であってもよい。
【００２４】
サーバー３００は、一般的なパーソナルコンピューターなどから構成されるものであればよい。
【００２５】
なお、以下の説明では、図１に示されたように、ＭＦＰ１００とは別にサーバー３００が含まれるものとしているが、サーバー３００がＭＦＰ１００に含まれ、ＭＦＰ１００がサーバーとして機能してもよい。
【００２６】
ＭＦＰ１００とサーバー３００とは互いに通信可能であり、情報をやり取りする。ＭＦＰ１００とサーバー３００との通信は、有線、無線を問わず、いずれの通信形態であってもよい。本実施の形態にかかる画像処理システムはオフィス環境で用いられることが想定されるため、一例として、有線、または無線のＬＡＮ（Local Area Network）にＭＦＰ１００とサーバー３００とが接続され、該ネットワークを介して情報をやり取りする通信形態が挙げられる。
【００２７】
携帯端末２００とサーバー３００とも互いに通信可能であり、情報をやり取りする。携帯端末２００とサーバー３００との通信は、無線通信であればどのような通信形態であってもよい。以降の例では電話回線を利用した無線通信であるものとするが、その他、赤外線通信や近距離無線通信などであってもよいし、無線のＬＡＮに携帯端末２００とサーバー３００とが接続されている場合には該ネットワークを介して情報をやり取りする通信形態も挙げられる。
【００２８】
なお、以降の説明において、ＭＦＰ１００とサーバー３００とはＬＡＮを介した通信、および携帯端末２００とサーバー３００とは電話回線を利用した無線通信を行なうものと、すなわちこれらは異なる通信形態であるものとするが、たとえばすべてＬＡＮを介した通信など、同じ通信形態であってもよい。
【００２９】
＜装置構成＞
図２は、ＭＦＰ１００のハードウェア構成の具体例を示す図である。
【００３０】
図２を参照して、ＭＦＰ１００は、全体を制御するための演算装置であるＣＰＵ（Central Processing Unit）１０と、ＣＰＵ１０で実行されるプログラムなどを記憶するためのＲＯＭ（Read Only Memory）１１と、ＣＰＵ１０でプログラムを実行する際の作業領域として機能するためのＲＡＭ（Random Access Memory）１２と、図示しない原稿台に載置された原稿を光学的に読み取って画像データーを得るためのスキャナー１３と、画像データーを印刷用紙上に固定するためのプリンター１４と、情報を表示したり当該ＭＦＰ１００に対する操作入力を受け付けたりするためのタッチパネルを含んだ操作パネル１５と、画像データーを保存するためのメモリー１６と、ＬＡＮを介した通信の制御するためのネットワークコントローラー１７と、ＭＦＰ１００の状態を検出するためのセンサー１８とを含む。
【００３１】
操作パネル１５は、図示しないタッチパネルと操作キー群とを含む。タッチパネルは、液晶表示装置などの表示装置と光学式タッチパネルや静電容量タッチパネルなどの位置指示装置とが重なって構成され、操作画面を表示して、その操作画面上の指示位置を特定する。ＣＰＵ１０は予め記憶されている画面表示をさせるためのデーターに基づいてタッチパネルに操作画面を表示させる。
【００３２】
センサー１８としては、たとえば、トナー量残量を検出するためのセンサーや、各部のジャム（紙詰まり）や温度異常や動作異常等を検出するためのセンサーや、各部品の装着の有無を検知するためのセンサーなどが該当する。
【００３３】
メモリー１６には、さらに、メンテナンス対象となる部品ごとの情報である部品情報と、メンテナンスに関する情報であるメンテナンス情報と、当該ＭＦＰ１００の設置された位置を表わす情報（位置情報）とが記憶されている。当該ＭＦＰ１００の設置された位置は、当該ＭＦＰ１００が図示しない位置検出機能を有する場合には当該機能によって取得されるものであってもよいし、操作パネル１５から入力されるものであってもよい。部品ごとの位置は、予め入力されているものであってもよいし、当該部品が装着された際等にセンサー１８によって検知されて登録されるものであってもよい。ここで、ＭＦＰ１００の設置された位置は、一例として緯度経度などの絶対位置で登録されるものであってよく、部品ごとの位置は、たとえば操作パネル１５の１つの角を原点とするなど、規定位置を原点として原点からの座標で登録されるものであってよい。原点の絶対位置が特定されることで、部品ごとの絶対位置も特定される。
【００３４】
メンテナンス情報は、後述するタグを表示させるためのデーターであるタグデーターを生成するために用いられるタグ情報と、動画やアニメーション等でメンテナンス手順に沿ってメンテナンス内容を連続して画面表示させるため画面データーを生成するために用いられる画像情報とを含む。
【００３５】
タグ情報は、メンテナンスごとに、メンテナンスの手順と、当該手順におけるメンテナンス内容と、そのメンテナンス内容の対象とする部品とを表わす情報を指す。メンテナンス内容は、後述するタグとして表示される画像でメンテナンスをアシストするために表示される内容であって、後述されるように、ＭＦＰ１００の撮影画像に対して当該その内容を表わす画像（タグ）が付加して表示されるものである。
【００３６】
図３は、携帯端末２００のハードウェア構成の具体例を示す図である。
図３を参照して、携帯端末２００は、全体を制御するための演算装置であるＣＰＵ２０と、ＣＰＵ２０で実行されるプログラムなどを記憶するためのＲＯＭ２１と、ＣＰＵ２０でプログラムを実行する際の作業領域として機能するためのＲＡＭ２２と、磁気センサーを含んで当該携帯端末２００の向きを検出するための電子コンパス２３と、ＧＰＳ（Global Positioning System）信号または基地局からの位置信号を受信して当該携帯端末の位置情報を取得するためのＧＰＳコントローラー２４と、情報を表示したり当該携帯端末２００に対する操作入力を受け付けたりするためのタッチパネルを含んだ操作パネル２５と、カメラ２６と、図示しない基地局と通信することによる電話回線を介した通信を制御するためのコントローラー２７と、電話帳データーなどを記憶するためメモリー２８とを含む。
【００３７】
操作パネル２５は、ＭＦＰ１００の操作パネル１５と同様の構成であってよい。すなわち、一例として、液晶表示装置などの表示装置と光学式タッチパネルや静電容量タッチパネルなどの位置指示装置とが重なって構成されたタッチパネルと、操作キーとを含む。
【００３８】
ＣＰＵ２００は予め記憶されている画面表示をさせるためのデーターに基づいてタッチパネルに操作画面を表示させる。タッチパネルでは操作画面上の指示位置が特定され、その位置を示す操作信号がＣＰＵ２０に入力される。また、押下されたキーを示す操作信号がＣＰＵ２０に入力される。ＣＰＵ２０は押下されたキー、または表示している操作画面と指示位置とから操作内容を特定し、それに基づいて処理を実行する。
【００３９】
また、電子コンパス２３およびＧＰＳコントローラー２４は、取得した当該携帯端末２００の向きや位置情報を示す信号をＣＰＵ２０に入力する。
【００４０】
図４は、サーバー３００のハードウェア構成の具体例を示す図である。
図４を参照して、サーバー３００は上述のように一般的なコンピュータ等によって構成されるものであり、一例として、全体を制御するための演算装置であるＣＰＵ３０と、ＣＰＵ３０で実行されるプログラムなどを記憶するためのＲＯＭ３１と、ＣＰＵ３０でプログラムを実行する際の作業領域として機能するためのＲＡＭ３２と、ＭＦＰ情報などを記憶するためのＨＤ（Hard Disk）３３と、電話回線を介した通信を制御するための通信コントローラー３４と、ＬＡＮを介した通信の制御するためのネットワークコントローラー３５とを含む。
【００４１】
ＨＤ３３には、ＭＦＰ１００に関する情報として、ＭＦＰ１００の位置情報が記憶されている。この位置情報は、予め入力されることで記憶されているものでもよいし、ＭＦＰ１００から送信されて記憶されてもよい。
【００４２】
＜動作概要＞
図５は、本実施の形態にかかる画像処理システムでの、情報の流れを表わした図である。
【００４３】
図５を参照して、携帯端末２００は、カメラ２６で撮影した際の位置および向きを表わす情報をサーバー３００に対して送信する。また、表示を更新する指示や、タグからアニメーション等のメンテナンス用画面に表示を切り替える指示をサーバー３００に対して送信する。サーバー３００は、携帯端末２００からの要求に応じて表示用データーをＭＦＰ１００に対して要求する。
【００４４】
ＭＦＰ１００は、サーバー３００からの要求に応じて表示用データーを生成し、当該表示用データーをサーバー３００に対して送信する。サーバー３００は受け取った表示用データーを携帯端末２００に転送する。
【００４５】
携帯端末２００では、表示用データーがタグを表示するためのデーターである場合には、表示用データーで表わされる画像であるタグを撮影画像に合成して表示する。表示用データーがアニメーション等のメンテナンス用画面を表示するためのデーターである場合には、当該表示用データーで表わされるメンテナンス用画面を表示する。
【００４６】
図６は、本実施の形態にかかる画像処理システムでの動作概要を表わした図である。
図６を参照して、携帯端末においてメンテナンス用のアプリケーションが起動され（ステップＳ１１）、撮影指示に従ってカメラ２６で撮影されると（ステップＳ１２）、撮影時の位置および向きを表わす情報がサーバーに送信されて、それによってタグデーターがサーバーに対して要求される（ステップＳ１３）。
【００４７】
サーバーは、受信した携帯端末の位置および向きを表わす情報を保存する（ステップＳ３１）。そして、記憶しているＭＦＰの位置情報から、携帯端末の撮影範囲に存在しているＭＦＰを特定し（ステップＳ３２）、当該ＭＦＰに対して携帯端末の位置および向きを表わす情報を送信することで、対応するタグデーターを要求する（ステップＳ３３）。
【００４８】
ＭＦＰは、対象のメンテナンスに関するメンテナンス情報のうちのタグ情報を読み出して、タグデーターを生成する（ステップＳ５１）。ここでは、メンテナンス手順に沿って順に表示するためのタグの、表示順に従って、最初のタグデーターから順に生成し、サーバーに送信する（ステップＳ５２）。サーバーは、受信したタグデーターを携帯端末に転送する（ステップＳ３４）。
【００４９】
携帯端末は、撮影画像にタグデーターに基づくタグを重ねて表示する（ステップＳ１４）。タグが表示された画面には、次のメンテナンス手順のためのタグの表示へ更新するための、たとえば「次へ」ボタンなどが表示されている。そして、そのボタンなどによって更新指示を受け付けると（ステップＳ１５）、上記ステップＳ１３からの動作に戻る。タグ表示の更新指示がある度に上記ステップＳ１３からの動作が繰り返されることになり、メンテナンス手順に沿って更新指示に従ってタグが順に撮影画像に重ねて表示されることになる。
【００５０】
ここで、携帯端末には、タグ表示からアニメーション等のメンテナンス用画面へ表示の切り替えを指示するための手段が設けられているものとする。この手段は、たとえばタグが表示された画面に設けられた切替ボタンであってもよいし、図示しないキーなどであってもよい。
【００５１】
タグ表示からアニメーション等のメンテナンス用画面へ表示を切り替える指示を受け付けると（ステップＳ１６）、携帯端末はサーバーに対してメンテナンス用画面を表示するための画面データーを要求する（ステップＳ１７）。サーバーはＭＦＰに対して当該要求を転送する（ステップＳ３５）。
【００５２】
ＭＦＰはこの要求を受け付けると、タグデーターの送信から画面データーの送信へと切り替える切替処理を実行する（ステップＳ５３）。ここでは、具体的には、サーバーに対して最後に送信したタグデーターに表わされたメンテナンス手順を参照して、連続してメンテナンス内容を表示するメンテナンス用画面のうちの該当箇所を再生開始位置として特定する。そして、その位置から再生開始されるように画像情報に基づいて画面データーを生成し、サーバーに対して送信する（ステップＳ５４）。サーバーは受信した画面データーを携帯端末に対して転送する（ステップＳ３６）。
【００５３】
携帯端末では、受信した画面データーを再生する（ステップＳ１８）。これによって、最終に表示されたタグで表わされたメンテナンス手順の次の手順からのメンテナンス内容が画面データーで連続して順に再生されることになる。
【００５４】
＜機能構成＞
図７は、上述の動作を実現するためのＭＦＰ１００の機能構成の具体例を示すブロック図である。図７に示される各機能は、ＣＰＵ１０がＲＯＭ１１に記憶されるプログラムを読み出してＲＡＭ１２上で実行することで、主にＣＰＵ１０に形成される機能である。しかしながら、少なくとも一部の機能が図２に示されたハードウェア構成によって形成されてもよい。
【００５５】
図７を参照して、メモリー１６には、部品ごとの情報である部品情報を記憶するための部品情報記憶部１６１と、メンテナンスに関する情報であるメンテナンス情報を記憶するためのメンテナンス情報記憶部１６２とが含まれる。
【００５６】
さらに図７を参照して、ＭＦＰ１００は、ネットワークコントローラー１７を介してサーバーからデーターの要求を受け付けるための入力部１０１と、当該要求がタグデーターの要求であった場合に、当該要求と共に送信された携帯端末の位置および向きが、メンテナンス対象の部品に向かう位置であるか否かを判断するための判断部１０２と、その判断に応じて、タグ情報を参照してタグデーターを生成するためのタグデーター生成部１０３と、上記要求がメンテナンス画面データーの要求であった場合に再生開始位置を特定するための特定部１０４と、画像情報を参照して再生開始位置から画面データーを生成するための画面データー生成部１０５と、ネットワークコントローラー１７を介してデーターをサーバーに対して送信するための送信部１０６とを含む。
【００５７】
図８は、上述の動作を実現するための携帯端末２００の機能構成の具体例を示すブロック図である。図８に示される各機能は、ＣＰＵ２０がＲＯＭ２１に記憶されるプログラムを読み出してＲＡＭ２２上で実行することで、主にＣＰＵ２０に形成される機能である。しかしながら、少なくとも一部の機能が図３に示されたハードウェア構成によって形成されてもよい。
【００５８】
図８を参照して、上記動作を実現するための機能として携帯端末２００は、操作パネル２５からの指示入力を受け付けるための指示入力部２０１と、操作パネル２５からの撮影指示に応じてＧＰＳコントローラー２４から得られた信号より当該携帯端末２００の位置を取得するための位置取得部２０２と、操作パネル２５からの撮影指示に応じて電子コンパス２３から得られた信号より当該携帯端末２００の向きを取得するための向き取得部２０３と、操作パネル２５からの撮影指示に応じてカメラ２６による撮影を実行して撮影された画像データーを取得するための画像取得部２０４と、操作パネル２５からの撮影指示に応じて取得された位置および向きを表わす情報をコントローラー２７を介してサーバー３００に対して送信するための送信部２０５と、サーバー３００から送信されたタグデーターの入力をコントローラー２７を介して受け付けるためのタグデーター入力部２０６と、撮影して得られた画像データーにタグデーターに基づいたタグを合成して表示用データーを生成するための生成部２０７と、サーバー３００から送信された画面データーの入力をコントローラー２７を介して受け付けるための画面データー入力部２０９と、表示用データーまたは画面データーに基づいた画面を操作パネル２５に表示する処理を実行するための表示処理部２０８とを含む。さらに、送信部２０５は、操作パネル２５からのタグを更新する指示や、タグの表示をメンテナンス用画面に切り替える指示に応じた要求を、コントローラー２７を介してサーバーに対して送信する。なお、位置取得部２０２および向き取得部２０３は、それぞれ上記指示がなされたときの当該携帯端末の位置および向きを取得し、送信部２０５が上記要求と共に送信するようにしてもよい。
【００５９】
図９は、サーバー３００の機能構成の具体例を示すブロック図である。図９に示される各機能は、ＣＰＵ３０がＲＯＭ３１に記憶されるプログラムを読み出してＲＡＭ３２上で実行することで、主にＣＰＵ３０に形成される機能である。しかしながら、少なくとも一部の機能が図４に示されたハードウェア構成によって形成されてもよい。
【００６０】
図９を参照して、ＨＤ３３には、ＭＦＰの位置を記憶するための記憶領域であるＭＦＰ情報記憶部３３１と、携帯端末２００から送信された当該携帯端末２００の位置および向きを記憶するための記憶領域である携帯端末情報記憶部３３２とが含まれる。その他、ＭＦＰから送信されたタグデーターや画面データーを記憶するための記憶領域が含まれてもよい。
【００６１】
さらに図９を参照して、上記動作を実現するための機能としてサーバー３００は、通信コントローラー３４を介して携帯端末２００から撮影時の位置および向きと共に表示用データーの要求を受け付けるための第１入力部３０１と、当該位置および向きを携帯端末２００の位置および向きとして携帯端末情報記憶部３３２に格納するための格納部３０２と、携帯端末２００の位置および向きと記憶されているＭＦＰの位置とから、携帯端末２００の撮影範囲に存在するＭＦＰを表示用データーの要求先として特定するための特定部３０６と、ネットワークコントローラー３５を介してＭＦＰ１００からタグデーターまたは画面データーの入力を受け付けるための第２入力部３０３と、その表示用データーを通信コントローラー３４を介して携帯端末２００に対して送信するための第１送信部３０４と、ネットワークコントローラー３５を介して特定されたＭＦＰ１００に対して携帯端末２００からの位置および向きを転送すると共に表示用データーを要求するための第２送信部３０５とを含む。
【００６２】
＜動作フロー＞
図１０は、サーバー３００での動作の流れの具体例を表わすフローチャートである。図１０のフローチャートに示される動作は、ＣＰＵ３０がＲＯＭ３１に記憶されるプログラムを読み出してＲＡＭ３２上で実行し、図９に示される各機能を発揮することによって実現される。
【００６３】
図１０を参照して、サーバー３００のＣＰＵ３０は、携帯端末２００から表示用データーの要求を受け付けると（ステップＳ１０１でＹＥＳ）、当該要求に含まれる携帯端末の位置および向きを保存する（ステップＳ１０３）。ここでは、タグデーターを要求する場合であって、その更新を要求する場合であっても、あるいはアシスト画面表示用の画面データーを要求する場合であっても、携帯端末２００から要求時の位置および向きが送信されるものとする。
【００６４】
ＣＰＵ３０は、携帯端末の位置および向きと、記憶しているＭＦＰの位置とを比較し、携帯端末の撮影範囲に存在するＭＦＰを特定する。その結果、撮影範囲内に存在するＭＦＰが特定された場合（ステップＳ１０５でＹＥＳ）、ＣＰＵ３０は当該ＭＦＰに対して表示用データーを要求する（ステップＳ１０７）。
【００６５】
当該要求に応じてＭＦＰ１００から送信された表示用データーを受信すると（ステップＳ１０９でＹＥＳ）、ステップＳ１１１でＣＰＵ３０は当該表示用データーを携帯端末２００に転送する。
【００６６】
なお、図１０では、携帯端末２００の撮影範囲にＭＦＰ１００が存在しない場合には以降の動作がスキップされるとしている。他の例として、当該撮影範囲に最も近いＭＦＰを抽出して、当該ＭＦＰに対して送信するようにしてもよい。この場合、画面データーを要求するようにしてもよい。
【００６７】
または、タグの更新が指示されている場合に、当該携帯端末２００の撮影範囲にＭＦＰ１００が存在しない場合には、タグデーターの要求に替えて画面データーをＭＦＰ１００に対して要求するようにしてもよい。このようにすることで、携帯端末２００での撮影範囲からＭＦＰ１００から外れた場合であっても、携帯端末２００では最も近いＭＦＰ１００に関するメンテナンスをアシストする表示が行なわれることになる。また、撮影画像にＭＦＰ１００が含まれなくなった場合にタグに替えてアニメーション等のアシスト画面が表示されることになる。
【００６８】
図１１は、携帯端末２００での動作の流れの具体例を表わすフローチャートである。図１１のフローチャートに示される動作は、ＣＰＵ２０がＲＯＭ２１に記憶されるプログラムを読み出してＲＡＭ２２上で実行し、図８に示される各機能を発揮することによって実現される。
【００６９】
図１１を参照して、携帯端末２００のＣＰＵ２０は、アシスト用のアプリケーションが起動した状態で操作パネル２５からの撮影指示を受け取ると（ステップＳ３０１でＹＥＳ）、ステップＳ３０３で撮影動作を実行すると共に、ステップＳ３０５でそのときの位置および向きをサーバー３００に対して送信することで、タグデーターを要求する。
【００７０】
当該要求に応じて送信されたタグデーターを受信すると（ステップＳ３０７でＹＥＳ）、ステップＳ３０９でＣＰＵ２０は、受信したタグデーターで表わされるタグを上記ステップＳ３０３の撮影で得られた撮影画像に合成した画面を操作パネル２５に表示する。
【００７１】
タグの更新の指示を受け付けると（ステップＳ３１１でＹＥＳ）、ＣＰＵ２０は動作を上記ステップＳ３０５に戻し、その時点での当該携帯端末２００の位置および向きをサーバー３００に対して送信することで、タグデーターの更新を要求する。
【００７２】
タグの表示からアシスト画面の表示へ切り替える指示を受け付けると（ステップＳ３１３でＹＥＳ）、ステップＳ３１５でＣＰＵ２０は、サーバー３００に対して画面データーを要求する。
【００７３】
当該要求に応じて送信された画面データーを受信すると（ステップＳ３１７でＹＥＳ）、ステップＳ３１９でＣＰＵ２０は、受信した画面データーを再生し、動画やアニメーション等のアシスト画面を操作パネル２５に表示する。
【００７４】
図１２は、ＭＦＰ１００での動作の流れを表わすフローチャートである。図１２のフローチャートに表わされる動作は、ＣＰＵ１０がＲＯＭ１１に記憶されるプログラムを読み出してＲＡＭ１２上で実行し、図７に示される各機能を発揮することによって実現される。
【００７５】
図１２を参照して、ＭＦＰ１００のＣＰＵ１０はサーバー３００からタグデーターの要求を受け取ると（ステップＳ５０１でＹＥＳ）、当該要求に含まれる携帯端末２００の位置および向きとメンテナンス対象の部品の位置とを比較して、当該メンテナンスの作業範囲内に携帯端末２００が存在するか否かを判断する。その結果、作業範囲内に携帯端末２００が存在し、作業方向に向いていると判断されると（ステップＳ５０３でＹＥＳ）、ステップＳ５０５でＣＰＵ１０は、当該メンテナンスのためのタグデーターをタグ情報に基づいて作成し、サーバー３００に対して送信する。このとき、ステップＳ５０１の要求がタグデーターの更新である場合には、先に送信したタグデーターの次のメンテナンス手順に応じたタグデーターを作成し、送信する。
【００７６】
一方、作業範囲内に携帯端末２００が存在していない場合や、存在していても作業方向を向いていないと判断された場合には（ステップＳ５０３でＮＯ）、ステップＳ５０３でこれらの位置を比較することで移動方向を特定し、その方向に移動を促すメッセージを表示するための表示用データーを作成して、サーバー３００に対して送信する。これは、予め記憶されているフォーマットに特定された移動方向を代入する、などの方法によって作成される。
【００７７】
または、この場合に、タグデーターに替えて、先に送信したタグデーターの画面データーをサーバー３００に対して送信するようにしてもよい。このとき、ＣＰＵ１０は、サーバー３００に対して最後に送信したタグデーターに表わされたメンテナンス手順上の位置を参照して、連続してメンテナンス内容を表示するメンテナンス用画面のうちの該当箇所を再生開始位置として特定する。そして、その位置から再生開始されるように画像情報に基づいて画面データーを生成し、サーバー３００に対して送信する。
【００７８】
サーバー３００から画面データーの要求を受け取ると（ステップＳ５０９でＹＥＳ）、ステップＳ５１１でＣＰＵ１０は、上記ステップＳ５０５で最後に送信したタグデーターに基づいて次のメンテナンス手順上の位置を特定し、画像情報の当該メンテナンス手順上の位置に対応した位置を再生開始位置と特定する。そしてステップＳ５１３でＣＰＵ１０は、その位置から再生が開始される画面データーを作成して、サーバー３００に対して送信する。
【００７９】
＜実施の形態の効果＞
本実施の形態にかかる画像形成システムでこのような動作が行なわれることで、携帯端末では、当該携帯端末を携帯するサービスマンのメンテナンスの進捗状況に応じてタグが撮影画像に重ねて表示されることになる。そのため、サービスマンは、自身の進捗状況に応じてタグを参照しながらメンテナンスすることが可能となり、効率よくメンテナンスすることができる。
【００８０】
たとえば、当該携帯端末を携帯するサービスマンが適切に作業位置にいない場合には、図１３に示されるように、作業位置に誘導するタグが撮影画像に重ねて表示される。
【００８１】
そして、メンテナンス作業を開始すると、図１４に示されるような、そのメンテナンス手順でのメンテナンス内容を表わしたタグが撮影画像に重ねて表示される。サービスマンはこのタグを参照して、タグに示される箇所のメンテナンス作業を行なうことで、当該メンテナンス手順の作業を行なうことができる。
【００８２】
そして、そのメンテナンス内容を遂行すると、たとえば図１４に表わされた「次へ」ボタンを押下するなどタグの更新を指示することで、図１５に示された、次のメンテナンス手順のメンテナンス内容を表わしたタグが撮影画像に重ねて表示される。図１５の画面でも同様に「次へ」ボタンを押下するなどタグの更新を指示することで、図１６に示された、次のメンテナンス手順のメンテナンス内容を表わしたタグが撮影画像に重ねて表示される。このように、サービスマンは自身のメンテナンスの進捗状況に応じてタグを更新することができ、効率的にメンテナンスを行なうことができる。
【００８３】
また、たとえば両手を使う場合など、携帯端末で撮影しながらメンテナンスを行なうことが難しい場合には、図１５や図１６に表わされた「アニメ切替」ボタンを押下するなどアニメーション等のアシスト画面への切替を指示することで、撮影画像にタグを合成した表示から、アニメーション等のアシスト画面へ画面が切り替わる。このとき、すでにタグでメンテナンス手順に沿ってメンテナンスを行なっている場合、その続きのメンテナンス手順から順にアシスト画面が再生されることになるので、効率的にメンテナンスを行なうことができる。
【００８４】
さらに、上述の動作をＭＦＰ１００や携帯端末２００やサーバー３００に実行させるためのプログラムを提供することもできる。このようなプログラムは、コンピュータに付属するフレキシブルディスク、ＣＤ−ＲＯＭ（Compact Disk-Read Only Memory）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）およびメモリカードなどのコンピュータ読み取り可能な記録媒体にて記録させて、プログラム製品として提供することもできる。あるいは、コンピュータに内蔵するハードディスクなどの記録媒体にて記録させて、プログラムを提供することもできる。また、ネットワークを介したダウンロードによって、プログラムを提供することもできる。
【００８５】
なお、本発明にかかるプログラムは、コンピュータのオペレーティングシステム（ＯＳ）の一部として提供されるプログラムモジュールのうち、必要なモジュールを所定の配列で所定のタイミングで呼出して処理を実行させるものであってもよい。その場合、プログラム自体には上記モジュールが含まれずＯＳと協働して処理が実行される。このようなモジュールを含まないプログラムも、本発明にかかるプログラムに含まれ得る。
【００８６】
また、本発明にかかるプログラムは他のプログラムの一部に組込まれて提供されるものであってもよい。その場合にも、プログラム自体には上記他のプログラムに含まれるモジュールが含まれず、他のプログラムと協働して処理が実行される。このような他のプログラムに組込まれたプログラムも、本発明にかかるプログラムに含まれ得る。
【００８７】
提供されるプログラム製品は、ハードディスクなどのプログラム格納部にインストールされて実行される。なお、プログラム製品は、プログラム自体と、プログラムが記録された記録媒体とを含む。
【００８８】
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
【符号の説明】
【００８９】
１０，２０，３０ ＣＰＵ、１１，２１，３１ ＲＯＭ、１２，２２，３２ ＲＡＭ、１３ スキャナー、１４ プリンター、１５，２５ 操作パネル、１６，２８ メモリー、１７，３５ ネットワークコントローラー、１８ センサー、２３ 電子コンパス、２４ ＧＰＳコントローラー、２６ カメラ、２７ コントローラー、３４ 通信コントローラー、１００ ＭＦＰ、１０１ 入力部、１０２ 判断部、１０３ タグデーター生成部、１０４，３０６ 特定部、１０５ 画面データー生成部、１０６，２０５ 送信部、１６１ 部品情報記憶部、１６２ メンテナンス情報記憶部、２００ 携帯端末、２０１ 指示入力部、２０２ 位置取得部、２０３ 向き取得部、２０４ 画像取得部、２０６ タグデーター入力部、２０７ 生成部、２０８ 表示処理部、２０９ 画面データー入力部、３００ サーバー、３０１ 第１入力部、３０２ 格納部、３０３ 第２入力部、３０４ 第１送信部、３０５ 第２送信部、３３１ ＭＦＰ情報記憶部、３３２ 携帯端末情報記憶部。
【技術分野】
【０００１】
この発明は画像処理システム、画像処理装置、および表示方法に関し、特に、画像処理装置のメンテナンスに関連した情報を処理する画像処理システム、画像処理装置、および表示方法に関する。
【背景技術】
【０００２】
オフィス環境などにおいて、コピー機、プリンター、これらの複合機であるＭＦＰ（Multi-Functional Peripherals）等の画像形成装置が広く用いられている。
【０００３】
これら画像形成装置のメンテナンスを容易にする方法として、たとえば特開２００２−１７６５７１号公報（特許文献１）の開示しているカメラの修理をアシストする方法を応用することもできる。上記特許文献１には、修理モードにしてカメラ内のＨＤＤを取り出して他の表示デバイスに接続すると、当該カメラのメンテナンス用のアニメーション画像が表示デバイスで再生される技術が開示されている。この技術を応用すると、たとえばサービスマンの携帯する携帯端末と画像形成装置とを通信することで、携帯端末に当該画像形成装置のメンテナンスをアシストするアニメーション画像を表示させることが考えられる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００２−１７６５７１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
このように上記特許文献１に開示された方法を応用することで、サービスマンは表示されたアニメーション画像等を参照してメンテナンスを遂行することができるものの、たとえば当該サービスマンのメンテナンススキルが低いなどの場合には、表示された画像に従ってメンテナンスを遂行することが難しい場合もある。つまり、この方法では実際に行なっているメンテナンスに応じてアシストするものではないため、実際に行なっているメンテナンスと表示されているコンテンツとが解離してしまうことになり得る。そのため、適切なメンテナンスがなされない場合もある、という問題が生じる。
【０００６】
本発明はこのような問題に鑑みてなされたものであって、メンテナンスを適切にアシストすることができる画像処理システム、画像処理装置、および表示方法を提供することを目的としている。
【課題を解決するための手段】
【０００７】
上記目的を達成するために、本発明のある局面に従うと、画像処理システムは、撮影手段、表示手段、および入力手段を含む携帯端末と、画像処理装置と、携帯端末および画像処理装置と相互に通信可能なサーバーとを備える。画像処理装置は、当該画像処理装置の位置情報を記憶するための第１の記憶手段と、当該画像処理装置のメンテナンス対象の部品の位置を記憶するための第２の記憶手段と、画像処理装置でのメンテナンスに関するコンテンツを生成するための生成手段と、コンテンツを携帯端末に送信するための送信手段と、コンテンツの携帯端末への送信を制御するための制御手段とを含む。コンテンツは、メンテナンスの手順ごとのメンテナンスの内容を表わす画像データーおよび当該メンテナンス対象の部品を特定する情報を含むものであって、携帯端末での撮影画像に合成される第１のコンテンツと、メンテナンスの手順に沿って連続して再生される第２のコンテンツとを含む。制御手段は、携帯端末からの指示入力に基づいてメンテナンスの手順上の位置を特定し、当該位置に応じた第１のコンテンツを画像処理装置に送信する処理と、携帯端末の位置および向きとメンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツを第１のコンテンツから第２のコンテンツに切り替えて第２のコンテンツを画像処理装置に送信する処理とを実行する。
【０００８】
好ましくは、制御手段は、第２のコンテンツを画像処理装置に送信する処理において、第１のコンテンツを画像処理装置に送信する処理において特定されたメンテナンスの手順上の位置に基づいて、第１のコンテンツから切り替えた第２のコンテンツの再生開始点を特定する処理を行ない、再生開始点から第２のコンテンツを画像処理装置に送信する。
【０００９】
好ましくは、サーバーは、画像処理装置の位置を記憶するための第１の記憶手段と、携帯端末の位置および向きを取得するための取得手段と、携帯端末での撮影時の位置および向きに応じて、携帯端末での撮影範囲に含まれる画像処理装置をコンテンツの送信対象と特定し、画像処理装置に対してコンテンツの送信を要求する処理を行なうための処理手段とを備える。
【００１０】
好ましくは、携帯端末は、自身の位置情報を取得するための位置情報取得手段を備える。
【００１１】
好ましくは、画像処理装置は、自身の位置情報を取得するための位置情報取得手段を備える。
【００１２】
好ましくは、制御手段は、携帯端末での撮影範囲にメンテナンス対象の部品が含まれていない場合に、メンテナンスに関する第１のコンテンツを第２のコンテンツに切り替えて携帯端末に送信する。
【００１３】
好ましくは、制御手段は、携帯端末での撮影範囲にメンテナンス対象の部品が含まれていない場合に、第１のコンテンツの送信に先立って位置の変更を促す画面データーを携帯端末に送信する。
【００１４】
本発明の他の局面に従うと、画像処理装置は、撮影手段、表示手段、および入力手段を含む携帯端末と通信可能な画像処理装置であって、当該画像処理装置の位置情報を記憶するための第１の記憶手段と、当該画像処理装置のメンテナンス対象の部品の位置を記憶するための第２の記憶手段と、画像処理装置でのメンテナンスに関するコンテンツを生成するための生成手段と、コンテンツを携帯端末に送信するための送信手段と、コンテンツの携帯端末への送信を制御するための制御手段とを含む。コンテンツは、メンテナンスの手順ごとのメンテナンスの内容を表わす画像データーおよび当該メンテナンス対象の部品を特定する情報を含むものであって、携帯端末での撮影画像に合成される第１のコンテンツと、メンテナンスの手順に沿って連続して再生される第２のコンテンツとを含む。制御手段は、携帯端末からの指示入力に基づいて送信対象とするメンテナンスの手順上の位置を特定し、当該位置に応じた第１のコンテンツを画像処理装置に送信する処理と、携帯端末の位置および向きとメンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツを第１のコンテンツから第２のコンテンツに切り替えて第２のコンテンツを画像処理装置に送信する処理とを実行する。
【００１５】
本発明のさらに他の局面に従うと、表示方法は画像処理装置のメンテナンスに関するコンテンツを撮影手段および表示手段を含む携帯端末に表示させる方法であって、コンテンツは、メンテナンスの手順ごとのメンテナンスの内容を表わす画像データーおよび当該メンテナンス対象の部品を特定する情報を含むものであって、携帯端末での撮影画像に合成される第１のコンテンツと、メンテナンスの手順に沿って連続して再生される第２のコンテンツとを含み、携帯端末での撮影時の位置および向きを、携帯端末から、携帯端末の撮影範囲に存在する画像処理装置に送信するステップと、画像処理装置において携帯端末からの指示入力に基づいてメンテナンスの手順上の位置を特定し、当該位置に応じた第１のコンテンツを画像処理装置に送信するステップと、記携帯端末において、第１のコンテンツを携帯端末での撮影画像に合成して表示するステップと、画像処理装置において、携帯端末の位置および向きとメンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツを第１のコンテンツから第２のコンテンツに切り替えて第２のコンテンツを画像処理装置に送信するステップと、携帯端末において、撮影画像に合成された第１のコンテンツの表示を切り替えて、第２のコンテンツの再生を開始するステップとを備える。
【００１６】
本発明のさらに他の局面に従うと、表示プログラムは画像処理装置のメンテナンスに関するコンテンツを撮影手段および表示手段を含む携帯端末に表示させる処理を画像処理装置に実行させるためのプログラムであって、コンテンツは、メンテナンスの手順ごとのメンテナンスの内容を表わす画像データーおよび当該メンテナンス対象の部品を特定する情報を含むものであって、携帯端末での撮影画像に合成される第１のコンテンツと、メンテナンスの手順に沿って連続して再生される第２のコンテンツとを含み、携帯端末での撮影時の位置および向きを携帯端末から受信すると、携帯端末からの指示入力に基づいてメンテナンスの手順上の位置を特定し、当該位置に応じた第１のコンテンツを画像処理装置に送信するステップと、携帯端末の位置および向きとメンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツを第１のコンテンツから第２のコンテンツに切り替えて第２のコンテンツを画像処理装置に送信するステップとを画像処理装置に実行させる。
【発明の効果】
【００１７】
この発明によると、メンテナンス作業に応じた表示がなされるため、適切にメンテナンス作業をアシストすることができる。
【図面の簡単な説明】
【００１８】
【図１】実施の形態にかかる画像処理システムの構成の具体例を示す図である。
【図２】画像処理システムに含まれるＭＦＰのハードウェア構成の具体例を示す図である。
【図３】画像処理システムに含まれる携帯端末のハードウェア構成の具体例を示す図である。
【図４】画像処理システムに含まれるサーバーのハードウェア構成の具体例を示す図である。
【図５】画像処理システムでの、情報の流れを表わした図である。
【図６】画像処理システムでの動作概要を表わした図である。
【図７】ＭＦＰの機能構成の具体例を示すブロック図である。
【図８】携帯端末の機能構成の具体例を示すブロック図である。
【図９】サーバーの機能構成の具体例を示すブロック図である。
【図１０】サーバーでの動作の流れの具体例を表わすフローチャートである。
【図１１】携帯端末での動作の流れの具体例を表わすフローチャートである。
【図１２】ＭＦＰでの動作の流れを表わすフローチャートである。
【図１３】表示画面の具体例を示す図である。
【図１４】表示画面の具体例を示す図である。
【図１５】表示画面の具体例を示す図である。
【図１６】表示画面の具体例を示す図である。
【発明を実施するための形態】
【００１９】
以下に、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品および構成要素には同一の符号を付してある。それらの名称および機能も同じである。
【００２０】
＜システム構成＞
図１は、本実施の形態にかかる画像処理システムの構成の具体例を示す図である。
【００２１】
図１を参照して、本実施の形態にかかる画像処理システムは、画像処理装置としての、ＭＦＰ（Multi-Functional Peripheral）１００Ａと、携帯端末２００と、サーバー３００とを含む。
【００２２】
画像処理装置はＭＦＰに限定されず、プリンターやファクシミリ送受信機やコピー機などのその他の装置であってもよい。ＭＦＰ１００は、これら機能を複合的に備えた画像処理装置である。
【００２３】
携帯端末２００は、たとえば携帯電話機などが該当し、少なくともカメラ機能と、指示入力機能と、通信機能とを備えていれば、他の装置であってもよい。
【００２４】
サーバー３００は、一般的なパーソナルコンピューターなどから構成されるものであればよい。
【００２５】
なお、以下の説明では、図１に示されたように、ＭＦＰ１００とは別にサーバー３００が含まれるものとしているが、サーバー３００がＭＦＰ１００に含まれ、ＭＦＰ１００がサーバーとして機能してもよい。
【００２６】
ＭＦＰ１００とサーバー３００とは互いに通信可能であり、情報をやり取りする。ＭＦＰ１００とサーバー３００との通信は、有線、無線を問わず、いずれの通信形態であってもよい。本実施の形態にかかる画像処理システムはオフィス環境で用いられることが想定されるため、一例として、有線、または無線のＬＡＮ（Local Area Network）にＭＦＰ１００とサーバー３００とが接続され、該ネットワークを介して情報をやり取りする通信形態が挙げられる。
【００２７】
携帯端末２００とサーバー３００とも互いに通信可能であり、情報をやり取りする。携帯端末２００とサーバー３００との通信は、無線通信であればどのような通信形態であってもよい。以降の例では電話回線を利用した無線通信であるものとするが、その他、赤外線通信や近距離無線通信などであってもよいし、無線のＬＡＮに携帯端末２００とサーバー３００とが接続されている場合には該ネットワークを介して情報をやり取りする通信形態も挙げられる。
【００２８】
なお、以降の説明において、ＭＦＰ１００とサーバー３００とはＬＡＮを介した通信、および携帯端末２００とサーバー３００とは電話回線を利用した無線通信を行なうものと、すなわちこれらは異なる通信形態であるものとするが、たとえばすべてＬＡＮを介した通信など、同じ通信形態であってもよい。
【００２９】
＜装置構成＞
図２は、ＭＦＰ１００のハードウェア構成の具体例を示す図である。
【００３０】
図２を参照して、ＭＦＰ１００は、全体を制御するための演算装置であるＣＰＵ（Central Processing Unit）１０と、ＣＰＵ１０で実行されるプログラムなどを記憶するためのＲＯＭ（Read Only Memory）１１と、ＣＰＵ１０でプログラムを実行する際の作業領域として機能するためのＲＡＭ（Random Access Memory）１２と、図示しない原稿台に載置された原稿を光学的に読み取って画像データーを得るためのスキャナー１３と、画像データーを印刷用紙上に固定するためのプリンター１４と、情報を表示したり当該ＭＦＰ１００に対する操作入力を受け付けたりするためのタッチパネルを含んだ操作パネル１５と、画像データーを保存するためのメモリー１６と、ＬＡＮを介した通信の制御するためのネットワークコントローラー１７と、ＭＦＰ１００の状態を検出するためのセンサー１８とを含む。
【００３１】
操作パネル１５は、図示しないタッチパネルと操作キー群とを含む。タッチパネルは、液晶表示装置などの表示装置と光学式タッチパネルや静電容量タッチパネルなどの位置指示装置とが重なって構成され、操作画面を表示して、その操作画面上の指示位置を特定する。ＣＰＵ１０は予め記憶されている画面表示をさせるためのデーターに基づいてタッチパネルに操作画面を表示させる。
【００３２】
センサー１８としては、たとえば、トナー量残量を検出するためのセンサーや、各部のジャム（紙詰まり）や温度異常や動作異常等を検出するためのセンサーや、各部品の装着の有無を検知するためのセンサーなどが該当する。
【００３３】
メモリー１６には、さらに、メンテナンス対象となる部品ごとの情報である部品情報と、メンテナンスに関する情報であるメンテナンス情報と、当該ＭＦＰ１００の設置された位置を表わす情報（位置情報）とが記憶されている。当該ＭＦＰ１００の設置された位置は、当該ＭＦＰ１００が図示しない位置検出機能を有する場合には当該機能によって取得されるものであってもよいし、操作パネル１５から入力されるものであってもよい。部品ごとの位置は、予め入力されているものであってもよいし、当該部品が装着された際等にセンサー１８によって検知されて登録されるものであってもよい。ここで、ＭＦＰ１００の設置された位置は、一例として緯度経度などの絶対位置で登録されるものであってよく、部品ごとの位置は、たとえば操作パネル１５の１つの角を原点とするなど、規定位置を原点として原点からの座標で登録されるものであってよい。原点の絶対位置が特定されることで、部品ごとの絶対位置も特定される。
【００３４】
メンテナンス情報は、後述するタグを表示させるためのデーターであるタグデーターを生成するために用いられるタグ情報と、動画やアニメーション等でメンテナンス手順に沿ってメンテナンス内容を連続して画面表示させるため画面データーを生成するために用いられる画像情報とを含む。
【００３５】
タグ情報は、メンテナンスごとに、メンテナンスの手順と、当該手順におけるメンテナンス内容と、そのメンテナンス内容の対象とする部品とを表わす情報を指す。メンテナンス内容は、後述するタグとして表示される画像でメンテナンスをアシストするために表示される内容であって、後述されるように、ＭＦＰ１００の撮影画像に対して当該その内容を表わす画像（タグ）が付加して表示されるものである。
【００３６】
図３は、携帯端末２００のハードウェア構成の具体例を示す図である。
図３を参照して、携帯端末２００は、全体を制御するための演算装置であるＣＰＵ２０と、ＣＰＵ２０で実行されるプログラムなどを記憶するためのＲＯＭ２１と、ＣＰＵ２０でプログラムを実行する際の作業領域として機能するためのＲＡＭ２２と、磁気センサーを含んで当該携帯端末２００の向きを検出するための電子コンパス２３と、ＧＰＳ（Global Positioning System）信号または基地局からの位置信号を受信して当該携帯端末の位置情報を取得するためのＧＰＳコントローラー２４と、情報を表示したり当該携帯端末２００に対する操作入力を受け付けたりするためのタッチパネルを含んだ操作パネル２５と、カメラ２６と、図示しない基地局と通信することによる電話回線を介した通信を制御するためのコントローラー２７と、電話帳データーなどを記憶するためメモリー２８とを含む。
【００３７】
操作パネル２５は、ＭＦＰ１００の操作パネル１５と同様の構成であってよい。すなわち、一例として、液晶表示装置などの表示装置と光学式タッチパネルや静電容量タッチパネルなどの位置指示装置とが重なって構成されたタッチパネルと、操作キーとを含む。
【００３８】
ＣＰＵ２００は予め記憶されている画面表示をさせるためのデーターに基づいてタッチパネルに操作画面を表示させる。タッチパネルでは操作画面上の指示位置が特定され、その位置を示す操作信号がＣＰＵ２０に入力される。また、押下されたキーを示す操作信号がＣＰＵ２０に入力される。ＣＰＵ２０は押下されたキー、または表示している操作画面と指示位置とから操作内容を特定し、それに基づいて処理を実行する。
【００３９】
また、電子コンパス２３およびＧＰＳコントローラー２４は、取得した当該携帯端末２００の向きや位置情報を示す信号をＣＰＵ２０に入力する。
【００４０】
図４は、サーバー３００のハードウェア構成の具体例を示す図である。
図４を参照して、サーバー３００は上述のように一般的なコンピュータ等によって構成されるものであり、一例として、全体を制御するための演算装置であるＣＰＵ３０と、ＣＰＵ３０で実行されるプログラムなどを記憶するためのＲＯＭ３１と、ＣＰＵ３０でプログラムを実行する際の作業領域として機能するためのＲＡＭ３２と、ＭＦＰ情報などを記憶するためのＨＤ（Hard Disk）３３と、電話回線を介した通信を制御するための通信コントローラー３４と、ＬＡＮを介した通信の制御するためのネットワークコントローラー３５とを含む。
【００４１】
ＨＤ３３には、ＭＦＰ１００に関する情報として、ＭＦＰ１００の位置情報が記憶されている。この位置情報は、予め入力されることで記憶されているものでもよいし、ＭＦＰ１００から送信されて記憶されてもよい。
【００４２】
＜動作概要＞
図５は、本実施の形態にかかる画像処理システムでの、情報の流れを表わした図である。
【００４３】
図５を参照して、携帯端末２００は、カメラ２６で撮影した際の位置および向きを表わす情報をサーバー３００に対して送信する。また、表示を更新する指示や、タグからアニメーション等のメンテナンス用画面に表示を切り替える指示をサーバー３００に対して送信する。サーバー３００は、携帯端末２００からの要求に応じて表示用データーをＭＦＰ１００に対して要求する。
【００４４】
ＭＦＰ１００は、サーバー３００からの要求に応じて表示用データーを生成し、当該表示用データーをサーバー３００に対して送信する。サーバー３００は受け取った表示用データーを携帯端末２００に転送する。
【００４５】
携帯端末２００では、表示用データーがタグを表示するためのデーターである場合には、表示用データーで表わされる画像であるタグを撮影画像に合成して表示する。表示用データーがアニメーション等のメンテナンス用画面を表示するためのデーターである場合には、当該表示用データーで表わされるメンテナンス用画面を表示する。
【００４６】
図６は、本実施の形態にかかる画像処理システムでの動作概要を表わした図である。
図６を参照して、携帯端末においてメンテナンス用のアプリケーションが起動され（ステップＳ１１）、撮影指示に従ってカメラ２６で撮影されると（ステップＳ１２）、撮影時の位置および向きを表わす情報がサーバーに送信されて、それによってタグデーターがサーバーに対して要求される（ステップＳ１３）。
【００４７】
サーバーは、受信した携帯端末の位置および向きを表わす情報を保存する（ステップＳ３１）。そして、記憶しているＭＦＰの位置情報から、携帯端末の撮影範囲に存在しているＭＦＰを特定し（ステップＳ３２）、当該ＭＦＰに対して携帯端末の位置および向きを表わす情報を送信することで、対応するタグデーターを要求する（ステップＳ３３）。
【００４８】
ＭＦＰは、対象のメンテナンスに関するメンテナンス情報のうちのタグ情報を読み出して、タグデーターを生成する（ステップＳ５１）。ここでは、メンテナンス手順に沿って順に表示するためのタグの、表示順に従って、最初のタグデーターから順に生成し、サーバーに送信する（ステップＳ５２）。サーバーは、受信したタグデーターを携帯端末に転送する（ステップＳ３４）。
【００４９】
携帯端末は、撮影画像にタグデーターに基づくタグを重ねて表示する（ステップＳ１４）。タグが表示された画面には、次のメンテナンス手順のためのタグの表示へ更新するための、たとえば「次へ」ボタンなどが表示されている。そして、そのボタンなどによって更新指示を受け付けると（ステップＳ１５）、上記ステップＳ１３からの動作に戻る。タグ表示の更新指示がある度に上記ステップＳ１３からの動作が繰り返されることになり、メンテナンス手順に沿って更新指示に従ってタグが順に撮影画像に重ねて表示されることになる。
【００５０】
ここで、携帯端末には、タグ表示からアニメーション等のメンテナンス用画面へ表示の切り替えを指示するための手段が設けられているものとする。この手段は、たとえばタグが表示された画面に設けられた切替ボタンであってもよいし、図示しないキーなどであってもよい。
【００５１】
タグ表示からアニメーション等のメンテナンス用画面へ表示を切り替える指示を受け付けると（ステップＳ１６）、携帯端末はサーバーに対してメンテナンス用画面を表示するための画面データーを要求する（ステップＳ１７）。サーバーはＭＦＰに対して当該要求を転送する（ステップＳ３５）。
【００５２】
ＭＦＰはこの要求を受け付けると、タグデーターの送信から画面データーの送信へと切り替える切替処理を実行する（ステップＳ５３）。ここでは、具体的には、サーバーに対して最後に送信したタグデーターに表わされたメンテナンス手順を参照して、連続してメンテナンス内容を表示するメンテナンス用画面のうちの該当箇所を再生開始位置として特定する。そして、その位置から再生開始されるように画像情報に基づいて画面データーを生成し、サーバーに対して送信する（ステップＳ５４）。サーバーは受信した画面データーを携帯端末に対して転送する（ステップＳ３６）。
【００５３】
携帯端末では、受信した画面データーを再生する（ステップＳ１８）。これによって、最終に表示されたタグで表わされたメンテナンス手順の次の手順からのメンテナンス内容が画面データーで連続して順に再生されることになる。
【００５４】
＜機能構成＞
図７は、上述の動作を実現するためのＭＦＰ１００の機能構成の具体例を示すブロック図である。図７に示される各機能は、ＣＰＵ１０がＲＯＭ１１に記憶されるプログラムを読み出してＲＡＭ１２上で実行することで、主にＣＰＵ１０に形成される機能である。しかしながら、少なくとも一部の機能が図２に示されたハードウェア構成によって形成されてもよい。
【００５５】
図７を参照して、メモリー１６には、部品ごとの情報である部品情報を記憶するための部品情報記憶部１６１と、メンテナンスに関する情報であるメンテナンス情報を記憶するためのメンテナンス情報記憶部１６２とが含まれる。
【００５６】
さらに図７を参照して、ＭＦＰ１００は、ネットワークコントローラー１７を介してサーバーからデーターの要求を受け付けるための入力部１０１と、当該要求がタグデーターの要求であった場合に、当該要求と共に送信された携帯端末の位置および向きが、メンテナンス対象の部品に向かう位置であるか否かを判断するための判断部１０２と、その判断に応じて、タグ情報を参照してタグデーターを生成するためのタグデーター生成部１０３と、上記要求がメンテナンス画面データーの要求であった場合に再生開始位置を特定するための特定部１０４と、画像情報を参照して再生開始位置から画面データーを生成するための画面データー生成部１０５と、ネットワークコントローラー１７を介してデーターをサーバーに対して送信するための送信部１０６とを含む。
【００５７】
図８は、上述の動作を実現するための携帯端末２００の機能構成の具体例を示すブロック図である。図８に示される各機能は、ＣＰＵ２０がＲＯＭ２１に記憶されるプログラムを読み出してＲＡＭ２２上で実行することで、主にＣＰＵ２０に形成される機能である。しかしながら、少なくとも一部の機能が図３に示されたハードウェア構成によって形成されてもよい。
【００５８】
図８を参照して、上記動作を実現するための機能として携帯端末２００は、操作パネル２５からの指示入力を受け付けるための指示入力部２０１と、操作パネル２５からの撮影指示に応じてＧＰＳコントローラー２４から得られた信号より当該携帯端末２００の位置を取得するための位置取得部２０２と、操作パネル２５からの撮影指示に応じて電子コンパス２３から得られた信号より当該携帯端末２００の向きを取得するための向き取得部２０３と、操作パネル２５からの撮影指示に応じてカメラ２６による撮影を実行して撮影された画像データーを取得するための画像取得部２０４と、操作パネル２５からの撮影指示に応じて取得された位置および向きを表わす情報をコントローラー２７を介してサーバー３００に対して送信するための送信部２０５と、サーバー３００から送信されたタグデーターの入力をコントローラー２７を介して受け付けるためのタグデーター入力部２０６と、撮影して得られた画像データーにタグデーターに基づいたタグを合成して表示用データーを生成するための生成部２０７と、サーバー３００から送信された画面データーの入力をコントローラー２７を介して受け付けるための画面データー入力部２０９と、表示用データーまたは画面データーに基づいた画面を操作パネル２５に表示する処理を実行するための表示処理部２０８とを含む。さらに、送信部２０５は、操作パネル２５からのタグを更新する指示や、タグの表示をメンテナンス用画面に切り替える指示に応じた要求を、コントローラー２７を介してサーバーに対して送信する。なお、位置取得部２０２および向き取得部２０３は、それぞれ上記指示がなされたときの当該携帯端末の位置および向きを取得し、送信部２０５が上記要求と共に送信するようにしてもよい。
【００５９】
図９は、サーバー３００の機能構成の具体例を示すブロック図である。図９に示される各機能は、ＣＰＵ３０がＲＯＭ３１に記憶されるプログラムを読み出してＲＡＭ３２上で実行することで、主にＣＰＵ３０に形成される機能である。しかしながら、少なくとも一部の機能が図４に示されたハードウェア構成によって形成されてもよい。
【００６０】
図９を参照して、ＨＤ３３には、ＭＦＰの位置を記憶するための記憶領域であるＭＦＰ情報記憶部３３１と、携帯端末２００から送信された当該携帯端末２００の位置および向きを記憶するための記憶領域である携帯端末情報記憶部３３２とが含まれる。その他、ＭＦＰから送信されたタグデーターや画面データーを記憶するための記憶領域が含まれてもよい。
【００６１】
さらに図９を参照して、上記動作を実現するための機能としてサーバー３００は、通信コントローラー３４を介して携帯端末２００から撮影時の位置および向きと共に表示用データーの要求を受け付けるための第１入力部３０１と、当該位置および向きを携帯端末２００の位置および向きとして携帯端末情報記憶部３３２に格納するための格納部３０２と、携帯端末２００の位置および向きと記憶されているＭＦＰの位置とから、携帯端末２００の撮影範囲に存在するＭＦＰを表示用データーの要求先として特定するための特定部３０６と、ネットワークコントローラー３５を介してＭＦＰ１００からタグデーターまたは画面データーの入力を受け付けるための第２入力部３０３と、その表示用データーを通信コントローラー３４を介して携帯端末２００に対して送信するための第１送信部３０４と、ネットワークコントローラー３５を介して特定されたＭＦＰ１００に対して携帯端末２００からの位置および向きを転送すると共に表示用データーを要求するための第２送信部３０５とを含む。
【００６２】
＜動作フロー＞
図１０は、サーバー３００での動作の流れの具体例を表わすフローチャートである。図１０のフローチャートに示される動作は、ＣＰＵ３０がＲＯＭ３１に記憶されるプログラムを読み出してＲＡＭ３２上で実行し、図９に示される各機能を発揮することによって実現される。
【００６３】
図１０を参照して、サーバー３００のＣＰＵ３０は、携帯端末２００から表示用データーの要求を受け付けると（ステップＳ１０１でＹＥＳ）、当該要求に含まれる携帯端末の位置および向きを保存する（ステップＳ１０３）。ここでは、タグデーターを要求する場合であって、その更新を要求する場合であっても、あるいはアシスト画面表示用の画面データーを要求する場合であっても、携帯端末２００から要求時の位置および向きが送信されるものとする。
【００６４】
ＣＰＵ３０は、携帯端末の位置および向きと、記憶しているＭＦＰの位置とを比較し、携帯端末の撮影範囲に存在するＭＦＰを特定する。その結果、撮影範囲内に存在するＭＦＰが特定された場合（ステップＳ１０５でＹＥＳ）、ＣＰＵ３０は当該ＭＦＰに対して表示用データーを要求する（ステップＳ１０７）。
【００６５】
当該要求に応じてＭＦＰ１００から送信された表示用データーを受信すると（ステップＳ１０９でＹＥＳ）、ステップＳ１１１でＣＰＵ３０は当該表示用データーを携帯端末２００に転送する。
【００６６】
なお、図１０では、携帯端末２００の撮影範囲にＭＦＰ１００が存在しない場合には以降の動作がスキップされるとしている。他の例として、当該撮影範囲に最も近いＭＦＰを抽出して、当該ＭＦＰに対して送信するようにしてもよい。この場合、画面データーを要求するようにしてもよい。
【００６７】
または、タグの更新が指示されている場合に、当該携帯端末２００の撮影範囲にＭＦＰ１００が存在しない場合には、タグデーターの要求に替えて画面データーをＭＦＰ１００に対して要求するようにしてもよい。このようにすることで、携帯端末２００での撮影範囲からＭＦＰ１００から外れた場合であっても、携帯端末２００では最も近いＭＦＰ１００に関するメンテナンスをアシストする表示が行なわれることになる。また、撮影画像にＭＦＰ１００が含まれなくなった場合にタグに替えてアニメーション等のアシスト画面が表示されることになる。
【００６８】
図１１は、携帯端末２００での動作の流れの具体例を表わすフローチャートである。図１１のフローチャートに示される動作は、ＣＰＵ２０がＲＯＭ２１に記憶されるプログラムを読み出してＲＡＭ２２上で実行し、図８に示される各機能を発揮することによって実現される。
【００６９】
図１１を参照して、携帯端末２００のＣＰＵ２０は、アシスト用のアプリケーションが起動した状態で操作パネル２５からの撮影指示を受け取ると（ステップＳ３０１でＹＥＳ）、ステップＳ３０３で撮影動作を実行すると共に、ステップＳ３０５でそのときの位置および向きをサーバー３００に対して送信することで、タグデーターを要求する。
【００７０】
当該要求に応じて送信されたタグデーターを受信すると（ステップＳ３０７でＹＥＳ）、ステップＳ３０９でＣＰＵ２０は、受信したタグデーターで表わされるタグを上記ステップＳ３０３の撮影で得られた撮影画像に合成した画面を操作パネル２５に表示する。
【００７１】
タグの更新の指示を受け付けると（ステップＳ３１１でＹＥＳ）、ＣＰＵ２０は動作を上記ステップＳ３０５に戻し、その時点での当該携帯端末２００の位置および向きをサーバー３００に対して送信することで、タグデーターの更新を要求する。
【００７２】
タグの表示からアシスト画面の表示へ切り替える指示を受け付けると（ステップＳ３１３でＹＥＳ）、ステップＳ３１５でＣＰＵ２０は、サーバー３００に対して画面データーを要求する。
【００７３】
当該要求に応じて送信された画面データーを受信すると（ステップＳ３１７でＹＥＳ）、ステップＳ３１９でＣＰＵ２０は、受信した画面データーを再生し、動画やアニメーション等のアシスト画面を操作パネル２５に表示する。
【００７４】
図１２は、ＭＦＰ１００での動作の流れを表わすフローチャートである。図１２のフローチャートに表わされる動作は、ＣＰＵ１０がＲＯＭ１１に記憶されるプログラムを読み出してＲＡＭ１２上で実行し、図７に示される各機能を発揮することによって実現される。
【００７５】
図１２を参照して、ＭＦＰ１００のＣＰＵ１０はサーバー３００からタグデーターの要求を受け取ると（ステップＳ５０１でＹＥＳ）、当該要求に含まれる携帯端末２００の位置および向きとメンテナンス対象の部品の位置とを比較して、当該メンテナンスの作業範囲内に携帯端末２００が存在するか否かを判断する。その結果、作業範囲内に携帯端末２００が存在し、作業方向に向いていると判断されると（ステップＳ５０３でＹＥＳ）、ステップＳ５０５でＣＰＵ１０は、当該メンテナンスのためのタグデーターをタグ情報に基づいて作成し、サーバー３００に対して送信する。このとき、ステップＳ５０１の要求がタグデーターの更新である場合には、先に送信したタグデーターの次のメンテナンス手順に応じたタグデーターを作成し、送信する。
【００７６】
一方、作業範囲内に携帯端末２００が存在していない場合や、存在していても作業方向を向いていないと判断された場合には（ステップＳ５０３でＮＯ）、ステップＳ５０３でこれらの位置を比較することで移動方向を特定し、その方向に移動を促すメッセージを表示するための表示用データーを作成して、サーバー３００に対して送信する。これは、予め記憶されているフォーマットに特定された移動方向を代入する、などの方法によって作成される。
【００７７】
または、この場合に、タグデーターに替えて、先に送信したタグデーターの画面データーをサーバー３００に対して送信するようにしてもよい。このとき、ＣＰＵ１０は、サーバー３００に対して最後に送信したタグデーターに表わされたメンテナンス手順上の位置を参照して、連続してメンテナンス内容を表示するメンテナンス用画面のうちの該当箇所を再生開始位置として特定する。そして、その位置から再生開始されるように画像情報に基づいて画面データーを生成し、サーバー３００に対して送信する。
【００７８】
サーバー３００から画面データーの要求を受け取ると（ステップＳ５０９でＹＥＳ）、ステップＳ５１１でＣＰＵ１０は、上記ステップＳ５０５で最後に送信したタグデーターに基づいて次のメンテナンス手順上の位置を特定し、画像情報の当該メンテナンス手順上の位置に対応した位置を再生開始位置と特定する。そしてステップＳ５１３でＣＰＵ１０は、その位置から再生が開始される画面データーを作成して、サーバー３００に対して送信する。
【００７９】
＜実施の形態の効果＞
本実施の形態にかかる画像形成システムでこのような動作が行なわれることで、携帯端末では、当該携帯端末を携帯するサービスマンのメンテナンスの進捗状況に応じてタグが撮影画像に重ねて表示されることになる。そのため、サービスマンは、自身の進捗状況に応じてタグを参照しながらメンテナンスすることが可能となり、効率よくメンテナンスすることができる。
【００８０】
たとえば、当該携帯端末を携帯するサービスマンが適切に作業位置にいない場合には、図１３に示されるように、作業位置に誘導するタグが撮影画像に重ねて表示される。
【００８１】
そして、メンテナンス作業を開始すると、図１４に示されるような、そのメンテナンス手順でのメンテナンス内容を表わしたタグが撮影画像に重ねて表示される。サービスマンはこのタグを参照して、タグに示される箇所のメンテナンス作業を行なうことで、当該メンテナンス手順の作業を行なうことができる。
【００８２】
そして、そのメンテナンス内容を遂行すると、たとえば図１４に表わされた「次へ」ボタンを押下するなどタグの更新を指示することで、図１５に示された、次のメンテナンス手順のメンテナンス内容を表わしたタグが撮影画像に重ねて表示される。図１５の画面でも同様に「次へ」ボタンを押下するなどタグの更新を指示することで、図１６に示された、次のメンテナンス手順のメンテナンス内容を表わしたタグが撮影画像に重ねて表示される。このように、サービスマンは自身のメンテナンスの進捗状況に応じてタグを更新することができ、効率的にメンテナンスを行なうことができる。
【００８３】
また、たとえば両手を使う場合など、携帯端末で撮影しながらメンテナンスを行なうことが難しい場合には、図１５や図１６に表わされた「アニメ切替」ボタンを押下するなどアニメーション等のアシスト画面への切替を指示することで、撮影画像にタグを合成した表示から、アニメーション等のアシスト画面へ画面が切り替わる。このとき、すでにタグでメンテナンス手順に沿ってメンテナンスを行なっている場合、その続きのメンテナンス手順から順にアシスト画面が再生されることになるので、効率的にメンテナンスを行なうことができる。
【００８４】
さらに、上述の動作をＭＦＰ１００や携帯端末２００やサーバー３００に実行させるためのプログラムを提供することもできる。このようなプログラムは、コンピュータに付属するフレキシブルディスク、ＣＤ−ＲＯＭ（Compact Disk-Read Only Memory）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）およびメモリカードなどのコンピュータ読み取り可能な記録媒体にて記録させて、プログラム製品として提供することもできる。あるいは、コンピュータに内蔵するハードディスクなどの記録媒体にて記録させて、プログラムを提供することもできる。また、ネットワークを介したダウンロードによって、プログラムを提供することもできる。
【００８５】
なお、本発明にかかるプログラムは、コンピュータのオペレーティングシステム（ＯＳ）の一部として提供されるプログラムモジュールのうち、必要なモジュールを所定の配列で所定のタイミングで呼出して処理を実行させるものであってもよい。その場合、プログラム自体には上記モジュールが含まれずＯＳと協働して処理が実行される。このようなモジュールを含まないプログラムも、本発明にかかるプログラムに含まれ得る。
【００８６】
また、本発明にかかるプログラムは他のプログラムの一部に組込まれて提供されるものであってもよい。その場合にも、プログラム自体には上記他のプログラムに含まれるモジュールが含まれず、他のプログラムと協働して処理が実行される。このような他のプログラムに組込まれたプログラムも、本発明にかかるプログラムに含まれ得る。
【００８７】
提供されるプログラム製品は、ハードディスクなどのプログラム格納部にインストールされて実行される。なお、プログラム製品は、プログラム自体と、プログラムが記録された記録媒体とを含む。
【００８８】
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
【符号の説明】
【００８９】
１０，２０，３０ ＣＰＵ、１１，２１，３１ ＲＯＭ、１２，２２，３２ ＲＡＭ、１３ スキャナー、１４ プリンター、１５，２５ 操作パネル、１６，２８ メモリー、１７，３５ ネットワークコントローラー、１８ センサー、２３ 電子コンパス、２４ ＧＰＳコントローラー、２６ カメラ、２７ コントローラー、３４ 通信コントローラー、１００ ＭＦＰ、１０１ 入力部、１０２ 判断部、１０３ タグデーター生成部、１０４，３０６ 特定部、１０５ 画面データー生成部、１０６，２０５ 送信部、１６１ 部品情報記憶部、１６２ メンテナンス情報記憶部、２００ 携帯端末、２０１ 指示入力部、２０２ 位置取得部、２０３ 向き取得部、２０４ 画像取得部、２０６ タグデーター入力部、２０７ 生成部、２０８ 表示処理部、２０９ 画面データー入力部、３００ サーバー、３０１ 第１入力部、３０２ 格納部、３０３ 第２入力部、３０４ 第１送信部、３０５ 第２送信部、３３１ ＭＦＰ情報記憶部、３３２ 携帯端末情報記憶部。
【特許請求の範囲】
【請求項１】
撮影手段、表示手段、および入力手段を含む携帯端末と、
画像処理装置と、
前記携帯端末および前記画像処理装置と相互に通信可能なサーバーとを備え、
前記画像処理装置は、
当該画像処理装置の位置情報を記憶するための第１の記憶手段と、
当該画像処理装置のメンテナンス対象の部品の位置を記憶するための第２の記憶手段と、
前記画像処理装置でのメンテナンスに関するコンテンツを生成するための生成手段と、
前記コンテンツを前記携帯端末に送信するための送信手段と、
前記コンテンツの前記携帯端末への送信を制御するための制御手段とを含み、
前記コンテンツは、前記メンテナンスの手順ごとのメンテナンスの内容を表わす画像データーおよび当該メンテナンス対象の部品を特定する情報を含むものであって、前記携帯端末での撮影画像に合成される第１のコンテンツと、前記メンテナンスの手順に沿って連続して再生される第２のコンテンツとを含み、
前記制御手段は、
前記携帯端末からの指示入力に基づいてメンテナンスの手順上の位置を特定し、当該位置に応じた第１のコンテンツを前記画像処理装置に送信する処理と、
前記携帯端末の位置および向きと前記メンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツを前記第１のコンテンツから前記第２のコンテンツに切り替えて前記第２のコンテンツを前記画像処理装置に送信する処理とを実行する、画像処理システム。
【請求項２】
前記制御手段は、前記第２のコンテンツを前記画像処理装置に送信する処理において、前記第１のコンテンツを前記画像処理装置に送信する処理において特定されたメンテナンスの手順上の位置に基づいて、前記第１のコンテンツから切り替えた前記第２のコンテンツの再生開始点を特定する処理を行ない、前記再生開始点から前記第２のコンテンツを前記画像処理装置に送信する、請求項１に記載の画像処理システム。
【請求項３】
前記サーバーは、
前記画像処理装置の位置を記憶するための第１の記憶手段と、
前記携帯端末の位置および向きを取得するための取得手段と、
前記携帯端末での撮影時の位置および向きに応じて、前記携帯端末での撮影範囲に含まれる前記画像処理装置を前記コンテンツの送信対象と特定し、前記画像処理装置に対して前記コンテンツの送信を要求する処理を行なうための処理手段とを備える、請求項１または２に記載の画像処理システム。
【請求項４】
前記携帯端末は、自身の位置情報を取得するための位置情報取得手段を備える、請求項１〜３のいずれかに記載の画像処理システム。
【請求項５】
前記画像処理装置は、自身の位置情報を取得するための位置情報取得手段を備える、請求項１〜４のいずれかに記載の画像処理システム。
【請求項６】
前記制御手段は、前記携帯端末での撮影範囲に前記メンテナンス対象の部品が含まれていない場合に、前記メンテナンスに関する前記第１のコンテンツを前記第２のコンテンツに切り替えて前記携帯端末に送信する、請求項１〜５のいずれかに記載の画像処理システム。
【請求項７】
前記制御手段は、前記携帯端末での撮影範囲に前記メンテナンス対象の部品が含まれていない場合に、前記第１のコンテンツの送信に先立って位置の変更を促す画面データーを前記携帯端末に送信する、請求項１〜５のいずれかに記載の画像処理システム。
【請求項８】
撮影手段、表示手段、および入力手段を含む携帯端末と通信可能な画像処理装置であって、
当該画像処理装置の位置情報を記憶するための第１の記憶手段と、
当該画像処理装置のメンテナンス対象の部品の位置を記憶するための第２の記憶手段と、
前記画像処理装置でのメンテナンスに関するコンテンツを生成するための生成手段と、
前記コンテンツを前記携帯端末に送信するための送信手段と、
前記コンテンツの前記携帯端末への送信を制御するための制御手段とを含み、
前記コンテンツは、前記メンテナンスの手順ごとのメンテナンスの内容を表わす画像データーおよび当該メンテナンス対象の部品を特定する情報を含むものであって、前記携帯端末での撮影画像に合成される第１のコンテンツと、前記メンテナンスの手順に沿って連続して再生される第２のコンテンツとを含み、
前記制御手段は、
前記携帯端末からの指示入力に基づいて送信対象とするメンテナンスの手順上の位置を特定し、当該位置に応じた第１のコンテンツを前記画像処理装置に送信する処理と、
前記携帯端末の位置および向きと前記メンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツを前記第１のコンテンツから前記第２のコンテンツに切り替えて前記第２のコンテンツを前記画像処理装置に送信する処理とを実行する、画像処理装置。
【請求項９】
画像処理装置のメンテナンスに関するコンテンツを、撮影手段および表示手段を含む携帯端末に表示させる方法であって、
前記コンテンツは、メンテナンスの手順ごとのメンテナンスの内容を表わす画像データーおよび当該メンテナンス対象の部品を特定する情報を含むものであって、前記携帯端末での撮影画像に合成される第１のコンテンツと、前記メンテナンスの手順に沿って連続して再生される第２のコンテンツとを含み、
前記携帯端末での撮影時の位置および向きを、前記携帯端末から、前記携帯端末の撮影範囲に存在する前記画像処理に送信するステップと、
前記画像処理装置において前記携帯端末からの指示入力に基づいてメンテナンスの手順上の位置を特定し、当該位置に応じた第１のコンテンツを前記画像処理装置に送信するステップと、
前記携帯端末において、前記第１のコンテンツを前記携帯端末での撮影画像に合成して表示するステップと、
前記画像処理装置において、前記携帯端末の位置および向きと前記メンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツを前記第１のコンテンツから前記第２のコンテンツに切り替えて前記第２のコンテンツを前記画像処理装置に送信するステップと、
前記携帯端末において、前記撮影画像に合成された前記第１のコンテンツの表示を切り替えて、前記第２のコンテンツの再生を開始するステップとを備える、表示方法。
【請求項１０】
画像処理装置のメンテナンスに関するコンテンツを、撮影手段および表示手段を含む携帯端末に表示させる処理を前記画像処理装置に実行させるためのプログラムであって、
前記コンテンツは、メンテナンスの手順ごとのメンテナンスの内容を表わす画像データーおよび当該メンテナンス対象の部品を特定する情報を含むものであって、前記携帯端末での撮影画像に合成される第１のコンテンツと、前記メンテナンスの手順に沿って連続して再生される第２のコンテンツとを含み、
前記携帯端末での撮影時の位置および向きを前記携帯端末から受信すると、前記携帯端末からの指示入力に基づいてメンテナンスの手順上の位置を特定し、当該位置に応じた第１のコンテンツを前記画像処理装置に送信するステップと、
前記携帯端末の位置および向きと前記メンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツを前記第１のコンテンツから前記第２のコンテンツに切り替えて前記第２のコンテンツを前記画像処理装置に送信するステップとを前記画像処理装置に実行させる、表示プログラム。
【請求項１】
撮影手段、表示手段、および入力手段を含む携帯端末と、
画像処理装置と、
前記携帯端末および前記画像処理装置と相互に通信可能なサーバーとを備え、
前記画像処理装置は、
当該画像処理装置の位置情報を記憶するための第１の記憶手段と、
当該画像処理装置のメンテナンス対象の部品の位置を記憶するための第２の記憶手段と、
前記画像処理装置でのメンテナンスに関するコンテンツを生成するための生成手段と、
前記コンテンツを前記携帯端末に送信するための送信手段と、
前記コンテンツの前記携帯端末への送信を制御するための制御手段とを含み、
前記コンテンツは、前記メンテナンスの手順ごとのメンテナンスの内容を表わす画像データーおよび当該メンテナンス対象の部品を特定する情報を含むものであって、前記携帯端末での撮影画像に合成される第１のコンテンツと、前記メンテナンスの手順に沿って連続して再生される第２のコンテンツとを含み、
前記制御手段は、
前記携帯端末からの指示入力に基づいてメンテナンスの手順上の位置を特定し、当該位置に応じた第１のコンテンツを前記画像処理装置に送信する処理と、
前記携帯端末の位置および向きと前記メンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツを前記第１のコンテンツから前記第２のコンテンツに切り替えて前記第２のコンテンツを前記画像処理装置に送信する処理とを実行する、画像処理システム。
【請求項２】
前記制御手段は、前記第２のコンテンツを前記画像処理装置に送信する処理において、前記第１のコンテンツを前記画像処理装置に送信する処理において特定されたメンテナンスの手順上の位置に基づいて、前記第１のコンテンツから切り替えた前記第２のコンテンツの再生開始点を特定する処理を行ない、前記再生開始点から前記第２のコンテンツを前記画像処理装置に送信する、請求項１に記載の画像処理システム。
【請求項３】
前記サーバーは、
前記画像処理装置の位置を記憶するための第１の記憶手段と、
前記携帯端末の位置および向きを取得するための取得手段と、
前記携帯端末での撮影時の位置および向きに応じて、前記携帯端末での撮影範囲に含まれる前記画像処理装置を前記コンテンツの送信対象と特定し、前記画像処理装置に対して前記コンテンツの送信を要求する処理を行なうための処理手段とを備える、請求項１または２に記載の画像処理システム。
【請求項４】
前記携帯端末は、自身の位置情報を取得するための位置情報取得手段を備える、請求項１〜３のいずれかに記載の画像処理システム。
【請求項５】
前記画像処理装置は、自身の位置情報を取得するための位置情報取得手段を備える、請求項１〜４のいずれかに記載の画像処理システム。
【請求項６】
前記制御手段は、前記携帯端末での撮影範囲に前記メンテナンス対象の部品が含まれていない場合に、前記メンテナンスに関する前記第１のコンテンツを前記第２のコンテンツに切り替えて前記携帯端末に送信する、請求項１〜５のいずれかに記載の画像処理システム。
【請求項７】
前記制御手段は、前記携帯端末での撮影範囲に前記メンテナンス対象の部品が含まれていない場合に、前記第１のコンテンツの送信に先立って位置の変更を促す画面データーを前記携帯端末に送信する、請求項１〜５のいずれかに記載の画像処理システム。
【請求項８】
撮影手段、表示手段、および入力手段を含む携帯端末と通信可能な画像処理装置であって、
当該画像処理装置の位置情報を記憶するための第１の記憶手段と、
当該画像処理装置のメンテナンス対象の部品の位置を記憶するための第２の記憶手段と、
前記画像処理装置でのメンテナンスに関するコンテンツを生成するための生成手段と、
前記コンテンツを前記携帯端末に送信するための送信手段と、
前記コンテンツの前記携帯端末への送信を制御するための制御手段とを含み、
前記コンテンツは、前記メンテナンスの手順ごとのメンテナンスの内容を表わす画像データーおよび当該メンテナンス対象の部品を特定する情報を含むものであって、前記携帯端末での撮影画像に合成される第１のコンテンツと、前記メンテナンスの手順に沿って連続して再生される第２のコンテンツとを含み、
前記制御手段は、
前記携帯端末からの指示入力に基づいて送信対象とするメンテナンスの手順上の位置を特定し、当該位置に応じた第１のコンテンツを前記画像処理装置に送信する処理と、
前記携帯端末の位置および向きと前記メンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツを前記第１のコンテンツから前記第２のコンテンツに切り替えて前記第２のコンテンツを前記画像処理装置に送信する処理とを実行する、画像処理装置。
【請求項９】
画像処理装置のメンテナンスに関するコンテンツを、撮影手段および表示手段を含む携帯端末に表示させる方法であって、
前記コンテンツは、メンテナンスの手順ごとのメンテナンスの内容を表わす画像データーおよび当該メンテナンス対象の部品を特定する情報を含むものであって、前記携帯端末での撮影画像に合成される第１のコンテンツと、前記メンテナンスの手順に沿って連続して再生される第２のコンテンツとを含み、
前記携帯端末での撮影時の位置および向きを、前記携帯端末から、前記携帯端末の撮影範囲に存在する前記画像処理に送信するステップと、
前記画像処理装置において前記携帯端末からの指示入力に基づいてメンテナンスの手順上の位置を特定し、当該位置に応じた第１のコンテンツを前記画像処理装置に送信するステップと、
前記携帯端末において、前記第１のコンテンツを前記携帯端末での撮影画像に合成して表示するステップと、
前記画像処理装置において、前記携帯端末の位置および向きと前記メンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツを前記第１のコンテンツから前記第２のコンテンツに切り替えて前記第２のコンテンツを前記画像処理装置に送信するステップと、
前記携帯端末において、前記撮影画像に合成された前記第１のコンテンツの表示を切り替えて、前記第２のコンテンツの再生を開始するステップとを備える、表示方法。
【請求項１０】
画像処理装置のメンテナンスに関するコンテンツを、撮影手段および表示手段を含む携帯端末に表示させる処理を前記画像処理装置に実行させるためのプログラムであって、
前記コンテンツは、メンテナンスの手順ごとのメンテナンスの内容を表わす画像データーおよび当該メンテナンス対象の部品を特定する情報を含むものであって、前記携帯端末での撮影画像に合成される第１のコンテンツと、前記メンテナンスの手順に沿って連続して再生される第２のコンテンツとを含み、
前記携帯端末での撮影時の位置および向きを前記携帯端末から受信すると、前記携帯端末からの指示入力に基づいてメンテナンスの手順上の位置を特定し、当該位置に応じた第１のコンテンツを前記画像処理装置に送信するステップと、
前記携帯端末の位置および向きと前記メンテナンス対象の部品との位置関係に応じて、送信対象のコンテンツを前記第１のコンテンツから前記第２のコンテンツに切り替えて前記第２のコンテンツを前記画像処理装置に送信するステップとを前記画像処理装置に実行させる、表示プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【公開番号】特開２０１３−４６３７９（Ｐ２０１３−４６３７９Ａ）
【公開日】平成２５年３月４日（２０１３．３．４）
【国際特許分類】
【出願番号】特願２０１１−１８５０４６（Ｐ２０１１−１８５０４６）
【出願日】平成２３年８月２６日（２０１１．８．２６）
【出願人】（３０３０００３７２）コニカミノルタビジネステクノロジーズ株式会社 (12,802)
【Ｆターム（参考）】
【公開日】平成２５年３月４日（２０１３．３．４）
【国際特許分類】
【出願日】平成２３年８月２６日（２０１１．８．２６）
【出願人】（３０３０００３７２）コニカミノルタビジネステクノロジーズ株式会社 (12,802)
【Ｆターム（参考）】
[ Back to top ]