操作情報提供システム、携帯端末及び制御プログラム
【課題】操作対象装置の状態に対応した操作情報を適切に提供する。
【解決手段】操作情報提供システム１０は、撮像画像と複数のモデル画像とを比較することによって、撮像画像に最も近似した最近似モデル画像を特定する特定手段と、最近似モデル画像に対応する操作情報を表示させるように表示部９４ｃを制御する表示制御手段とを備え、特定手段は、複数のモデル画像から、撮像画像に撮像されている第１マーク及び第２マークと同じ種類の第１マーク及び第２マークを含むモデル画像のみを選択する第１選択処理実行手段と、第１選択処理で選択されたモデル画像から、第１マークと第２マークとの相対位置関係が撮像画像に撮像されている第１マークと第２マークとの相対位置関係と最も近似するモデル画像を選択する第２選択処理実行手段とを含み、第２選択処理実行手段にて選択されたモデル画像を最近似モデル画像として特定する。
【解決手段】操作情報提供システム１０は、撮像画像と複数のモデル画像とを比較することによって、撮像画像に最も近似した最近似モデル画像を特定する特定手段と、最近似モデル画像に対応する操作情報を表示させるように表示部９４ｃを制御する表示制御手段とを備え、特定手段は、複数のモデル画像から、撮像画像に撮像されている第１マーク及び第２マークと同じ種類の第１マーク及び第２マークを含むモデル画像のみを選択する第１選択処理実行手段と、第１選択処理で選択されたモデル画像から、第１マークと第２マークとの相対位置関係が撮像画像に撮像されている第１マークと第２マークとの相対位置関係と最も近似するモデル画像を選択する第２選択処理実行手段とを含み、第２選択処理実行手段にて選択されたモデル画像を最近似モデル画像として特定する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、操作対象装置の不具合発生時やメンテナンス時に必要な操作に関する情報をユーザに提供する、操作情報提供システム、携帯端末及び制御プログラムに関する。
【背景技術】
【０００２】
プリンタ等の印刷装置で紙詰まり等の不具合が発生した場合、ユーザは、印刷装置の状態を把握し、その状態に応じた適切な操作を行う必要がある。このような場合、従来では、ユーザが、印刷装置の表示部に表示された操作情報を見ながら必要な操作を行っていたが、表示部と操作対象部分とは離れているのが通常であるため、当該操作の作業性が悪いという問題があった。
特許文献１に記載された先行技術は、携帯電話で撮像した被写体画像とプリンタの記憶部に予め記憶したモデル画像とを比較し、モデル画像に被写体画像と同一又は近似の画像が含まれている場合に、そのモデル画像の示すパーツに関する情報を被写体画像に関する情報として携帯電話の表示部に表示させるものである。この先行技術によれば、携帯電話の表示部を被写体の近傍に配置することができるので、ユーザは、表示部を見ながら被写体（プリンタ）を速やかに操作することができる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−６６９６７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、この先行技術では、被写体に関する一般的なパーツ情報を表示させていたに過ぎないので、被写体の状態に応じて取るべき操作が異なる場合には、ユーザは、被写体の状態に対応した操作情報を容易に知ることができなかった。
【０００５】
本発明は、操作対象装置の状態に応じて取るべき操作が異なる場合でも、その状態に対応した操作情報を適切に提供することができる、操作情報提供システム、携帯端末及び制御プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明に係る操作情報提供システムは、操作対象装置の操作方法に関する操作情報を提供する操作情報提供システムであって、前記操作対象装置の第１部分に形成された少なくとも１つの第１マークと、前記操作対象装置の第２部分に形成された少なくとも１つの第２マークと、情報表示手段と前記操作対象装置を撮像する撮像手段とを有する撮像装置と、前記操作対象装置に関する画像であって前記第１マークと前記第２マークとがそれぞれ１つ以上画像内に含まれている複数のモデル画像と、前記複数のモデル画像のそれぞれに対応して用意された複数の操作情報とを記憶する記憶手段と、前記撮像装置で撮像された撮像画像と、前記記憶手段に記憶された前記複数のモデル画像とを比較することによって、前記撮像画像に最も近似した最近似モデル画像を特定する特定手段と、前記特定手段にて特定された前記最近似モデル画像に対応する前記操作情報を表示させるように前記情報表示手段を制御する表示制御手段とを備え、前記特定手段は、前記複数のモデル画像から、前記撮像画像に撮像されている第１マーク及び第２マークと同じ種類の第１マーク及び第２マークを含むモデル画像のみを選択する第１選択処理を実行する第１選択処理実行手段と、前記第１選択処理で選択されたモデル画像から、第１マークと第２マークとの相対位置関係が前記撮像画像に撮像されている第１マークと第２マークとの相対位置関係と最も近似するモデル画像を選択する第２選択処理を実行する第２選択処理実行手段とを含み、前記第２選択処理実行手段にて選択されたモデル画像を前記最近似モデル画像として特定することを特徴とする。
【０００７】
この構成では、第１マークと第２マークとの相対的な位置関係により現在の操作対象装置の状態に最も近い状態のモデル画像を選択し、当該状態に対応する操作情報を撮像装置に表示させるようにしているので、第１部分又は第２部分の状態が、これらの相対的な位置関係が変化したり、第１部分に別部材が積載されたりすることで変わる場合でも、現在の操作対象装置の状態に対応した操作情報を適切に提供することができる。
【０００８】
上記課題を解決するために、本発明に係る携帯端末は、上記のいずれかの操作情報提供システムにおける少なくとも撮像装置として機能する。
【０００９】
上記課題を解決するために、本発明に係る制御プログラムは、上記のいずれかの操作情報提供システムにおける少なくとも特定手段としてコンピュータを機能させる。
【発明の効果】
【００１０】
本発明によれば、上記の構成によって、操作対象装置の状態に応じて取るべき操作が異なる場合でも、その状態に対応した操作情報を適切に提供することができる。
【図面の簡単な説明】
【００１１】
【図１】実施形態に係る操作情報提供システムが適用される多機能装置（操作対象装置）の構成を示す斜視図である。
【図２】多機能装置の構成を示す側面図である。
【図３】多機能装置におけるプリンタ部の概略構成を示す側面図である。
【図４】多機能装置におけるプリンタ部の概略構成を示す平面図である。
【図５】実施形態に係る操作情報提供システムを示す概念図である。
【図６】図６（Ａ）は携帯端末の要部構成を示すブロック図であり、図６（Ｂ）は画像処理サーバの要部構成を示すブロック図である。
【図７】携帯端末における端末制御部の制御動作を示すフロー図である。
【図８】画像処理サーバにおけるサーバ制御部の制御動作を示すフロー図である。
【図９】キャリッジの周辺部における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図９（Ａ）は第１マークがキャリッジで被覆されたときの撮像画像を示す図であり、図９（Ｂ）はキャリッジの操作に関する操作情報が表示された撮像画像を示す図である。
【図１０】キャリッジの周辺部における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図１０（Ａ）はキャリッジの操作を完了した後の撮像画像を示す図であり、図１０（Ｂ）は用紙の除去に関する操作情報が表示された撮像画像を示す図である。
【図１１】図１１（Ａ）〜（Ｃ）は、図９（Ａ）及び図１０（Ａ）のそれぞれの撮像画像に対応する３つのモデル画像及び操作情報を示す図である。
【図１２】搬送路における紙詰まり処理に関する撮像画像を示す図であり、図１２（Ａ）は紙詰まりが無いときの撮像画像を示す図であり、図１２（Ｂ）は一部の第１マークが紙詰まりした用紙で被覆されたときの撮像画像を示す図である。
【図１３】図１３（Ａ）〜（Ｃ）は、図１２（Ｂ）の撮像画像に対応する３つのモデル画像を示す図である。
【図１４】搬送方向変換部における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図１４（Ａ）は第１マークが紙詰まりした用紙で被覆されたときの撮像画像を示す図であり、図１４（Ｂ）は操作情報が表示された撮像画像を示す図である。
【図１５】インクカートリッジの操作に関する撮像画像及び操作情報を示す図であり、図１５（Ａ）は第１マークがユーザの手指で被覆されたときの撮像画像を示す図であり、図１５（Ｂ）は操作情報が表示された撮像画像を示す図である。
【図１６】ガイド部の操作に関する撮像画像及び操作情報を示す図であり、図１６（Ａ）は第１マークが露出したときの撮像画像を示す図であり、図１６（Ｂ）は操作情報が表示された撮像画像を示す図である。
【図１７】回動部分を撮像した撮像画像を示す図である。
【図１８】図１８（Ａ）〜（Ｃ）は、図１７の撮像画像に対応する３つのモデル画像を示す図である。
【発明を実施するための形態】
【００１２】
以下に、本発明に係る操作情報提供システム、携帯端末及び制御プログラムの好ましい実施形態について、図面を参照しながら説明する。
【００１３】
［多機能装置の構成］
図５に示す本実施形態の操作情報提供システム１０は、図１及び図２に示す多機能装置１２（操作対象装置）の操作情報を提供するものである。多機能装置１２は、印刷機能、スキャナ機能、コピー機能及びファクシミリ機能を併有する複合機であり、印刷機能、コピー機能及びファクシミリ機能を発揮する際に、インク吐出ヘッド４６から用紙Ｐに対してインクが吐出される。つまり、本実施形態の多機能装置１２では、画像が記録される「記録媒体」として用紙Ｐが用いられ、「液体」としてインクが用いられる。また、「印刷ヘッド」又は「液体吐出ヘッド」としてインク吐出ヘッド４６が用いられ、「記録媒体搬送手段」として用紙搬送機構３８が用いられる。
【００１４】
図１及び図２に示すように、多機能装置１２は、筐体１４と、プリンタ部１６と、スキャナ部１８と、各種の制御動作を実行する制御部２０と、各種の情報を入力又は出力（表示）する操作パネル２２とを有している。
【００１５】
図２に示すように、筐体１４は、各種の機器を収容する収容空間を構成する箱状の部材である。図１に示すように、筐体１４の前面１４ａには、第１開口部２４と第２開口部２６とが幅方向に並べて設けられており、第２開口部２６には、蓋体２８が開閉自在に取り付けられている。また、図２に示すように、筐体１４の後面１４ｂには、点検窓３０が設けられており、点検窓３０には、蓋体３２が開閉自在に取り付けられている。そして、筐体１４の内部に、プリンタ部１６及び制御部２０が設けられており、筐体１４の上部に、枢軸部（図示省略）を介してスキャナ部１８が回動自在に設けられている。
【００１６】
図３に示すように、プリンタ部１６は、筐体１４の内部の底部に配置された給紙トレイ３４と、筐体１４の内部における給紙トレイ３４の上方に配置された画像形成部３６と、給紙トレイ３４に収容された用紙Ｐを画像形成部３６に搬送する用紙搬送機構３８と、用紙Ｐの搬送方向における画像形成部３６の下流側であって、かつ、給紙トレイ３４の上方に配置された箱状（又は板状）の排紙トレイ４０とを有している。また、図４に示すように、プリンタ部１６は、複数色（本実施形態では４色）のインクのそれぞれを貯留する「液体カートリッジ」としての複数（本実施形態では４つ）のインクカートリッジ４２ａ〜４２ｄと、インクカートリッジ４２ａ〜４２ｄを着脱自在に保持するカートリッジ保持部４４とを有している。
【００１７】
図３に示すように、給紙トレイ３４は、複数の用紙Ｐを積層させた状態で収容する容器であり、図１に示すように、第１開口部２４から筐体１４の内部に着脱自在に挿し込まれている。
【００１８】
図４に示すように、画像形成部３６は、用紙Ｐ（図３）の表面に画像を形成する部分であり、インクを吐出する複数のノズル（図示省略）が設けられたノズル面４６ａ（図３）を有するインク吐出ヘッド４６と、インク吐出ヘッド４６を保持するキャリッジ４８と、キャリッジ４８を用紙Ｐの搬送方向に対して直交する方向に往復移動させる駆動部５０とを有している。駆動部５０は、キャリッジ４８をガイドする２つのガイドレール５２ａ，５２ｂと、一方のガイドレール５２ａの上面に互いに離間して設けられた一対のプーリ５４ａ，５４ｂと、一対のプーリ５４ａ，５４ｂ間に掛け渡されたタイミングベルト５６と、一方のプーリ５４ａに回転力を付与する駆動モータ５８とを有しており、タイミングベルト５６に対してキャリッジ４８が固定されている。
【００１９】
そして、インク吐出ヘッド４６のインク流路（図示省略）と、インクカートリッジ４２ａ〜４２ｄのそれぞれとがインクチューブ６０ａ〜６０ｄを介して連通されており、インク吐出ヘッド４６のアクチュエータ（図示省略）と制御部２０（図２）とが、フレキシブル配線基板（図示省略）を介して電気的に接続されている。さらに、駆動モータ５８と制御部２０（図２）とが電気配線（図示省略）を介して電気的に接続されている。
【００２０】
図３に示すように、用紙搬送機構３８は、インク吐出ヘッド４６のノズル面４６ａと対向する印刷領域Ｑに向けて用紙Ｐを搬送する搬送路Ｒと、搬送路Ｒの上流側端部に近接して設けられ、給紙トレイ３４に収容された用紙Ｐを搬送路Ｒに供給する給紙ローラ６４と、給紙トレイ３４に収容された用紙Ｐを１枚ずつ分離する分離傾斜板６６とを有している。また、用紙搬送機構３８は、印刷領域Ｑに配置されたプラテン６８と、印刷領域Ｑの上流側に設けられ、所定のタイミングで用紙Ｐを印刷領域Ｑに送り出す一対の駆動ローラ７０ａ及び押さえローラ７０ｂと、印刷領域Ｑの下流側に設けられ、用紙Ｐを排紙トレイ４０に排出する一対の排紙ローラ７２ａ及び押さえローラ７２ｂとを有している。搬送路Ｒは、用紙Ｐを略Ｕ字状に曲げながら搬送して当該用紙Ｐの搬送方向を変換する搬送方向変換部７４を有しており、搬送方向変換部７４より上流側では、用紙Ｐが前方から後方に向けて搬送され、搬送方向変換部７４より下流側では、用紙Ｐが後方から前方に向けて搬送されるようになっている。なお、本実施形態の説明では、図２に示された多機能装置１２の左側を「前」とし、右側を「後」とする。
【００２１】
図３に示すように、用紙搬送機構３８では、用紙Ｐが印刷領域Ｑを通過するときや、用紙Ｐが搬送路Ｒの水平な部分（以下、「水平部」という。）Ｔを移動するときや、用紙Ｐが搬送方向変換部７４を通過するときに紙詰まりが生じる恐れがある。そして、図２に示すように、印刷領域Ｑ及び水平部Ｔで詰まった用紙Ｐについては、スキャナ部１８を持ち上げたときに開かれる開口部７６からこれを除去することができ、搬送方向変換部７４で詰まった用紙Ｐについては、点検窓３０からこれを除去することができる。本実施形態に係る操作情報提供システム１０（図５）は、これらの紙詰まりを生じた用紙Ｐを除去する際に、操作に関する必要な情報をユーザに対して提供することができる。
【００２２】
図１に示すように、インクカートリッジ４２ａ〜４２ｄ及びカートリッジ保持部４４は、第２開口部２６の奥側に位置する筐体１４の下部に配置されており、カートリッジ保持部４４（図４）は、インクカートリッジ４２ａ〜４２ｄが装着されたときに、インクカートリッジ４２ａ〜４２ｄに係合される係止部（図示省略）を有している。当該係止部は、インクカートリッジ４２ａ〜４２ｄの上面を押し下げることによって係止状態が解除されるように構成されており、係止状態が解除された後は、インクカートリッジ４２ａ〜４２ｄを手前に引くことで、これらを第２開口部２６から引き出すことができる。本実施形態に係る操作情報提供システム１０（図５）は、カートリッジ保持部４４からインクカートリッジ４２ａ〜４２ｄを取り外す際に、操作に関する必要な情報をユーザに対して提供することができる。
【００２３】
図１及び図２に示すように、スキャナ部１８は、画像を読み取る画像読み取り部８０と、画像読み取り部８０に原稿Ｗを自動供給する自動供給装置８２とを有している。画像読み取り部８０は、原稿Ｗが載置される原稿台８０ａ（図２）と、原稿台８０ａを覆うカバー８０ｂと、原稿台８０ａに載置された原稿Ｗ、或いは、自動供給装置８２から自動供給された原稿Ｗから画像を読み取るイメージセンサ（図示省略）とを有している。また、図１に示すように、スキャナ部１８は、原稿Ｗのサイズに応じて位置調整可能に構成され、自動供給装置８２に供給される原稿Ｗの供給方向に対して直交する方向の端部に沿って配置される一対のガイド部８４を有している。一対のガイド部８４のそれぞれは、原稿Ｗの端部をガイドするガイド壁８４ａと、ガイド壁８４ａにおける内側の面の下部に設けられ、原稿Ｗの端部を受ける板状の原稿受け部８４ｂと、ガイド壁８４ａにおける内側の面の上下方向中央部に設けられ、画像読み取り部８０から排出された原稿Ｗを受ける板状の原稿排出部８４ｃとを有している。
【００２４】
図１に示すように、自動供給装置８２を用いて画像読み取り部８０（図２）に原稿Ｗを自動供給する際には、一対のガイド部８４間の間隔を調整して、ガイド壁８４ａを原稿Ｗの端部に沿うように位置決めし、カバー８０ｂの上面における一対のガイド部８４間に原稿Ｗを載置する。このとき、ガイド壁８４ａが原稿Ｗの端部から離間して配置されていると、ガイド部８４のガイド機能が損なわれ、原稿Ｗが斜行して画像読み取り部８０に供給される恐れがある。本実施形態に係る操作情報提供システム１０（図５）は、一対のガイド部８４間の間隔を適正に調整する際に、操作に関する必要な情報をユーザに対して提供することができる。
【００２５】
［操作情報提供システムの構成］
図５は、実施形態に係る操作情報提供システム１０を示す概念図である。図６は、携帯端末９４及び画像処理サーバ９８の要部構成を示すブロック図である。図７は、携帯端末９４における端末制御部９４ｄの制御動作を示すフロー図であり、図８は、画像処理サーバ９８におけるサーバ制御部９８ｃの制御動作を示すフロー図である。
【００２６】
操作情報提供システム１０は、「操作対象装置」としての多機能装置１２の操作方法に関する操作情報を提供するシステムであり、多機能装置１２の複数の操作対象部分の「第１部分」に形成された少なくとも１つの第１マーク９０１，９０２，９０３，９０４，９０５，９０６（図９〜図１８参照）と、当該複数の操作対象部分の「第２部分」に形成された少なくとも１つの第２マーク９２１，９２２，９２３，９２４，９２５，９２６（図９〜図１８参照）と、「撮像装置」としての携帯端末９４と、インターネット、ＬＡＮ、無線回線及び電話回線等のような通信回線９６と、画像処理サーバ９８と、通信回線９６と携帯端末９４との間の無線通信を行う無線通信装置９７とを備えている。第１マーク９０１，９０２，９０３，９０４，９０５，９０６のそれぞれは、互いに異なる種類として区別できるように形成されており、例えば、色及び形状の少なくとも一方が互いに異なるように形成されている。また、第２マーク９２１，９２２，９２３，９２４，９２５，９２６のそれぞれは、互いに異なる種類として区別できるように形成されており、例えば、色及び形状の少なくとも一方が互いに異なるように形成されている。
【００２７】
なお、以下の説明において、複数の第１マーク９０１を互いに区別する場合には、第１マーク９０１ａ，９０１ｂ，９０１ｃ…のように表示し、複数の第２マーク９２１を互いに区別する場合には、第２マーク９２１ａ，９２１ｂ，９２１ｃ…のように表示する。他の種類の第１マーク９０２〜９０６及び第２マーク９２２〜９２６についても同様に表示する。
【００２８】
図５及び図６（Ａ）に示すように、携帯端末９４は撮像部９４ａ、通信部９４ｂ、表示部９４ｃ、端末制御部９４ｄを有している。撮像部９４ａは被写体を撮像する機能を有し、多機能装置１２を撮像する「撮像手段」として機能する。具体的には、既知の携帯端末のカメラ部などが撮像部９４ａに該当する。通信部９４ｂは各種の情報（操作情報を含む。）を画像処理サーバ９８との間で無線通信装置９７及び通信回線９６を介してやり取りするものである。具体的には、既知の無線ＬＡＮ用通信インターフェース装置や赤外線通信用の外部出力用通信インターフェース装置などが通信部９４ｂに該当する。表示部９４ｃは多機能装置１２の撮像画像及び多機能装置１２の操作方法に関する操作情報を表示する「情報表示手段」として機能するものである。具体的には、既知の携帯端末におけるディスプレイ装置などが表示部９４ｃに該当する。端末制御部９４ｄは撮像部９４ａ、通信部９４ｂ、表示部９４ｃの制御動作を実行するものである。端末制御部９４ｄは、１又は複数のコンピュータからなり、各コンピュータはＣＰＵ（Central Processing Unit）、ＣＰＵが実行するプログラムやプログラムで使用されるデータを書き替え可能に記憶するＲＯＭ（Read Only Memory）、ＣＰＵがプログラムを実行する際にデータを一時的に記憶するＲＡＭ、及びこれらを接続する内部経路等を備えている（これらについて図示省略）。ＣＰＵが実行するプログラムは、フレキシブルディスク、ＣＤ−ＲＯＭ、メモリカード等の各種記憶媒体に記憶されており、これらの記憶媒体からＲＯＭにインストールされる。そして、このプログラムがＣＰＵで実行されることにより、端末制御部９４ｄの機能が実現される。さらに、端末制御部９４ｄは、表示部９４ｃの動作を制御する「表示制御手段」としての表示制御部９４ｅを有している。
【００２９】
図５及び図６（Ｂ）に示すように、画像処理サーバ９８は、「記憶手段」としての記憶部９８ａと、通信部９８ｂと、サーバ制御部９８ｃとを有している。記憶部９８ａは、複数の操作対象部分のそれぞれに対応する複数のモデル画像と、複数のモデル画像のそれぞれに対応して用意された複数の操作情報とを記憶するものである。つまり、記憶部９８ａには、全ての操作対象部分に関する複数のモデル画像及び複数の操作情報が記憶されている。記憶部９８ａに記憶された複数のモデル画像のそれぞれには、第１マーク９０１〜９０６のいずれかと第２マーク９２１〜９２６のいずれかとが含まれている。通信部９８ｂは、各種の情報（操作情報を含む。）を携帯端末９４との間で通信回線９６及び無線通信装置９７を介してやり取りするものである。具体的には、既知の外部出力用の通信インターフェース装置などが通信部９８ｂに該当する。サーバ制御部９８ｃは、通信部９８ｂの制御動作を実行する機能を有している。また、サーバ制御部９８ｃは、特定部９８ｄ（特定手段に相当）を有しており、この特定部９８ｄは、「撮像装置」としての携帯端末９４で撮像された撮像画像と、「記憶手段」としての記憶部９８ａに記憶された複数のモデル画像とを比較することによって、撮像画像に最も近似した最近似モデル画像を特定する機能を有している。
【００３０】
サーバ制御部９８ｃは、１又は複数のコンピュータからなり、各コンピュータはＣＰＵ（Central Processing Unit）、ＣＰＵが実行するプログラムやプログラムで使用されるデータを書き替え可能に記憶するＲＯＭ（Read Only Memory）、ＣＰＵがプログラムを実行する際にデータを一時的に記憶するＲＡＭ、及びこれらを接続する内部経路等を備えている（これらについて図示省略）。ＣＰＵが実行するプログラムは、フレキシブルディスク、ＣＤ−ＲＯＭ、メモリカード等の各種記憶媒体に記憶されており、これらの記憶媒体からＲＯＭにインストールされる。そして、このプログラムがＣＰＵで実行されることにより、サーバ制御部９８ｃの各機能が実現される。サーバ制御部９８ｃの特定部９８ｄは、さらに第１選択処理実行部９８ｅ及び第２選択処理実行部９８ｆを有している。これらの機能については後述する。
【００３１】
無線通信装置９７は、画像処理サーバ９８のサーバ制御部９８ｃから発信されたデータを、通信回線９６を介して受信するとともに、当該データを無線通信により携帯端末９４に送信し、かつ、携帯端末９４から発信されたデータを、無線通信により受信するとともに、当該データを通信回線９６を介してサーバ制御部９８ｃに送信する機能を有している。具体的には、既知の無線ＬＡＮ用通信インターフェース装置や赤外線通信用の外部出力用通信インターフェース装置などが無線通信装置９７に該当する。
【００３２】
本実施形態に係る操作情報提供システム１０は、複数の操作対象部分のそれぞれについて、必要な操作情報を提供することができるように構成されており、複数の操作対象部分のそれぞれには、異なる種類の第１マーク９０１〜９０６と、異なる種類の第２マーク９２１〜９２６とが形成されている。そこで、以下には、操作対象部分のそれぞれで必要となる操作ごとに操作情報提供システム１０の動作を説明する。
【００３３】
（キャリッジの周辺部における紙詰まり処理１）
図９は、キャリッジ４８の周辺部における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図９（Ａ）は第１マーク９０１ｅがキャリッジ４８で被覆されたときの撮像画像Ｘ１を示す図であり、図９（Ｂ）はキャリッジ４８の操作に関する操作情報１０２ａが表示された撮像画像Ｘ１を示す図である。図１０は、キャリッジ４８の周辺部における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図１０（Ａ）はキャリッジ４８の操作を完了した後の撮像画像Ｘ２を示す図であり、図１０（Ｂ）は用紙Ｐの除去に関する操作情報１０２ｃが表示された撮像画像Ｘ２を示す図である。そして、図１１（Ａ）〜（Ｃ）は、図９（Ａ）及び図１０（Ａ）のそれぞれの撮像画像Ｘ１，Ｘ２に対応する３つのモデル画像１００ａ〜１００ｃ及び操作情報１０２ａ〜１０２ｃを示す図である。モデル画像１００ａ〜１００ｃと操作情報１０２ａ〜１０２ｃとは互いに関連付けられている。
【００３４】
図９（Ａ）に示すように、本実施形態では、キャリッジ４８をガイドするガイドレール５２ｂの第１部分に少なくとも１つ（本実施形態では６つ）の第１マーク９０１ａ〜９０１ｆが形成されており、当該ガイドレール５２ｂの第２部分に少なくとも１つ（本実施形態では１つ）の第２マーク９２１が形成されている。第１部分及び第２部分は共に固定部であり、第１部分はガイドレール５２ｂのほぼ全長に亘る領域に位置しており、第２部分はガイドレール５２ｂの長手方向端部に位置している。つまり、本実施形態では、複数の第１マーク９０１ａ〜９０１ｆのうち少なくとも１つが、用紙搬送機構３８により搬送される用紙Ｐが搬送不良状態となったときに、その用紙Ｐによって被覆されると想定される位置（第１部分）に形成されている。また、第２マーク９２１が、用紙搬送機構３８により搬送される用紙Ｐが搬送不良状態となったときに、その用紙Ｐによって被覆されることがないと想定される位置（第２部分）に形成されている。
【００３５】
図７は、携帯端末９４における端末制御部９４ｄの制御動作を示すフロー図である。操作情報提供システム１０を用いて多機能装置１２の操作情報を取得する際には、まず、ユーザが携帯端末９４（図５）を操作することにより、操作情報を取得しようとする操作対象部分の撮像が行われる（ステップＳ１）。このステップＳ１では、操作対象部分に形成された第１マーク９０１及び第２マーク９２１が共に撮像画像Ｘ１に含まれるように、ユーザによって携帯端末９４（図５）が操作され、携帯端末９４の撮像部９４ａ（図６（Ａ））によって撮像画像Ｘ１のデータを取得（撮像）する撮像動作が実行される。図９（Ａ）に示すように、ステップＳ１で撮像された撮像画像Ｘ１には、５つの第１マーク９０１ａ〜９０１ｄ，９０１ｆと１つの第２マーク９２１とが含まれており、第１マーク９０１ｅがキャリッジ４８で被覆されている。
【００３６】
次に、ユーザの操作により、又はステップＳ１の撮像動作に連動することにより、携帯端末９４で撮像された撮像画像Ｘ１（図９（Ａ））のデータが画像処理サーバ９８（図５）に送信される（ステップＳ３）。このステップＳ３では、携帯端末９４の端末制御部９４ｄ（図６（Ａ））で通信部９４ｂ（図６（Ａ））が制御されることによって、撮像画像Ｘ１のデータが無線通信装置９７及び通信回線９６（図５）を介して画像処理サーバ９８（図５）に送信される。そして、画像処理サーバ９８の通信部９８ｂで撮像画像Ｘ１のデータが受信される。画像処理サーバ９８では、撮像画像Ｘ１に対応する操作情報１０２ａ（図１１（Ａ））が後述する方法により適宜選択され、選択された操作情報１０２ａのデータが携帯端末９４に向けて送信される。この操作情報１０２ａのデータが通信部９４ｂによって受信されると（ステップＳ５）、表示制御部９４ｅは、表示部９４ｃに既に表示された撮像画像Ｘ１の上に操作情報１０２ａを重ねて表示するよう表示部９４ｃを制御する（ステップＳ７）。図９（Ｂ）に示すように、本実施形態の操作情報１０２ａは、手の画像とキャリッジ４８の操作方向を示す矢印の画像であり、撮像画像Ｘ１及び操作情報１０２ａを見たユーザは、キャリッジ４８を矢印方向（右側）に移動させればよいことが分かる。
【００３７】
ユーザがキャリッジ４８を右側に移動させる操作（第１段階の操作）を完了すると、図１０（Ａ）に示すように、多機能装置１２（キャリッジ４８の周辺部分）の状態が変わるので、続いて、用紙Ｐを除去する操作（第２段階の操作）を実行する必要がある。そこで、図７のステップＳ９では、「ＮＯ」すなわち用紙Ｐを除去する操作に関する情報の表示を終了しないと判断され、ステップＳ１〜Ｓ７までの動作が再び実行される。第２段階の操作に関するステップＳ７では、図１０（Ｂ）に示すように、表示部９４ｃによって表示された撮像画像Ｘ２の上に第２段階の操作に関する操作情報１０２ｃが重ねて表示される。この操作情報１０２ｃは、手の画像と用紙Ｐの移動方向を示す矢印の画像であり、撮像画像Ｘ２及び操作情報１０２ｃを見たユーザは、用紙Ｐを矢印方向に除去すればよいことが分かる。用紙Ｐを除去する操作を完了すると、図７のステップＳ９において「ＹＥＳ」と判断され、携帯端末９４の制御動作が終了される。なお、第１段階の操作から第２段階の操作にスムーズに移行するためには、撮像部９４ａによる多機能装置１２の撮像を継続的又は間欠的に行うことが望ましい。
【００３８】
図８は、画像処理サーバ９８におけるサーバ制御部９８ｃの制御動作を示すフロー図である。画像処理サーバ９８（図６（Ｂ））では、まず、ステップＳ１１において、通信部９８ｂによって撮像画像Ｘ１（図９（Ａ））のデータが受信される。続いて、特定部９８ｄの第１選択処理実行部９８ｅにより、「第１選択処理」が実行される（ステップＳ１３）。つまり、特定部９８ｄ（特定手段）における第１選択処理実行部９８ｅは、記憶部９８ａに記憶されている複数のモデル画像から、撮像画像Ｘ１に撮像されている第１マーク９０１及び第２マーク９２１と同じ種類の第１マーク９０１及び第２マーク９２１を含むモデル画像１００ａ〜１００ｃのみを選択する「第１選択処理」を実行する。
【００３９】
ここで、第１選択処理実行部９８ｅ（図６（Ｂ））の同種第２マーク選択処理実行部９８ｈは、記憶部９８ａに記憶されている複数のモデル画像から、撮像画像Ｘ１に撮像されている第２マーク９２１と同じ種類の第２マーク９２１を含むモデル画像のみを選択する同種第２マーク選択処理を実行する「同種第２マーク選択処理実行手段」として機能する。また、第１選択処理実行部９８ｅの同種第１マーク選択処理実行部９８ｇは、同種第２マーク選択処理で選択されたモデル画像から、撮像画像Ｘ１に撮像されている第１マーク９０１と同じ種類の第１マーク９０１を含むモデル画像１００ａ〜１００ｃのみを選択する同種第１マーク選択処理を実行する「同種第１マーク選択処理実行手段」として機能する。つまり、「特定手段」が有する「第１選択処理実行手段」が、さらに「同種第２マーク選択処理実行手段」と「同種第１マーク選択処理実行手段」とを有している。このように、まず、第２マーク９２１に着目してモデル画像を大まかに選択し、その後、第１マーク９０１に着目してモデル画像１００ａ〜１００ｃを細かく選択するようにしているので、モデル画像１００ａ〜１００ｃを速やかに選択することができる。
【００４０】
「第１選択処理」が完了すると、ステップＳ１５において「第２選択処理」が実行される。つまり、ステップＳ１５において、特定部９８ｄの第２選択処理実行部９８ｆは、「第１選択処理」で選択されたモデル画像１００ａ〜１００ｃ（図１１（Ａ）〜（Ｃ））から、第１マーク９０１と第２マーク９２１との相対位置関係が撮像画像Ｘ１に撮像されている第１マーク９０１と第２マーク９２１との相対位置関係と最も近似するモデル画像１００ａ（図１１（Ａ））を選択する「第２選択処理」を実行する「第２選択処理実行手段」として機能する。また、特定部９８ｄの第２選択処理実行部９８ｆ（又はその他の所定部分）は、「第２選択処理」で選択されたモデル画像１００ａを最近似モデル画像として特定する「最近似モデル画像特定手段」として機能する。次のステップＳ１７では、サーバ制御部９８ｃによって、操作情報１０２ａ（図１１（Ａ））のデータを通信部９８ｂ、通信回線９６及び無線通信装置９７を介して携帯端末９４に送信する送信処理が実行される。
【００４１】
以上は、キャリッジ４８を右側に移動させる操作（第１段階の操作）に関するサーバ制御部９８ｃの制御動作であり、ステップＳ１７の段階で終了したのでは、用紙Ｐの除去に関する操作情報を取得することができない。そこで、ステップＳ１９では、「ＮＯ」すなわち終了しないと判断され、ステップＳ１１〜Ｓ１７までの動作が再び実行される。用紙Ｐを除去する操作（第２段階の操作）に関するステップＳ１３，Ｓ１５では、最近似モデル画像としてモデル画像１００ｃ（図１１（Ｃ））が選択され、ステップＳ１７では、サーバ制御部９８ｃによって、操作情報１０２ｃ（図１１（Ｃ））のデータを通信部９８ｂ、通信回線９６及び無線通信装置９７を介して携帯端末９４に送信する送信処理が実行される。第２段階の操作が完了すると、図８のステップＳ１９において「ＹＥＳ」と判断され、画像処理サーバ９８の制御動作が終了される。
【００４２】
以上のように、本実施形態に係る操作情報提供システム１０によれば、多機能装置１２におけるキャリッジ４８の周辺部分の操作情報（キャリッジ４８の操作及び用紙Ｐの除去に関する操作情報）を、第１マーク９０１と第２マーク９２１との相対的な位置関係に基づいて容易に取得することができる。
【００４３】
（キャリッジの周辺部における紙詰まり処理２）
本実施形態では、上述のように、キャリッジ４８をガイドするガイドレール５２ｂの第１部分（固定部）に少なくとも１つ（本実施形態では６つ）の第１マーク９０１ａ〜９０１ｆが形成されており、当該ガイドレール５２ｂの第２部分（固定部）に少なくとも１つ（本実施形態では１つ）の第２マーク９２１が形成されているが、他の実施形態では、少なくとも１つの第１マークが、キャリッジ４８又はインク吐出ヘッド４６（可動部）に形成されてもよい。この場合には、キャリッジ４８又はインク吐出ヘッド４６（可動部）に形成された第１マークと、第２部分（固定部）に形成された第２マークとの相対位置関係が変動するので、図８のステップＳ１３，１５では、当該相対位置関係と最も近似する最近似モデル画像を特定し、図７のステップＳ７では、当該最近似モデル画像に対応する操作情報を表示させる。これにより、ユーザは、当該相対位置関係に応じた操作情報を容易に知ることができる。例えば、キャリッジ４８がホームポジションに位置するか、或いは、搬送路Ｒの上方に位置するかによって取るべき操作が異なる場合でも、ユーザは、上記操作情報に従って取るべき操作を適切に行うことができる。
【００４４】
（搬送路における紙詰まり処理）
図１２は、搬送路Ｒ（水平部Ｔ）における紙詰まり処理に関する撮像画像を示す図であり、図１２（Ａ）は紙詰まりが無いときの撮像画像Ｘ３を示す図であり、図１２（Ｂ）は一部の第１マーク９０２ｂが紙詰まりを生じた用紙Ｐで被覆されたときの撮像画像Ｘ４を示す図である。図１３（Ａ）〜（Ｃ）は、図１２（Ｂ）の撮像画像Ｘ４に対応する３つのモデル画像１０４ａ〜１０４ｃを示す図である。
【００４５】
本実施形態では、搬送路Ｒにおける水平部Ｔの表面又はその近傍（第１部分，固定部）に少なくとも１つ（本実施形態では４つ）の第１マーク９０２ａ〜９０２ｄが形成されており、水平部Ｔの側部又はその近傍（第２部分，固定部）に少なくとも１つ（本実施形態では１つ）の第２マーク９２２が形成されている。したがって、水平部Ｔで用紙Ｐの紙詰まりが生じると、紙詰まりを生じた用紙Ｐによって第１マーク９０２ａ〜９０２ｄの一部又は全部が被覆される。そこで、操作情報提供システム１０によって、図７及び図８に示した方法と同様の方法により、紙詰まり処理に関する操作情報が提供される。なお、この紙詰まり処理に関して用いられる撮像画像は、紙詰まりを生じた用紙Ｐを含む撮像画像Ｘ４（図１２（Ｂ））である。
【００４６】
図１２及び図１３に示すように、本実施形態において、３つのモデル画像１０４ａ〜１０４ｃのうち、第１マーク９０２と第２マーク９２２との相対位置関係が、撮像画像Ｘ４（図１２（Ｂ））に撮像されている第１マーク９０２と第２マーク９２２との相対位置関係と最も近似するモデル画像は、モデル画像１０４ｂ（図１３（Ｂ））である。そこで、図８のステップＳ１３，Ｓ１５では、最近似モデル画像としてモデル画像１０４ｂが選択され、ステップＳ７では、「表示制御手段」としての表示制御部９４ｅによって、モデル画像１０４ｂに対応する操作情報（図示省略）を表示部９４ｃに表示させるように表示処理が実行される。
【００４７】
（搬送方向変換部における紙詰まり処理）
図１４は、搬送方向変換部７４における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図１４（Ａ）は第１マーク９０３ａ〜９０３ｄが紙詰まりを生じた用紙Ｐで被覆されたときの撮像画像Ｘ５を示す図であり、図１４（Ｂ）は操作情報１０６が表示された撮像画像Ｘ５を示す図である。
【００４８】
搬送方向変換部７４では、搬送方向変換部７４又はその近傍（第１部分，固定部）に少なくとも１つ（本実施形態では４つ）の第１マーク９０３ａ〜９０３ｄが形成されており、搬送方向変換部７４の側部又は搬送方向変換部７４から外れた部分（第２部分，固定部）に少なくとも１つ（本実施形態では１つ）の第２マーク９２３が形成されている。したがって、搬送方向変換部７４で用紙Ｐの紙詰まりが生じると、紙詰まりを生じた用紙Ｐによって第１マーク９０３ａ〜９０３ｄの一部又は全部が被覆される。そこで、操作情報提供システム１０によって、図７及び図８に示した方法と同様の方法により、紙詰まり処理に関する操作情報が提供される。
【００４９】
図１４（Ａ）に示すように、この紙詰まり処理に関して、ステップＳ１（図７）で撮像された撮像画像Ｘ５は、全ての第１マーク９０３ａ〜９０３ｄが用紙Ｐで被覆された画像である。また、図１４（Ｂ）に示すように、ステップＳ７（図７）で表示される操作情報１０６は、２つの手の画像と用紙Ｐの操作方向を示す矢印の画像である。したがって、撮像画像Ｘ５及び操作情報１０６を見たユーザは、用紙Ｐの幅方向両端部を手で持って、用紙Ｐを矢印方向に除去すればよいことが分かる。
【００５０】
（インクカートリッジの操作）
図１５は、インクカートリッジ４２ａ〜４２ｄの操作に関する撮像画像及び操作情報を示す図であり、図１５（Ａ）は第１マーク９０４ｄがユーザの手指で被覆されたときの撮像画像Ｘ６を示す図であり、図１５（Ｂ）は操作情報１０８が表示された撮像画像Ｘ６を示す図である。
【００５１】
インクカートリッジ４２ａ〜４２ｄでは、これらの上面（第１部分，固定部）に第１マーク９０４ａ〜９０４ｄが形成されており、インクカートリッジ４２ａ〜４２ｄから外れた部分（第２部分，固定部）に少なくとも１つ（本実施形態では１つ）の第２マーク９２４が形成されている。したがって、インクカートリッジ４２ａ〜４２ｄのいずれかを手指で押し下げて取り外す際には、第１マーク９０４ａ〜９０４ｄのいずれかが手指で被覆される。そこで、操作情報提供システム１０によって、図７及び図８に示した方法と同様の方法により、インクカートリッジ４２ａ〜４２ｄの取り外しに関する操作情報が提供される。
【００５２】
図１５（Ａ）に示すように、このインクカートリッジの操作に関して、ステップＳ１（図７）で撮像された撮像画像Ｘ６は、第１マーク９０４ｄが手指で被覆された画像である。また、図１５（Ｂ）に示すように、ステップＳ７（図７）で表示される操作情報１０８は、インクカートリッジ４２ｄの移動方向を示す画像である。したがって、撮像画像Ｘ６及び操作情報１０８を見たユーザは、インクカートリッジ４２ｄを手前に移動させればよいことが分かる。
【００５３】
なお、インクカートリッジ４２ａ〜４２ｄの装着状態を確認する場合、第１マーク９０４ａ〜９０４ｄが形成されるインクカートリッジ４２ａ〜４２ｄの上面（第１部分）は「可動部」となり、インクカートリッジ４２ａ〜４２ｄのいずれかが確実に装着されていない場合には、それに対応する第１マーク９０４ａ〜９０４ｄと、インクカートリッジ４２ａ〜４２ｄから外れた部分（第２部分，固定部）に形成された第２マーク９２４との相対位置関係が変動する。そこで、操作情報提供システム１０では、当該相対位置関係に関する複数のモデル画像が用意され、当該相対位置関係に応じて、インクカートリッジ４２ａ〜４２ｄを確実に装着するための操作情報が提供される。
【００５４】
（ガイド部の操作）
図１６は、ガイド部８４の操作に関する撮像画像及び操作情報を示す図であり、図１６（Ａ）は第１マーク９０５ａ，９０５ｂが露出したときの撮像画像Ｘ７を示す図であり、図１６（Ｂ）は操作情報１１０が表示された撮像画像Ｘ７を示す図である。
【００５５】
本実施形態では、一対のガイド部８４のそれぞれにおける原稿受け部８４ｂの上面（第１部分，可動部）に、第１マーク９０５ａ，９０５ｂが形成されており、自動供給装置８２の上面（第２部分，固定部）に、少なくとも１つ（本実施形態では１つ）の第２マーク９２５が形成されている。したがって、用紙Ｐのサイズに応じてガイド部８４間の間隔が適正に調整されていない場合には、第１マーク９０５ａ及び９０５ｂの少なくとも一方が露出し、ガイド部８４間の間隔が適正に調整されているときには、用紙Ｐによって第１マーク９０５ａ及び９０５ｂの両方が被覆される。そこで、操作情報提供システム１０によって、図７及び図８に示した方法と同様の方法により、ガイド部８４の操作に関する操作情報が提供される。
【００５６】
図１６（Ａ）に示すように、このガイド部の操作に関して、ステップＳ１（図７）で撮像された撮像画像Ｘ７は、全ての第１マーク９０５ａ，９０５ｂが露出した画像である。また、図１６（Ｂ）に示すように、ステップＳ７（図７）で表示される操作情報１１０は、２つの手の画像とガイド部８４の移動方向を示す矢印の画像である。したがって、撮像画像Ｘ７及び操作情報１１０を見たユーザは、矢印方向（ガイド部８４間の間隔を狭くする方向）にガイド部８４を移動させればよいことが分かる。
【００５７】
なお、ステップＳ１（図７）で撮像された撮像画像Ｘ７は、全ての第１マーク９０５ａ，９０５ｂが用紙Ｐで被覆された画像であってもよい。この場合、ステップＳ１３，１５（図８）では、多機能装置１２の状態が適正であることを示す情報を含む操作情報（以下、「適正情報」という。）が複数の操作情報の中から特定され、ステップＳ７（図７）では、当該適正情報が携帯端末９４の表示部９４ｃに表示される。この場合の適正情報は、操作をする必要がないことを示す情報であってもよい。また、多機能装置１２は、受信装置を備えるとともに、当該適正情報を受信したときに、通常の動作を開始するように構成されてもよいし、当該適正情報を操作パネル２２に表示するように構成されてもよい。さらに、このような適正情報を提供する動作は、他の操作対象部分において操作情報を提供する場面で実行されてもよい。表示部９４ｃ又は操作パネル２２に適正情報を表示することにより、ユーザは、多機能装置１２の状態が適正であることを容易に確認することができる。
【００５８】
（回動部分の操作）
図１７は、回動部分１２０を撮像した撮像画像Ｘ８を示す図であり、図１８（Ａ）〜（Ｃ）は、図１７の撮像画像Ｘ８に対応する３つのモデル画像１２４ａ〜１２４ｃを示す図である。
【００５９】
「操作対象装置」の種類によっては、回動軸を中心として回動される回動部分１２０を有する場合があり、この回動部分１２０の状態（回動角度等）に応じて、取るべき操作が異なる場合がある。そこで、操作情報提供システム１０によって、図７及び図８に示した方法と同様の方法により、回動部分１２０の状態（回動角度等）に応じた必要な操作情報が提供される。
【００６０】
図１７に示すように、本実施形態では、回動部分１２０（第１部分，可動部）に第１マーク９０６が形成され、他の部分１２２（第２部分，固定部）に第２マーク９２６が形成されている。したがって、回動部分１２０を回転させると、第１マーク９０６と第２マーク９２６との相対位置関係が変動する。
【００６１】
図１７及び図１８に示すように、本実施形態において、３つのモデル画像１２４ａ〜１２４ｃのうち、第１マーク９０６と第２マーク９２６との相対位置関係が、撮像画像Ｘ８に撮像されている第１マーク９０６と第２マーク９２６との相対位置関係と最も近似するモデル画像は、モデル画像１２４ａ（図１８（Ａ））である。そこで、図８のステップＳ１３，Ｓ１５では、最近似モデル画像としてモデル画像１２４ａが選択され、ステップＳ７では、「表示制御手段」としての表示制御部９４ｅによって、モデル画像１２４ａに対応する操作情報（図示省略）を表示部９４ｃに表示させるように表示処理が実行される。例えば、回動部分１２０を所定角度で回動させた後にこれを引っ張る必要がある場合には、引っ張る方向を示す矢印等が操作情報として表示部９４ｃに表示される。
【００６２】
（その他の実施形態）
上述の実施形態では、「操作対象装置」としてインクを吐出するインク吐出ヘッド４６を有する多機能装置１２を用いているが、他の実施形態では、「操作対象装置」として、処理液を吐出する処理液吐出ヘッドを有する装置を用いてもよいし、プリンタ、コピー機、スキャナー装置及びファクシミリ装置等のような単機能装置を用いてもよい。すなわち、「操作対象装置」となる装置は、どのような装置であってもよい。
【００６３】
上述の実施形態では、操作情報が図形画像（手の画像及び矢印の画像）の構成であるが、他の実施形態では、操作の内容に関する文字情報を操作情報に含めてもよい。また、他の画像を操作情報に含めてもよい。
【００６４】
上述の実施形態では、撮像画像の上に操作情報の表示を重ねているが、操作情報の重ね方を特別なものとしてもよい。例えば、第１マーク及び第２マークの少なくとも一方の見え方の変化（傾き、角度、形状、大きさの変化等）を解析し、立体化した操作情報をリアルタイムに撮像画像に重ね合わせてもよい。この技術は、ＡＲ（Augmented Reality）技術に関するものということができる。
【００６５】
上述の実施形態では、第１マークや第２マークを特別に設けた構成となっているが、第１マーク及び第２マークは、操作対象装置の各部位の表面に描かれた模様であってもよい。また、判断を用意とするために、第１マーク及び第２マークをバーコードなどの特定し易いものとしてもよい。
【００６６】
上述の実施形態では、第１マークを含むモデル画像や第２マークを含むモデル画像を選択する構成となっているが、第１マークや第２マークを共通性のない模様（例えば、バーコードなど）とすれば、第１マークや第２マークのみで撮像画像の特定が可能である。つまり、第１マークや第２マークそのものをモデル画像として取り扱ってもよい。その場合に第１マーク及び第２マークの大きさや傾き、変形度合いを解析し、撮像画像の範囲や立体的な位置を特定してもよい。
【００６７】
また、上述の実施形態では、モデル画像と操作画像とを記憶する「記憶手段」と、最近似画像を特定する「特定手段」とが、画像処理サーバ９８において実現されているが、これらの少なくとも１つは、「操作対象装置」としての多機能装置１２で実現されてもよいし、「撮像装置」としての携帯端末９４で実現されてもよい。これらの少なくとも１つが多機能装置１２で実現される場合、多機能装置１２が、携帯端末９４と通信する「通信手段」を備えることになる。
【符号の説明】
【００６８】
Ｐ… 用紙
Ｑ… 印刷領域
Ｒ… 搬送路
Ｔ… 水平部
Ｗ… 原稿
Ｘ１〜Ｘ８… 撮像画像
１０… 操作情報提供システム
１２… 多機能装置
３８… 用紙搬送機構
４２ａ〜４２ｄ… インクカートリッジ
４６ａ… ノズル面
４６… インク吐出ヘッド
４８… キャリッジ
７４… 搬送方向変換部
８４… ガイド部
９０１〜９０６ …第１マーク
９２１〜９２６… 第２マーク
９４… 携帯端末（撮像装置）
９４ａ… 撮像部（撮像手段）
９４ｃ… 表示部（情報表示手段）
９４ｄ… 端末制御部
９４ｅ… 表示制御部（表示制御手段）
９８… 画像処理サーバ
９８ａ… 記憶部（記憶手段）
９８ｃ… サーバ制御部（特定手段）
１００，１０４，１２４… モデル画像
１０２，１０６，１０８，１１０… 操作情報
【技術分野】
【０００１】
本発明は、操作対象装置の不具合発生時やメンテナンス時に必要な操作に関する情報をユーザに提供する、操作情報提供システム、携帯端末及び制御プログラムに関する。
【背景技術】
【０００２】
プリンタ等の印刷装置で紙詰まり等の不具合が発生した場合、ユーザは、印刷装置の状態を把握し、その状態に応じた適切な操作を行う必要がある。このような場合、従来では、ユーザが、印刷装置の表示部に表示された操作情報を見ながら必要な操作を行っていたが、表示部と操作対象部分とは離れているのが通常であるため、当該操作の作業性が悪いという問題があった。
特許文献１に記載された先行技術は、携帯電話で撮像した被写体画像とプリンタの記憶部に予め記憶したモデル画像とを比較し、モデル画像に被写体画像と同一又は近似の画像が含まれている場合に、そのモデル画像の示すパーツに関する情報を被写体画像に関する情報として携帯電話の表示部に表示させるものである。この先行技術によれば、携帯電話の表示部を被写体の近傍に配置することができるので、ユーザは、表示部を見ながら被写体（プリンタ）を速やかに操作することができる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−６６９６７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、この先行技術では、被写体に関する一般的なパーツ情報を表示させていたに過ぎないので、被写体の状態に応じて取るべき操作が異なる場合には、ユーザは、被写体の状態に対応した操作情報を容易に知ることができなかった。
【０００５】
本発明は、操作対象装置の状態に応じて取るべき操作が異なる場合でも、その状態に対応した操作情報を適切に提供することができる、操作情報提供システム、携帯端末及び制御プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明に係る操作情報提供システムは、操作対象装置の操作方法に関する操作情報を提供する操作情報提供システムであって、前記操作対象装置の第１部分に形成された少なくとも１つの第１マークと、前記操作対象装置の第２部分に形成された少なくとも１つの第２マークと、情報表示手段と前記操作対象装置を撮像する撮像手段とを有する撮像装置と、前記操作対象装置に関する画像であって前記第１マークと前記第２マークとがそれぞれ１つ以上画像内に含まれている複数のモデル画像と、前記複数のモデル画像のそれぞれに対応して用意された複数の操作情報とを記憶する記憶手段と、前記撮像装置で撮像された撮像画像と、前記記憶手段に記憶された前記複数のモデル画像とを比較することによって、前記撮像画像に最も近似した最近似モデル画像を特定する特定手段と、前記特定手段にて特定された前記最近似モデル画像に対応する前記操作情報を表示させるように前記情報表示手段を制御する表示制御手段とを備え、前記特定手段は、前記複数のモデル画像から、前記撮像画像に撮像されている第１マーク及び第２マークと同じ種類の第１マーク及び第２マークを含むモデル画像のみを選択する第１選択処理を実行する第１選択処理実行手段と、前記第１選択処理で選択されたモデル画像から、第１マークと第２マークとの相対位置関係が前記撮像画像に撮像されている第１マークと第２マークとの相対位置関係と最も近似するモデル画像を選択する第２選択処理を実行する第２選択処理実行手段とを含み、前記第２選択処理実行手段にて選択されたモデル画像を前記最近似モデル画像として特定することを特徴とする。
【０００７】
この構成では、第１マークと第２マークとの相対的な位置関係により現在の操作対象装置の状態に最も近い状態のモデル画像を選択し、当該状態に対応する操作情報を撮像装置に表示させるようにしているので、第１部分又は第２部分の状態が、これらの相対的な位置関係が変化したり、第１部分に別部材が積載されたりすることで変わる場合でも、現在の操作対象装置の状態に対応した操作情報を適切に提供することができる。
【０００８】
上記課題を解決するために、本発明に係る携帯端末は、上記のいずれかの操作情報提供システムにおける少なくとも撮像装置として機能する。
【０００９】
上記課題を解決するために、本発明に係る制御プログラムは、上記のいずれかの操作情報提供システムにおける少なくとも特定手段としてコンピュータを機能させる。
【発明の効果】
【００１０】
本発明によれば、上記の構成によって、操作対象装置の状態に応じて取るべき操作が異なる場合でも、その状態に対応した操作情報を適切に提供することができる。
【図面の簡単な説明】
【００１１】
【図１】実施形態に係る操作情報提供システムが適用される多機能装置（操作対象装置）の構成を示す斜視図である。
【図２】多機能装置の構成を示す側面図である。
【図３】多機能装置におけるプリンタ部の概略構成を示す側面図である。
【図４】多機能装置におけるプリンタ部の概略構成を示す平面図である。
【図５】実施形態に係る操作情報提供システムを示す概念図である。
【図６】図６（Ａ）は携帯端末の要部構成を示すブロック図であり、図６（Ｂ）は画像処理サーバの要部構成を示すブロック図である。
【図７】携帯端末における端末制御部の制御動作を示すフロー図である。
【図８】画像処理サーバにおけるサーバ制御部の制御動作を示すフロー図である。
【図９】キャリッジの周辺部における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図９（Ａ）は第１マークがキャリッジで被覆されたときの撮像画像を示す図であり、図９（Ｂ）はキャリッジの操作に関する操作情報が表示された撮像画像を示す図である。
【図１０】キャリッジの周辺部における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図１０（Ａ）はキャリッジの操作を完了した後の撮像画像を示す図であり、図１０（Ｂ）は用紙の除去に関する操作情報が表示された撮像画像を示す図である。
【図１１】図１１（Ａ）〜（Ｃ）は、図９（Ａ）及び図１０（Ａ）のそれぞれの撮像画像に対応する３つのモデル画像及び操作情報を示す図である。
【図１２】搬送路における紙詰まり処理に関する撮像画像を示す図であり、図１２（Ａ）は紙詰まりが無いときの撮像画像を示す図であり、図１２（Ｂ）は一部の第１マークが紙詰まりした用紙で被覆されたときの撮像画像を示す図である。
【図１３】図１３（Ａ）〜（Ｃ）は、図１２（Ｂ）の撮像画像に対応する３つのモデル画像を示す図である。
【図１４】搬送方向変換部における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図１４（Ａ）は第１マークが紙詰まりした用紙で被覆されたときの撮像画像を示す図であり、図１４（Ｂ）は操作情報が表示された撮像画像を示す図である。
【図１５】インクカートリッジの操作に関する撮像画像及び操作情報を示す図であり、図１５（Ａ）は第１マークがユーザの手指で被覆されたときの撮像画像を示す図であり、図１５（Ｂ）は操作情報が表示された撮像画像を示す図である。
【図１６】ガイド部の操作に関する撮像画像及び操作情報を示す図であり、図１６（Ａ）は第１マークが露出したときの撮像画像を示す図であり、図１６（Ｂ）は操作情報が表示された撮像画像を示す図である。
【図１７】回動部分を撮像した撮像画像を示す図である。
【図１８】図１８（Ａ）〜（Ｃ）は、図１７の撮像画像に対応する３つのモデル画像を示す図である。
【発明を実施するための形態】
【００１２】
以下に、本発明に係る操作情報提供システム、携帯端末及び制御プログラムの好ましい実施形態について、図面を参照しながら説明する。
【００１３】
［多機能装置の構成］
図５に示す本実施形態の操作情報提供システム１０は、図１及び図２に示す多機能装置１２（操作対象装置）の操作情報を提供するものである。多機能装置１２は、印刷機能、スキャナ機能、コピー機能及びファクシミリ機能を併有する複合機であり、印刷機能、コピー機能及びファクシミリ機能を発揮する際に、インク吐出ヘッド４６から用紙Ｐに対してインクが吐出される。つまり、本実施形態の多機能装置１２では、画像が記録される「記録媒体」として用紙Ｐが用いられ、「液体」としてインクが用いられる。また、「印刷ヘッド」又は「液体吐出ヘッド」としてインク吐出ヘッド４６が用いられ、「記録媒体搬送手段」として用紙搬送機構３８が用いられる。
【００１４】
図１及び図２に示すように、多機能装置１２は、筐体１４と、プリンタ部１６と、スキャナ部１８と、各種の制御動作を実行する制御部２０と、各種の情報を入力又は出力（表示）する操作パネル２２とを有している。
【００１５】
図２に示すように、筐体１４は、各種の機器を収容する収容空間を構成する箱状の部材である。図１に示すように、筐体１４の前面１４ａには、第１開口部２４と第２開口部２６とが幅方向に並べて設けられており、第２開口部２６には、蓋体２８が開閉自在に取り付けられている。また、図２に示すように、筐体１４の後面１４ｂには、点検窓３０が設けられており、点検窓３０には、蓋体３２が開閉自在に取り付けられている。そして、筐体１４の内部に、プリンタ部１６及び制御部２０が設けられており、筐体１４の上部に、枢軸部（図示省略）を介してスキャナ部１８が回動自在に設けられている。
【００１６】
図３に示すように、プリンタ部１６は、筐体１４の内部の底部に配置された給紙トレイ３４と、筐体１４の内部における給紙トレイ３４の上方に配置された画像形成部３６と、給紙トレイ３４に収容された用紙Ｐを画像形成部３６に搬送する用紙搬送機構３８と、用紙Ｐの搬送方向における画像形成部３６の下流側であって、かつ、給紙トレイ３４の上方に配置された箱状（又は板状）の排紙トレイ４０とを有している。また、図４に示すように、プリンタ部１６は、複数色（本実施形態では４色）のインクのそれぞれを貯留する「液体カートリッジ」としての複数（本実施形態では４つ）のインクカートリッジ４２ａ〜４２ｄと、インクカートリッジ４２ａ〜４２ｄを着脱自在に保持するカートリッジ保持部４４とを有している。
【００１７】
図３に示すように、給紙トレイ３４は、複数の用紙Ｐを積層させた状態で収容する容器であり、図１に示すように、第１開口部２４から筐体１４の内部に着脱自在に挿し込まれている。
【００１８】
図４に示すように、画像形成部３６は、用紙Ｐ（図３）の表面に画像を形成する部分であり、インクを吐出する複数のノズル（図示省略）が設けられたノズル面４６ａ（図３）を有するインク吐出ヘッド４６と、インク吐出ヘッド４６を保持するキャリッジ４８と、キャリッジ４８を用紙Ｐの搬送方向に対して直交する方向に往復移動させる駆動部５０とを有している。駆動部５０は、キャリッジ４８をガイドする２つのガイドレール５２ａ，５２ｂと、一方のガイドレール５２ａの上面に互いに離間して設けられた一対のプーリ５４ａ，５４ｂと、一対のプーリ５４ａ，５４ｂ間に掛け渡されたタイミングベルト５６と、一方のプーリ５４ａに回転力を付与する駆動モータ５８とを有しており、タイミングベルト５６に対してキャリッジ４８が固定されている。
【００１９】
そして、インク吐出ヘッド４６のインク流路（図示省略）と、インクカートリッジ４２ａ〜４２ｄのそれぞれとがインクチューブ６０ａ〜６０ｄを介して連通されており、インク吐出ヘッド４６のアクチュエータ（図示省略）と制御部２０（図２）とが、フレキシブル配線基板（図示省略）を介して電気的に接続されている。さらに、駆動モータ５８と制御部２０（図２）とが電気配線（図示省略）を介して電気的に接続されている。
【００２０】
図３に示すように、用紙搬送機構３８は、インク吐出ヘッド４６のノズル面４６ａと対向する印刷領域Ｑに向けて用紙Ｐを搬送する搬送路Ｒと、搬送路Ｒの上流側端部に近接して設けられ、給紙トレイ３４に収容された用紙Ｐを搬送路Ｒに供給する給紙ローラ６４と、給紙トレイ３４に収容された用紙Ｐを１枚ずつ分離する分離傾斜板６６とを有している。また、用紙搬送機構３８は、印刷領域Ｑに配置されたプラテン６８と、印刷領域Ｑの上流側に設けられ、所定のタイミングで用紙Ｐを印刷領域Ｑに送り出す一対の駆動ローラ７０ａ及び押さえローラ７０ｂと、印刷領域Ｑの下流側に設けられ、用紙Ｐを排紙トレイ４０に排出する一対の排紙ローラ７２ａ及び押さえローラ７２ｂとを有している。搬送路Ｒは、用紙Ｐを略Ｕ字状に曲げながら搬送して当該用紙Ｐの搬送方向を変換する搬送方向変換部７４を有しており、搬送方向変換部７４より上流側では、用紙Ｐが前方から後方に向けて搬送され、搬送方向変換部７４より下流側では、用紙Ｐが後方から前方に向けて搬送されるようになっている。なお、本実施形態の説明では、図２に示された多機能装置１２の左側を「前」とし、右側を「後」とする。
【００２１】
図３に示すように、用紙搬送機構３８では、用紙Ｐが印刷領域Ｑを通過するときや、用紙Ｐが搬送路Ｒの水平な部分（以下、「水平部」という。）Ｔを移動するときや、用紙Ｐが搬送方向変換部７４を通過するときに紙詰まりが生じる恐れがある。そして、図２に示すように、印刷領域Ｑ及び水平部Ｔで詰まった用紙Ｐについては、スキャナ部１８を持ち上げたときに開かれる開口部７６からこれを除去することができ、搬送方向変換部７４で詰まった用紙Ｐについては、点検窓３０からこれを除去することができる。本実施形態に係る操作情報提供システム１０（図５）は、これらの紙詰まりを生じた用紙Ｐを除去する際に、操作に関する必要な情報をユーザに対して提供することができる。
【００２２】
図１に示すように、インクカートリッジ４２ａ〜４２ｄ及びカートリッジ保持部４４は、第２開口部２６の奥側に位置する筐体１４の下部に配置されており、カートリッジ保持部４４（図４）は、インクカートリッジ４２ａ〜４２ｄが装着されたときに、インクカートリッジ４２ａ〜４２ｄに係合される係止部（図示省略）を有している。当該係止部は、インクカートリッジ４２ａ〜４２ｄの上面を押し下げることによって係止状態が解除されるように構成されており、係止状態が解除された後は、インクカートリッジ４２ａ〜４２ｄを手前に引くことで、これらを第２開口部２６から引き出すことができる。本実施形態に係る操作情報提供システム１０（図５）は、カートリッジ保持部４４からインクカートリッジ４２ａ〜４２ｄを取り外す際に、操作に関する必要な情報をユーザに対して提供することができる。
【００２３】
図１及び図２に示すように、スキャナ部１８は、画像を読み取る画像読み取り部８０と、画像読み取り部８０に原稿Ｗを自動供給する自動供給装置８２とを有している。画像読み取り部８０は、原稿Ｗが載置される原稿台８０ａ（図２）と、原稿台８０ａを覆うカバー８０ｂと、原稿台８０ａに載置された原稿Ｗ、或いは、自動供給装置８２から自動供給された原稿Ｗから画像を読み取るイメージセンサ（図示省略）とを有している。また、図１に示すように、スキャナ部１８は、原稿Ｗのサイズに応じて位置調整可能に構成され、自動供給装置８２に供給される原稿Ｗの供給方向に対して直交する方向の端部に沿って配置される一対のガイド部８４を有している。一対のガイド部８４のそれぞれは、原稿Ｗの端部をガイドするガイド壁８４ａと、ガイド壁８４ａにおける内側の面の下部に設けられ、原稿Ｗの端部を受ける板状の原稿受け部８４ｂと、ガイド壁８４ａにおける内側の面の上下方向中央部に設けられ、画像読み取り部８０から排出された原稿Ｗを受ける板状の原稿排出部８４ｃとを有している。
【００２４】
図１に示すように、自動供給装置８２を用いて画像読み取り部８０（図２）に原稿Ｗを自動供給する際には、一対のガイド部８４間の間隔を調整して、ガイド壁８４ａを原稿Ｗの端部に沿うように位置決めし、カバー８０ｂの上面における一対のガイド部８４間に原稿Ｗを載置する。このとき、ガイド壁８４ａが原稿Ｗの端部から離間して配置されていると、ガイド部８４のガイド機能が損なわれ、原稿Ｗが斜行して画像読み取り部８０に供給される恐れがある。本実施形態に係る操作情報提供システム１０（図５）は、一対のガイド部８４間の間隔を適正に調整する際に、操作に関する必要な情報をユーザに対して提供することができる。
【００２５】
［操作情報提供システムの構成］
図５は、実施形態に係る操作情報提供システム１０を示す概念図である。図６は、携帯端末９４及び画像処理サーバ９８の要部構成を示すブロック図である。図７は、携帯端末９４における端末制御部９４ｄの制御動作を示すフロー図であり、図８は、画像処理サーバ９８におけるサーバ制御部９８ｃの制御動作を示すフロー図である。
【００２６】
操作情報提供システム１０は、「操作対象装置」としての多機能装置１２の操作方法に関する操作情報を提供するシステムであり、多機能装置１２の複数の操作対象部分の「第１部分」に形成された少なくとも１つの第１マーク９０１，９０２，９０３，９０４，９０５，９０６（図９〜図１８参照）と、当該複数の操作対象部分の「第２部分」に形成された少なくとも１つの第２マーク９２１，９２２，９２３，９２４，９２５，９２６（図９〜図１８参照）と、「撮像装置」としての携帯端末９４と、インターネット、ＬＡＮ、無線回線及び電話回線等のような通信回線９６と、画像処理サーバ９８と、通信回線９６と携帯端末９４との間の無線通信を行う無線通信装置９７とを備えている。第１マーク９０１，９０２，９０３，９０４，９０５，９０６のそれぞれは、互いに異なる種類として区別できるように形成されており、例えば、色及び形状の少なくとも一方が互いに異なるように形成されている。また、第２マーク９２１，９２２，９２３，９２４，９２５，９２６のそれぞれは、互いに異なる種類として区別できるように形成されており、例えば、色及び形状の少なくとも一方が互いに異なるように形成されている。
【００２７】
なお、以下の説明において、複数の第１マーク９０１を互いに区別する場合には、第１マーク９０１ａ，９０１ｂ，９０１ｃ…のように表示し、複数の第２マーク９２１を互いに区別する場合には、第２マーク９２１ａ，９２１ｂ，９２１ｃ…のように表示する。他の種類の第１マーク９０２〜９０６及び第２マーク９２２〜９２６についても同様に表示する。
【００２８】
図５及び図６（Ａ）に示すように、携帯端末９４は撮像部９４ａ、通信部９４ｂ、表示部９４ｃ、端末制御部９４ｄを有している。撮像部９４ａは被写体を撮像する機能を有し、多機能装置１２を撮像する「撮像手段」として機能する。具体的には、既知の携帯端末のカメラ部などが撮像部９４ａに該当する。通信部９４ｂは各種の情報（操作情報を含む。）を画像処理サーバ９８との間で無線通信装置９７及び通信回線９６を介してやり取りするものである。具体的には、既知の無線ＬＡＮ用通信インターフェース装置や赤外線通信用の外部出力用通信インターフェース装置などが通信部９４ｂに該当する。表示部９４ｃは多機能装置１２の撮像画像及び多機能装置１２の操作方法に関する操作情報を表示する「情報表示手段」として機能するものである。具体的には、既知の携帯端末におけるディスプレイ装置などが表示部９４ｃに該当する。端末制御部９４ｄは撮像部９４ａ、通信部９４ｂ、表示部９４ｃの制御動作を実行するものである。端末制御部９４ｄは、１又は複数のコンピュータからなり、各コンピュータはＣＰＵ（Central Processing Unit）、ＣＰＵが実行するプログラムやプログラムで使用されるデータを書き替え可能に記憶するＲＯＭ（Read Only Memory）、ＣＰＵがプログラムを実行する際にデータを一時的に記憶するＲＡＭ、及びこれらを接続する内部経路等を備えている（これらについて図示省略）。ＣＰＵが実行するプログラムは、フレキシブルディスク、ＣＤ−ＲＯＭ、メモリカード等の各種記憶媒体に記憶されており、これらの記憶媒体からＲＯＭにインストールされる。そして、このプログラムがＣＰＵで実行されることにより、端末制御部９４ｄの機能が実現される。さらに、端末制御部９４ｄは、表示部９４ｃの動作を制御する「表示制御手段」としての表示制御部９４ｅを有している。
【００２９】
図５及び図６（Ｂ）に示すように、画像処理サーバ９８は、「記憶手段」としての記憶部９８ａと、通信部９８ｂと、サーバ制御部９８ｃとを有している。記憶部９８ａは、複数の操作対象部分のそれぞれに対応する複数のモデル画像と、複数のモデル画像のそれぞれに対応して用意された複数の操作情報とを記憶するものである。つまり、記憶部９８ａには、全ての操作対象部分に関する複数のモデル画像及び複数の操作情報が記憶されている。記憶部９８ａに記憶された複数のモデル画像のそれぞれには、第１マーク９０１〜９０６のいずれかと第２マーク９２１〜９２６のいずれかとが含まれている。通信部９８ｂは、各種の情報（操作情報を含む。）を携帯端末９４との間で通信回線９６及び無線通信装置９７を介してやり取りするものである。具体的には、既知の外部出力用の通信インターフェース装置などが通信部９８ｂに該当する。サーバ制御部９８ｃは、通信部９８ｂの制御動作を実行する機能を有している。また、サーバ制御部９８ｃは、特定部９８ｄ（特定手段に相当）を有しており、この特定部９８ｄは、「撮像装置」としての携帯端末９４で撮像された撮像画像と、「記憶手段」としての記憶部９８ａに記憶された複数のモデル画像とを比較することによって、撮像画像に最も近似した最近似モデル画像を特定する機能を有している。
【００３０】
サーバ制御部９８ｃは、１又は複数のコンピュータからなり、各コンピュータはＣＰＵ（Central Processing Unit）、ＣＰＵが実行するプログラムやプログラムで使用されるデータを書き替え可能に記憶するＲＯＭ（Read Only Memory）、ＣＰＵがプログラムを実行する際にデータを一時的に記憶するＲＡＭ、及びこれらを接続する内部経路等を備えている（これらについて図示省略）。ＣＰＵが実行するプログラムは、フレキシブルディスク、ＣＤ−ＲＯＭ、メモリカード等の各種記憶媒体に記憶されており、これらの記憶媒体からＲＯＭにインストールされる。そして、このプログラムがＣＰＵで実行されることにより、サーバ制御部９８ｃの各機能が実現される。サーバ制御部９８ｃの特定部９８ｄは、さらに第１選択処理実行部９８ｅ及び第２選択処理実行部９８ｆを有している。これらの機能については後述する。
【００３１】
無線通信装置９７は、画像処理サーバ９８のサーバ制御部９８ｃから発信されたデータを、通信回線９６を介して受信するとともに、当該データを無線通信により携帯端末９４に送信し、かつ、携帯端末９４から発信されたデータを、無線通信により受信するとともに、当該データを通信回線９６を介してサーバ制御部９８ｃに送信する機能を有している。具体的には、既知の無線ＬＡＮ用通信インターフェース装置や赤外線通信用の外部出力用通信インターフェース装置などが無線通信装置９７に該当する。
【００３２】
本実施形態に係る操作情報提供システム１０は、複数の操作対象部分のそれぞれについて、必要な操作情報を提供することができるように構成されており、複数の操作対象部分のそれぞれには、異なる種類の第１マーク９０１〜９０６と、異なる種類の第２マーク９２１〜９２６とが形成されている。そこで、以下には、操作対象部分のそれぞれで必要となる操作ごとに操作情報提供システム１０の動作を説明する。
【００３３】
（キャリッジの周辺部における紙詰まり処理１）
図９は、キャリッジ４８の周辺部における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図９（Ａ）は第１マーク９０１ｅがキャリッジ４８で被覆されたときの撮像画像Ｘ１を示す図であり、図９（Ｂ）はキャリッジ４８の操作に関する操作情報１０２ａが表示された撮像画像Ｘ１を示す図である。図１０は、キャリッジ４８の周辺部における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図１０（Ａ）はキャリッジ４８の操作を完了した後の撮像画像Ｘ２を示す図であり、図１０（Ｂ）は用紙Ｐの除去に関する操作情報１０２ｃが表示された撮像画像Ｘ２を示す図である。そして、図１１（Ａ）〜（Ｃ）は、図９（Ａ）及び図１０（Ａ）のそれぞれの撮像画像Ｘ１，Ｘ２に対応する３つのモデル画像１００ａ〜１００ｃ及び操作情報１０２ａ〜１０２ｃを示す図である。モデル画像１００ａ〜１００ｃと操作情報１０２ａ〜１０２ｃとは互いに関連付けられている。
【００３４】
図９（Ａ）に示すように、本実施形態では、キャリッジ４８をガイドするガイドレール５２ｂの第１部分に少なくとも１つ（本実施形態では６つ）の第１マーク９０１ａ〜９０１ｆが形成されており、当該ガイドレール５２ｂの第２部分に少なくとも１つ（本実施形態では１つ）の第２マーク９２１が形成されている。第１部分及び第２部分は共に固定部であり、第１部分はガイドレール５２ｂのほぼ全長に亘る領域に位置しており、第２部分はガイドレール５２ｂの長手方向端部に位置している。つまり、本実施形態では、複数の第１マーク９０１ａ〜９０１ｆのうち少なくとも１つが、用紙搬送機構３８により搬送される用紙Ｐが搬送不良状態となったときに、その用紙Ｐによって被覆されると想定される位置（第１部分）に形成されている。また、第２マーク９２１が、用紙搬送機構３８により搬送される用紙Ｐが搬送不良状態となったときに、その用紙Ｐによって被覆されることがないと想定される位置（第２部分）に形成されている。
【００３５】
図７は、携帯端末９４における端末制御部９４ｄの制御動作を示すフロー図である。操作情報提供システム１０を用いて多機能装置１２の操作情報を取得する際には、まず、ユーザが携帯端末９４（図５）を操作することにより、操作情報を取得しようとする操作対象部分の撮像が行われる（ステップＳ１）。このステップＳ１では、操作対象部分に形成された第１マーク９０１及び第２マーク９２１が共に撮像画像Ｘ１に含まれるように、ユーザによって携帯端末９４（図５）が操作され、携帯端末９４の撮像部９４ａ（図６（Ａ））によって撮像画像Ｘ１のデータを取得（撮像）する撮像動作が実行される。図９（Ａ）に示すように、ステップＳ１で撮像された撮像画像Ｘ１には、５つの第１マーク９０１ａ〜９０１ｄ，９０１ｆと１つの第２マーク９２１とが含まれており、第１マーク９０１ｅがキャリッジ４８で被覆されている。
【００３６】
次に、ユーザの操作により、又はステップＳ１の撮像動作に連動することにより、携帯端末９４で撮像された撮像画像Ｘ１（図９（Ａ））のデータが画像処理サーバ９８（図５）に送信される（ステップＳ３）。このステップＳ３では、携帯端末９４の端末制御部９４ｄ（図６（Ａ））で通信部９４ｂ（図６（Ａ））が制御されることによって、撮像画像Ｘ１のデータが無線通信装置９７及び通信回線９６（図５）を介して画像処理サーバ９８（図５）に送信される。そして、画像処理サーバ９８の通信部９８ｂで撮像画像Ｘ１のデータが受信される。画像処理サーバ９８では、撮像画像Ｘ１に対応する操作情報１０２ａ（図１１（Ａ））が後述する方法により適宜選択され、選択された操作情報１０２ａのデータが携帯端末９４に向けて送信される。この操作情報１０２ａのデータが通信部９４ｂによって受信されると（ステップＳ５）、表示制御部９４ｅは、表示部９４ｃに既に表示された撮像画像Ｘ１の上に操作情報１０２ａを重ねて表示するよう表示部９４ｃを制御する（ステップＳ７）。図９（Ｂ）に示すように、本実施形態の操作情報１０２ａは、手の画像とキャリッジ４８の操作方向を示す矢印の画像であり、撮像画像Ｘ１及び操作情報１０２ａを見たユーザは、キャリッジ４８を矢印方向（右側）に移動させればよいことが分かる。
【００３７】
ユーザがキャリッジ４８を右側に移動させる操作（第１段階の操作）を完了すると、図１０（Ａ）に示すように、多機能装置１２（キャリッジ４８の周辺部分）の状態が変わるので、続いて、用紙Ｐを除去する操作（第２段階の操作）を実行する必要がある。そこで、図７のステップＳ９では、「ＮＯ」すなわち用紙Ｐを除去する操作に関する情報の表示を終了しないと判断され、ステップＳ１〜Ｓ７までの動作が再び実行される。第２段階の操作に関するステップＳ７では、図１０（Ｂ）に示すように、表示部９４ｃによって表示された撮像画像Ｘ２の上に第２段階の操作に関する操作情報１０２ｃが重ねて表示される。この操作情報１０２ｃは、手の画像と用紙Ｐの移動方向を示す矢印の画像であり、撮像画像Ｘ２及び操作情報１０２ｃを見たユーザは、用紙Ｐを矢印方向に除去すればよいことが分かる。用紙Ｐを除去する操作を完了すると、図７のステップＳ９において「ＹＥＳ」と判断され、携帯端末９４の制御動作が終了される。なお、第１段階の操作から第２段階の操作にスムーズに移行するためには、撮像部９４ａによる多機能装置１２の撮像を継続的又は間欠的に行うことが望ましい。
【００３８】
図８は、画像処理サーバ９８におけるサーバ制御部９８ｃの制御動作を示すフロー図である。画像処理サーバ９８（図６（Ｂ））では、まず、ステップＳ１１において、通信部９８ｂによって撮像画像Ｘ１（図９（Ａ））のデータが受信される。続いて、特定部９８ｄの第１選択処理実行部９８ｅにより、「第１選択処理」が実行される（ステップＳ１３）。つまり、特定部９８ｄ（特定手段）における第１選択処理実行部９８ｅは、記憶部９８ａに記憶されている複数のモデル画像から、撮像画像Ｘ１に撮像されている第１マーク９０１及び第２マーク９２１と同じ種類の第１マーク９０１及び第２マーク９２１を含むモデル画像１００ａ〜１００ｃのみを選択する「第１選択処理」を実行する。
【００３９】
ここで、第１選択処理実行部９８ｅ（図６（Ｂ））の同種第２マーク選択処理実行部９８ｈは、記憶部９８ａに記憶されている複数のモデル画像から、撮像画像Ｘ１に撮像されている第２マーク９２１と同じ種類の第２マーク９２１を含むモデル画像のみを選択する同種第２マーク選択処理を実行する「同種第２マーク選択処理実行手段」として機能する。また、第１選択処理実行部９８ｅの同種第１マーク選択処理実行部９８ｇは、同種第２マーク選択処理で選択されたモデル画像から、撮像画像Ｘ１に撮像されている第１マーク９０１と同じ種類の第１マーク９０１を含むモデル画像１００ａ〜１００ｃのみを選択する同種第１マーク選択処理を実行する「同種第１マーク選択処理実行手段」として機能する。つまり、「特定手段」が有する「第１選択処理実行手段」が、さらに「同種第２マーク選択処理実行手段」と「同種第１マーク選択処理実行手段」とを有している。このように、まず、第２マーク９２１に着目してモデル画像を大まかに選択し、その後、第１マーク９０１に着目してモデル画像１００ａ〜１００ｃを細かく選択するようにしているので、モデル画像１００ａ〜１００ｃを速やかに選択することができる。
【００４０】
「第１選択処理」が完了すると、ステップＳ１５において「第２選択処理」が実行される。つまり、ステップＳ１５において、特定部９８ｄの第２選択処理実行部９８ｆは、「第１選択処理」で選択されたモデル画像１００ａ〜１００ｃ（図１１（Ａ）〜（Ｃ））から、第１マーク９０１と第２マーク９２１との相対位置関係が撮像画像Ｘ１に撮像されている第１マーク９０１と第２マーク９２１との相対位置関係と最も近似するモデル画像１００ａ（図１１（Ａ））を選択する「第２選択処理」を実行する「第２選択処理実行手段」として機能する。また、特定部９８ｄの第２選択処理実行部９８ｆ（又はその他の所定部分）は、「第２選択処理」で選択されたモデル画像１００ａを最近似モデル画像として特定する「最近似モデル画像特定手段」として機能する。次のステップＳ１７では、サーバ制御部９８ｃによって、操作情報１０２ａ（図１１（Ａ））のデータを通信部９８ｂ、通信回線９６及び無線通信装置９７を介して携帯端末９４に送信する送信処理が実行される。
【００４１】
以上は、キャリッジ４８を右側に移動させる操作（第１段階の操作）に関するサーバ制御部９８ｃの制御動作であり、ステップＳ１７の段階で終了したのでは、用紙Ｐの除去に関する操作情報を取得することができない。そこで、ステップＳ１９では、「ＮＯ」すなわち終了しないと判断され、ステップＳ１１〜Ｓ１７までの動作が再び実行される。用紙Ｐを除去する操作（第２段階の操作）に関するステップＳ１３，Ｓ１５では、最近似モデル画像としてモデル画像１００ｃ（図１１（Ｃ））が選択され、ステップＳ１７では、サーバ制御部９８ｃによって、操作情報１０２ｃ（図１１（Ｃ））のデータを通信部９８ｂ、通信回線９６及び無線通信装置９７を介して携帯端末９４に送信する送信処理が実行される。第２段階の操作が完了すると、図８のステップＳ１９において「ＹＥＳ」と判断され、画像処理サーバ９８の制御動作が終了される。
【００４２】
以上のように、本実施形態に係る操作情報提供システム１０によれば、多機能装置１２におけるキャリッジ４８の周辺部分の操作情報（キャリッジ４８の操作及び用紙Ｐの除去に関する操作情報）を、第１マーク９０１と第２マーク９２１との相対的な位置関係に基づいて容易に取得することができる。
【００４３】
（キャリッジの周辺部における紙詰まり処理２）
本実施形態では、上述のように、キャリッジ４８をガイドするガイドレール５２ｂの第１部分（固定部）に少なくとも１つ（本実施形態では６つ）の第１マーク９０１ａ〜９０１ｆが形成されており、当該ガイドレール５２ｂの第２部分（固定部）に少なくとも１つ（本実施形態では１つ）の第２マーク９２１が形成されているが、他の実施形態では、少なくとも１つの第１マークが、キャリッジ４８又はインク吐出ヘッド４６（可動部）に形成されてもよい。この場合には、キャリッジ４８又はインク吐出ヘッド４６（可動部）に形成された第１マークと、第２部分（固定部）に形成された第２マークとの相対位置関係が変動するので、図８のステップＳ１３，１５では、当該相対位置関係と最も近似する最近似モデル画像を特定し、図７のステップＳ７では、当該最近似モデル画像に対応する操作情報を表示させる。これにより、ユーザは、当該相対位置関係に応じた操作情報を容易に知ることができる。例えば、キャリッジ４８がホームポジションに位置するか、或いは、搬送路Ｒの上方に位置するかによって取るべき操作が異なる場合でも、ユーザは、上記操作情報に従って取るべき操作を適切に行うことができる。
【００４４】
（搬送路における紙詰まり処理）
図１２は、搬送路Ｒ（水平部Ｔ）における紙詰まり処理に関する撮像画像を示す図であり、図１２（Ａ）は紙詰まりが無いときの撮像画像Ｘ３を示す図であり、図１２（Ｂ）は一部の第１マーク９０２ｂが紙詰まりを生じた用紙Ｐで被覆されたときの撮像画像Ｘ４を示す図である。図１３（Ａ）〜（Ｃ）は、図１２（Ｂ）の撮像画像Ｘ４に対応する３つのモデル画像１０４ａ〜１０４ｃを示す図である。
【００４５】
本実施形態では、搬送路Ｒにおける水平部Ｔの表面又はその近傍（第１部分，固定部）に少なくとも１つ（本実施形態では４つ）の第１マーク９０２ａ〜９０２ｄが形成されており、水平部Ｔの側部又はその近傍（第２部分，固定部）に少なくとも１つ（本実施形態では１つ）の第２マーク９２２が形成されている。したがって、水平部Ｔで用紙Ｐの紙詰まりが生じると、紙詰まりを生じた用紙Ｐによって第１マーク９０２ａ〜９０２ｄの一部又は全部が被覆される。そこで、操作情報提供システム１０によって、図７及び図８に示した方法と同様の方法により、紙詰まり処理に関する操作情報が提供される。なお、この紙詰まり処理に関して用いられる撮像画像は、紙詰まりを生じた用紙Ｐを含む撮像画像Ｘ４（図１２（Ｂ））である。
【００４６】
図１２及び図１３に示すように、本実施形態において、３つのモデル画像１０４ａ〜１０４ｃのうち、第１マーク９０２と第２マーク９２２との相対位置関係が、撮像画像Ｘ４（図１２（Ｂ））に撮像されている第１マーク９０２と第２マーク９２２との相対位置関係と最も近似するモデル画像は、モデル画像１０４ｂ（図１３（Ｂ））である。そこで、図８のステップＳ１３，Ｓ１５では、最近似モデル画像としてモデル画像１０４ｂが選択され、ステップＳ７では、「表示制御手段」としての表示制御部９４ｅによって、モデル画像１０４ｂに対応する操作情報（図示省略）を表示部９４ｃに表示させるように表示処理が実行される。
【００４７】
（搬送方向変換部における紙詰まり処理）
図１４は、搬送方向変換部７４における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図１４（Ａ）は第１マーク９０３ａ〜９０３ｄが紙詰まりを生じた用紙Ｐで被覆されたときの撮像画像Ｘ５を示す図であり、図１４（Ｂ）は操作情報１０６が表示された撮像画像Ｘ５を示す図である。
【００４８】
搬送方向変換部７４では、搬送方向変換部７４又はその近傍（第１部分，固定部）に少なくとも１つ（本実施形態では４つ）の第１マーク９０３ａ〜９０３ｄが形成されており、搬送方向変換部７４の側部又は搬送方向変換部７４から外れた部分（第２部分，固定部）に少なくとも１つ（本実施形態では１つ）の第２マーク９２３が形成されている。したがって、搬送方向変換部７４で用紙Ｐの紙詰まりが生じると、紙詰まりを生じた用紙Ｐによって第１マーク９０３ａ〜９０３ｄの一部又は全部が被覆される。そこで、操作情報提供システム１０によって、図７及び図８に示した方法と同様の方法により、紙詰まり処理に関する操作情報が提供される。
【００４９】
図１４（Ａ）に示すように、この紙詰まり処理に関して、ステップＳ１（図７）で撮像された撮像画像Ｘ５は、全ての第１マーク９０３ａ〜９０３ｄが用紙Ｐで被覆された画像である。また、図１４（Ｂ）に示すように、ステップＳ７（図７）で表示される操作情報１０６は、２つの手の画像と用紙Ｐの操作方向を示す矢印の画像である。したがって、撮像画像Ｘ５及び操作情報１０６を見たユーザは、用紙Ｐの幅方向両端部を手で持って、用紙Ｐを矢印方向に除去すればよいことが分かる。
【００５０】
（インクカートリッジの操作）
図１５は、インクカートリッジ４２ａ〜４２ｄの操作に関する撮像画像及び操作情報を示す図であり、図１５（Ａ）は第１マーク９０４ｄがユーザの手指で被覆されたときの撮像画像Ｘ６を示す図であり、図１５（Ｂ）は操作情報１０８が表示された撮像画像Ｘ６を示す図である。
【００５１】
インクカートリッジ４２ａ〜４２ｄでは、これらの上面（第１部分，固定部）に第１マーク９０４ａ〜９０４ｄが形成されており、インクカートリッジ４２ａ〜４２ｄから外れた部分（第２部分，固定部）に少なくとも１つ（本実施形態では１つ）の第２マーク９２４が形成されている。したがって、インクカートリッジ４２ａ〜４２ｄのいずれかを手指で押し下げて取り外す際には、第１マーク９０４ａ〜９０４ｄのいずれかが手指で被覆される。そこで、操作情報提供システム１０によって、図７及び図８に示した方法と同様の方法により、インクカートリッジ４２ａ〜４２ｄの取り外しに関する操作情報が提供される。
【００５２】
図１５（Ａ）に示すように、このインクカートリッジの操作に関して、ステップＳ１（図７）で撮像された撮像画像Ｘ６は、第１マーク９０４ｄが手指で被覆された画像である。また、図１５（Ｂ）に示すように、ステップＳ７（図７）で表示される操作情報１０８は、インクカートリッジ４２ｄの移動方向を示す画像である。したがって、撮像画像Ｘ６及び操作情報１０８を見たユーザは、インクカートリッジ４２ｄを手前に移動させればよいことが分かる。
【００５３】
なお、インクカートリッジ４２ａ〜４２ｄの装着状態を確認する場合、第１マーク９０４ａ〜９０４ｄが形成されるインクカートリッジ４２ａ〜４２ｄの上面（第１部分）は「可動部」となり、インクカートリッジ４２ａ〜４２ｄのいずれかが確実に装着されていない場合には、それに対応する第１マーク９０４ａ〜９０４ｄと、インクカートリッジ４２ａ〜４２ｄから外れた部分（第２部分，固定部）に形成された第２マーク９２４との相対位置関係が変動する。そこで、操作情報提供システム１０では、当該相対位置関係に関する複数のモデル画像が用意され、当該相対位置関係に応じて、インクカートリッジ４２ａ〜４２ｄを確実に装着するための操作情報が提供される。
【００５４】
（ガイド部の操作）
図１６は、ガイド部８４の操作に関する撮像画像及び操作情報を示す図であり、図１６（Ａ）は第１マーク９０５ａ，９０５ｂが露出したときの撮像画像Ｘ７を示す図であり、図１６（Ｂ）は操作情報１１０が表示された撮像画像Ｘ７を示す図である。
【００５５】
本実施形態では、一対のガイド部８４のそれぞれにおける原稿受け部８４ｂの上面（第１部分，可動部）に、第１マーク９０５ａ，９０５ｂが形成されており、自動供給装置８２の上面（第２部分，固定部）に、少なくとも１つ（本実施形態では１つ）の第２マーク９２５が形成されている。したがって、用紙Ｐのサイズに応じてガイド部８４間の間隔が適正に調整されていない場合には、第１マーク９０５ａ及び９０５ｂの少なくとも一方が露出し、ガイド部８４間の間隔が適正に調整されているときには、用紙Ｐによって第１マーク９０５ａ及び９０５ｂの両方が被覆される。そこで、操作情報提供システム１０によって、図７及び図８に示した方法と同様の方法により、ガイド部８４の操作に関する操作情報が提供される。
【００５６】
図１６（Ａ）に示すように、このガイド部の操作に関して、ステップＳ１（図７）で撮像された撮像画像Ｘ７は、全ての第１マーク９０５ａ，９０５ｂが露出した画像である。また、図１６（Ｂ）に示すように、ステップＳ７（図７）で表示される操作情報１１０は、２つの手の画像とガイド部８４の移動方向を示す矢印の画像である。したがって、撮像画像Ｘ７及び操作情報１１０を見たユーザは、矢印方向（ガイド部８４間の間隔を狭くする方向）にガイド部８４を移動させればよいことが分かる。
【００５７】
なお、ステップＳ１（図７）で撮像された撮像画像Ｘ７は、全ての第１マーク９０５ａ，９０５ｂが用紙Ｐで被覆された画像であってもよい。この場合、ステップＳ１３，１５（図８）では、多機能装置１２の状態が適正であることを示す情報を含む操作情報（以下、「適正情報」という。）が複数の操作情報の中から特定され、ステップＳ７（図７）では、当該適正情報が携帯端末９４の表示部９４ｃに表示される。この場合の適正情報は、操作をする必要がないことを示す情報であってもよい。また、多機能装置１２は、受信装置を備えるとともに、当該適正情報を受信したときに、通常の動作を開始するように構成されてもよいし、当該適正情報を操作パネル２２に表示するように構成されてもよい。さらに、このような適正情報を提供する動作は、他の操作対象部分において操作情報を提供する場面で実行されてもよい。表示部９４ｃ又は操作パネル２２に適正情報を表示することにより、ユーザは、多機能装置１２の状態が適正であることを容易に確認することができる。
【００５８】
（回動部分の操作）
図１７は、回動部分１２０を撮像した撮像画像Ｘ８を示す図であり、図１８（Ａ）〜（Ｃ）は、図１７の撮像画像Ｘ８に対応する３つのモデル画像１２４ａ〜１２４ｃを示す図である。
【００５９】
「操作対象装置」の種類によっては、回動軸を中心として回動される回動部分１２０を有する場合があり、この回動部分１２０の状態（回動角度等）に応じて、取るべき操作が異なる場合がある。そこで、操作情報提供システム１０によって、図７及び図８に示した方法と同様の方法により、回動部分１２０の状態（回動角度等）に応じた必要な操作情報が提供される。
【００６０】
図１７に示すように、本実施形態では、回動部分１２０（第１部分，可動部）に第１マーク９０６が形成され、他の部分１２２（第２部分，固定部）に第２マーク９２６が形成されている。したがって、回動部分１２０を回転させると、第１マーク９０６と第２マーク９２６との相対位置関係が変動する。
【００６１】
図１７及び図１８に示すように、本実施形態において、３つのモデル画像１２４ａ〜１２４ｃのうち、第１マーク９０６と第２マーク９２６との相対位置関係が、撮像画像Ｘ８に撮像されている第１マーク９０６と第２マーク９２６との相対位置関係と最も近似するモデル画像は、モデル画像１２４ａ（図１８（Ａ））である。そこで、図８のステップＳ１３，Ｓ１５では、最近似モデル画像としてモデル画像１２４ａが選択され、ステップＳ７では、「表示制御手段」としての表示制御部９４ｅによって、モデル画像１２４ａに対応する操作情報（図示省略）を表示部９４ｃに表示させるように表示処理が実行される。例えば、回動部分１２０を所定角度で回動させた後にこれを引っ張る必要がある場合には、引っ張る方向を示す矢印等が操作情報として表示部９４ｃに表示される。
【００６２】
（その他の実施形態）
上述の実施形態では、「操作対象装置」としてインクを吐出するインク吐出ヘッド４６を有する多機能装置１２を用いているが、他の実施形態では、「操作対象装置」として、処理液を吐出する処理液吐出ヘッドを有する装置を用いてもよいし、プリンタ、コピー機、スキャナー装置及びファクシミリ装置等のような単機能装置を用いてもよい。すなわち、「操作対象装置」となる装置は、どのような装置であってもよい。
【００６３】
上述の実施形態では、操作情報が図形画像（手の画像及び矢印の画像）の構成であるが、他の実施形態では、操作の内容に関する文字情報を操作情報に含めてもよい。また、他の画像を操作情報に含めてもよい。
【００６４】
上述の実施形態では、撮像画像の上に操作情報の表示を重ねているが、操作情報の重ね方を特別なものとしてもよい。例えば、第１マーク及び第２マークの少なくとも一方の見え方の変化（傾き、角度、形状、大きさの変化等）を解析し、立体化した操作情報をリアルタイムに撮像画像に重ね合わせてもよい。この技術は、ＡＲ（Augmented Reality）技術に関するものということができる。
【００６５】
上述の実施形態では、第１マークや第２マークを特別に設けた構成となっているが、第１マーク及び第２マークは、操作対象装置の各部位の表面に描かれた模様であってもよい。また、判断を用意とするために、第１マーク及び第２マークをバーコードなどの特定し易いものとしてもよい。
【００６６】
上述の実施形態では、第１マークを含むモデル画像や第２マークを含むモデル画像を選択する構成となっているが、第１マークや第２マークを共通性のない模様（例えば、バーコードなど）とすれば、第１マークや第２マークのみで撮像画像の特定が可能である。つまり、第１マークや第２マークそのものをモデル画像として取り扱ってもよい。その場合に第１マーク及び第２マークの大きさや傾き、変形度合いを解析し、撮像画像の範囲や立体的な位置を特定してもよい。
【００６７】
また、上述の実施形態では、モデル画像と操作画像とを記憶する「記憶手段」と、最近似画像を特定する「特定手段」とが、画像処理サーバ９８において実現されているが、これらの少なくとも１つは、「操作対象装置」としての多機能装置１２で実現されてもよいし、「撮像装置」としての携帯端末９４で実現されてもよい。これらの少なくとも１つが多機能装置１２で実現される場合、多機能装置１２が、携帯端末９４と通信する「通信手段」を備えることになる。
【符号の説明】
【００６８】
Ｐ… 用紙
Ｑ… 印刷領域
Ｒ… 搬送路
Ｔ… 水平部
Ｗ… 原稿
Ｘ１〜Ｘ８… 撮像画像
１０… 操作情報提供システム
１２… 多機能装置
３８… 用紙搬送機構
４２ａ〜４２ｄ… インクカートリッジ
４６ａ… ノズル面
４６… インク吐出ヘッド
４８… キャリッジ
７４… 搬送方向変換部
８４… ガイド部
９０１〜９０６ …第１マーク
９２１〜９２６… 第２マーク
９４… 携帯端末（撮像装置）
９４ａ… 撮像部（撮像手段）
９４ｃ… 表示部（情報表示手段）
９４ｄ… 端末制御部
９４ｅ… 表示制御部（表示制御手段）
９８… 画像処理サーバ
９８ａ… 記憶部（記憶手段）
９８ｃ… サーバ制御部（特定手段）
１００，１０４，１２４… モデル画像
１０２，１０６，１０８，１１０… 操作情報
【特許請求の範囲】
【請求項１】
操作対象装置の操作方法に関する操作情報を提供する操作情報提供システムであって、
前記操作対象装置の第１部分に形成された少なくとも１つの第１マークと、
前記操作対象装置の第２部分に形成された少なくとも１つの第２マークと、
情報表示手段と前記操作対象装置を撮像する撮像手段とを有する撮像装置と、
前記操作対象装置に関する画像であって前記第１マークと前記第２マークとがそれぞれ１つ以上画像内に含まれている複数のモデル画像と、前記複数のモデル画像のそれぞれに対応して用意された複数の操作情報とを記憶する記憶手段と、
前記撮像装置で撮像された撮像画像と、前記記憶手段に記憶された前記複数のモデル画像とを比較することによって、前記撮像画像に最も近似した最近似モデル画像を特定する特定手段と、
前記特定手段にて特定された前記最近似モデル画像に対応する前記操作情報を表示させるように前記情報表示手段を制御する表示制御手段とを備え、
前記特定手段は、
前記複数のモデル画像から、前記撮像画像に撮像されている第１マーク及び第２マークと同じ種類の第１マーク及び第２マークを含むモデル画像のみを選択する第１選択処理を実行する第１選択処理実行手段と、
前記第１選択処理で選択されたモデル画像から、第１マークと第２マークとの相対位置関係が前記撮像画像に撮像されている第１マークと第２マークとの相対位置関係と最も近似するモデル画像を選択する第２選択処理を実行する第２選択処理実行手段とを含み、
前記第２選択処理実行手段にて選択されたモデル画像を前記最近似モデル画像として特定する、ことを特徴とする操作情報提供システム。
【請求項２】
前記第１部分は可動部であり、
前記第２部分は固定部である、請求項１に記載の操作情報提供システム。
【請求項３】
前記第１選択処理実行手段は、
前記複数のモデル画像から、前記撮像画像に撮像されている第２マークと同じ種類の第２マークを含むモデル画像のみを選択する同種第２マーク選択処理を実行する同種第２マーク選択処理実行手段と、
前記同種第２マーク選択処理で選択されたモデル画像から、前記撮像画像に撮像されている第１マークと同じ種類の第１マークを含むモデル画像のみを選択する同種第１マーク選択処理を実行する同種第１マーク選択処理実行手段と、を有することを特徴とする請求項２に記載の操作情報提供システム。
【請求項４】
前記操作対象装置は、液体を吐出するノズルが設けられたノズル面を有する液体吐出ヘッドと、前記液体吐出ヘッドを保持するキャリッジと、前記ノズル面と対向する印刷領域に向けて記録媒体を搬送する搬送路と、前記キャリッジを記録媒体の搬送方向に対して直交する方向に往復移動させる駆動部とを有し、
前記第１マークは、前記キャリッジ又は前記液体吐出ヘッドに設けられる、請求項２又は３に記載の操作情報提供システム。
【請求項５】
前記操作対象装置は、用紙を搬送する用紙搬送手段と、その用紙搬送手段によって搬送される用紙に対して印刷を行う印刷ヘッドとを有し、
前記第１部分及び前記第２部分は共に固定部であり、
前記第２マークは、前記用紙搬送手段により搬送される用紙が搬送不良状態となったときに、その用紙によって被覆されることがないと想定される位置に形成され、
前記第１マークは、前記第１部分に複数形成され、
複数の前記第１マークのうち少なくとも１つは、前記用紙搬送手段により搬送される用紙が搬送不良状態となったときに、その用紙によって被覆されると想定される位置に形成されていることを特徴とする、請求項１に記載の操作情報提供システム。
【請求項６】
前記用紙搬送手段は、用紙を略Ｕ字状に曲げながら搬送して、当該用紙の搬送方向を変換する搬送方向変換部を有し、
複数の前記第１マークは、前記搬送方向変換部又はその近傍に設けられる、請求項５に記載の操作情報提供システム。
【請求項７】
前記操作対象装置は、液体を吐出するノズルが設けられたノズル面を有する液体吐出ヘッドと、前記液体吐出ヘッドに供給される液体を貯留する液体カートリッジと、前記液体カートリッジを着脱自在に保持するカートリッジ保持部とを有し、
前記第１マークは、前記液体カートリッジに設けられる、請求項２又は３に記載の操作情報提供システム。
【請求項８】
前記操作対象装置は、画像を読み取る画像読み取り部と、前記画像読み取り部に原稿を自動供給する自動供給装置と、原稿のサイズに応じて位置調整可能に構成され、前記自動供給装置に供給される原稿の供給方向に対して直交する方向の端部に沿って配置されるガイド部とを有し、
前記ガイド部は、前記原稿の端部を受ける原稿受け部を有しており、
前記第１マークは、前記原稿受け部の上面に設けられる、請求項２又は３に記載の操作情報提供システム。
【請求項９】
複数の前記モデル画像の少なくとも１つは、前記操作対象装置の状態が適正であるときの適正画像であり、
前記適正画像に対応して用意された前記操作情報は、前記操作対象装置の状態が適正であることを示す情報を含む、請求項１ないし８のいずれかに記載の操作情報提供システム。
【請求項１０】
前記操作対象装置は、
前記特定手段が前記最近似モデル画像として前記適正画像を特定したときに、前記操作対象装置の状態が適正であることを知らせる報知手段を有する、請求項９に記載の操作情報提供システム。
【請求項１１】
請求項１ないし１０のいずれかに記載の操作情報提供システムにおける少なくとも前記撮像装置として機能する、携帯端末。
【請求項１２】
請求項１ないし１０のいずれかに記載の操作情報提供システムにおける少なくとも前記特定手段としてコンピュータを機能させる、制御プログラム。
【請求項１】
操作対象装置の操作方法に関する操作情報を提供する操作情報提供システムであって、
前記操作対象装置の第１部分に形成された少なくとも１つの第１マークと、
前記操作対象装置の第２部分に形成された少なくとも１つの第２マークと、
情報表示手段と前記操作対象装置を撮像する撮像手段とを有する撮像装置と、
前記操作対象装置に関する画像であって前記第１マークと前記第２マークとがそれぞれ１つ以上画像内に含まれている複数のモデル画像と、前記複数のモデル画像のそれぞれに対応して用意された複数の操作情報とを記憶する記憶手段と、
前記撮像装置で撮像された撮像画像と、前記記憶手段に記憶された前記複数のモデル画像とを比較することによって、前記撮像画像に最も近似した最近似モデル画像を特定する特定手段と、
前記特定手段にて特定された前記最近似モデル画像に対応する前記操作情報を表示させるように前記情報表示手段を制御する表示制御手段とを備え、
前記特定手段は、
前記複数のモデル画像から、前記撮像画像に撮像されている第１マーク及び第２マークと同じ種類の第１マーク及び第２マークを含むモデル画像のみを選択する第１選択処理を実行する第１選択処理実行手段と、
前記第１選択処理で選択されたモデル画像から、第１マークと第２マークとの相対位置関係が前記撮像画像に撮像されている第１マークと第２マークとの相対位置関係と最も近似するモデル画像を選択する第２選択処理を実行する第２選択処理実行手段とを含み、
前記第２選択処理実行手段にて選択されたモデル画像を前記最近似モデル画像として特定する、ことを特徴とする操作情報提供システム。
【請求項２】
前記第１部分は可動部であり、
前記第２部分は固定部である、請求項１に記載の操作情報提供システム。
【請求項３】
前記第１選択処理実行手段は、
前記複数のモデル画像から、前記撮像画像に撮像されている第２マークと同じ種類の第２マークを含むモデル画像のみを選択する同種第２マーク選択処理を実行する同種第２マーク選択処理実行手段と、
前記同種第２マーク選択処理で選択されたモデル画像から、前記撮像画像に撮像されている第１マークと同じ種類の第１マークを含むモデル画像のみを選択する同種第１マーク選択処理を実行する同種第１マーク選択処理実行手段と、を有することを特徴とする請求項２に記載の操作情報提供システム。
【請求項４】
前記操作対象装置は、液体を吐出するノズルが設けられたノズル面を有する液体吐出ヘッドと、前記液体吐出ヘッドを保持するキャリッジと、前記ノズル面と対向する印刷領域に向けて記録媒体を搬送する搬送路と、前記キャリッジを記録媒体の搬送方向に対して直交する方向に往復移動させる駆動部とを有し、
前記第１マークは、前記キャリッジ又は前記液体吐出ヘッドに設けられる、請求項２又は３に記載の操作情報提供システム。
【請求項５】
前記操作対象装置は、用紙を搬送する用紙搬送手段と、その用紙搬送手段によって搬送される用紙に対して印刷を行う印刷ヘッドとを有し、
前記第１部分及び前記第２部分は共に固定部であり、
前記第２マークは、前記用紙搬送手段により搬送される用紙が搬送不良状態となったときに、その用紙によって被覆されることがないと想定される位置に形成され、
前記第１マークは、前記第１部分に複数形成され、
複数の前記第１マークのうち少なくとも１つは、前記用紙搬送手段により搬送される用紙が搬送不良状態となったときに、その用紙によって被覆されると想定される位置に形成されていることを特徴とする、請求項１に記載の操作情報提供システム。
【請求項６】
前記用紙搬送手段は、用紙を略Ｕ字状に曲げながら搬送して、当該用紙の搬送方向を変換する搬送方向変換部を有し、
複数の前記第１マークは、前記搬送方向変換部又はその近傍に設けられる、請求項５に記載の操作情報提供システム。
【請求項７】
前記操作対象装置は、液体を吐出するノズルが設けられたノズル面を有する液体吐出ヘッドと、前記液体吐出ヘッドに供給される液体を貯留する液体カートリッジと、前記液体カートリッジを着脱自在に保持するカートリッジ保持部とを有し、
前記第１マークは、前記液体カートリッジに設けられる、請求項２又は３に記載の操作情報提供システム。
【請求項８】
前記操作対象装置は、画像を読み取る画像読み取り部と、前記画像読み取り部に原稿を自動供給する自動供給装置と、原稿のサイズに応じて位置調整可能に構成され、前記自動供給装置に供給される原稿の供給方向に対して直交する方向の端部に沿って配置されるガイド部とを有し、
前記ガイド部は、前記原稿の端部を受ける原稿受け部を有しており、
前記第１マークは、前記原稿受け部の上面に設けられる、請求項２又は３に記載の操作情報提供システム。
【請求項９】
複数の前記モデル画像の少なくとも１つは、前記操作対象装置の状態が適正であるときの適正画像であり、
前記適正画像に対応して用意された前記操作情報は、前記操作対象装置の状態が適正であることを示す情報を含む、請求項１ないし８のいずれかに記載の操作情報提供システム。
【請求項１０】
前記操作対象装置は、
前記特定手段が前記最近似モデル画像として前記適正画像を特定したときに、前記操作対象装置の状態が適正であることを知らせる報知手段を有する、請求項９に記載の操作情報提供システム。
【請求項１１】
請求項１ないし１０のいずれかに記載の操作情報提供システムにおける少なくとも前記撮像装置として機能する、携帯端末。
【請求項１２】
請求項１ないし１０のいずれかに記載の操作情報提供システムにおける少なくとも前記特定手段としてコンピュータを機能させる、制御プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【公開番号】特開２０１２−２３１３６１（Ｐ２０１２−２３１３６１Ａ）
【公開日】平成２４年１１月２２日（２０１２．１１．２２）
【国際特許分類】
【出願番号】特願２０１１−９９１３３（Ｐ２０１１−９９１３３）
【出願日】平成２３年４月２７日（２０１１．４．２７）
【出願人】（０００００５２６７）ブラザー工業株式会社 (13,856)
【Ｆターム（参考）】
【公開日】平成２４年１１月２２日（２０１２．１１．２２）
【国際特許分類】
【出願日】平成２３年４月２７日（２０１１．４．２７）
【出願人】（０００００５２６７）ブラザー工業株式会社 (13,856)
【Ｆターム（参考）】
[ Back to top ]