作業支援システム、作業管理システム、および作業管理方法
【課題】コンベアで搬送される物品を容易に抽出できる作業管理システムを提供することを目的とする。
【解決手段】作業管理システムは、コンベア６０の上流側の所定の位置を検出対象領域として複数のタグリーダを配置し、検出対象領域をスキャンすることにより物品に添付されているＩＣタグ情報を読取り、管理サーバに物品の位置情報および時間情報を送付するタグスキャン装置２０と、コンベアを撮影するカメラ４２と、カメラ４２の動画映像情報を表示するモニタ４１を有し、管理サーバ１０に動画映像情報を送付する動画映像装置４０とを備え、管理サーバ１０は、物品の位置情報と時間情報と、動画映像情報とを基に、指定された物品のコンベア６０上の物品を特定する。
【解決手段】作業管理システムは、コンベア６０の上流側の所定の位置を検出対象領域として複数のタグリーダを配置し、検出対象領域をスキャンすることにより物品に添付されているＩＣタグ情報を読取り、管理サーバに物品の位置情報および時間情報を送付するタグスキャン装置２０と、コンベアを撮影するカメラ４２と、カメラ４２の動画映像情報を表示するモニタ４１を有し、管理サーバ１０に動画映像情報を送付する動画映像装置４０とを備え、管理サーバ１０は、物品の位置情報と時間情報と、動画映像情報とを基に、指定された物品のコンベア６０上の物品を特定する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、コンベアで搬送される物品を容易に抽出できる作業支援システム、作業管理システム、および作業管理方法に関する。
【背景技術】
【０００２】
多種多様の生産が行われている生産工程で、不良品や特定の製品（以下、対象物という。）を作業者が抽出するために、作業指示書に従って、対象物の抽出作業が実施されている。しかしながら、コンベアで搬送される対象物を認識することは難しく、抽出漏れや、抽出誤りが発生していた。
【０００３】
そのため、生産ライン上で製品不良が発生したときに、製品に取り付けられたＩＣタグの不良情報を読取り、その製品が載せられたパレットを自動的に生産ラインから払い出すことが開示されている（例えば、特許文献１参照）。
【０００４】
生産ラインではないが、手荷物の管理における利便性を向上するために、コンベア上に流れる手荷物について、ＩＣタグリーダで読み込まれた手荷物の識別番号と物品形状を案内表示器に表示する方法が開示されている（例えば、特許文献２参照）。
【特許文献１】特開２００３−２０８２０７号公報
【特許文献２】特開２００３−１４６４３８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
特許文献１では、コンベアで搬送される物品はパレット上に置かれ、パレットは一列に搬送されている。このため、ＩＣタグリーダによりＩＣタグの不良情報を読み込むことができる。しかしながら、コンベア上に非整列に置かれた複数の物品が搬送された場合には、抽出すべき物品を特定することができず、生産ラインから払い出すことができない問題がある。
【０００６】
また、特許文献２では、同様に、コンベアで搬送される物品は、ほぼ整列された状態で載せられているため、コンベア上の手荷物の位置が判定できる。しかしながら、例えば、コンベア上に同一形状の複数の物品が並列に置かれると、物品を特定することができない問題がある。
【０００７】
本発明は、前記の課題を解決するための発明であって、コンベアで搬送される物品を容易に抽出できる作業支援システム、作業管理システム、および作業管理方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
前記目的を達成するため、物品を搬送するコンベアの上流側の所定の位置を検出対象領域として配置され、コンベアで搬送される物品に添付された無線ＩＣタグを検出する、個々に位置管理された複数のＩＣタグ検出器（例えば、タグリーダ２６）と、コンベア上における無線ＩＣタグの位置を監視する処理装置（例えば、管理サーバ１０）とを備え、ＩＣタグ検出器が無線ＩＣタグを検出すると、当該検出にかかる無線ＩＣタグの検出位置と検出時刻とタグ情報とが特定され、これら特定された情報に基づいて作業を支援する作業支援システムにおいて、コンベアの所定の位置を撮影する動画像撮影装置（例えば、カメラ４２）と、動画像撮影装置が撮影した動画像に画像処理を行い、所定の物品に視覚的なマーキング処理を行う画像処理装置（例えば、制御部４４）と、動画像撮影装置が撮影し、画像処理装置がマーキング処理した動画像を表示する表示装置（例えば、モニタ４１）とをさらに備え、処理装置は、ＩＣタグ検出器が無線ＩＣタグを検出することにより特定される、検出位置と検出時刻に加えて、コンベアの搬送速度に基づいて、検出した無線ＩＣタグのコンベアにおける搬送方向の位置を算出し、算出した搬送方向の位置と、検出位置から得られるコンベアの幅方向の位置とから無線ＩＣタグの位置を監視し、検出した無線ＩＣタグのタグ情報が、所定のタグ情報であるか否かを判定し、所定のタグ情報であるときは、画像処理装置に、当該所定のタグ情報を有する無線ＩＣタグのコンベアの幅方向の位置および搬送方向の位置を通知し、画像処理装置に当該通知された位置に対応する物品にマーキングをさせることを特徴とする。
【０００９】
また、前記目的を達成するため、コンベアで搬送される物品の抽出作業を管理する管理サーバ（例えば、管理サーバ１０）を有する作業管理システムは、物品を搬送するコンベアの上流側の所定の位置を検出対象領域として複数のタグリーダを配置し、前記検出対象領域をスキャンすることにより物品に添付されているＩＣタグ情報を読取り、管理サーバに物品の位置情報および時間情報を送付するタグスキャン装置（例えば、タグスキャン装置２０，３０）と、コンベアを撮影する撮影部および撮影部の動画映像情報を表示する表示部を有し、管理サーバに動画映像情報を送付する動画映像装置（例えば、動画映像装置４０，５０）とを備え、管理サーバは、物品の位置情報および時間情報と、動画映像情報とを基に、指定された物品のコンベア上の物品を特定することを特徴とする。
【発明の効果】
【００１０】
本発明によれば、コンベアで搬送される物品を容易に抽出することができる。
【発明を実施するための最良の形態】
【００１１】
以下、本発明の実施形態について図面を参照して説明する。
図１は、作業管理システムを示す説明図である。図１において本発明の概要を説明する。作業管理システムは、管理サーバ１０と、探索エリア用のタグスキャン装置２０と、チェックエリア用のタグスキャン装置３０と、探索エリア用の動画映像装置４０と、チェックエリア用の動画映像装置５０とを有している。管理サーバ１０、タグスキャン装置２０，３０、および動画映像装置４０，５０は、ネットワーク６５を介して接続されている。
【００１２】
タグスキャン装置２０は、コンベア６０を搬送される製品７０に付されたＩＣタグ７１の情報を、コンベア６０の下部に設置された複数のタグリーダ２６（図３参照）を用いて探索エリアをスキャンして読取る。動画映像装置４０は、カメラ４２を用いて、コンベア６０で搬送される製品７０を撮影する。管理サーバ１０は、タグスキャン装置２０からのスキャン情報（位置情報、タグ情報、時間情報）と、動画映像装置４０からの動画映像情報とを基に、コンベア６０の搬送速度を考慮して抽出する製品を特定し、動画映像装置４０へ製品（特定物）のマーキング情報（図１６参照）を送信する。動画映像装置４０は、マーキング情報を受信すると、モニタ４１に、作業指示として抽出する特定物を強調して表示する。
【００１３】
作業者は、モニタ４１に表示された特定物を確認し抽出する。タグスキャン装置３０および動画映像装置５０は、チェック用の装置であり、作業者によって特定物の抽出が完了したか否かが、モニタ５１により、確認することができる。
【００１４】
タグスキャン装置３０は、コンベア６０を搬送される製品７０に付されたＩＣタグ７１の情報を、コンベア６０の下部に設置された複数のタグリーダ３６（図３参照）を用いてチェックエリアをスキャンして読取る。動画映像装置５０は、カメラ５２を用いて、コンベア６０で搬送される製品７０を撮影する。管理サーバ１０は、タグスキャン装置３０からのスキャン情報（位置情報、タグ情報、時間情報）と、動画映像情報とを基に、コンベア６０の搬送速度を考慮して抽出する製品を特定し、動画映像装置５０のモニタ５１に、作業指示として特定物を強調して表示する。作業者が特定物の抽出ができている場合は、特定物は表示されず、作業者により抽出が完了していることが確認できる。
【００１５】
なお、タグリーダ２６，３６は、コンベア６０の搬送面の下部に設置しているが、製品７０の搬送に障害がなければ、コンベア６０の搬送面と所定の間隔を設けて上面に設置してもよい。この場合、カメラ４２，５２の撮影エリアと重ならないようにするのがよい。
【００１６】
図２は、作業指示画面を示す説明図である。図２（ａ）は、モニタ４１の表示画面例を示し、図２（ｂ）には、コンベア６０上の製品７０の搬送状態を示す。モニタ４１の表示画面例では、カメラ４２で撮影された実映像の上に特定物を強調色で強調されている。特定物の位置は、コンベア６０上の不良品の位置に対応している。作業者は、モニタ４１上に表示される特定物を確認することにより容易に特定物を抽出することができる。
【００１７】
以下、作業管理システムについて、図面を参照して詳細に説明する。
図３は、作業管理システムの構成を示すブロック図である。管理サーバ１０は、通信部１３、制御部１４、記憶部１５、操作部１６、およびモニタ１７を有している。タグスキャン装置２０は、通信部２３、制御部２４、記憶部２５、および複数のタグリーダ２６を有している。同様に、タグスキャン装置３０は、通信部３３、制御部３４、記憶部３５、および複数のタグリーダ３６を有している。動画映像装置４０は、通信部４３、制御部４４、記憶部４５、カメラ４２、およびモニタ４１を有している。同様に、動画映像装置５０は、通信部５３、制御部５４、記憶部５５、カメラ５２、およびモニタ５１を有している。通信部１３，２３，３３，４３，５３は、ネットワーク６５を介して、データのやり取りを行うためのインタフェースである。制御部１４，２４，３４，４４，５４は、記憶部１５，２５，３５，４５，５５に格納されたプログラムを実行することで、各構成要素（例えば、通信部１３，２３，３３，４３，５３）を統括的に制御し、様々な演算処理を行う。記憶部１５，２５，３５，４５，５５は、プログラムやデータを永続的に記憶するために用いられるものであり、ハードディスクなどで構成される。モニタ１７，４１，５１は、管理者、作業者などに対して、メッセージなどを表示するために用いられるものであり、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）や液晶ディスプレイなどで構成される。操作部１６は、データや命令などを入力するために用いられるものであり、キーボードやマウスなどで構成される。タグリーダ２６，３６は、ＩＣタグ７１（図１参照）を読取るためのリーダである。なお、ＩＣタグ７１（図１参照）は、ＲＦＩＤ（Radio frequency identification）などの非接触の無線用ＩＣタグである。ＩＣタグ７１に記憶されているＩＣタグ情報については、図６にて説明する。
【００１８】
タグスキャン装置２０は、管理サーバ１０から、抽出製品登録情報（抽出すべきタグＩＤ）を受信すると、検索エリア（図１参照）に配置された複数のタグリーダ２６により、検索エリアをスキャンし、読取ったスキャン情報を管理サーバ１０に送信する。スキャン情報にはタグＩＤ、位置情報、時間情報が含まれる。抽出製品登録情報、スキャン情報については、図１０〜図１２にて説明する。
【００１９】
同様に、タグスキャン装置３０は、管理サーバ１０から、抽出すべきタグＩＤを受信すると、検索エリア（図１参照）に配置された複数のタグリーダ３６により、検索エリアをスキャンし、読取ったスキャン情報を管理サーバ１０に送信する。スキャン情報にはタグＩＤ、位置情報、時間情報が含まれる。
【００２０】
図４は、タグスキャン装置のタグリーダ配置構成を示す説明図である。図４に示すように（適宜図１、図３参照）、タグスキャン装置２０，３０のタグリーダ２６，３６は、コンベア６０の下部に複数設置され、探索エリアまたはチェックエリアを通過するＩＣタグ７１の識別情報を読取る。図４においては、製品の流れ（Ｘ座標方向）に対し、検索エリアを１０等分し、Ｘ座標と直交するＹ座標に対して、コンベア６０の幅を１０等分している。各区画（Ｘ座標．Ｙ座標）に関連付けて、複数のタグリーダ２６，３６が配置されている。これにより、ＩＣタグ７１の位置情報は、例えば、（Ｘ座標．Ｙ座標）＝（４．３）として得ることができる。
【００２１】
図３に戻り、動画映像装置４０は、管理サーバ１０から撮影開始情報を受信すると、カメラ４２からのコンベア６０の動画映像情報を、モニタ４１に映すとともに、管理サーバ１０に送信する。また、抽出製品情報を受信すると、動画映像情報の抽出製品にマーキング処理を施し、モニタ４１に映す。
【００２２】
同様に、動画映像装置５０は、管理サーバ１０から撮影開始情報を受信すると、カメラ５２からのコンベア６０の動画映像情報を、モニタ５１に映すとともに、管理サーバ１０に送信する。また、抽出製品情報を受信すると、動画映像情報の抽出製品にマーキング処理を施し、モニタ５１に映す。
【００２３】
管理サーバ１０は、操作部１６から作業指示されると、抽出製品登録情報を、タグスキャン装置２０に送信するとともに、撮影開始情報を動画映像装置４０に送信する。そして、タグスキャン装置２０からスキャン情報を受信するとともに、動画映像装置４０から動画映像情報を受信する。管理サーバ１０は、スキャン情報と動画映像情報を基に、抽出製品を特定すると、動画映像装置４０に抽出製品情報を送信する。管理サーバ１０の機能は図５にてさらに詳しく説明する。
【００２４】
図５は、管理サーバの機能を示す構成図である。管理サーバ１０の制御部１４（図３参照）は、スキャン情報処理部８７と、スキャン情報解析部８８と、スキャン情報蓄積部８９と、動画映像処理部８１と、動画映像解析部８２と、動画映像蓄積部８３と、判定部８６と、抽出製品監視処理部８５と、編集部８４と、および抽出製品情報格納部９０を備える。記憶部１５（図３参照）には、設備管理ＤＢ９１と、品質管理ＤＢ９２と、抽出製品登録情報ＤＢ９３とを備える。
【００２５】
スキャン情報処理部８７は、通信部１３を介して、タグスキャン装置２０（図３参照）からスキャン情報を受信すると、スキャン情報解析部８８とスキャン情報蓄積部８９に送信する。スキャン情報解析部８８は、スキャン情報から抽出製品の位置情報を確定する。
【００２６】
一方、動画映像処理部８１は、通信部１３を介して、動画映像装置４０（図３参照）から動画像情報を受信すると、動画映像解析部８２と動画映像蓄積部８３に送信する。動画映像解析部８２は、動画像情報から、対象物を輪郭処理などにより抽出し、対象物の位置情報を確定する。判定部８６は、抽出製品情報格納部９０から読み出した抽出製品登録情報と、スキャン情報解析部８８から取得した抽出製品の位置情報と、動画映像解析部８２から取得した製品の位置情報とから、抽出製品か否かを判定する。抽出製品であると判定されると、抽出製品監視処理部８５は、コンベア速度（図７参照）などを考慮して抽出製品の所定時間後の位置情報を算出し、編集部８４へ送付する。また、抽出製品監視処理部８５は、処理結果に不具合などあれば（例えば、推定位置に該当する製品が存在しないならば）、不具合情報を動画映像蓄積部８３およびスキャン情報蓄積部８９に送信するとともに、再度、動画映像解析部８２およびスキャン情報解析部８８に問合せる。編集部８４は、所定時間後の位置情報に基づいてマーキング情報を作成し、通信部１３を介して、動画映像装置４０に、マーキング情報を送信する。なお、さらに詳細な説明は、図１６にて行う。なお、抽出製品情報格納部９０は、操作部１６（図３参照）からの抽出条件に基づいて、判定部８６に入力される抽出製品登録情報の一時的な記憶格納部である。
【００２７】
図６は、ＩＣタグに記憶されるＩＣタグ情報を示す説明図である。ＩＣタグ７１には、タグＩＤ、ロット番号（ロットＮｏ．）、製品コード、製造工場、ライン番号（ラインＮｏ．）、製造日、保障期限、保管期限が記憶されている。図６によれば、例えば、タグＩＤがａａａの場合、ロットＮｏ．が２００７０２０３−３ＡＡＡ、製品コードがＡＡＡＡであり、ＮＫ工場の３番ラインで製造されていることがわかる。また、タグＩＤのａａａとｂｂｂとは同じ情報が記録されていることから、同一製品、同一ロット、同一製造ラインで製造されたこともわかる。
【００２８】
図７は、設備管理ＤＢに記憶される設備使用情報テーブルを示す説明図である。設備管理ＤＢ９１には、搬出ライン番号（搬出ラインＮｏ．）、開始予定時間、終了予定時間、開始実績時間、終了実績時間、ロット番号（ロットＮｏ．）、コンベア速度、担当者が記憶されている。図７によれば、例えば、搬出ラインの１５番は、９時５０から開始され、ロットＮｏ．が２００７０２０３−３ＡＡＡの製品が、コンベア速度０．５ｍ／ｓで搬送されていることがわかる。
【００２９】
図８は、品質管理ＤＢに記憶される品質管理情報テーブルを示す説明図である。品質管理ＤＢ９２は、ロット番号（ロットＮｏ．）、製品コード、製造工場、ライン番号（ラインＮｏ．）、搬送ライン番号（搬送ラインＮｏ．）、製造日、保障期限、保管期限、タグＩＤ、検査予定数量、検査場数量、検査実績数量、品質情報、担当者が記憶されている。特に、検査結果に重要となる品質情報は、良品の場合フラグ値は０であり、不良品の場合フラグ値は１である。図８によれば、例えば、タグＩＤがａａａの場合は不良品とされていることがわかる。
【００３０】
図９は、抽出製品登録情報ＤＢに記憶される抽出管理情報テーブルを示す説明図である。抽出製品登録情報ＤＢ９３は、品質情報が不良品の製品で、抽出状況を管理するデータベースであり、ロット番号（ロットＮｏ．）、製品コード、製造工場、ライン番号（ラインＮｏ．）、搬送ライン番号（搬送ラインＮｏ．）、製造日、保障期限、保管期限、タグＩＤ、品質情報、抽出情報、担当者が記憶されている。特に、抽出結果に重要となる抽出情報は、未抽出の場合フラグ値は０であり、抽出完了（抽出完）の場合フラグ値は１である。
【００３１】
図１０は、抽出製品のタグＩＤを示す説明図である。図１０には（適宜図３、図５参照）、管理サーバ１０からタグスキャン装置２０またはタグスキャン装置３０に送信される抽出製品登録情報の一例として、タグＩＤを示している。他の抽出製品登録情報には、図９に示すように、ロット番号（ロットＮｏ．）、製品コード、製造工場、ライン番号（ラインＮｏ．）、製造日、保障期限、保管期限があり、図６のＩＣタグ情報に含まれるものであればよい。抽出製品のタグＩＤ情報は、抽出製品情報格納部９０（図５参照）に格納されており、判定部８６において判定する情報として利用される。
【００３２】
図１１は、タグリーダのスキャン情報を示す説明図である。タグスキャン装置２０の制御部２４（図３参照）は、タグリーダ２６からのスキャン情報を記憶部２５に格納する。スキャン情報には、Ｘ座標、Ｙ座標、タグＩＤ、スキャン時の時間（時刻）が記憶されている。図１１によれば、例えば、探索エリア内にタグＩＤがａａａとｂｂｂの製品があることがわかる。タグスキャン装置３０においてもスキャン情報は同様である。
【００３３】
図１２は、抽出製品に該当するタグリーダのスキャン情報を示す説明図である。タグスキャン装置２０の制御部２４（図３参照）は、図１１に示したスキャン情報から抽出製品に該当するスキャン情報を、管理サーバ１０へ送信する。送信するスキャン情報には、Ｘ座標、Ｙ座標、タグＩＤ、スキャン時の時間（時刻）が含まれる。図１２によれば、図１０に示す管理サーバ１０から送信されたタグＩＤがａａａであるので、タグＩＤがａａａのスキャン情報であることがわかる。タグスキャン装置３０においても送信するスキャン情報は同様である。
【００３４】
図１３は、動画映像情報を示す説明図である。動画映像装置４０，５０から管理サーバ１０に送信される動画映像情報は、Ｘ座標、Ｙ座標、色相、明度、彩度、撮影の時間（時刻）である。図１３によれば、色には、色相（色合いの違い）、明度（明るさの違い）、彩度（鮮やかさの違い）の３つの属性があり、全ての色はこの組み合わせで表現でき、しかも２５６の分解能で表現されている。
【００３５】
図１４は、抽出製品情報を示す説明図である。管理サーバ１０から動画映像装置４０，５０へ送信される抽出製品情報は、所定時間後の位置を示すマーキング情報である。抽出製品情報には、Ｘ座標、Ｙ座標、色相、明度、彩度が含まれる。マーキング情報については、図１６にて詳細を説明する。
【００３６】
次に、処理について、適宜図１〜図５を参照して説明する。
図１５は、作業管理システムの処理の全体を示すフローチャートである。図１５において、処理の全体概要を説明する。管理サーバ１０は、管理サーバの操作部１６を介して抽出開始情報が登録されると（ステップＳ１）、管理サーバ１０は、作業管理システムを起動する。管理サーバ１０は、品質管理ＤＢ９２から、品質情報のフラグ値が１（不良品）を抽出し、抽出製品登録情報ＤＢ９３へ抽出すべき抽出登録情報を登録する。管理サーバ１０は、抽出製品登録情報ＤＢ９３のうちの所定の抽出製品情報を抽出製品情報格納部９０に格納し、抽出製品登録情報を、タグスキャン装置２０に送信する（ステップＳ２）。ここでは、抽出製品登録情報として、タグＩＤ（図１０参照）として説明する。
【００３７】
タグスキャン装置２０は、抽出製品登録情報を受信すると（ステップＳ３）、検索エリアを所定時間毎にスキャンする（ステップＳ４）。例えば、１／６０秒間隔でスキャンする。タグスキャン装置２０は、スキャン情報（図１１参照）を記憶部２５に記憶し、制御部２４は、抽出製品登録情報であるタグＩＤに一致するか否かを判定する（ステップＳ５）。タグスキャン装置２０は、タグＩＤに一致した場合（ステップＳ５，Ｙｅｓ）、該当するスキャン情報（図１２参照）を管理サーバ１０に送信する（ステップＳ６）。タグＩＤに一致しない場合（ステップＳ５，Ｎｏ）、ステップＳ４へ戻る。
【００３８】
一方、ステップＳ１において、管理サーバ１０は、動画映像装置４０に撮影開始信号を送信すると、動画映像装置４０は、撮影を開始する（ステップＳ１１）。動画映像装置４０は、カメラ４２からの実写の動画像情報をモニタ４１に送信し映す（ステップＳ１２、ステップＳ１４）。また、動画映像装置４０は、実写の動画像情報（図１３参照）を管理サーバ１０に送信する。
【００３９】
管理サーバ１０は、動画映像装置４０から実写の動画像情報を管理サーバ１０に受信すると、動画映像データを基に輪郭処理などにより製品を特定する（ステップＳ１３）。一方、管理サーバ１０は、タグスキャン装置２０からスキャン情報を受信すると（ステップＳ７）、抽出製品の時刻毎の位置情報を特定する。そして、スキャン情報と、実写の動画像情報を基に、実写の動画像上の抽出製品を特定する（ステップＳ８）。管理サーバ１０は、抽出製品情報（図１４参照）を、動画映像装置４０に送信する（ステップＳ９）。
【００４０】
動画映像装置４０は、抽出製品情報を受信すると（ステップＳ１５）、実写の動画像情報に、抽出製品情報を基に特定した抽出製品にマーキング処理をし（ステップＳ１６）、図２（ａ）に示すようにモニタ４１に映す（ステップＳ１７）。
【００４１】
なお、タグスキャン装置３０と、管理サーバ１０と、動画映像装置５０との関係は、タグスキャン装置２０と、管理サーバ１０と、動画映像装置４０との関係と同様であるので、説明を省略する。
【００４２】
作業指示の処理について、適宜図５を参照して詳細に説明する。
図１６は、管理サーバの処理を示すフローチャートである。図１５と同一処理については、同一符号を付している。
【００４３】
ステップＳ６において、タグスキャン装置２０は、スキャン情報として、抽出製品の位置情報、その位置情報を取得した時間を管理サーバ１０へ送信すると、管理サーバ１０の通信部１３は、スキャン情報を受信する（ステップＳ２０）。スキャン情報処理部８７は、通信部１３を介して、動画映像装置４０からスキャン情報を受信すると、スキャン情報解析部８８とスキャン情報蓄積部８９に送信する（ステップＳ２１）。すると、スキャン情報解析部８８は、スキャン情報から抽出製品の位置情報を確定する（ステップＳ２２）。動画映像蓄積部８３は、スキャン情報を蓄積する（ステップＳ２３）。
【００４４】
ステップＳ１２において、動画映像装置４０は、カメラ４２で撮影した実写の動画像情報をモニタ４１に送信し、モニタ４１は、その実写の動画像を映す（ステップＳ１４）。また、動画映像装置４０は、実写の動画像情報を管理サーバ１０に送信すると、管理サーバ１０の通信部１３は、実写の動画像情報を受信する（ステップＳ３０）。動画映像処理部８１は、通信部１３を介して、動画映像装置４０から実写の動画像情報を受信すると、動画映像解析部８２と動画映像蓄積部８３に送信する（ステップＳ３１）。すると、動画映像解析部８２は、実写の動画像情報から、対象物を輪郭処理などにより抽出し、対象物の位置情報を確定する（ステップＳ３２）。動画映像蓄積部８３は、実写の動画像情報を蓄積する（ステップＳ３３）。ステップＳ２２およびステップＳ３２でのそれぞれの位置情報が確定した時点で、抽出製品情報格納部９０は、抽出製品登録情報を判定部８６に送信する（ステップＳ２３）。
【００４５】
判定部８６は、抽出製品情報格納部９０からの抽出製品登録情報と、スキャン情報解析部８８からの抽出製品の位置情報と、動画映像解析部８２からの対象物の位置情報とから、抽出製品か否かを判定する（ステップＳ２４）。抽出製品と判定されると（ステップＳ２４，Ｙｅｓ）、抽出製品監視処理部８５は、抽出製品のα秒（所定時間）後の現在位置を推定し（ステップＳ２５）、編集部８４へ送付する。編集部８４は、α秒後の位置情報に基づいてマーキング情報を作成し、通信部１３を介して、動画映像装置４０に、マーキング情報を送信する（ステップＳ２６）。なお、ステップＳ２４において、抽出製品と判定されないと（ステップＳ２４，Ｎｏ）、一連の処理を終了する。
【００４６】
動画映像装置４０は、受信したα秒後の位置情報であるマーキング情報を基に、マーキング処理し（ステップＳ１６）、実写の動画像にマーキングした動画像をモニタ４１に映す（ステップＳ１７）。
【００４７】
図１７は、作業管理システムに抽出装置を設置した例を示す説明図である。図１７は、図１に示す作業管理システムにおいて、タグスキャン装置２０と、タグスキャン装置３０との間のコンベア６０上の製品を抽出するための抽出装置１００を設置した場合である。管理サーバ１０は、抽出装置１００の抽出範囲内に到達する所定時間後の抽出製品の位置情報を抽出装置１００へ送信すると、抽出装置１００は、該当する製品を抽出することができる。
【００４８】
本実施形態によれば、作業管理システムは、コンベアで搬送される物品の抽出作業を管理する管理サーバ１０、コンベアの搬送面の下部に複数のタグリーダを有し、タグリーダをスキャンすることにより物品に添付されているＩＣタグ情報を読取り、管理サーバに物品の位置情報および時間情報を送付するタグスキャン装置２０，３０と、コンベアを撮影するカメラ４２，５２と、カメラ４２，５２の動画映像情報を表示するモニタ４１，５１を有し、管理サーバ１０に動画映像情報を送付する動画映像装置４０，５０とを備え、管理サーバ１０は、物品の位置情報と時間情報と、動画映像情報とを基に、指定された物品のコンベア上の物品を特定するので、コンベアで搬送される物品を容易に抽出するための作業指示をすることができる。
【００４９】
管理サーバ１０は、コンベアの搬送速度を考慮し、指定された物品の所定時間後の物品の位置情報であるマーキング情報を、動画映像装置４０，５０に送信する。動画映像装置４０，５０は、管理サーバ１０からマーキング情報を受信すると、前記撮影部で撮影された実写の動画像情報に、マーキング情報を付加して前記モニタ４１，５１に表示するので、作業者は、容易に抽出するための物品を確認することができる。なお、マーキング情報を付加するとは、マーキング情報を基にマーキング処理をしてもよいし、マーキング情報そのものを表示してもよい。
【００５０】
また、本実施形態では、タグスキャン装置２０と、タグスキャン装置３０との間に抽出装置１００を設けているので、マーキング情報を基に指定された物品の抽出を行うことができる。
【図面の簡単な説明】
【００５１】
【図１】作業管理システムを示す説明図である。
【図２】作業指示画面を示す説明図である。
【図３】作業管理システムの構成を示すブロック図である。
【図４】タグスキャン装置のタグリーダ配置構成を示す説明図である。
【図５】管理サーバの機能を示す構成図である。
【図６】ＩＣタグに記憶されるＩＣタグ情報を示す説明図である。
【図７】設備管理ＤＢに記憶される設備使用情報テーブルを示す説明図である。
【図８】品質管理ＤＢに記憶される品質管理情報テーブルを示す説明図である。
【図９】抽出製品登録情報ＤＢに記憶される抽出管理情報テーブルを示す説明図である。
【図１０】抽出製品のタグＩＤを示す説明図である。
【図１１】タグリーダのスキャン情報を示す説明図である。
【図１２】抽出製品に該当するタグリーダのスキャン情報を示す説明図である。
【図１３】動画映像情報を示す説明図である。
【図１４】抽出製品情報を示す説明図である。
【図１５】作業管理システムの処理の全体を示すフローチャートである。
【図１６】管理サーバの処理を示すフローチャートである。
【図１７】作業管理システムに抽出装置を設置した例を示す説明図である。
【符号の説明】
【００５２】
１０ 管理サーバ
２０ タグスキャン装置（探索エリア用）
２６ タグリーダ
３０ タグスキャン装置（チェックエリア用）
４０ 動画映像装置（探索エリア用）
４１，５１ モニタ
４２，５２ カメラ
５０ 動画映像装置（チェックエリア用）
６０ コンベア
６５ ネットワーク
７０ 製品
７１ ＩＣタグ
９１ 設備管理ＤＢ
９２ 品質管理ＤＢ
９３ 抽出製品登録情報ＤＢ
【技術分野】
【０００１】
本発明は、コンベアで搬送される物品を容易に抽出できる作業支援システム、作業管理システム、および作業管理方法に関する。
【背景技術】
【０００２】
多種多様の生産が行われている生産工程で、不良品や特定の製品（以下、対象物という。）を作業者が抽出するために、作業指示書に従って、対象物の抽出作業が実施されている。しかしながら、コンベアで搬送される対象物を認識することは難しく、抽出漏れや、抽出誤りが発生していた。
【０００３】
そのため、生産ライン上で製品不良が発生したときに、製品に取り付けられたＩＣタグの不良情報を読取り、その製品が載せられたパレットを自動的に生産ラインから払い出すことが開示されている（例えば、特許文献１参照）。
【０００４】
生産ラインではないが、手荷物の管理における利便性を向上するために、コンベア上に流れる手荷物について、ＩＣタグリーダで読み込まれた手荷物の識別番号と物品形状を案内表示器に表示する方法が開示されている（例えば、特許文献２参照）。
【特許文献１】特開２００３−２０８２０７号公報
【特許文献２】特開２００３−１４６４３８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
特許文献１では、コンベアで搬送される物品はパレット上に置かれ、パレットは一列に搬送されている。このため、ＩＣタグリーダによりＩＣタグの不良情報を読み込むことができる。しかしながら、コンベア上に非整列に置かれた複数の物品が搬送された場合には、抽出すべき物品を特定することができず、生産ラインから払い出すことができない問題がある。
【０００６】
また、特許文献２では、同様に、コンベアで搬送される物品は、ほぼ整列された状態で載せられているため、コンベア上の手荷物の位置が判定できる。しかしながら、例えば、コンベア上に同一形状の複数の物品が並列に置かれると、物品を特定することができない問題がある。
【０００７】
本発明は、前記の課題を解決するための発明であって、コンベアで搬送される物品を容易に抽出できる作業支援システム、作業管理システム、および作業管理方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
前記目的を達成するため、物品を搬送するコンベアの上流側の所定の位置を検出対象領域として配置され、コンベアで搬送される物品に添付された無線ＩＣタグを検出する、個々に位置管理された複数のＩＣタグ検出器（例えば、タグリーダ２６）と、コンベア上における無線ＩＣタグの位置を監視する処理装置（例えば、管理サーバ１０）とを備え、ＩＣタグ検出器が無線ＩＣタグを検出すると、当該検出にかかる無線ＩＣタグの検出位置と検出時刻とタグ情報とが特定され、これら特定された情報に基づいて作業を支援する作業支援システムにおいて、コンベアの所定の位置を撮影する動画像撮影装置（例えば、カメラ４２）と、動画像撮影装置が撮影した動画像に画像処理を行い、所定の物品に視覚的なマーキング処理を行う画像処理装置（例えば、制御部４４）と、動画像撮影装置が撮影し、画像処理装置がマーキング処理した動画像を表示する表示装置（例えば、モニタ４１）とをさらに備え、処理装置は、ＩＣタグ検出器が無線ＩＣタグを検出することにより特定される、検出位置と検出時刻に加えて、コンベアの搬送速度に基づいて、検出した無線ＩＣタグのコンベアにおける搬送方向の位置を算出し、算出した搬送方向の位置と、検出位置から得られるコンベアの幅方向の位置とから無線ＩＣタグの位置を監視し、検出した無線ＩＣタグのタグ情報が、所定のタグ情報であるか否かを判定し、所定のタグ情報であるときは、画像処理装置に、当該所定のタグ情報を有する無線ＩＣタグのコンベアの幅方向の位置および搬送方向の位置を通知し、画像処理装置に当該通知された位置に対応する物品にマーキングをさせることを特徴とする。
【０００９】
また、前記目的を達成するため、コンベアで搬送される物品の抽出作業を管理する管理サーバ（例えば、管理サーバ１０）を有する作業管理システムは、物品を搬送するコンベアの上流側の所定の位置を検出対象領域として複数のタグリーダを配置し、前記検出対象領域をスキャンすることにより物品に添付されているＩＣタグ情報を読取り、管理サーバに物品の位置情報および時間情報を送付するタグスキャン装置（例えば、タグスキャン装置２０，３０）と、コンベアを撮影する撮影部および撮影部の動画映像情報を表示する表示部を有し、管理サーバに動画映像情報を送付する動画映像装置（例えば、動画映像装置４０，５０）とを備え、管理サーバは、物品の位置情報および時間情報と、動画映像情報とを基に、指定された物品のコンベア上の物品を特定することを特徴とする。
【発明の効果】
【００１０】
本発明によれば、コンベアで搬送される物品を容易に抽出することができる。
【発明を実施するための最良の形態】
【００１１】
以下、本発明の実施形態について図面を参照して説明する。
図１は、作業管理システムを示す説明図である。図１において本発明の概要を説明する。作業管理システムは、管理サーバ１０と、探索エリア用のタグスキャン装置２０と、チェックエリア用のタグスキャン装置３０と、探索エリア用の動画映像装置４０と、チェックエリア用の動画映像装置５０とを有している。管理サーバ１０、タグスキャン装置２０，３０、および動画映像装置４０，５０は、ネットワーク６５を介して接続されている。
【００１２】
タグスキャン装置２０は、コンベア６０を搬送される製品７０に付されたＩＣタグ７１の情報を、コンベア６０の下部に設置された複数のタグリーダ２６（図３参照）を用いて探索エリアをスキャンして読取る。動画映像装置４０は、カメラ４２を用いて、コンベア６０で搬送される製品７０を撮影する。管理サーバ１０は、タグスキャン装置２０からのスキャン情報（位置情報、タグ情報、時間情報）と、動画映像装置４０からの動画映像情報とを基に、コンベア６０の搬送速度を考慮して抽出する製品を特定し、動画映像装置４０へ製品（特定物）のマーキング情報（図１６参照）を送信する。動画映像装置４０は、マーキング情報を受信すると、モニタ４１に、作業指示として抽出する特定物を強調して表示する。
【００１３】
作業者は、モニタ４１に表示された特定物を確認し抽出する。タグスキャン装置３０および動画映像装置５０は、チェック用の装置であり、作業者によって特定物の抽出が完了したか否かが、モニタ５１により、確認することができる。
【００１４】
タグスキャン装置３０は、コンベア６０を搬送される製品７０に付されたＩＣタグ７１の情報を、コンベア６０の下部に設置された複数のタグリーダ３６（図３参照）を用いてチェックエリアをスキャンして読取る。動画映像装置５０は、カメラ５２を用いて、コンベア６０で搬送される製品７０を撮影する。管理サーバ１０は、タグスキャン装置３０からのスキャン情報（位置情報、タグ情報、時間情報）と、動画映像情報とを基に、コンベア６０の搬送速度を考慮して抽出する製品を特定し、動画映像装置５０のモニタ５１に、作業指示として特定物を強調して表示する。作業者が特定物の抽出ができている場合は、特定物は表示されず、作業者により抽出が完了していることが確認できる。
【００１５】
なお、タグリーダ２６，３６は、コンベア６０の搬送面の下部に設置しているが、製品７０の搬送に障害がなければ、コンベア６０の搬送面と所定の間隔を設けて上面に設置してもよい。この場合、カメラ４２，５２の撮影エリアと重ならないようにするのがよい。
【００１６】
図２は、作業指示画面を示す説明図である。図２（ａ）は、モニタ４１の表示画面例を示し、図２（ｂ）には、コンベア６０上の製品７０の搬送状態を示す。モニタ４１の表示画面例では、カメラ４２で撮影された実映像の上に特定物を強調色で強調されている。特定物の位置は、コンベア６０上の不良品の位置に対応している。作業者は、モニタ４１上に表示される特定物を確認することにより容易に特定物を抽出することができる。
【００１７】
以下、作業管理システムについて、図面を参照して詳細に説明する。
図３は、作業管理システムの構成を示すブロック図である。管理サーバ１０は、通信部１３、制御部１４、記憶部１５、操作部１６、およびモニタ１７を有している。タグスキャン装置２０は、通信部２３、制御部２４、記憶部２５、および複数のタグリーダ２６を有している。同様に、タグスキャン装置３０は、通信部３３、制御部３４、記憶部３５、および複数のタグリーダ３６を有している。動画映像装置４０は、通信部４３、制御部４４、記憶部４５、カメラ４２、およびモニタ４１を有している。同様に、動画映像装置５０は、通信部５３、制御部５４、記憶部５５、カメラ５２、およびモニタ５１を有している。通信部１３，２３，３３，４３，５３は、ネットワーク６５を介して、データのやり取りを行うためのインタフェースである。制御部１４，２４，３４，４４，５４は、記憶部１５，２５，３５，４５，５５に格納されたプログラムを実行することで、各構成要素（例えば、通信部１３，２３，３３，４３，５３）を統括的に制御し、様々な演算処理を行う。記憶部１５，２５，３５，４５，５５は、プログラムやデータを永続的に記憶するために用いられるものであり、ハードディスクなどで構成される。モニタ１７，４１，５１は、管理者、作業者などに対して、メッセージなどを表示するために用いられるものであり、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）や液晶ディスプレイなどで構成される。操作部１６は、データや命令などを入力するために用いられるものであり、キーボードやマウスなどで構成される。タグリーダ２６，３６は、ＩＣタグ７１（図１参照）を読取るためのリーダである。なお、ＩＣタグ７１（図１参照）は、ＲＦＩＤ（Radio frequency identification）などの非接触の無線用ＩＣタグである。ＩＣタグ７１に記憶されているＩＣタグ情報については、図６にて説明する。
【００１８】
タグスキャン装置２０は、管理サーバ１０から、抽出製品登録情報（抽出すべきタグＩＤ）を受信すると、検索エリア（図１参照）に配置された複数のタグリーダ２６により、検索エリアをスキャンし、読取ったスキャン情報を管理サーバ１０に送信する。スキャン情報にはタグＩＤ、位置情報、時間情報が含まれる。抽出製品登録情報、スキャン情報については、図１０〜図１２にて説明する。
【００１９】
同様に、タグスキャン装置３０は、管理サーバ１０から、抽出すべきタグＩＤを受信すると、検索エリア（図１参照）に配置された複数のタグリーダ３６により、検索エリアをスキャンし、読取ったスキャン情報を管理サーバ１０に送信する。スキャン情報にはタグＩＤ、位置情報、時間情報が含まれる。
【００２０】
図４は、タグスキャン装置のタグリーダ配置構成を示す説明図である。図４に示すように（適宜図１、図３参照）、タグスキャン装置２０，３０のタグリーダ２６，３６は、コンベア６０の下部に複数設置され、探索エリアまたはチェックエリアを通過するＩＣタグ７１の識別情報を読取る。図４においては、製品の流れ（Ｘ座標方向）に対し、検索エリアを１０等分し、Ｘ座標と直交するＹ座標に対して、コンベア６０の幅を１０等分している。各区画（Ｘ座標．Ｙ座標）に関連付けて、複数のタグリーダ２６，３６が配置されている。これにより、ＩＣタグ７１の位置情報は、例えば、（Ｘ座標．Ｙ座標）＝（４．３）として得ることができる。
【００２１】
図３に戻り、動画映像装置４０は、管理サーバ１０から撮影開始情報を受信すると、カメラ４２からのコンベア６０の動画映像情報を、モニタ４１に映すとともに、管理サーバ１０に送信する。また、抽出製品情報を受信すると、動画映像情報の抽出製品にマーキング処理を施し、モニタ４１に映す。
【００２２】
同様に、動画映像装置５０は、管理サーバ１０から撮影開始情報を受信すると、カメラ５２からのコンベア６０の動画映像情報を、モニタ５１に映すとともに、管理サーバ１０に送信する。また、抽出製品情報を受信すると、動画映像情報の抽出製品にマーキング処理を施し、モニタ５１に映す。
【００２３】
管理サーバ１０は、操作部１６から作業指示されると、抽出製品登録情報を、タグスキャン装置２０に送信するとともに、撮影開始情報を動画映像装置４０に送信する。そして、タグスキャン装置２０からスキャン情報を受信するとともに、動画映像装置４０から動画映像情報を受信する。管理サーバ１０は、スキャン情報と動画映像情報を基に、抽出製品を特定すると、動画映像装置４０に抽出製品情報を送信する。管理サーバ１０の機能は図５にてさらに詳しく説明する。
【００２４】
図５は、管理サーバの機能を示す構成図である。管理サーバ１０の制御部１４（図３参照）は、スキャン情報処理部８７と、スキャン情報解析部８８と、スキャン情報蓄積部８９と、動画映像処理部８１と、動画映像解析部８２と、動画映像蓄積部８３と、判定部８６と、抽出製品監視処理部８５と、編集部８４と、および抽出製品情報格納部９０を備える。記憶部１５（図３参照）には、設備管理ＤＢ９１と、品質管理ＤＢ９２と、抽出製品登録情報ＤＢ９３とを備える。
【００２５】
スキャン情報処理部８７は、通信部１３を介して、タグスキャン装置２０（図３参照）からスキャン情報を受信すると、スキャン情報解析部８８とスキャン情報蓄積部８９に送信する。スキャン情報解析部８８は、スキャン情報から抽出製品の位置情報を確定する。
【００２６】
一方、動画映像処理部８１は、通信部１３を介して、動画映像装置４０（図３参照）から動画像情報を受信すると、動画映像解析部８２と動画映像蓄積部８３に送信する。動画映像解析部８２は、動画像情報から、対象物を輪郭処理などにより抽出し、対象物の位置情報を確定する。判定部８６は、抽出製品情報格納部９０から読み出した抽出製品登録情報と、スキャン情報解析部８８から取得した抽出製品の位置情報と、動画映像解析部８２から取得した製品の位置情報とから、抽出製品か否かを判定する。抽出製品であると判定されると、抽出製品監視処理部８５は、コンベア速度（図７参照）などを考慮して抽出製品の所定時間後の位置情報を算出し、編集部８４へ送付する。また、抽出製品監視処理部８５は、処理結果に不具合などあれば（例えば、推定位置に該当する製品が存在しないならば）、不具合情報を動画映像蓄積部８３およびスキャン情報蓄積部８９に送信するとともに、再度、動画映像解析部８２およびスキャン情報解析部８８に問合せる。編集部８４は、所定時間後の位置情報に基づいてマーキング情報を作成し、通信部１３を介して、動画映像装置４０に、マーキング情報を送信する。なお、さらに詳細な説明は、図１６にて行う。なお、抽出製品情報格納部９０は、操作部１６（図３参照）からの抽出条件に基づいて、判定部８６に入力される抽出製品登録情報の一時的な記憶格納部である。
【００２７】
図６は、ＩＣタグに記憶されるＩＣタグ情報を示す説明図である。ＩＣタグ７１には、タグＩＤ、ロット番号（ロットＮｏ．）、製品コード、製造工場、ライン番号（ラインＮｏ．）、製造日、保障期限、保管期限が記憶されている。図６によれば、例えば、タグＩＤがａａａの場合、ロットＮｏ．が２００７０２０３−３ＡＡＡ、製品コードがＡＡＡＡであり、ＮＫ工場の３番ラインで製造されていることがわかる。また、タグＩＤのａａａとｂｂｂとは同じ情報が記録されていることから、同一製品、同一ロット、同一製造ラインで製造されたこともわかる。
【００２８】
図７は、設備管理ＤＢに記憶される設備使用情報テーブルを示す説明図である。設備管理ＤＢ９１には、搬出ライン番号（搬出ラインＮｏ．）、開始予定時間、終了予定時間、開始実績時間、終了実績時間、ロット番号（ロットＮｏ．）、コンベア速度、担当者が記憶されている。図７によれば、例えば、搬出ラインの１５番は、９時５０から開始され、ロットＮｏ．が２００７０２０３−３ＡＡＡの製品が、コンベア速度０．５ｍ／ｓで搬送されていることがわかる。
【００２９】
図８は、品質管理ＤＢに記憶される品質管理情報テーブルを示す説明図である。品質管理ＤＢ９２は、ロット番号（ロットＮｏ．）、製品コード、製造工場、ライン番号（ラインＮｏ．）、搬送ライン番号（搬送ラインＮｏ．）、製造日、保障期限、保管期限、タグＩＤ、検査予定数量、検査場数量、検査実績数量、品質情報、担当者が記憶されている。特に、検査結果に重要となる品質情報は、良品の場合フラグ値は０であり、不良品の場合フラグ値は１である。図８によれば、例えば、タグＩＤがａａａの場合は不良品とされていることがわかる。
【００３０】
図９は、抽出製品登録情報ＤＢに記憶される抽出管理情報テーブルを示す説明図である。抽出製品登録情報ＤＢ９３は、品質情報が不良品の製品で、抽出状況を管理するデータベースであり、ロット番号（ロットＮｏ．）、製品コード、製造工場、ライン番号（ラインＮｏ．）、搬送ライン番号（搬送ラインＮｏ．）、製造日、保障期限、保管期限、タグＩＤ、品質情報、抽出情報、担当者が記憶されている。特に、抽出結果に重要となる抽出情報は、未抽出の場合フラグ値は０であり、抽出完了（抽出完）の場合フラグ値は１である。
【００３１】
図１０は、抽出製品のタグＩＤを示す説明図である。図１０には（適宜図３、図５参照）、管理サーバ１０からタグスキャン装置２０またはタグスキャン装置３０に送信される抽出製品登録情報の一例として、タグＩＤを示している。他の抽出製品登録情報には、図９に示すように、ロット番号（ロットＮｏ．）、製品コード、製造工場、ライン番号（ラインＮｏ．）、製造日、保障期限、保管期限があり、図６のＩＣタグ情報に含まれるものであればよい。抽出製品のタグＩＤ情報は、抽出製品情報格納部９０（図５参照）に格納されており、判定部８６において判定する情報として利用される。
【００３２】
図１１は、タグリーダのスキャン情報を示す説明図である。タグスキャン装置２０の制御部２４（図３参照）は、タグリーダ２６からのスキャン情報を記憶部２５に格納する。スキャン情報には、Ｘ座標、Ｙ座標、タグＩＤ、スキャン時の時間（時刻）が記憶されている。図１１によれば、例えば、探索エリア内にタグＩＤがａａａとｂｂｂの製品があることがわかる。タグスキャン装置３０においてもスキャン情報は同様である。
【００３３】
図１２は、抽出製品に該当するタグリーダのスキャン情報を示す説明図である。タグスキャン装置２０の制御部２４（図３参照）は、図１１に示したスキャン情報から抽出製品に該当するスキャン情報を、管理サーバ１０へ送信する。送信するスキャン情報には、Ｘ座標、Ｙ座標、タグＩＤ、スキャン時の時間（時刻）が含まれる。図１２によれば、図１０に示す管理サーバ１０から送信されたタグＩＤがａａａであるので、タグＩＤがａａａのスキャン情報であることがわかる。タグスキャン装置３０においても送信するスキャン情報は同様である。
【００３４】
図１３は、動画映像情報を示す説明図である。動画映像装置４０，５０から管理サーバ１０に送信される動画映像情報は、Ｘ座標、Ｙ座標、色相、明度、彩度、撮影の時間（時刻）である。図１３によれば、色には、色相（色合いの違い）、明度（明るさの違い）、彩度（鮮やかさの違い）の３つの属性があり、全ての色はこの組み合わせで表現でき、しかも２５６の分解能で表現されている。
【００３５】
図１４は、抽出製品情報を示す説明図である。管理サーバ１０から動画映像装置４０，５０へ送信される抽出製品情報は、所定時間後の位置を示すマーキング情報である。抽出製品情報には、Ｘ座標、Ｙ座標、色相、明度、彩度が含まれる。マーキング情報については、図１６にて詳細を説明する。
【００３６】
次に、処理について、適宜図１〜図５を参照して説明する。
図１５は、作業管理システムの処理の全体を示すフローチャートである。図１５において、処理の全体概要を説明する。管理サーバ１０は、管理サーバの操作部１６を介して抽出開始情報が登録されると（ステップＳ１）、管理サーバ１０は、作業管理システムを起動する。管理サーバ１０は、品質管理ＤＢ９２から、品質情報のフラグ値が１（不良品）を抽出し、抽出製品登録情報ＤＢ９３へ抽出すべき抽出登録情報を登録する。管理サーバ１０は、抽出製品登録情報ＤＢ９３のうちの所定の抽出製品情報を抽出製品情報格納部９０に格納し、抽出製品登録情報を、タグスキャン装置２０に送信する（ステップＳ２）。ここでは、抽出製品登録情報として、タグＩＤ（図１０参照）として説明する。
【００３７】
タグスキャン装置２０は、抽出製品登録情報を受信すると（ステップＳ３）、検索エリアを所定時間毎にスキャンする（ステップＳ４）。例えば、１／６０秒間隔でスキャンする。タグスキャン装置２０は、スキャン情報（図１１参照）を記憶部２５に記憶し、制御部２４は、抽出製品登録情報であるタグＩＤに一致するか否かを判定する（ステップＳ５）。タグスキャン装置２０は、タグＩＤに一致した場合（ステップＳ５，Ｙｅｓ）、該当するスキャン情報（図１２参照）を管理サーバ１０に送信する（ステップＳ６）。タグＩＤに一致しない場合（ステップＳ５，Ｎｏ）、ステップＳ４へ戻る。
【００３８】
一方、ステップＳ１において、管理サーバ１０は、動画映像装置４０に撮影開始信号を送信すると、動画映像装置４０は、撮影を開始する（ステップＳ１１）。動画映像装置４０は、カメラ４２からの実写の動画像情報をモニタ４１に送信し映す（ステップＳ１２、ステップＳ１４）。また、動画映像装置４０は、実写の動画像情報（図１３参照）を管理サーバ１０に送信する。
【００３９】
管理サーバ１０は、動画映像装置４０から実写の動画像情報を管理サーバ１０に受信すると、動画映像データを基に輪郭処理などにより製品を特定する（ステップＳ１３）。一方、管理サーバ１０は、タグスキャン装置２０からスキャン情報を受信すると（ステップＳ７）、抽出製品の時刻毎の位置情報を特定する。そして、スキャン情報と、実写の動画像情報を基に、実写の動画像上の抽出製品を特定する（ステップＳ８）。管理サーバ１０は、抽出製品情報（図１４参照）を、動画映像装置４０に送信する（ステップＳ９）。
【００４０】
動画映像装置４０は、抽出製品情報を受信すると（ステップＳ１５）、実写の動画像情報に、抽出製品情報を基に特定した抽出製品にマーキング処理をし（ステップＳ１６）、図２（ａ）に示すようにモニタ４１に映す（ステップＳ１７）。
【００４１】
なお、タグスキャン装置３０と、管理サーバ１０と、動画映像装置５０との関係は、タグスキャン装置２０と、管理サーバ１０と、動画映像装置４０との関係と同様であるので、説明を省略する。
【００４２】
作業指示の処理について、適宜図５を参照して詳細に説明する。
図１６は、管理サーバの処理を示すフローチャートである。図１５と同一処理については、同一符号を付している。
【００４３】
ステップＳ６において、タグスキャン装置２０は、スキャン情報として、抽出製品の位置情報、その位置情報を取得した時間を管理サーバ１０へ送信すると、管理サーバ１０の通信部１３は、スキャン情報を受信する（ステップＳ２０）。スキャン情報処理部８７は、通信部１３を介して、動画映像装置４０からスキャン情報を受信すると、スキャン情報解析部８８とスキャン情報蓄積部８９に送信する（ステップＳ２１）。すると、スキャン情報解析部８８は、スキャン情報から抽出製品の位置情報を確定する（ステップＳ２２）。動画映像蓄積部８３は、スキャン情報を蓄積する（ステップＳ２３）。
【００４４】
ステップＳ１２において、動画映像装置４０は、カメラ４２で撮影した実写の動画像情報をモニタ４１に送信し、モニタ４１は、その実写の動画像を映す（ステップＳ１４）。また、動画映像装置４０は、実写の動画像情報を管理サーバ１０に送信すると、管理サーバ１０の通信部１３は、実写の動画像情報を受信する（ステップＳ３０）。動画映像処理部８１は、通信部１３を介して、動画映像装置４０から実写の動画像情報を受信すると、動画映像解析部８２と動画映像蓄積部８３に送信する（ステップＳ３１）。すると、動画映像解析部８２は、実写の動画像情報から、対象物を輪郭処理などにより抽出し、対象物の位置情報を確定する（ステップＳ３２）。動画映像蓄積部８３は、実写の動画像情報を蓄積する（ステップＳ３３）。ステップＳ２２およびステップＳ３２でのそれぞれの位置情報が確定した時点で、抽出製品情報格納部９０は、抽出製品登録情報を判定部８６に送信する（ステップＳ２３）。
【００４５】
判定部８６は、抽出製品情報格納部９０からの抽出製品登録情報と、スキャン情報解析部８８からの抽出製品の位置情報と、動画映像解析部８２からの対象物の位置情報とから、抽出製品か否かを判定する（ステップＳ２４）。抽出製品と判定されると（ステップＳ２４，Ｙｅｓ）、抽出製品監視処理部８５は、抽出製品のα秒（所定時間）後の現在位置を推定し（ステップＳ２５）、編集部８４へ送付する。編集部８４は、α秒後の位置情報に基づいてマーキング情報を作成し、通信部１３を介して、動画映像装置４０に、マーキング情報を送信する（ステップＳ２６）。なお、ステップＳ２４において、抽出製品と判定されないと（ステップＳ２４，Ｎｏ）、一連の処理を終了する。
【００４６】
動画映像装置４０は、受信したα秒後の位置情報であるマーキング情報を基に、マーキング処理し（ステップＳ１６）、実写の動画像にマーキングした動画像をモニタ４１に映す（ステップＳ１７）。
【００４７】
図１７は、作業管理システムに抽出装置を設置した例を示す説明図である。図１７は、図１に示す作業管理システムにおいて、タグスキャン装置２０と、タグスキャン装置３０との間のコンベア６０上の製品を抽出するための抽出装置１００を設置した場合である。管理サーバ１０は、抽出装置１００の抽出範囲内に到達する所定時間後の抽出製品の位置情報を抽出装置１００へ送信すると、抽出装置１００は、該当する製品を抽出することができる。
【００４８】
本実施形態によれば、作業管理システムは、コンベアで搬送される物品の抽出作業を管理する管理サーバ１０、コンベアの搬送面の下部に複数のタグリーダを有し、タグリーダをスキャンすることにより物品に添付されているＩＣタグ情報を読取り、管理サーバに物品の位置情報および時間情報を送付するタグスキャン装置２０，３０と、コンベアを撮影するカメラ４２，５２と、カメラ４２，５２の動画映像情報を表示するモニタ４１，５１を有し、管理サーバ１０に動画映像情報を送付する動画映像装置４０，５０とを備え、管理サーバ１０は、物品の位置情報と時間情報と、動画映像情報とを基に、指定された物品のコンベア上の物品を特定するので、コンベアで搬送される物品を容易に抽出するための作業指示をすることができる。
【００４９】
管理サーバ１０は、コンベアの搬送速度を考慮し、指定された物品の所定時間後の物品の位置情報であるマーキング情報を、動画映像装置４０，５０に送信する。動画映像装置４０，５０は、管理サーバ１０からマーキング情報を受信すると、前記撮影部で撮影された実写の動画像情報に、マーキング情報を付加して前記モニタ４１，５１に表示するので、作業者は、容易に抽出するための物品を確認することができる。なお、マーキング情報を付加するとは、マーキング情報を基にマーキング処理をしてもよいし、マーキング情報そのものを表示してもよい。
【００５０】
また、本実施形態では、タグスキャン装置２０と、タグスキャン装置３０との間に抽出装置１００を設けているので、マーキング情報を基に指定された物品の抽出を行うことができる。
【図面の簡単な説明】
【００５１】
【図１】作業管理システムを示す説明図である。
【図２】作業指示画面を示す説明図である。
【図３】作業管理システムの構成を示すブロック図である。
【図４】タグスキャン装置のタグリーダ配置構成を示す説明図である。
【図５】管理サーバの機能を示す構成図である。
【図６】ＩＣタグに記憶されるＩＣタグ情報を示す説明図である。
【図７】設備管理ＤＢに記憶される設備使用情報テーブルを示す説明図である。
【図８】品質管理ＤＢに記憶される品質管理情報テーブルを示す説明図である。
【図９】抽出製品登録情報ＤＢに記憶される抽出管理情報テーブルを示す説明図である。
【図１０】抽出製品のタグＩＤを示す説明図である。
【図１１】タグリーダのスキャン情報を示す説明図である。
【図１２】抽出製品に該当するタグリーダのスキャン情報を示す説明図である。
【図１３】動画映像情報を示す説明図である。
【図１４】抽出製品情報を示す説明図である。
【図１５】作業管理システムの処理の全体を示すフローチャートである。
【図１６】管理サーバの処理を示すフローチャートである。
【図１７】作業管理システムに抽出装置を設置した例を示す説明図である。
【符号の説明】
【００５２】
１０ 管理サーバ
２０ タグスキャン装置（探索エリア用）
２６ タグリーダ
３０ タグスキャン装置（チェックエリア用）
４０ 動画映像装置（探索エリア用）
４１，５１ モニタ
４２，５２ カメラ
５０ 動画映像装置（チェックエリア用）
６０ コンベア
６５ ネットワーク
７０ 製品
７１ ＩＣタグ
９１ 設備管理ＤＢ
９２ 品質管理ＤＢ
９３ 抽出製品登録情報ＤＢ
【特許請求の範囲】
【請求項１】
物品を搬送するコンベアの上流側の所定の位置を検出対象領域として配置され、前記コンベアで搬送される物品に添付された無線ＩＣタグを検出する、個々に位置管理された複数のＩＣタグ検出器と、前記コンベア上における無線ＩＣタグの位置を監視する処理装置とを備え、前記ＩＣタグ検出器が前記無線ＩＣタグを検出すると、当該検出にかかる無線ＩＣタグの検出位置と検出時刻とタグ情報とが特定され、これら特定された情報に基づいて作業を支援する作業支援システムにおいて、
前記コンベアの所定の位置を撮影する動画像撮影装置と、
前記動画像撮影装置が撮影した動画像に画像処理を行い、所定の物品に視覚的なマーキング処理を行う画像処理装置と、
前記動画像撮影装置が撮影し、前記画像処理装置がマーキング処理した動画像を表示する表示装置とをさらに備え、
前記処理装置は、
前記ＩＣタグ検出器が無線ＩＣタグを検出することにより特定される、前記検出位置と前記検出時刻に加えて、前記コンベアの搬送速度に基づいて、検出した無線ＩＣタグの前記コンベアにおける搬送方向の位置を算出し、
前記算出した搬送方向の位置と、前記検出位置から得られる前記コンベアの幅方向の位置とから前記無線ＩＣタグの位置を監視し、
前記検出した無線ＩＣタグのタグ情報が、所定のタグ情報であるか否かを判定し、
所定のタグ情報であるときは、前記画像処理装置に、当該所定のタグ情報を有する無線ＩＣタグの前記コンベアの幅方向の位置および搬送方向の位置を通知し、前記画像処理装置に当該通知された位置に対応する物品にマーキングをさせる
ことを特徴とする作業支援システム。
【請求項２】
コンベアで搬送される物品の抽出作業を管理する管理サーバを有する作業管理システムであって、
物品を搬送するコンベアの上流側の所定の位置を検出対象領域として複数のタグリーダを配置し、前記検出対象領域をスキャンすることにより前記物品に添付されているＩＣタグ情報を読取り、前記管理サーバに前記物品の位置情報および時間情報を送付するタグスキャン装置と、
前記コンベアを撮影する撮影部および前記撮影部の動画映像情報を表示する表示部を有し、前記管理サーバに動画映像情報を送付する動画映像装置とを備え、
前記管理サーバは、前記物品の位置情報および時間情報と、前記動画映像情報とを基に、指定された物品の前記コンベア上の物品を特定する
ことを特徴とする作業管理システム。
【請求項３】
前記タグスキャン装置は、前記コンベアの搬送方向に複数のタグリーダを設け、かつ、前記コンベアの搬送方向と略直交方向に複数のタグリーダを設けた
ことを特徴とする請求項２に記載の作業管理システム。
【請求項４】
前記管理サーバは、前記コンベアの搬送速度を考慮し、指定された物品の所定時間後の該物品の位置情報であるマーキング情報を、前記動画映像装置に送信する
ことを特徴とする請求項２に記載の作業管理システム。
【請求項５】
前記動画映像装置は、前記管理サーバから前記マーキング情報を受信すると、前記撮影部で撮影された実写の動画像情報に、前記マーキング情報を付加して前記表示部に表示する
ことを特徴とする請求項４に記載の作業管理システム。
【請求項６】
前記マーキング情報を基に指定された物品の抽出を行う抽出装置をさらに備える
ことを特徴とする請求項４に記載の作業管理システム。
【請求項７】
コンベアで搬送される物品の抽出作業を管理する管理サーバを有する作業管理システムであって、
物品を搬送するコンベアの所定の位置を検出対象領域として複数のタグリーダを配置し、前記検出対象領域をスキャンすることにより前記物品に添付されているＩＣタグ情報を読取り、前記管理サーバに前記物品の位置情報および時間情報を送付する複数のタグスキャン装置と、
前記コンベアを撮影する撮影部および前記撮影部の動画映像を表示する表示部を有し、前記管理サーバに動画映像情報を送付する複数の動画映像装置とを備え、
前記管理サーバは、前記物品の位置情報および時間情報と、前記動画映像情報とを基に指定された物品の前記コンベア上の物品を特定する
ことを特徴とする作業管理システム。
【請求項８】
コンベアで搬送される物品の抽出作業を管理する管理サーバを有する作業管理システムの作業管理方法であって、
前記作業管理システムは、物品を搬送するコンベアの上流側の所定の位置を検出対象領域として複数のタグリーダを配置するタグスキャン装置と、前記コンベアを撮影する撮影部および前記撮影部の動画映像情報を表示する表示部を有する動画映像装置とを備え、
前記タグスキャン装置は、前記検出対象領域をスキャンすることにより前記物品に添付されているＩＣタグ情報を読取り、前記管理サーバに前記物品の位置情報および時間情報を送付し、
前記動画映像装置は、前記管理サーバに前記撮影部で撮影した動画映像情報を送付し
前記管理サーバは、前記物品の位置情報および時間情報と、前記動画映像情報とを基に、指定された物品の前記コンベア上の物品を特定する
ことを特徴とする作業管理方法。
【請求項９】
前記タグスキャン装置は、前記コンベアの搬送方向に複数のタグリーダを設け、かつ、前記コンベアの搬送方向と略直交方向に複数のタグリーダを備え、
前記タグスキャン装置は、前記検出対象領域をスキャンする
ことを特徴とする請求項８に記載の作業管理方法。
【請求項１０】
前記管理サーバは、前記コンベアの搬送速度を考慮し、指定された物品の所定時間後の該物品の位置情報であるマーキング情報を、前記動画映像装置に送信する
ことを特徴とする請求項８に記載の作業管理方法。
【請求項１１】
前記動画映像装置は、前記管理サーバから前記マーキング情報を受信すると、前記撮影部で撮影された実写の動画像情報に、前記マーキング情報を付加して前記表示部に表示する
ことを特徴とする請求項１０に記載の作業管理方法。
【請求項１２】
前記作業管理システムは、さらに抽出装置を備え、
前記抽出装置は、前記マーキング情報を基に指定された物品の抽出を行う
ことを特徴とする請求項１０に記載の作業管理方法。
【請求項１】
物品を搬送するコンベアの上流側の所定の位置を検出対象領域として配置され、前記コンベアで搬送される物品に添付された無線ＩＣタグを検出する、個々に位置管理された複数のＩＣタグ検出器と、前記コンベア上における無線ＩＣタグの位置を監視する処理装置とを備え、前記ＩＣタグ検出器が前記無線ＩＣタグを検出すると、当該検出にかかる無線ＩＣタグの検出位置と検出時刻とタグ情報とが特定され、これら特定された情報に基づいて作業を支援する作業支援システムにおいて、
前記コンベアの所定の位置を撮影する動画像撮影装置と、
前記動画像撮影装置が撮影した動画像に画像処理を行い、所定の物品に視覚的なマーキング処理を行う画像処理装置と、
前記動画像撮影装置が撮影し、前記画像処理装置がマーキング処理した動画像を表示する表示装置とをさらに備え、
前記処理装置は、
前記ＩＣタグ検出器が無線ＩＣタグを検出することにより特定される、前記検出位置と前記検出時刻に加えて、前記コンベアの搬送速度に基づいて、検出した無線ＩＣタグの前記コンベアにおける搬送方向の位置を算出し、
前記算出した搬送方向の位置と、前記検出位置から得られる前記コンベアの幅方向の位置とから前記無線ＩＣタグの位置を監視し、
前記検出した無線ＩＣタグのタグ情報が、所定のタグ情報であるか否かを判定し、
所定のタグ情報であるときは、前記画像処理装置に、当該所定のタグ情報を有する無線ＩＣタグの前記コンベアの幅方向の位置および搬送方向の位置を通知し、前記画像処理装置に当該通知された位置に対応する物品にマーキングをさせる
ことを特徴とする作業支援システム。
【請求項２】
コンベアで搬送される物品の抽出作業を管理する管理サーバを有する作業管理システムであって、
物品を搬送するコンベアの上流側の所定の位置を検出対象領域として複数のタグリーダを配置し、前記検出対象領域をスキャンすることにより前記物品に添付されているＩＣタグ情報を読取り、前記管理サーバに前記物品の位置情報および時間情報を送付するタグスキャン装置と、
前記コンベアを撮影する撮影部および前記撮影部の動画映像情報を表示する表示部を有し、前記管理サーバに動画映像情報を送付する動画映像装置とを備え、
前記管理サーバは、前記物品の位置情報および時間情報と、前記動画映像情報とを基に、指定された物品の前記コンベア上の物品を特定する
ことを特徴とする作業管理システム。
【請求項３】
前記タグスキャン装置は、前記コンベアの搬送方向に複数のタグリーダを設け、かつ、前記コンベアの搬送方向と略直交方向に複数のタグリーダを設けた
ことを特徴とする請求項２に記載の作業管理システム。
【請求項４】
前記管理サーバは、前記コンベアの搬送速度を考慮し、指定された物品の所定時間後の該物品の位置情報であるマーキング情報を、前記動画映像装置に送信する
ことを特徴とする請求項２に記載の作業管理システム。
【請求項５】
前記動画映像装置は、前記管理サーバから前記マーキング情報を受信すると、前記撮影部で撮影された実写の動画像情報に、前記マーキング情報を付加して前記表示部に表示する
ことを特徴とする請求項４に記載の作業管理システム。
【請求項６】
前記マーキング情報を基に指定された物品の抽出を行う抽出装置をさらに備える
ことを特徴とする請求項４に記載の作業管理システム。
【請求項７】
コンベアで搬送される物品の抽出作業を管理する管理サーバを有する作業管理システムであって、
物品を搬送するコンベアの所定の位置を検出対象領域として複数のタグリーダを配置し、前記検出対象領域をスキャンすることにより前記物品に添付されているＩＣタグ情報を読取り、前記管理サーバに前記物品の位置情報および時間情報を送付する複数のタグスキャン装置と、
前記コンベアを撮影する撮影部および前記撮影部の動画映像を表示する表示部を有し、前記管理サーバに動画映像情報を送付する複数の動画映像装置とを備え、
前記管理サーバは、前記物品の位置情報および時間情報と、前記動画映像情報とを基に指定された物品の前記コンベア上の物品を特定する
ことを特徴とする作業管理システム。
【請求項８】
コンベアで搬送される物品の抽出作業を管理する管理サーバを有する作業管理システムの作業管理方法であって、
前記作業管理システムは、物品を搬送するコンベアの上流側の所定の位置を検出対象領域として複数のタグリーダを配置するタグスキャン装置と、前記コンベアを撮影する撮影部および前記撮影部の動画映像情報を表示する表示部を有する動画映像装置とを備え、
前記タグスキャン装置は、前記検出対象領域をスキャンすることにより前記物品に添付されているＩＣタグ情報を読取り、前記管理サーバに前記物品の位置情報および時間情報を送付し、
前記動画映像装置は、前記管理サーバに前記撮影部で撮影した動画映像情報を送付し
前記管理サーバは、前記物品の位置情報および時間情報と、前記動画映像情報とを基に、指定された物品の前記コンベア上の物品を特定する
ことを特徴とする作業管理方法。
【請求項９】
前記タグスキャン装置は、前記コンベアの搬送方向に複数のタグリーダを設け、かつ、前記コンベアの搬送方向と略直交方向に複数のタグリーダを備え、
前記タグスキャン装置は、前記検出対象領域をスキャンする
ことを特徴とする請求項８に記載の作業管理方法。
【請求項１０】
前記管理サーバは、前記コンベアの搬送速度を考慮し、指定された物品の所定時間後の該物品の位置情報であるマーキング情報を、前記動画映像装置に送信する
ことを特徴とする請求項８に記載の作業管理方法。
【請求項１１】
前記動画映像装置は、前記管理サーバから前記マーキング情報を受信すると、前記撮影部で撮影された実写の動画像情報に、前記マーキング情報を付加して前記表示部に表示する
ことを特徴とする請求項１０に記載の作業管理方法。
【請求項１２】
前記作業管理システムは、さらに抽出装置を備え、
前記抽出装置は、前記マーキング情報を基に指定された物品の抽出を行う
ことを特徴とする請求項１０に記載の作業管理方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【公開番号】特開２００８−２８０１０２（Ｐ２００８−２８０１０２Ａ）
【公開日】平成２０年１１月２０日（２００８．１１．２０）
【国際特許分類】
【出願番号】特願２００７−１２３５７３（Ｐ２００７−１２３５７３）
【出願日】平成１９年５月８日（２００７．５．８）
【出願人】（０００００５１０８）株式会社日立製作所 (27,607)
【Ｆターム（参考）】
【公開日】平成２０年１１月２０日（２００８．１１．２０）
【国際特許分類】
【出願日】平成１９年５月８日（２００７．５．８）
【出願人】（０００００５１０８）株式会社日立製作所 (27,607)
【Ｆターム（参考）】
[ Back to top ]