医療情報表示装置および方法、並びにプログラム
【課題】所望の医療情報を、より直感的な操作で、より容易に取得可能にする。
【解決手段】取得条件入力用ユーザインターフェース３２が、被検体外観画像（人体アイコン４５）の表示中に、ジェスチャの入力を受け付け、取得条件特定部３５が、ジェスチャ種別解析部３３によって判別されたそのジェスチャの種別、および、ジェスチャ部位解析部３４によって特定されたそのジェスチャに対応する被検体の部位に基づいて、そのジェスチャに対応する医療情報を取得するための医療情報取得条件を特定し、医療情報取得部３６が、特定された医療情報取得条件を満たす医療情報を、複数件の医療情報を記憶する医療情報データベース５３から選択的に取得し、医療情報表示制御部３６が、取得された医療情報を表示手段に表示させる。
【解決手段】取得条件入力用ユーザインターフェース３２が、被検体外観画像（人体アイコン４５）の表示中に、ジェスチャの入力を受け付け、取得条件特定部３５が、ジェスチャ種別解析部３３によって判別されたそのジェスチャの種別、および、ジェスチャ部位解析部３４によって特定されたそのジェスチャに対応する被検体の部位に基づいて、そのジェスチャに対応する医療情報を取得するための医療情報取得条件を特定し、医療情報取得部３６が、特定された医療情報取得条件を満たす医療情報を、複数件の医療情報を記憶する医療情報データベース５３から選択的に取得し、医療情報表示制御部３６が、取得された医療情報を表示手段に表示させる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、タッチパネル等の直感的なユーザインターフェースを用いて、ユーザが所望する医療情報を表示させる技術に関するものである。
【背景技術】
【０００２】
医療現場では、ＣＴ、ＭＲＩ、ＵＳ、ＰＥＴ等のモダリティで取得された画像情報の他、心電図や脳波等の波形の情報、血圧、体温等の数値情報、各種検査報告、カルテ等の文字情報等、多種多様な医療情報が発生している。
【０００３】
医療機関には、このような医療情報を管理するシステムが構築されているところがある。例えば、これらの医療情報は電子データとしてデータベースに格納され、クライアント端末からの要求に応じて、ユーザが所望する医療情報がデータベースから選択され、クライアント端末に接続されたディスプレイに表示される。
【０００４】
このような医療情報の選択および表示の操作性を向上するために、様々なユーザインターフェースが提案されている。例えば、表示画面に表示された人型内の部位や、体の一部を示すイメージ内の部位をポインティングデバイスで指定することにより、指定された部分およびその周辺における疾患部位に関する医用画像情報が医用情報データベースから抽出され、抽出された医用画像情報の一覧画面が表示されるものが知られている（例えば、特許文献１）。
【０００５】
また、医用画像処理用ワークステーションに接続されて使用されるタッチパネル式ディスプレイを備えた入力装置で、タッチ操作により、アキシャル断面画像中に基準線を作成すると、作成された基準線を切断面とするコロナル断面画像を作成して表示させるようにしたものが知られている（例えば、特許文献２）。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００３−２６００３０号公報
【特許文献２】特開２００９−１１９０００号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、特許文献１に記載されたユーザインターフェースは、１つの部位を指定することによって、より多くの医用画像情報を取得しようとするものであるが、前述のとおり、医療現場では多種多様な医療情報が発生していることに鑑みると、このユーザインターフェースでは非常に多くの医療情報が一覧表示されてしまい、所望の医療情報を直感的かつ適切にかつ迅速に絞り込むことが困難になってしまうことがありうる。また、特許文献２に記載されたユーザインターフェースは、既に選択されている画像を切り替える操作のためのものであり、所望の医療情報を適切に絞り込むためのものではない。
【０００８】
本発明は上記事情に鑑みてなされたものであり、所望の医療情報を、より直感的な操作で、より容易に取得可能にする医療情報表示装置および方法、並びにプログラムを提供することを目的とするものである。
【課題を解決するための手段】
【０００９】
本発明の医療情報表示装置は、所与の情報を表示する表示手段と、該表示手段の表示面に対するジェスチャ操作を検出し、該検出されたジェスチャ操作の内容を表すジェスチャ情報を出力するジェスチャ入力手段と、被検体の外観を表す被検体外観画像の画像データであって、該画像中の各位置に対して、該被検体の部位を識別する部位識別情報が関連づけられたものに基づいて、該被検体外観画像を前記表示手段の所定の表示位置に表示させる第１の表示制御手段と、該被検体外観画像の表示中に前記ジェスチャ入力手段によって検出されたジェスチャ操作に応じて出力された前記ジェスチャ情報に基づいて、該ジェスチャ操作が所定の複数のジェスチャ操作パターンのうちのいずれであるかを表すジェスチャ種別を判別するジェスチャ種別解析手段と、前記被検体外観画像の表示位置の情報と、前記被検体外観画像データに関連づけられた部位識別情報と、該被検体外観画像の表示中のジェスチャ操作に応じて出力されたジェスチャ情報に含まれる、該ジェスチャ操作が行われた位置を表すジェスチャ位置情報とに基づいて、前記ジェスチャ操作に対応する前記被検体の部位であるジェスチャ部位を特定するジェスチャ部位解析手段と、該ジェスチャ種別および該ジェスチャ部位に基づいて、前記被検体外観画像の表示中のジェスチャ操作に対応する前記被検体についての医療情報を取得するための医療情報取得条件を特定する取得条件特定手段と、該特定された医療情報取得条件を満たす前記医療情報を、複数件の前記医療情報を記憶する医療情報記憶手段から選択的に取得する医療情報取得手段と、該取得された医療情報を前記表示手段に表示させる第２の表示制御手段とを設けたことを特徴とする。
【００１０】
本発明の医療情報表示システムは、被検体についての医療情報を、所与の医療情報取得条件に基づいて選択的に提供する医療情報提供装置と、本発明の医療情報表示装置とがネットワークを介して通信可能に接続されたシステムである。
【００１１】
ここで、医療情報提供装置は、複数件の前記医療情報を、所与の前記医療情報取得条件に基づいて選択可能なデータ構造で記憶する医療情報記憶手段と、前記医療情報表示装置から前記医療情報取得条件を受信する取得条件受信手段と、該受信した医療情報取得条件を満たす前記医療情報を前記医療情報記憶手段から取得する医療情報検索手段と、該取得された医療情報を、前記医療情報取得条件を送信した医療情報表示装置に送信する医療情報送信手段とを有するものとしてもよい。
【００１２】
本発明の医療情報表示方法は、被検体の外観を表す被検体外観画像の画像データであって、該画像中の各位置に対して、該被検体の部位を識別する部位識別情報が関連づけられたものに基づいて、該被検体外観画像を前記表示手段の所定の表示位置に表示するステップと、該被検体外観画像の表示中に該表示手段の表示面に対するジェスチャ操作を検出し、該検出されたジェスチャ操作の内容を表すジェスチャ情報を出力するステップと、前記出力されたジェスチャ情報に基づいて、該ジェスチャ操作が所定の複数のジェスチャ操作パターンのうちのいずれであるかを表すジェスチャ種別を判別するステップと、前記被検体外観画像の表示位置の情報と、前記被検体外観画像データに関連づけられた部位識別情報と、前記ジェスチャ操作に応じて出力されたジェスチャ情報に含まれる、該ジェスチャ操作が行われた位置を表すジェスチャ位置情報とに基づいて、前記ジェスチャ操作に対応する前記被検体の部位であるジェスチャ部位を特定するステップと、該ジェスチャ種別および該ジェスチャ部位に基づいて、前記被検体外観画像の表示中のジェスチャ操作に対応する前記被検体についての医療情報を取得するための医療情報取得条件を特定するステップと、該特定された医療情報取得条件を満たす前記医療情報を、複数件の前記医療情報を記憶する医療情報記憶手段から選択的に取得するステップと、該取得された医療情報を前記表示手段に表示するステップとを有することを特徴とする。
【００１３】
本発明の医療情報表示制御プログラムは、コンピュータに、被検体の外観を表す被検体外観画像の画像データであって、該画像中の各位置に対して、該被検体の部位を識別する部位識別情報が関連づけられたものに基づいて、該被検体外観画像を前記表示手段の所定の表示位置に表示させるステップと、該被検体外観画像の表示中に該表示手段の表示面に対するジェスチャ操作を検出し、該検出されたジェスチャ操作の内容を表すジェスチャ情報を出力するステップと、前記出力されたジェスチャ情報に基づいて、該ジェスチャ操作が所定の複数のジェスチャ操作パターンのうちのいずれであるかを表すジェスチャ種別を判別するステップと、前記被検体外観画像の表示位置の情報と、前記被検体外観画像データに関連づけられた部位識別情報と、前記ジェスチャ操作に応じて出力されたジェスチャ情報に含まれる、該ジェスチャ操作が行われた位置を表すジェスチャ位置情報とに基づいて、前記ジェスチャ操作に対応する前記被検体の部位であるジェスチャ部位を特定するステップと、該ジェスチャ種別および該ジェスチャ部位に基づいて、前記被検体外観画像の表示中のジェスチャ操作に対応する前記被検体についての医療情報を取得するための医療情報取得条件を特定するステップと、該特定された医療情報取得条件を満たす前記医療情報を、複数件の前記医療情報を記憶する医療情報記憶手段から選択的に取得するステップと、該取得された医療情報を前記表示手段に表示させるステップとを実行させることを特徴とする。
【００１４】
本発明において、ジェスチャの入力は、タッチパネル式の入力手段を用いてもよい。
【００１５】
被検体外観画像は、被検体を模式的に表した画像としてもよい。
【００１６】
被検体外観画像の表示については、被検体外観画像の表示中に検出されたジェスチャ操作に対応する、前記ジェスチャ種別および／または前記ジェスチャ部位に基づいて、前記被検体外観画像中の被検体の態様を、前記検出されたジェスチャ操作に応じた所定の態様に変更して表示させるようにしてもよい。
【００１７】
あるいは、被検体外観画像の表示中に検出された第１のジェスチャ操作について判別された第１の前記ジェスチャ種別、および／または、該第１のジェスチャ操作について特定された第１の前記ジェスチャ部位に基づいて、前記被検体外観画像中の被検体の態様を、前記検出されたジェスチャ操作に応じた所定の態様に変更して表示させるようにし、前記第１のジェスチャ種別、前記第１のジェスチャ部位、前記変更後の被検体外観画像の表示中に検出された第２のジェスチャ操作について判別された第２の前記ジェスチャ種別、該第２のジェスチャ操作について特定された第２の前記ジェスチャ部位の少なくとも一部に基づいて、前記第１のジェスチャ操作および前記第２のジェスチャ操作に対応する前記医療情報取得条件を特定するようにしてもよい。
【００１８】
医療情報取得条件の特定の際、前記ジェスチャ種別と前記ジェスチャ部位の組合せに対して前記医療情報取得条件を関連づけた参照データに基づいて、前記医療情報取得条件を特定するようにしてもよい。
【００１９】
ここで、参照データは、１組の前記ジェスチャ種別と前記ジェスチャ部位の組合せに対して、１以上の前記医療情報取得条件が関連づけられたものとし、該組合せに対して２以上の前記医療情報取得条件が関連づけられた場合には、該複数の医療情報取得条件の各々には、該医療情報取得条件の優先順位がさらに関連づけられたものとしてもよい。
【００２０】
さらに、参照データの編集を行えるようにしてもよい。
【００２１】
医療情報の取得については、所与の条件を満たす医療情報を前記医療情報記憶手段から先行取得するようにしてもよい。さらに、前記被検体外観画像に表された被検体中の各部位を、該部位に関する医療情報が該先行取得された医療情報の中に存在する部位と、該部位に関する医療情報が該先行取得された医療情報の中に存在しない部位とが異なる態様となるように表示させるようにしてもよい。
【００２２】
医療情報の表示の際、前記医療情報取得手段によって検査時期の異なる同種の検査に関する複数件の医療情報を取得した場合に、該複数件の医療情報を比較可能な態様で表示させるようにしてもよい。
【００２３】
前記被検体を表す医用画像が前記医療情報記憶手段から取得された場合、必要に応じて、前記取得された医用画像に対して、前記医療情報取得条件を満たす医用画像を得るための所定の画像処理を行うようにしてもよい。
【００２４】
前記医療情報取得条件を満たす医療情報を複数件取得した場合、該複数件の医療情報を前記表示手段に一覧表示させ、表示対象の前記医療情報の選択を受け付けるようにし、選択された医療情報を表示させるようにしてもよい。
【００２５】
ここで、抽出された複数の医療情報の一覧表示の際、前記複数件の医療情報をサムネイルまたはアイコンの態様で表示させるようにしてもよい。
【発明の効果】
【００２６】
本発明によれば、表示手段に被検体外観画像が表示されているときに、その表示面に対するジェスチャ操作を受け付け、そのジェスチャ操作の内容を表すジェスチャ情報に基づいて、ジェスチャ操作が所定の複数のジェスチャ操作パターンのうちのいずれであるかを表すジェスチャ種別を判別し、被検体外観画像の表示位置の情報と、被検体外観画像データに関連づけられた部位識別情報と、ジェスチャ操作が行われた位置を表すジェスチャ位置情報とに基づいて、ジェスチャ操作に対応する被検体の部位であるジェスチャ部位を特定し、ジェスチャ種別およびジェスチャ部位に基づいて、被検体外観画像の表示中のジェスチャ操作に対応する医療情報を取得するための医療情報取得条件を特定し、特定された医療情報取得条件を満たす医療情報を、複数件の医療情報を記憶する医療情報記憶手段から選択的に取得し、取得された医療情報を表示手段に表示することができる。したがって、所望の医療情報を、より直感的なジェスチャ操作で、より容易に取得することが可能になる。
【図面の簡単な説明】
【００２７】
【図１】本発明の実施形態となる医療情報表示装置を含む医療情報統合システムとその周辺システムの構成を表した図
【図２】本発明の実施形態となる医療情報表示装置の外観を模式的に表した図
【図３】本発明の実施形態となる医療情報表示装置の主要構成要素を表したブロック図
【図４】本発明の第１、第２の実施形態において、医療情報表示装置と医療情報管理サーバに実装される機能を模式的に表したブロック図
【図５】本発明の第１、第２の実施形態において、医療情報統合システムで行われる医療情報の表示処理の流れを示したフローチャート
【図６】本発明の第１の実施形態における医療情報データベースのデータ構造と登録されたデータの例を表した図
【図７】人体アイコンの一例を表した図
【図８】人体アイコンの各位置の位置情報と部位情報の関連づけの一例を表した図
【図９Ａ】人体アイコンに対するナイフジェスチャの一例を模式的に表した図
【図９Ｂ】ナイフジェスチャによって人体アイコンが変形する様子を模式的に表した図
【図１０Ａ】人体アイコンに対する指定ジェスチャの一例を模式的に表した図
【図１０Ｂ】指定ジェスチャによって指定された部位が強調表示される様子を模式的に表した図
【図１１Ａ】人体アイコンに対する掴みジェスチャの一例を模式的に表した図
【図１１Ｂ】掴みジェスチャによって指定された部位が掴み出される様子を模式的に表した図
【図１２Ａ】人体アイコンに対するハンマージェスチャの一例を模式的に表した図
【図１２Ｂ】ハンマージェスチャによって人体アイコンが変形する様子を模式的に表した図
【図１３Ａ】取得条件テーブルの設定例を表した図
【図１３Ｂ】取得条件テーブル編集用ユーザインターフェースの一例を表した図
【図１４】ＣＴ断面画像の表示例を模式的に表した図
【図１５】心電図波形データの表示例を表した図
【図１６】心臓を表すボリュームレンダリング画像の表示例を模式的に表した図
【図１７】頭骨、脳実質、脳血管のボリュームレンダリング画像の合成表示例を模式的に表した図
【図１８】本発明の第２の実施形態における取得条件入力用ユーザインターフェースの一例を表した図
【図１９】ナイフジェスチャと上向き指定ジェスチャを組み合わせた取得条件の入力例を模式的に表した図
【図２０】ナイフジェスチャと上向き指定ジェスチャを組み合わせた取得条件の入力例に対応する取得条件テーブルの設定例を表した図
【図２１】ナイフジェスチャと上向き指定ジェスチャを組み合わせた取得条件の入力例に対応する、医療情報データベースに登録された医療情報の例を表した図
【図２２】人体アイコンに対する上下方向のナイフジェスチャの一例を模式的に表した図
【図２３Ａ】人体アイコンに対する左右方向の回転ジェスチャの一例を模式的に表した図
【図２３Ｂ】側面を向いた人体アイコンに対する上下方向のナイフジェスチャの一例を模式的に表した図
【図２４】上下方向のナイフジェスチャと左右方向の回転ジェスチャによる取得条件の入力に対応する取得条件テーブルの設定例を表した図
【図２５】上下方向のナイフジェスチャと左右方向の回転ジェスチャによる取得条件の入力に対応する、医療情報データベースに登録された医療情報の例を表した図
【図２６】掴みジェスチャと指定ジェスチャを組み合わせた取得条件の入力例を模式的に表した図
【図２７】掴みジェスチャと指定ジェスチャを組み合わせた取得条件の入力例に対応する取得条件テーブルの設定例を表した図
【図２８】本発明の第３の実施形態において、医療情報表示装置と医療情報管理サーバに実装される機能を模式的に表したブロック図
【図２９】本発明の第３の実施形態において、医療情報統合システムで行われる医療情報の表示処理の流れを示したフローチャート
【図３０】本発明の第４の実施形態において、医療情報表示装置と医療情報管理サーバに実装される機能を模式的に表したブロック図
【図３１】本発明の第４の実施形態において、医療情報統合システムで行われる医療情報の表示処理の流れを示したフローチャート
【図３２】本発明の第４の実施形態における人体アイコンの表示例を表した図
【図３３】本発明の第５の実施形態に対応する医療情報データベースに登録された医療情報の例を表した図
【図３４】本発明の第５の実施形態における医療情報の比較表示例を表した図
【図３５】本発明の第６の実施形態において、医療情報表示装置と医療情報管理サーバに実装される機能を模式的に表したブロック図
【図３６】本発明の第６の実施形態において、医療情報統合システムで行われる医療情報の表示処理の流れを示したフローチャート
【図３７Ａ】医療情報選択用画面の一例を表した図
【図３７Ｂ】医療情報選択用画面の他の一例を表した図
【図３８】本発明の第７の実施形態において、医療情報表示装置と医療情報管理サーバに実装される機能を模式的に表したブロック図
【図３９】本発明の第７の実施形態において、医療情報統合システムで行われる医療情報の表示処理の流れを示したフローチャート
【図４０】本発明の第７の実施形態に対応する医療情報データベースに登録された医療情報の例を表した図
【図４１】本発明の第８の実施形態における取得条件テーブルの構成と設定例を表した図
【図４２】取得条件テーブルに設定された表示条件（レイアウト）の一例を模式的に表した図
【図４３】本発明の第８の実施形態における医療情報の表示例を模式的に表した図
【発明を実施するための形態】
【００２８】
図１は、本発明の実施形態となる医療情報表示装置１を含む医療情報統合システム３とその周辺のシステムの構成を表したものである。図に示したように、医療情報統合システム３は、電子カルテシステム４、画像診断システム５、内視鏡検査システム６、病理検査システム７、各診療科システム８とネットワーク９を介して通信可能に接続されて構成されている。また、医療情報統合システム３は、本発明の実施形態となる医療情報表示装置１と医療情報管理サーバ２とからなる。
【００２９】
本実施形態では、電子カルテシステム４、画像診断システム５、内視鏡検査システム６、病理検査システム７、各診療科システム８で発生した医療情報は、医療情報管理サーバ２によって統合的に収集・管理されている。そして、医療情報表示装置１は、医療情報管理サーバ２に対して所望の医療情報を要求し、医療情報管理サーバ２から提供された、その要求に合致する医療情報を表示する。
【００３０】
図２は本発明の実施形態となる医療情報表示装置１の外観を模式的に表したものであり、図３は医療情報表示装置１の主要構成要素を表したブロック図である。
【００３１】
図２に示したように、医療情報表示装置１は、タッチパネル１１と一体的に形成された液晶ディスプレイ１２を正面に有しており、側面には、無線通信のためのアンテナ部１３と電源スイッチ１４とを有している。
【００３２】
また、図３に示したように、医療情報表示装置１は、ＣＰＵ１５、主記憶装置１６と、補助記憶装置１７、タッチパネル１１、液晶ディスプレイ１２、通信インターフェース１８等とがデータバスで接続された構成となっている。
【００３３】
ＣＰＵ１５は、補助記憶装置１７に記憶されている、オペレーティングシステム等のミドルウェア、本発明の医療情報の取得および表示のためのアプリケーションソフトウェア等の各プログラムを、主記憶装置１６にロードして各処理を実行する。これにより、タッチパネル１１を介したユーザによる入力操作の受付け、医療情報等の各種情報の液晶ディスプレイ１２への表示等の入出力制御、通信インターフェース１８を介した通信等が行われる。
【００３４】
補助記憶装置１７としては、公知のフラッシュメモリドライブ（ＳＳＤ：Solid State drive）やハードディスクドライブ（ＨＤＤ）が用いられる。補助記憶装置１７には、上記各種プログラムがインストールされている。本発明の医療情報の表示のためのアプリケーションソフトウェアは、医療情報表示装置１に接続されたディスクドライブ等を用いてＣＤ−ＲＯＭ等の記録媒体からインストールされたものであってもよいし、インターネット等のネットワーク経由で接続されたサーバの記憶装置からダウンロードされた後にインストールされたものであってもよい。また、補助記憶装置１７は、医療情報管理サーバ２から取得した医療情報を一時的に記憶するのにも用いられる。
【００３５】
タッチパネル１１としては、抵抗膜、静電容量、電磁誘導、表面弾性波（超音波）、赤外線等の公知の方式のものを用いることができるが、本実施形態では、多様なジェスチャパターンについて説明するため、投影型の静電容量方式等の、複数の位置でのタッチであるマルチタッチを検出可能なものを用いているものとする。タッチパネル１１によるタッチ操作は、ユーザの指や所定のペン等を用いて行う。タッチパネル１１は、その制御プログラムによって規定された時間間隔で、タッチパネル１１に対するタッチの開始、タッチ位置の移動、タッチの終了を検出し、検出されたタッチの種類、および、その時点でのタッチパネル１１の座標系におけるタッチの位置情報を出力する。ここで、タッチの開始とはタッチパネル１１上の新たな位置に触れる操作であり、タッチの移動とはタッチパネル１１に触れたままタッチ位置を移動させる操作であり、タッチの終了とは指やペン等をタッチパネル１１から離す操作である。これによって、タッチパネル１１上で行われる様々なジェスチャ操作を検出することが可能になる。すなわち、タッチの開始から、タッチの移動、タッチの終了までの一連の操作が１つのジェスチャ操作として検出され、一連の操作の各時点で検出されたタッチの種類と位置情報とがジェスチャ情報として得られる。なお、タッチパネル１１の座標系と液晶ディスプレイ１２の座標系は、医療情報表示装置１の製造時等にキャリブレーションを行うことにより、対応関係が特定されており、相互に座標変換を行うことが可能である。以下では、説明を簡潔にするため、液晶ディスプレイ１２の座標系とタッチパネル１１の座標系を同一の座標系とし、表示装置の座標系という。
【００３６】
通信インターフェース１８は、公知の移動体通信網や無線ＬＡＮ等での通信を制御する。本実施形態では、医療情報管理サーバ２等との通信がこの通信インターフェース１８を介して行われる。
【００３７】
一方、医療情報管理サーバ２は、医療情報データベースを備えたコンピュータである。ハードウェア構成としては、ＣＰＵ、主記憶装置、補助記憶装置、入出力インターフェース、通信インターフェース、データバス等の周知のものの他、外部記憶装置を備えている。また、医療情報管理サーバ２には、周知のオペレーティングシステムやデータベース管理用ソフトウェアの他、医療情報データベースへの医療情報の登録やこのデータベースからの医療情報の抽出を行うためのアプリケーションソフトウェアがインストールされている。これらのソフトウェアは、ＣＤ−ＲＯＭ等の記録媒体からインストールされたものか、あるいは、インターネット等のネットワーク経由で接続されたサーバの記憶装置からダウンロードされた後にインストールされたものである。
【００３８】
また、電子カルテシステム４は公知のコンピュータシステムであり、例えば、各診療科等の端末と、電子カルテ情報が格納された電子カルテデータベースを備えた電子カルテ管理サーバとがネットワークを介して通信可能に接続された構成となっている。各診療科等の端末で入力された電子カルテ情報が電子カルテデータベースを用いて管理されている。ここで、電子カルテ情報には、例えば、患者の氏名、生年月日、性別等の患者情報、各種検査の日付、内容、結果等の検査履歴情報、受診した日付、主訴、確定診断名等の診断履歴情報、手術、処置、投薬等の治療が行われた日付、内容等の治療履歴情報等が含まれる。また、本実施形態では、電子カルテデータベースは、各患者を識別する患者ＩＤが上記電子カルテ情報と関連づけられたデータベース構造となっている。
【００３９】
画像診断システム５も公知のコンピュータシステムであり、例えば、画像診断医用ワークステーションと、ＣＴ、ＭＲＩ等のモダリティでの撮影によって得られた画像データが格納された画像データベースを備えた画像管理サーバと、撮影で得られた画像の読影結果を含む読影レポートが格納された読影レポートデータベースを備えた読影レポートサーバとがネットワークを介して通信可能に接続された構成となっている。ここで、画像診断医用ワークステーションは、診断目的・対象に応じて、ＭＩＰ、ＭＰＲ、ＣＰＲ、ボリュームレンダリング（ＶＲ）等の公知の画像処理や、骨抽出・除去、血管抽出、臓器抽出、異常陰影検出等の公知の画像解析処理を組み合わせて実行することが可能であり、これらの処理・解析済みの画像データも、画像データベースに格納される。また、画像データには、２次元画像（ピクセルデータ）と３次元画像（ボクセルデータ）の両方、および、静止画と動画の両方が含まれ得る。さらに、画像データベースでは、患者ＩＤの他、個別の画像を識別する画像ＩＤ、その画像が得られたモダリティの情報、その画像に表されている被検体の部位の情報等の付帯情報が画像データに関連づけられて格納されている。モダリティの情報は、モダリティ側で画像生成時に付与される。一方、被検体の部位の情報は、検査オーダ等に基づいてモダリティ側で画像生成時に付与してもよいし、ＣＴ等の断層画像の場合であれば、公知の部位認識処理（例えば特開２００８−２５９６８２号公報等参照）を用いて、画像診断医用ワークステーション側でスライス毎に付与してもよい。また、読影レポートデータベースは、読影レポートと患者ＩＤと読影対象の画像の画像ＩＤとが関連づけられたデータベース構造となっている。画像データや読影レポートは、個々の検査（撮影）を識別する検査ＩＤを介して間接的に患者ＩＤと関連づけられていてもよい。
【００４０】
内視鏡検査システム６も公知のシステムであり、各種内視鏡での撮影によって得られた実内視鏡画像データや内視鏡検査の結果がまとめられた内視鏡検査レポート等が検査ＩＤや患者ＩＤと関連づけられた内視鏡検査データベースを備えた内視鏡検査管理サーバが、内視鏡検査データベースへのアクセスの制御を行っている。
【００４１】
病理検査システム７も公知のシステムであり、病理検査で得られた顕微鏡画像や病理検査の結果がまとめられた病理検査レポート等が検査ＩＤや患者ＩＤと関連づけられた病理検査データベースを備えた病理検査管理サーバが、病理検査データベースへのアクセスの制御を行っている。
【００４２】
各診療科システム８には、その診療科特有の検査データや検査レポート等が検査ＩＤや患者ＩＤと関連づけられた各診療科のデータベースを備えた各診療科の管理サーバが、各診療科のデータベースへのアクセスの制御を行っている。ここで、各診療科特有の検査データとは、例えば、循環器科であれば心電図データ等（波形、数値等）、耳鼻咽喉科であれば聴覚検査データ等（波形、数値等）、眼科であれば視力検査や眼底検査データ等（数値等）である。
【００４３】
なお、本実施形態では、内視鏡検査システム６と病理検査システム７を各診療科システム８とは別のシステムとしているが、各診療科システム８の一部として構成してもよい。この場合、内視鏡検査や病理検査の情報は、その検査内容に応じて、各診療科の検査データとして管理される。
【００４４】
本発明の第１の実施形態は、医療情報表示装置１での様々なタッチパネル操作に応じて、その操作に応じた医療情報を医療情報管理サーバ２から取得し、医療情報表示装置１の液晶ディスプレイ１２に表示するものである。図４は、本発明の第１の実施形態において、医療情報表示装置１と医療情報管理サーバ２に実装される機能を模式的に表したブロック図である。図に示したように、本発明の医療情報表示装置１は、患者ＩＤ入力用ユーザインターフェース（ＵＩ）３１、取得条件入力用ＵＩ３２、ジェスチャ種別解析部３３、ジェスチャ部位解析部３４、取得条件特定部３５、医療情報取得部３６、医療情報表示制御部３７、人体アイコン４５、取得条件テーブル４６とから構成されている。また、医療情報表示装置１内に示された患者ＩＤ、ジェスチャ情報、ジェスチャ部位情報、ジェスチャ種別情報、医療情報取得条件、医療情報（実データ）は、上記各処理部によって、医療情報表示装置１の主記憶装置１６または補助記憶装置１７内の所定の領域に対して読み書きされるデータである。一方、医療情報管理サーバ２は、医療情報登録部５１と医療情報検索部５２と医療情報データベース５３とから構成されている。医療情報管理サーバ２内に示された医療情報登録条件、医療情報、医療情報取得条件、医療情報（実データ）は、上記各処理部によって、医療情報管理サーバ２の主記憶装置、補助記憶装置、または外部記憶装置内の所定の領域に対して読み書きされるデータである。
【００４５】
医療情報データベース５３は、患者ＩＤと、医療情報取得条件に対応するインデックス情報（詳細は後述）と、医療情報の実データとが関連づけられたデータ構造を有している。
【００４６】
医療情報管理サーバ２の医療情報登録部５１は、他システム（電子カルテシステム４、画像診断システム５、内視鏡検査システム６、病理検査システム７、各診療科システム８を意味する）で発生した医療情報を、所定の時間間隔で取得し、取得した医療情報から患者ＩＤおよびインデックス情報を抽出し、さらに、取得した医療情報を医療情報データベース５３のデータ構造に変換し、医療情報データベース５３に登録する。これにより、医療情報データベース５３には、医療情報表示装置１による表示対象となる医療情報が蓄積される。
【００４７】
図５は、本発明の第１の実施形態において、医療情報統合システム３で行われる医療情報の表示処理の流れを示したフローチャートである。図に示した#1から#7、#11から#12の処理ステップは、医療情報表示装置１で実行されるアプリケーションのメインプログラムによって制御される。以下、図４および図５を主に用いて、この医療情報表示処理の全体の流れとともに、医療情報表示装置１の各処理部と医療情報管理サーバ２の医療情報検索部５２で行われる個々の処理の内容について説明する。
【００４８】
まず、医療情報表示装置１において、患者ＩＤ入力用ＵＩ３１は、患者ＩＤの入力を受け付け、入力された患者ＩＤを主記憶装置１６の所定の領域に格納する(#1)。具体的には、例えば、液晶ディスプレイ１２にキーボードやテンキーの画像を表示させ、タッチパネル１１のタッチ位置に表示されたキーの入力を受け付けるソフトウェアキーボード方式を用いて、患者ＩＤの入力を受け付ける。
【００４９】
次に、取得条件入力用ＵＩ３２は、補助記憶装置１７から人体アイコン画像（図７参照）を読み込み、液晶ディスプレイ１２の所定の表示位置に表示させ(#2)、ユーザによる、人体アイコン４５に対するジェスチャ入力をタッチパネル１１から受け付け、入力されたジェスチャ情報を主記憶装置１６の所定の領域に格納する(#3)。ここで、人体アイコン４５は、図７および図８に例示したように、人体の全身を模式的に表したものであり、人体アイコン４５の座標系の各位置に対して、人体の部位を識別する部位情報が関連づけられている。また、ジェスチャ情報は、各時点でのタッチの種類（開始、移動、終了）、および、表示装置の座標系におけるタッチの位置を表す位置情報を含んでいる。
【００５０】
ジェスチャ種別解析部３３は、ジェスチャ情報に基づいて、入力されたジェスチャが所定の複数のジェスチャパターンのうちのいずれであるかを判別し、判別結果を主記憶装置１６のジェスチャ種別情報を格納する所定の領域に出力する(#4)。なお、入力されたジェスチャに対応するジェスチャパターンが特定されなかった場合は、新たなジェスチャの入力待ち状態に戻る。
【００５１】
ジェスチャ部位解析部３４は、まず、ジェスチャ情報と、人体アイコン４５の位置情報とに基づいて、ジェスチャ入力が人体アイコン４５のどの位置で行われたかを特定する。すなわち、ジェスチャ情報は表示装置の座標系での位置情報であるのに対して、人体アイコン４５の位置情報は人体アイコン４５の座標系での情報であるので、ジェスチャ部位解析部３４は、表示装置の座標系での人体アイコン４５の表示位置の情報を用いて、両位置情報を同じ座標系での位置情報に変換する。これにより、ジェスチャ入力を構成する点の人体アイコン４５上での位置であるジェスチャ相対位置が特定される。なお、ジェスチャ相対位置は、表示装置の座標系と人体アイコン４５の座標系のいずれでも表現することが可能であるが、本実施形態では人体アイコンの座標系で表現されたものとする。次に、ジェスチャ部位解析部３４は、入力されたジェスチャのジェスチャ相対位置と関連づけられた人体アイコン４５の部位を識別する部位情報を特定し、主記憶装置１６のジェスチャ部位情報を格納する所定の領域に出力する(#5)。なお、入力されたジェスチャに対応する人体アイコン４５上の部位が特定されなかった場合、人体アイコン４５の外側のみでジェスチャ操作を行った場合等は、新たなジェスチャの入力待ち状態に戻る。
【００５２】
取得条件特定部３５は、取得条件テーブル４６を参照し、ジェスチャ種別解析部３３で出力されたジェスチャ種別情報とジェスチャ部位解析部３４で出力されたジェスチャ部位情報とに対応する医療情報取得条件を特定し、特定された医療情報取得条件を主記憶装置１６の所定の領域に出力する(#6)。なお、入力されたジェスチャに対応する医療情報取得条件が特定されなかった場合は、新たなジェスチャの入力待ち状態に戻る。
【００５３】
次に、医療情報表示装置１の医療情報取得部３６は、取得条件特定部３５によって設定された医療情報取得条件を医療情報管理サーバ２に送信する(#7)。医療情報管理サーバ２の医療情報検索部５２は、医療情報取得条件を医療情報表示装置１から受信し(#8)、医療情報データベース５３の検索を行い、データベース中の取得条件のインデックス情報が、受信した医療情報取得条件を満たす医療情報の実データを抽出し(#9)、抽出された医療情報の実データを医療情報表示装置１に送信する(#10)。医療情報表示装置１の医療情報取得部３６は、送信されてきた医療情報の実データを受信し、主記憶装置１６または補助記憶装置１７の所定の領域に格納する(#11)。そして、医療情報表示制御部３７は、受信した医療情報の実データに基づいて、その医療情報を液晶ディスプレイ１２に表示させる(#12)。なお、医療情報取得条件を満たす医療情報が医療情報データベース５３に登録されていなかった場合には、その旨が表示される。
【００５４】
このように、本発明の第１の実施形態では、医療情報表示装置１のタッチパネル１１から人体アイコン４５に対するジェスチャが入力されると、そのジェスチャに応じた医療情報取得条件が特定され、特定された医療情報取得条件を満たす医療情報が医療情報管理サーバ２の医療情報データベース５３から抽出され、抽出された医療情報が医療情報表示装置１の液晶ディスプレイ１２に表示される。以下では、様々なジェスチャ入力について、そのジェスチャに対応する医療情報が取得されるまでの一連の処理の詳細について具体的に説明する。
【００５５】
図６は、医療情報データベース５３のデータ構造と、医療情報データベース５３に登録された医療情報の具体例を表したものである。図に示したとおり、本実施形態では、医療情報データベース５３は、患者ＩＤ、検査日時、検査部位、情報種別、実データから構成される。検査部位と情報種別とが医療情報取得条件に対応するインデックス情報となっている。したがって、取得条件特定部３５で特定される医療情報取得条件も、取得対象の医療情報の検査部位の条件を表す検査部位条件と情報種別の条件を表す情報種別条件とからなる。
【００５６】
医療情報登録部５１は、各システムから医療情報を収集し、収集された医療情報を用いて医療情報データベース５３への登録データを作成する。具体的には、医療情報データベース５３の患者ＩＤの項目には、収集された各医療情報から患者ＩＤを抽出して設定する。検査部位の項目には、収集された医療情報の付帯情報等から患者の部位の情報を抽出して設定する。情報種別の項目には、収集された医療情報の付帯情報等からその医療情報の種別を表す情報を抽出して設定する。ここで、検査部位および情報種別は、予め設計されたコード体系に基づく値が定義されている。各医療情報の検査部位および情報種別は、所定の設定条件に基づいて、医療情報登録部５１によって自動的に設定される。実データの項目には、収集された医療情報の実データを設定する。そして、作成した登録データを医療情報データベース５３に登録（挿入）する。例えば、腹部に対するＣＴ撮影で得られたアキシャル断面画像データの場合、本実施形態では、検査部位に「腹部」、情報種別に「ＣＴ」が、インデックス情報として設定される（情報No.11）。
【００５７】
図７は、人体アイコン４５の一例を表したものである。また、図８は、人体アイコン４５が有する情報を表したものである。図８に示したように、人体アイコン４５の座標系の各位置に対して、人体の部位を識別する部位情報が階層的に関連づけられている。すなわち、人体アイコン４５の各位置は、頭部、胸部等の人体の体部を表す体部情報と、臓器、器官等の部位よりも細かい単位を表す部位詳細情報と関連づけられている。例えば、人体アイコンの（ｘ１，ｙ１）の位置は、体部としては頭部に属し、その詳細情報としては脳に属している。また、（ｘ５，ｙ５）の位置のように、１つの位置が複数の部位詳細情報（ここでは心臓、気管、食道）と関連づけられていてもよいし、（ｘ６，ｙ６）の位置のように、部位詳細情報とは関連づけられていなくてもよい。
【００５８】
本実施形態では、ジェスチャ種別解析部３４は、入力されたジェスチャが、ナイフ、指定、掴み、ハンマーの４つのジェスチャパターンのいずれであるかを順次判別するものとする。
【００５９】
図９Ａは、ナイフジェスチャの一例を模式的に表したものである。図に示したように、ユーザが、人体アイコン４５の右脇腹に指をタッチパネル１１にタッチし（タッチの開始）、指をタッチしたまま右方向に移動させ（タッチの移動）、左脇腹で指をタッチパネル１１から離す（タッチの終了）という一連の操作を行う。これにより、人体アイコン４５の腹部をスライスするようなジェスチャが取得条件入力用ＵＩ３２によって受け付けられる。
【００６０】
ジェスチャ種別解析部３３は、ジェスチャ情報に含まれる、上記のタッチの開始から、タッチの移動を経て、終了に至るまでの各時点での位置情報に基づいて、公知のパターン認識処理により、入力されたジェスチャの軌跡が直線（線分）であると認識された場合に、そのジェスチャをナイフジェスチャと認識し、ナイフジェスチャを表すジェスチャ種別情報を出力する。したがって、図９Ａの例では、ジェスチャの軌跡が直線を描いているので、ナイフジェスチャと認識される。
【００６１】
ジェスチャ部位解析部３４は、ジェスチャ種別情報がナイフジェスチャである場合、ジェスチャ情報に含まれる、上記のタッチの開始から、タッチの移動を経て、終了に至るまでの各時点での位置情報に基づいて、上述した座標変換により、各時点での人体アイコン４５上でのジェスチャ相対位置を特定し、さらに、特定された各相対位置と関連づけられた体部および部位詳細の情報を得る。図９Ａの例では、体部の情報として「腹部」、部位詳細の情報として、「大腸」、「小腸」等が得られる。
【００６２】
なお、取得条件入力用ＵＩ３２は、ジェスチャ種別解析部３３によって、入力されたジェスチャがナイフジェスチャであると認識された場合、図９Ｂに例示したように、ジェスチャの軌跡に沿って、人体アイコン４５を分離して表示させるようにしてもよい。
【００６３】
図１０Ａは、指定ジェスチャの一例を模式的に表したものである。図に示したように、ユーザが、人体アイコン４５の心臓の位置を指でタッチし（タッチの開始）、指をタッチしたまま移動させることなく、指をタッチパネル１１から離す（タッチの終了）という一連の操作を行う。これにより、人体アイコン４５の心臓をタップするジェスチャが取得条件入力用ＵＩ３２によって受け付けられる。
【００６４】
ジェスチャ種別解析部３３は、ジェスチャ情報に含まれる、上記のタッチの開始から、タッチの移動を経て、終了に至るまでの各時点での位置情報に基づいて、タッチ位置の移動量が所定の閾値より小さい（ほぼ0に等しい）場合に、そのジェスチャを指定ジェスチャと認識し、指定ジェスチャを表すジェスチャ種別情報を出力する。したがって、図１０Ａの例では、タッチ位置の移動量が0であるから、指定ジェスチャと認識される。
【００６５】
ジェスチャ部位解析部３４は、ジェスチャ種別情報が指定ジェスチャである場合、ジェスチャ情報に含まれる、上記のタッチの開始または終了時点での位置の情報に基づいて、上述した座標変換により、その時点での人体アイコン４５上でのジェスチャ相対位置を特定し、さらに、特定されたジェスチャ相対位置と関連づけられた体部および部位詳細の情報を得る。図１０Ａの例では、体部の情報として「胸部」、部位詳細の情報として、「心臓」等が得られる。
【００６６】
なお、取得条件入力用ＵＩ３２は、ジェスチャ種別解析部３３によって、入力されたジェスチャが指定ジェスチャであると認識された場合、図１０Ｂに例示したように、指定位置と関連づけられた部位詳細情報に表された臓器等（ここでは心臓）を、人体アイコン４５の他の領域とは異なる表示態様で表示させるようにしてもよい。ここで、ジェスチャ相対位置が複数の部位詳細情報と関連づけられている場合（例えば、心臓、気管、食道）、それらすべてを他の領域とは異なる表示態様で表示させてもよいし、それらのうちのどれを異なる表示態様で表示させるかを、ユーザに選択させるようにしてもよい。
【００６７】
図１１Ａは、掴みジェスチャの一例を模式的に表したものである。図に示したように、このジェスチャではマルチタッチを用いる。まず、ユーザは、人体アイコン４５の心臓の上方と下方の位置を２本の指でタッチし（タッチの開始；図の(1)の矢印の始点）、指をタッチしたまま、心臓を掴む向きに移動させ（タッチの移動；図の(1)の矢印の方向）、さらに、指をタッチしたまま、人体アイコン４５の外側に向かって移動させ（タッチの移動；図の(2)の矢印）、指をタッチパネル１１から離す（タッチの終了；図の(2)の矢印の終点）という一連の操作を行う。これにより、人体アイコン４５の心臓を掴み出すジェスチャが取得条件入力用ＵＩ３２によって受け付けられる。
【００６８】
ジェスチャ種別解析部３３は、ジェスチャ情報に含まれる、上記のタッチの開始から、タッチの移動を経て、終了に至るまでの各時点での位置情報に基づいて、公知のパターン認識処理により、タッチされた２点が互いに接近する第１の向きに移動した後、その移動後の２点間の距離を保ちながら、第１の向きとは異なる第２の向きに共に移動するような軌跡が認識された場合に、そのジェスチャを掴みジェスチャと認識し、掴みジェスチャを表すジェスチャ種別情報を出力する。したがって、図１１Ａの例では、タッチ位置が(1)の矢印の区間では接近し、(2)の矢印の区間では、(1)とは異なる向きに平行移動しているので、掴みジェスチャと認識される。
【００６９】
ジェスチャ部位解析部３４は、ジェスチャ種別情報が掴みジェスチャである場合、ジェスチャ情報に含まれる、上記のタッチの開始から移動を経て終了に至るまでの位置情報に基づいて、タッチされた２点が第１の向きに移動した後、移動の向きが変わる時点での２点（図１１Ａの(1)の各矢印の終点）の間の位置をジェスチャ位置と特定し、上述した座標変換により、人体アイコン４５上でのジェスチャ相対位置を特定し、さらに、特定されたジェスチャ相対位置と関連づけられた体部および部位詳細の情報を得る。図１１Ａの例では、(1)の各矢印の終点の間の各位置の体部の情報として「胸部」、部位詳細の情報として、「心臓」等が得られる。
【００７０】
なお、取得条件入力用ＵＩ３２は、ジェスチャ種別解析部３３によって、入力されたジェスチャが指定ジェスチャであると認識された場合、図１１Ｂに例示したように、ジェスチャ部位解析部３４で得られた部位詳細情報に表された臓器等（ここでは心臓）を、人体アイコン４５の他の領域とは異なる表示態様で表示させるとともに、上記第２の向き（図１１Ｂの(2)の矢印の向き）に移動させることにより、心臓が人体アイコン４５から掴み出される様子をアニメーション表示させるようにしてもよい。ここで、ジェスチャ部位解析部３４で特定されたジェスチャ相対位置が複数の部位詳細情報と関連づけられている場合（例えば、心臓、気管、食道）、それらすべてを上記のように表示させてもよいし、それらのうちのどれを上記のように表示させるかを、ユーザに選択させるようにしてもよい。
【００７１】
図１２Ａは、ハンマージェスチャの一例を模式的に表したものである。図に示したように、ユーザが、人体アイコン４５の頭部の位置を指でタッチし（タッチの開始）、指をタッチしたまま所定の時間以上移動させることなく維持してから、指をタッチパネル１１から離す（タッチの終了）という一連の操作を行う。これにより、人体アイコン４５の頭部を砕き割るジェスチャが取得条件入力用ＵＩ３２によって受け付けられる。
【００７２】
ジェスチャ種別解析部３３は、ジェスチャ情報に含まれる、上記のタッチの開始から、タッチの移動を経て、終了に至るまでの各時点での位置情報に基づいて、タッチ位置の移動量が所定の閾値より小さく（ほぼ0に等しく）、かつ、タッチの開始から終了までのジェスチャ時間が所定の閾値となる時間より長い場合に、そのジェスチャをハンマージェスチャと認識し、ハンマージェスチャを表すジェスチャ種別情報を出力する。なお、この認識方法では、ジェスチャ時間が所定の時間以下の場合には、指定ジェスチャと認識される。したがって、図１２Ａの例では、タッチ位置の移動量が0で、かつ、ジェスチャ時間が所定の時間より長いので、ハンマージェスチャと認識される。
【００７３】
ジェスチャ部位解析部３４は、ジェスチャ種別情報がハンマージェスチャである場合、ジェスチャ情報に含まれる、上記のタッチの開始または終了時点での位置の情報に基づいて、上述した座標変換により、その時点での人体アイコン４５上でのジェスチャ相対位置を特定し、さらに、特定されたジェスチャ相対位置と関連づけられた体部および部位詳細の情報を得る。図１２Ａの例では、体部の情報として「頭部」、部位詳細の情報として、「脳」が得られる。
【００７４】
なお、取得条件入力用ＵＩ３２は、ジェスチャ種別解析部３３によって、入力されたジェスチャがハンマージェスチャであると認識された場合、図１２Ｂに例示したように、指定位置と関連づけられた部位詳細情報に表された臓器等（ここでは脳）を砕き割った様子を表す表示態様で表示させるようにしてもよい。ここで、ジェスチャ相対位置が複数の部位詳細情報と関連づけられている場合（例えば、心臓、気管、食道）、それらすべてを他の領域とは異なる表示態様で表示させてもよいし、それらのうちのどれを異なる表示態様で表示させるかを、ユーザに選択させるようにしてもよい。
【００７５】
上記のジェスチャの他、例えば、ジェスチャ種別解析部３３が、所定の医療機器を人体アイコン４５に対して操作するジェスチャ（例えば内視鏡を挿入するジェスチャ）を認識するようにし、ジェスチャ部位解析部３４がその医療機器の操作対象の部位を認識するようにしてもよい。また、上記各ジェスチャとは異なるジェスチャを上記各ジェスチャパターンと対応づけてもよい。
【００７６】
前述のとおり、取得条件特定部３５によって特定される医療情報取得条件は、取得対象の医療情報の検査部位の条件を表す検査部位条件と情報種別の条件を表す情報種別条件とからなる。取得条件特定部３５は、取得条件テーブル４６を参照し、ジェスチャ種別解析部３３で出力されたジェスチャ種別情報とジェスチャ部位解析部３４で出力されたジェスチャ部位情報との組合せに対応する情報種別条件を特定するとともに、この情報種別条件の特定に用いられたジェスチャ部位情報を検査部位条件に設定する。
【００７７】
図１３Ａは、取得条件テーブル４６の設定例を表したものである。図に示したように、本実施形態では、取得条件テーブル４６は、ジェスチャ種別とジェスチャ部位の組合せに対して、医療情報取得条件（情報種別条件）が優先順位を付けて関連づけられている。
【００７８】
この取得条件テーブル４６は、取得条件テーブル編集用ＵＩ３８によって編集可能となっている。図１３Ｂは、取得条件テーブル４６の編集画面の一例であり、図に示したように、取得条件テーブル４６の登録内容をリスト形式で表示している。ユーザが医療情報取得条件を追加したい場合、リストの最終行の各項目にタッチすると、図の下部に示したような、その項目に設定可能な値が一覧表示されたリストボックスが表示される。図１３Ｂでは、ジェスチャ種別の項目が選択されているので、ジェスチャ種別解析部３３によって認識可能なジェスチャパターンの一覧がリストボックスに表示されている。ユーザは、リストボックスに表示された値の一覧から所望の値にタッチして選択することにより、選択された値がその項目に設定される。既に登録済みの医療情報取得条件の内容を変更する場合には、変更したい項目にタッチすることにより、上記と同様のリストボックスが表示され、上記と同様に所望の値にタッチして選択することにより、その項目の値が変更される。既に登録済みの医療情報取得条件を削除したい場合には、削除したい医療情報取得条件を表す行の任意の位置をタッチし、指をタッチしたまま、医療情報取得条件のリストの外まで移動させ、そこで指をタッチパネルから離す操作を行うことにより、その医療情報取得条件が削除される。
【００７９】
図９Ａに例示した腹部に対するナイフジェスチャの場合、取得条件特定部３５は、ジェスチャ種別情報とジェスチャ部位情報のすべての組合せ、すなわち、ジェスチャ種別情報「ナイフ」と体部情報である「腹部」との組合せ、ジェスチャ種別情報「ナイフ」と部位詳細情報である「大腸」、「小腸」等との組合せの各々を用いて取得条件テーブル４６を参照する。その結果、ジェスチャ種別情報「ナイフ」と体部情報である「腹部」との組合せが、取得条件テーブル４６のジェスチャ種別「ナイフ」、ジェスチャ部位「指定体部（ジェスチャ部位解析部３４で出力された体部情報）」との組合せに該当するので、情報種別条件として、「ＣＴ」、「ＭＲ」が優先順位の順に得られるとともに、検査部位条件としては、取得条件テーブル４６の上記エントリを取得するのに用いられたジェスチャ部位情報である「腹部」が得られる。
【００８０】
医療情報管理サーバ２の医療情報検索部５２は、医療情報表示装置１の取得条件特定部３５で特定された医療情報取得条件を医療情報取得部３６から受信し、受信した医療情報取得条件を優先順位の高い順に検索条件として用いて医療情報データベース５３を検索する。ここで、その検索条件を満たす医療情報が抽出された場合には、残りの優先順位のより低い医療情報取得条件による検索は行わない。一方、その検索条件を満たす医療情報が抽出されなかった場合には、受信した医療情報取得条件のうち、現在の検索条件の次に優先順位の高い医療情報取得条件を新たな検索条件として検索を行う。
【００８１】
図９Ａに例示した腹部に対するナイフジェスチャの場合、医療情報検索部５２は、まず、検査部位条件を「腹部」、情報種別条件を優先順位が最も高い「ＣＴ」として、図６に例示された医療情報データベース５３を検索し（患者ＩＤは「012345」が入力されたものとする）、これらの条件を満たす情報No.11の医療情報の実データであるＣＴアキシャル断面画像データを抽出し、検索を終了する。抽出されたデータは医療情報表示装置１の医療情報取得部３６に送信され、医療情報表示制御部３７が、図１４に例示されたようなＣＴアキシャル断面画像を表示させる。なお、情報No.11の医療情報が医療情報データベース５３に登録されていなかった場合には、上記の検索条件に該当する医療情報が存在しないので、情報種別条件を、次に優先順位が高い「ＭＲ」に変更して再度検索が行われる。
【００８２】
図１０Ａに例示した心臓に対する指定ジェスチャの場合、取得条件特定部３５がジェスチャ種別情報とジェスチャ部位情報のすべての組合せを用いて取得条件テーブル４６を参照した結果、ジェスチャ種別「指定」とジェスチャ部位「心臓」と関連づけられた情報種別条件である、「心電図」、「ＣＰＲ」、「ＶＲ」が優先順位の順に得られるとともに、検査部位条件としては、取得条件テーブル４６の上記エントリを取得するのに用いられたジェスチャ部位情報である「心臓」が得られる。そして、医療情報管理サーバ２の医療情報検索部５２では、検査部位条件を「心臓」、情報種別条件を「心電図」とする検索条件に合致する情報No.13の心電図波形データが抽出され、医療情報表示装置１の医療情報取得部３６に送信される。医療情報表示制御部３７は、図１５に例示されたような心電図波形を表示させる。
【００８３】
図１１Ａに例示した心臓に対する掴みジェスチャの場合、取得条件特定部３５がジェスチャ種別情報とジェスチャ部位情報のすべての組合せを用いて取得条件テーブル４６を参照した結果、ジェスチャ種別「掴み」とジェスチャ部位「心臓」と関連づけられた情報種別条件である「ＶＲ」が得られる。検査部位条件としては、取得条件テーブル４６の上記エントリを取得するのに用いられたジェスチャ部位情報である「心臓」が得られる。そして、医療情報管理サーバ２の医療情報検索部５２では、検査部位条件を「心臓」、情報種別条件を「ＶＲ」とする検索条件に合致する情報No.14の心臓ＶＲ画像データが抽出され、医療情報表示装置１の医療情報取得部３６に送信される。医療情報表示制御部３７は、図１６に例示されたような心臓を表すＶＲ画像を表示させる。
【００８４】
図１２Ａに例示した頭部に対するハンマージェスチャの場合、取得条件特定部３５がジェスチャ種別情報とジェスチャ部位情報のすべての組合せを用いて取得条件テーブル４６を参照した結果、ジェスチャ種別「ハンマー」とジェスチャ部位「頭部」と関連づけられた情報種別条件である「頭骨・脳実質・脳血管ＶＲ合成」が得られる。検査部位条件としては、取得条件テーブル４６の上記エントリを取得するのに用いられたジェスチャ部位情報である「頭部」が得られる。そして、医療情報管理サーバ２の医療情報検索部５２では、検査部位条件を「頭部」、情報種別条件を「頭骨・脳実質・脳血管ＶＲ合成」とする検索条件に合致する情報No.16の頭骨・脳実質・脳血管ＶＲ合成画像データが抽出され、医療情報表示装置１の医療情報取得部３６に送信される。医療情報表示制御部３７は、図１７に例示されたような頭骨・脳実質・脳血管ＶＲ合成画像を表示させる。なお、図１７に示した頭骨・脳実質・脳血管ＶＲ合成画像は、頭部非造影ＣＴおよび頭部造影ＣＴのボリュームデータを用いてボリュームレンダリング処理を行い、得られた画像を合成することによって得られる。具体的には、頭部非造影ＣＴのボリュームデータに対して、骨のＣＴ値を有色不透明にするためのカラーテンプレートとオパシティカーブに基づいてボリュームレンダリング処理を行うことにより、頭骨全体のＶＲ画像が得られる。同様に、頭部非造影ＣＴのボリュームデータに対して、脳実質のＣＴ値を有色不透明にするためのカラーテンプレートとオパシティカーブに基づいてボリュームレンダリング処理を行うことにより、脳実質全体のＶＲ画像が得られる。さらに、頭部の左半分および右半分を表す非造影ＣＴのボリュームデータに対しても同様のボリュームレンダリング処理を行うことにより、頭骨、脳実質の左半分、右半分を表すＶＲ画像が得られる。一方、頭部造影ＣＴのボリュームデータに対して、造影剤のＣＴ値を有色不透明にするためのカラーテンプレートとオパシティカーブに基づいてボリュームレンダリング処理を行うことにより、脳血管全体のＶＲ画像が得られる。最後に、これらのＶＲ画像を図１７に示したようなレイアウトになるように合成することによって、頭骨・脳実質・脳血管ＶＲ合成画像が得られる。なお、頭骨全体のＶＲ画像（図１７上段）、左右の頭骨のＶＲ画像および脳実質のＶＲ画像（図１７中段）、左右の頭骨と脳実質のＶＲ画像および脳血管全体のＶＲ画像（図１７下段）の順に各画像を切り替えて表示することによって、頭部を、外側の頭骨、その内側の脳実質の順に砕き割っていく様子を動画的に表現してもよい。
【００８５】
以上のように、本発明の第１の実施形態では、例えば図１０Ａに示した心臓に対する指定ジェスチャと図１１Ａに示した心臓に対する掴みジェスチャの場合のように、人体アイコン４５の同じ部位であっても、ジェスチャパターンによって異なる医療情報を取得して表示させることが可能になる。
【００８６】
また、図１３Ａの取得条件テーブル４６に示したように、例えば同じ指定ジェスチャであっても、ジェスチャが行われた部位が心臓であれば、心電図、冠動脈ＣＰＲ画像、心臓ＶＲ画像が取得されることになり、ジェスチャが行われた部位が肝臓であれば、ＩＣＧ検査結果数値、肝臓ＶＲ画像が取得されることになる。このように、人体アイコン４５に対するジェスチャパターンが同じであっても、そのジェスチャが行われた部位によって異なる医療情報を取得して表示させることが可能になる。
【００８７】
このように、本発明の第１の実施形態では、取得条件入力用ＵＩ３２で入力されたジェスチャを、ジェスチャ種別解析部３３およびジェスチャ部位解析部３４が解析することによって得られた、入力ジェスチャのパターンと位置に応じて、取得条件特定部３５が、そのジェスチャが直感的に表す医療情報取得条件を、取得条件テーブル４６を用いて特定することができる。そして、医療情報取得部３６が、特定された医療情報取得条件を満たす医療情報を医療情報管理サーバ２の医療情報データベース５３から取得し、医療情報表示制御部３７が、取得された医療情報を液晶ディスプレイ１２に表示させることができる。したがって、ユーザは、医療情報表示装置１のタッチパネル１１に対して直感的なジェスチャ操作を行うという１つのアクションのみで、所望の医療情報をきわめて容易に絞り込んで取得し、表示させることが可能になる。このように、本実施形態の医療情報表示装置１は、きわめて操作性が高い、実用的価値の高いものとなっている。
【００８８】
また、取得条件テーブル４６を編集するための取得条件テーブル編集用ＵＩ３８が提供されているので、ユーザの嗜好や医療現場での要求に合致した医療情報取得条件を柔軟に定義することが可能になり、医療情報表示装置１の操作性や柔軟性がさらに向上し、医療現場での作業効率のさらなる向上に資する。
【００８９】
また、人体アイコン４５には、体部情報と部位詳細情報というように、各位置に対して部位情報が階層的に関連づけられているので、より柔軟かつより高度にジェスチャパターンとジェスチャ部位とを組み合わせることが可能になる。
【００９０】
上記第１の実施形態では、タッチの開始から移動を経て終了に至る１つのジェスチャ操作に基づいて、そのジェスチャに対応する医療情報が得られるように構成されているので、比較的単純かつ容易な操作性が提供されており、操作に不慣れな初心者向きのユーザインターフェースとなっている。一方、このユーザインターフェースだけでは、操作に熟練したユーザは操作性が不十分と感じてしまう可能性がある。そこで、本発明の第２の実施形態では、操作に熟練したユーザ向けのより複雑な操作性を有するユーザインターフェースを提供することを目的とする。本発明の第２の実施形態における医療情報表示装置と医療情報管理サーバに実装される機能構成、および、医療情報統合システムで行われる医療情報の表示処理の流れは、第１の実施形態と同様である（図４、図５参照）。
【００９１】
図１８は、本発明の第２の実施形態における取得条件入力用ＵＩ３２の一例を表したものである。図に示したように、人体アイコン４５の他に、医療情報取得ボタン４７が設けられている。ユーザが、人体アイコン４５に対してジェスチャ操作を行った後、この医療情報取得ボタン４７にタッチすると、それまでに行われた１以上のジェスチャ操作に応じた医療情報取得条件の特定処理が、取得条件特定部３５によって行われる。すなわち、第１の実施形態では、１つのジェスチャ操作（タッチの開始から終了まで）が完了すると、自動的に後続の処理が行われていたのに対して、第２の実施形態では、医療情報取得ボタン４７が後続の処理の実行のためのトリガとなっている。これにより、第２の実施形態では、人体アイコン４５に対する複数のジェスチャ操作を受け付けることが可能になる。
【００９２】
図１９は、複数のジェスチャ操作を組み合わせた取得条件の入力例を模式的に表したものである。図の(1)に示したように、ユーザは、まず、人体アイコン４５の腹部に対する左右方向のナイフジェスチャを行う。取得条件入力用ＵＩ３２は、このナイフジェスチャに応じて、ジェスチャの軌跡に沿って人体アイコン４５を分離して表示させる。次に、図の(2)、(3)に示したように、ユーザは、分離された人体アイコン４５の下側、上側の順に指定ジェスチャを行う。
【００９３】
ジェスチャ種別解析部３３およびジェスチャ部位解析部３４は、取得条件入力用ＵＩ３２で入力された複数のジェスチャの各々について、すなわち、タッチの開始から終了までの単位でジェスチャを分割して、各ジェスチャについて、ジェスチャ種別情報およびジェスチャ部位情報を出力する。
【００９４】
図２０は、このような複数のジェスチャの入力に対応する取得条件テーブル４６の一例を表したものである。図に示したように、本実施形態では、取得条件の入力操作が複数のジェスチャからなるものについては、各ジェスチャ種別、各ジェスチャ部位を、それらの複数のジェスチャが行われた順に並べたものを登録しておく。また、本実施形態では、ジェスチャ種別およびジェスチャ部位の組合せに対して、情報種別条件だけでなく、検査部位条件と情報詳細条件が関連づけられている。図１９に例示した入力例では、腹部に対するナイフジェスチャ、腹部より下側の指定ジェスチャ、腹部より上側の指定ジェスチャが行われているので、図２０に例示した取得条件テーブル４６の２番目のジェスチャ種別とジェスチャ部位の組合せに該当する。したがって、取得条件特定部３５によって、この組合せに対応する医療情報取得条件である、検査部位条件「ナイフ指定体部」、すなわち、「腹部」、情報種別条件「ＣＴ」、「ＭＲ」、情報詳細条件「尾頭方向」が特定される。ここで、図１９に例示した入力例において、(2)と(3)のジェスチャを逆順で行った場合には、図２０に例示した取得条件テーブル４６の３番目のジェスチャ種別とジェスチャ部位の組合せに該当し、検査部位条件「ナイフ指定体部（腹部）」、情報種別条件「ＣＴ」、「ＭＲ」、情報詳細条件「頭尾方向」が特定される。このように、図１９に例示した入力例では、第２、第３の指定ジェスチャの位置の並び順によって、情報詳細条件が特定されている。
【００９５】
なお、図９Ａに例示したナイフジェスチャのみの場合には、図２０に例示した取得条件テーブル４６の１番目のジェスチャ種別とジェスチャ部位の組合せに該当し、検査部位条件「ナイフ指定体部（腹部）」、情報種別条件「ＣＴ」、「ＭＲ」、情報詳細条件「尾頭方向」が特定される。このように、本実施形態では、図１８の医療情報取得ボタン４７にタッチするまでを取得条件の入力とすることにより、１つのジェスチャによる取得条件の入力も、２以上のジェスチャによる取得条件の入力も受け付けられるようになっている。
【００９６】
図２１は、本発明の第２の実施形態における医療情報データベースのデータ構造と、図１９および図２０の例に対応する医療情報の登録例を表したものである。図に示したように、第１の実施形態の医療情報データベース（図６参照）に対して、医療情報取得条件に対応するインデックス情報として情報詳細の項目が付加された構成となっている。この情報詳細の項目には、医療情報登録部５１によって、医療情報の付帯情報等から抽出されたその医療情報の情報種別を補足する詳細情報が設定される。
【００９７】
図１９に例示した入力例の場合、取得条件特定部３５で特定された、検査部位条件「腹部」、情報種別条件「ＣＴ」、情報詳細条件「尾頭方向」を満たす情報No.22の医療情報である腹部ＣＴ尾頭方向アキシャル断面画像データが、医療情報検索部５２によって医療情報データベース５３から抽出され、医療情報取得部３６に送信される。なお、腹部ＣＴ尾頭方向アキシャル断面画像とは、腹部ＣＴで得られるアキシャル断面画像で、患者の下から上に向かう向き（尾頭方向）に見た断面を表す画像である。一方、図１９の(2)と(3)の入力を逆順にした場合には、検査部位条件「腹部」、情報種別条件「ＣＴ」、情報詳細条件「頭尾方向」を満たす情報No.21の医療情報である腹部ＣＴ頭尾方向アキシャル断面画像データが、医療情報検索部５２によって医療情報データベース５３から抽出される。
【００９８】
このように、本発明の第２の実施形態では、取得条件入力用ＵＩ３２が、複数のジェスチャからなる、第１の実施形態よりも複雑な入力を受付可能であり、ジェスチャ種別解析部３３およびジェスチャ部位解析部３４が、入力された複数のジェスチャの各々について、そのジェスチャ種別および部位を認識し、取得条件特定部３５が、複数のジェスチャの種別および部位と関連づけられた医療情報取得条件を特定する。これにより、取得条件入力用ＵＩ３２はより多くの情報の入力を受け付けることができ、それに応じて、より詳細な医療情報取得条件が特定可能となる。
【００９９】
図２２から図２５は、本発明の第２の実施形態の他の具体例を説明するためのものである。図２２は、１つのジェスチャによる医療情報取得条件の入力例である。図に示したように、ユーザが人体アイコン４５の胸部から腹部までを上下方向にナイフジェスチャを行うと、本具体例では、ジェスチャ種別解析部３３は、ナイフジェスチャの方向も認識し、ジェスチャ種別情報として、「上下方向ナイフ」を出力する。一方、図２３Ａおよび図２４Ｂは、２つのジェスチャによる医療情報取得条件の入力例である。図に示したように、ユーザが、まず、人体アイコン４５の左手側にタッチし、指をタッチしたまま、円弧を描くように左方向に指を動かし、人体アイコン４５の右手側で指を離す操作を行うと、本具体例では、ジェスチャ種別解析部３３が、このジェスチャの軌跡をパターン認識し、人体アイコン４５の頭側から見て時計回りの回転を表すジェスチャと判定する。取得条件入力用ＵＩ３２は、この判定結果に応じて、人体アイコン４５を上記時計回りに９０度回転させて図２３Ｂのように表示させる。ここで、ユーザが、人体アイコン４５の胸部から腹部までを上下方向にナイフジェスチャを行うと、ジェスチャ種別解析部３３が、上記と同様に、ジェスチャ種別情報として「上下方向ナイフ」を出力する。
【０１００】
図２４は、本具体例に対応する取得条件テーブル４６を表したものである。図２２の入力例の場合、取得条件特定部３５は、ジェスチャ種別情報「上下方向ナイフ」、ジェスチャ部位情報「胸部・腹部」に対応する１番目のエントリに基づいて、情報種別条件として「ＣＴ」、「ＭＲ」、情報詳細条件として「サジタル」を特定する。一方、図２３Ａおよび図２３Ｂの入力例の場合、取得条件特定部３５は、ジェスチャ種別情報「時計回り回転＋上下方向ナイフ」、ジェスチャ部位情報「胸部・腹部」に対応する２番目のエントリに基づいて、情報種別条件として「ＣＴ」、「ＭＲ」、情報詳細条件として「コロナル」を特定する。なお、検査部位条件は、第１の実施形態と同様にして、医療情報取得条件の特定に用いられた部位情報である「胸部・腹部」が、両入力例とも設定されるものとする。また、本具体例に対応するために、取得条件テーブル４６に人体アイコンの向きの項目を追加し、例えば、上記１番目のエントリでは「正面」、２番目のエントリでは「側面」と設定しておいてもよい。この場合、取得条件入力用ＵＩ３２が、各時点での人体アイコン４６の向きを表す情報も出力するようにすればよい。
【０１０１】
図２５は、本具体例に対応する医療情報データベースの医療情報の登録例である。図２２に例示した入力例の場合、取得条件特定部３５で特定された、検査部位条件「胸部・腹部」、情報種別条件「ＣＴ」、情報詳細条件「サジタル」を満たす情報No.31の医療情報である胸部から腹部のＣＴサジタル断面画像データが、医療情報検索部５２によって医療情報データベース５３から抽出され、医療情報取得部３６に送信される。一方、図２３Ａおよび図２３Ｂに例示した入力例の場合、取得条件特定部３５で特定された、検査部位条件「胸部・腹部」、情報種別条件「ＣＴ」、情報詳細条件「コロナル」を満たす情報No.32の医療情報である胸部から腹部のＣＴコロナル断面画像データが、医療情報検索部５２によって医療情報データベース５３から抽出される。
【０１０２】
このように、本具体例では、取得条件入力用ＵＩ３２で行われた第１のジェスチャである回転ジェスチャに応じて人体アイコン４５を回転させ、その後の第２のジェスチャである上下方向ナイフジェスチャによって、コロナル方向の断面画像を取得するための医療情報取得条件を特定することが可能になる。
【０１０３】
図２６および図２７は、本発明の第２の実施形態のさらに他の具体例を説明するためのものである。図２６は本具体例によるジェスチャ入力例を表したものである。図の(1-1)および(1-2)に示したように、ユーザが、まず人体アイコン４５の心臓に対して掴みジェスチャを行うと（図１１Ａ参照）、ジェスチャ種別解析部３３が入力ジェスチャを掴みジェスチャと認識し、ジェスチャ部位解析部３４がそのジェスチャの対象となる詳細部位が心臓であると認識する。本具体例では、取得条件入力用ＵＩ３２は、これらの認識結果に応じて、掴みジェスチャの対象である心臓を人体アイコン４５から掴み出すように移動させる表示を行うとともに（図１１Ｂ参照）、心臓の形状を模式的に表す心臓アイコンを表示させる。この心臓アイコンは、人体アイコン４５と同様に、心臓の各位置に対して、心臓の各部位（冠動脈、左心室等）を表す部位情報が関連づけられたものである。ユーザが、例えば図の(2)に示したように、心臓アイコンの冠動脈の位置に対して指定ジェスチャを行うと、ジェスチャ種別解析部３３が、そのジェスチャを指定ジェスチャと認識するとともに、ジェスチャ部位解析部３４が、そのジェスチャの部位を、心臓アイコンの上記関連づけに基づいて「冠動脈」と認識する。
【０１０４】
図２７は、本具体例に対応する取得条件テーブル４６を表したものである。図２６の入力例の場合、取得条件特定部３５は、ジェスチャ種別情報「掴み→指定」、ジェスチャ部位情報「心臓→冠動脈」に対応する検査部位条件である「冠動脈」、および、各種情報種別条件を特定する。
【０１０５】
このように、本具体例では、取得条件入力用ＵＩ３２で行われた第１のジェスチャである心臓の掴みジェスチャに応じて心臓アイコンを表示させ、その後の第２のジェスチャである冠動脈の指定ジェスチャに応じて、冠動脈の医療情報を取得するための医療情報取得条件を特定することが可能になる。また、本具体例と同様にして、人体アイコン４５の所定の臓器等に対する掴みジェスチャに応じてその臓器等を表すアイコンを表示させ、その臓器等のアイコンに対するジェスチャに応じて、医療情報取得条件を特定できるようにすることができる。したがって、人体アイコン４５では入力しづらい小さな臓器等に対しても、人体アイコンに対する第１のジェスチャに応じてその臓器等のアイコンを拡大表示させ、その拡大表示された臓器等のアイコンに対する第２のジェスチャ入力を受け付けることにより、臓器中の特定の構成要素のような人体アイコン４５では入力しづらい微細な構造物に対してもジェスチャ入力を行うことが可能になり、操作性が向上する。
【０１０６】
なお、第１の実施形態で説明したジェスチャパターンについても、複数のジェスチャから構成されるようにしてもよい。例えば、ジェスチャ種別解析部３３が所定の時間内での２回のタップ操作を指定ジェスチャと認識するようにしてもよいし、所定の時間内での３回以上のタップ操作をハンマージェスチャと認識するようにしてもよい。
【０１０７】
上記の第１、第２の実施形態の場合、医療情報表示装置１の取得条件特定部３５が、入力ジェスチャを解析して医療情報取得条件を特定した後で、医療情報管理サーバ２から医療情報を取得する処理を行うため、医療情報表示装置１のユーザにとっては、ジェスチャの完了から医療情報の表示までの間の待ち時間が長くなってしまい、操作性が低下してしまう。本発明の第３の実施形態は、このような問題点を解決するものである。
【０１０８】
図２８は、本発明の第３の実施形態における医療情報表示装置１と医療情報管理サーバ２の機能ブロック図である。図に示したように、本実施形態は、上記第１、第２の実施形態の医療情報表示装置１に、医療情報先行取得部３９を付加するとともに、第１、第２の実施形態の医療情報取得部３６を医療情報抽出部４０に置換した構成となっている。図２９は、本発明の第３の実施形態において、医療情報統合システム３で行われる医療情報の表示処理の流れを示したフローチャートである。
【０１０９】
図に示したように、患者ＩＤ入力用ＵＩ３１が、第１に実施形態と同様にして患者ＩＤの入力を受け付けた後(#21)、医療情報先行取得部３９が、入力された患者ＩＤのみが設定された医療情報取得条件を医療情報管理サーバ２に送信する(#22)。医療情報管理サーバ２の医療情報検索部５２は、医療情報取得条件（患者ＩＤのみ）を医療情報表示装置１から受信し(#23)、医療情報データベース５３の検索を行い、データベース中の患者ＩＤが、受信した医療情報取得条件の患者ＩＤと一致する医療情報を抽出する(#24)。このとき、医療情報の実データだけでなく、医療情報取得条件に対応するインデックス情報も抽出される。医療情報検索部５２は、抽出された医療情報を医療情報表示装置１に送信する(#25)。医療情報表示装置１の医療情報先行取得部３９は、送信されてきた医療情報を受信し、補助記憶装置１７または主記憶装置１６の所定の領域に格納する(#26)。
【０１１０】
一方、医療情報表示装置１では、医療情報先行取得部３９が上記の処理を行う間、第１の実施形態のステップ#2から#7と同様に、ジェスチャ入力の受付と、そのジェスチャに応じた医療情報取得条件の設定が行われる(#27から#31)。
【０１１１】
そして、医療情報抽出部４０は、入力されたジェスチャに応じて特定された医療情報取得条件と、医療情報先行取得部３９によって取得された医療情報中のインデックス情報とに基づいて、特定された医療情報取得条件を満たす医療情報を、先行取得された医療情報の中から抽出する(#32)。そして、医療情報表示制御部３７は、抽出された医療情報の実データに基づいて、その医療情報を液晶ディスプレイ１２に表示させる(#33)。
【０１１２】
以上のように、本発明の第３の実施形態では、医療情報表示装置１において、医療情報先行取得部３９が、取得条件入力用ＵＩ３２によるジェスチャ入力の受付、および、取得条件特定部３５による医療情報取得条件の特定の各処理と並行して、患者ＩＤ入力用ＵＩ３１で入力された患者ＩＤと関連づけられた医療情報を医療情報管理サーバ２の医療情報データベース５３から先行取得するので、入力されたジェスチャに応じた医療情報を満たす医療情報を取得する際に、医療情報管理サーバ２の医療情報データベース５３にアクセスする必要がなくなる。したがって、医療情報表示装置１のユーザは、取得条件入力用ＵＩ３２でのジェスチャ入力後に、医療情報管理サーバ２による検索処理や、医療情報表示装置１と医療情報管理サーバ２との間の通信処理を待つ必要がなくなるので、ユーザから見たスループットが向上し、操作性が向上する。この実施形態は、特に、医療情報管理サーバ２やネットワーク９の負荷が高かったり、性能が低かったりする場合であっても、医療情報の取得を先行して行うことにより、その影響を軽減することができる。
【０１１３】
上記各実施形態では、ジェスチャが行われた部位に関する医療情報が存在するかどうかについては、取得条件入力用ＵＩ３２でのジェスチャ入力の時点では、ユーザは知ることができない。本発明の第４の実施形態は、この問題を解決するものである。
【０１１４】
図３０は、本発明の第４の実施形態における医療情報表示装置１と医療情報管理サーバ２の機能ブロック図である。図に示したように、本実施形態は、上記第３の実施形態と処理部は同様であるが、取得条件入力用ＵＩ３２が、医療情報先行取得部３９によって取得された医療情報を入力として用いる点が第３の実施形態と異なる。図３１は、本発明の第４の実施形態において、医療情報統合システム３で行われる医療情報の表示処理の流れを示したフローチャートである。
【０１１５】
図に示したように、本発明の第４の実施形態では、第３の実施形態と同様に、患者ＩＤ入力用ＵＩ３１が、第１に実施形態と同様にして患者ＩＤの入力を受け付けた後(#41)、医療情報先行取得部３９が、入力された患者ＩＤのみが設定された医療情報取得条件を医療情報管理サーバ２に送信する(#42)。医療情報管理サーバ２の医療情報検索部５２は、医療情報取得条件（患者ＩＤのみ）を医療情報表示装置１から受信し(#43)、医療情報データベース５３の検索を行い、データベース中の患者ＩＤが、受信した医療情報取得条件の患者ＩＤと一致する医療情報を抽出する(#44)。このとき、医療情報の実データだけでなく、医療情報取得条件に対応するインデックス情報も抽出される。ここで、本実施形態では、医療情報検索部５２は、抽出された医療情報のうちインデックス部のみを医療情報表示装置１に送信する(#45)。医療情報表示装置１の医療情報先行取得部３９は、送信されてきた医療情報のインデックス部を受信し、補助記憶装置１７または主記憶装置１６の所定の領域に格納する(#46)。また、本実施形態では、医療情報先行取得部３９が上記の処理を行う間、取得条件入力用ＵＩ３２による人体アイコンの表示（第３の実施形態におけるステップ#27）は行われない。
【０１１６】
取得条件入力用ＵＩ３２が、送信されてきた医療情報の検査部位の情報を読み込み、人体アイコン中の各部位を、医療情報が存在する部位と存在しない部位に分類し、両部位が識別可能な態様で人体アイコン４５を表示させる(#47)。図３０は表示される人体アイコンの一例である。図に示した例では、医療情報が存在する部位は存在しない部位よりも濃い色となっている。そして、上記各実施形態と同様に、取得条件入力用ＵＩ３２が人体アイコンに対するジェスチャ入力の受付(#48)から取得条件特定部３５による医療情報取得条件の特定(#51)が行われる。その間、バックグラウンドでは、医療情報管理サーバ２の医療情報検索部５２が、ステップ#44で抽出された医療情報の実データ部を医療情報表示装置１に送信し(#52)、医療情報表示装置１の医療情報先行取得部３９が、送信されてきた医療情報の実データ部を受信し、補助記憶装置１７または主記憶装置１６の所定の領域に格納する(#43)。
【０１１７】
そして、上記第３の実施形態のステップ#32と同様に、医療情報抽出部４０が、特定された医療情報取得条件を満たす医療情報を、先行取得された医療情報の中から抽出し(#54)、医療情報表示制御部３７が、抽出された医療情報を表示させる(#55)。
【０１１８】
このように、本発明の第４の実施形態では、取得条件入力用ＵＩ３２が、表示可能な医療情報が存在する部位と存在しない部位とを識別可能な態様で人体アイコン４５を表示させるので、取得条件入力用ＵＩ３２でジェスチャ入力を行う前に、患者ＩＤ入力用ＵＩ３１で指定した患者について、人体アイコン４５の各部位に関する医療情報が存在するかどうかを知ることができ、医療情報が得られない不必要なジェスチャ入力を回避することが可能になり、操作効率が向上する。
【０１１９】
また、人体アイコン４５を上記のように表示するには、取得条件入力用３２が、医療情報先行取得部３９によって先行取得された医療情報を参照する必要があるので、上記第３の実施形態と同様に、人体アイコン４５の表示と医療情報全体の先行取得を並行して行うことができない。ここで、医療情報検索部５２が、上記第３の実施形態と同様に、患者ＩＤに基づいて抽出された医療情報のすべてを医療情報表示装置１に送信してしまうと、患者ＩＤの入力から人体アイコンの表示までの待ち時間が長くなってしまい、操作性や作業効率が低下する。そこで、医療情報検索部５２が、抽出された医療情報のうち、取得条件入力用ＵＩ３２が必要とするインデックス部のみを先行して送信するようにしたので、患者ＩＤの入力から人体アイコンの表示までの待ち時間が、医療情報の全項目を受信する場合に比べて大幅に短縮される。また、並行して行うことが可能な、ジェスチャ入力の受付から医療情報取得条件の特定までの処理と、医療情報の実データ部の受信については、第３の実施形態と同様に並行して行うようにしたので、ジェスチャ入力の完了後に所望の医療情報が表示されるまでの待ち時間は、上記第１、第２の実施形態と比べて短縮される。
【０１２０】
上記各実施形態では、例えば、図３３の医療情報データベースの登録例のように、検査日時の異なる、同一患者、同一検査部位、同一情報種別の医療情報が存在する場合、すなわち、同じ優先順位の医療情報取得条件を満たす医療情報が複数件抽出される場合については考慮されていない。このような場合、検査日時の新しい方の医療情報を自動的に選択して表示させたり、表示対象の医療情報の選択を受け付けるユーザインターフェースを設けたりすることが考えられる。
【０１２１】
本発明の第５の実施形態では、このような場合のさらに効果的な医療情報の表示を実現するものである。本実施形態における医療情報表示装置と医療情報管理サーバに実装される機能構成、および、医療情報統合システムで行われる医療情報の表示処理の流れは、上記各実施形態と同様である。ただし、医療情報管理サーバ２からは、医療情報取得条件を満たす医療情報が複数件あっても、全件が医療情報表示装置１に送信されるものとし、また、送信される医療情報は、実データ部だけでなく、インデックス部も送信されてくるものとする。
【０１２２】
本実施形態では、医療情報表示制御部３７は、表示対象の医療情報のインデックス部を参照し、検査日時の異なる、同一患者、同一検査部位、同一情報種別の医療情報が存在する場合、これらを比較可能な態様で液晶ディスプレイ１２に表示させる。図３４は、図３３に例示した検査日時の異なる２つの腹部ＣＴアキシャル断面画像の表示例である。図に示したように、２つの腹部ＣＴアキシャル断面画像が左右に並べられ、検査日が付されて表示されている。これにより、ユーザは、検査日時のみ異なる複数の医療情報を容易に比較することが可能になり、作業効率が向上する。なお、検査日時の異なる、同一患者、同一検査部位、同一情報種別の医療情報が存在する場合、上記のような表示を行うかどうかの選択を受け付けるユーザインターフェースを設け、ユーザの選択に応じて上記の用事を行うようにしてもよい。
【０１２３】
上記の各実施形態では、医療情報取得条件に付された優先順位に基づいて、より優先順位の高い医療情報が表示されるようになっているが、入力されたジェスチャに対応する、優先順位のより低い医療情報を表示させたい場合も考えられる。本発明の第６の実施形態はこのような場合を考慮に入れたものである。
【０１２４】
図３５は、本発明の第６の実施形態における医療情報表示装置１と医療情報管理サーバ２の機能ブロック図である。図に示したように、本実施形態は、上記第４の実施形態の医療情報表示装置１に医療情報選択用ＵＩ４１を付加した構成となっている。
【０１２５】
図３６は、本発明の第６の実施形態において、医療情報統合システム３で行われる医療情報の表示処理の流れを示したフローチャートである。図に示したように、ステップ#61から#73までは第４の実施形態のステップ#41から#53までと同様である。
【０１２６】
医療情報抽出部４０は、取得条件特定部３５で特定された、優先順位の異なる複数の医療情報取得条件の各々を満たす医療情報を抽出する(#74)。ここで、医療情報抽出部４０によって抽出された医療情報が１件の場合(#75;NO)、上記第４の実施形態と同様に、医療情報表示制御部３７は、抽出された医療情報の実データに基づいて、その医療情報を液晶ディスプレイ１２に表示させる(#78)。一方、医療情報抽出部４０によって抽出された医療情報が複数件の場合(#75;YES)、医療情報選択用ＵＩ４１が、抽出された医療情報を、その医療情報が満たした医療情報取得条件の優先順位の順に並べ替えてリスト化した医療情報選択用画面を液晶ディスプレイ１２に表示させる(#76)。図３７Ａは医療情報選択用画面の一例を表したものである。この画面は、図１０Ａに例示した心臓の指定ジェスチャに対応する医療情報を、図６に例示された医療情報データベース５３中の医療情報から抽出した場合を表している。すなわち、この画面では、患者ＩＤ＝「012345」、検査部位条件＝「心臓」、情報種別条件＝「心電図」または「ＣＰＲ」または「ＶＲ」を満たす医療情報が、医療情報抽出部４０によって抽出された場合を示している。医療情報選択用ＵＩ４１は、抽出された医療情報のインデックス情報を、対応する医療情報取得条件の優先順位の順に並べ替えてリスト表示する。そして、医療情報選択用ＵＩ４１は、ユーザが所望する医療情報を表す行の選択（タッチ操作）を受け付ける(#77)。図３７Ｂは、より視覚的効果の高い医療情報選択用画面の一例を表したものである。図に示したように、この医療情報選択用画面では選択対象の医療情報がサムネイル表示されている。ここで、その医療情報に関する読影レポートや検査報告が存在するものについては、そのレポートや検査報告と関連づけられた医療情報のサムネイルにレポートを表すアイコンを付して表示してもよい。また、サムネイルの並び順は、その医療情報に対応する優先順位の順とすることができる。また、上記第５の実施形態のように、同一優先順位で検査日時の異なる医療情報が抽出される場合を考慮して、検査日時の順でもよいし、これらを組み合わせた並び順でもよい。この画面例では、医療情報選択用ＵＩ４１は、ユーザが所望する医療情報を表すサムネイル画像またはアイコンの選択（タッチ操作）を受け付ける。そして、医療情報表示制御部３７は、医療情報選択用ＵＩ４１で選択された医療情報の実データに基づいて、その医療情報を液晶ディスプレイ１２に表示させる(#78)。
【０１２７】
以上のように、本発明の第６の実施形態では、医療情報表示装置１の医療情報抽出部４０において、取得条件特定部３５によって特定された医療情報取得条件を満たす医療情報が複数件抽出された場合に、医療情報選択用ＵＩ４１が表示対象の医療情報の選択を受け付けるので、ユーザは、簡単なタッチ操作で所望の医療情報を表示させることが可能になり、操作性がさらに向上する。
【０１２８】
上記の各実施形態では、例えば医療情報が画像である場合、画像診断システム５において生成済みの画像が医療情報データベース５３に登録されていることを前提としている。これに対して、本発明の第７の実施形態は、医療情報としてボリュームデータ等が医療情報データベースに格納されている場合に対応したものである。
【０１２９】
図３８は、本発明の第７の実施形態における医療情報表示装置１と医療情報管理サーバ２の機能ブロック図である。図に示したように、本実施形態は、上記第４の実施形態の医療情報表示装置１に表示画像生成部４２を付加した構成となっている。また、医療情報データベース５３には、図４０に具体的に表したように、第１の実施形態のデータ構造において、医療情報の実データとして、生成済みの画像ではなく、ＣＴ等の各種モダリティで得られたボリュームデータが格納されている。
【０１３０】
図３９は、本発明の第７の実施形態において、医療情報統合システム３で行われる医療情報の表示処理の流れを示したフローチャートである。図に示したように、ステップ#81から#94までは第４の実施形態のステップ#41から#54までと同様である。
【０１３１】
ここで、医療情報取得条件を満たす医療情報として、ボリュームデータが医療情報抽出部４０によって抽出された場合(#95;YES)、表示画像生成部４２は、そのボリュームデータと関連づけられた医療情報の検査部位と情報種別を読み込み、それらの内容に応じた表示画像を生成する。例えば、図４０の情報No.51の医療情報の場合、検査部位「腹部」、情報種別「ＣＴ」に基づいて、腹部ＣＴボリュームデータからアキシャル断面画像が生成される。ここで、アキシャル断面の位置は、プログラムの起動パラメータや設定ファイル等で予め定められた位置とすることができる。あるいは、取得条件入力用ＵＩ３２で受け付けられたナイフジェスチャ（図９Ａ参照）の位置に基づいて、その位置が属する部位（腹部）の上下方向の長さに対する、その位置のその部位の上端からの長さの比率を算出し、抽出された腹部ＣＴボリュームデータにおける、その比率に対応する体軸方向の位置をアキシャル断面の位置としてもよい。なお、抽出された情報No.51の医療情報が、アキシャル断面画像の集合体である場合には、その中から前述の方法によって定められた位置におけるアキシャル断面画像を選択すればよい。また、情報No.54の医療情報の場合、検査部位「心臓」、情報種別「ＶＲ」に基づいて、胸部ＣＴボリュームデータから心臓を表すボリュームレンダリング画像が生成される。
【０１３２】
以上のように、本発明の第７の実施形態では、医療情報登録部５１が、生成済みの医用画像の代わりに、その医用画像の生成元データとなるボリュームデータ等を医療情報データベース５３に登録しておき、その医療情報が医療情報取得条件を満たす医療情報として抽出された場合には、表示画像生成部４２が、その医療情報のインデックス情報に応じた表示画像を生成するようにしたので、このような場合でも、上記各実施形態と同様の医療情報（画像）を表示させることが可能になる。
【０１３３】
また、本実施形態において、表示画像の生成条件を変更するためのユーザインターフェースをさらに設ければ、例えば、断面の位置や向き、ボリュームレンダリングのカラーテンプレートやオパシティカーブ、視点の位置や視線方向等の生成条件を自由に変更することが可能になり、表示画像生成部４２は、変更後の生成条件に応じた表示画像を生成することが可能になる。これにより、医療情報表示装置１での、よりインタラクティブな医療情報の表示が実現される。
【０１３４】
上記各実施形態では、取得条件テーブル４６に定義された優先順位の異なる医療情報取得条件に基づいて取得された複数件の医療情報が同時に表示されることがなかったが、ユーザの嗜好や医療現場の要求によっては、これらの医療情報を同時に表示したい場合もありうる。このような場合、複数件の医療情報をどのようなレイアウトで同時表示させるかが問題となる。本発明の第８の実施形態は、このような問題を解決するものである。
【０１３５】
図４１は、本発明の第８の実施形態における取得条件テーブル４６の構成を表したものである。図に示したように、表示条件の項目が付加された構成となっている。この表示条件の項目は、表示対象の複数の医療情報に対して１つ定義されるものであり、この例では、情報No.1から8までの医療情報に対してレイアウトNo.1で識別される表示条件が関連づけられる。図４２は、このレイアウトNo.1の表示条件の一例を模式的に表したものである。図に示したように、この表示条件では、冠動脈の平均径を表すグラフＧＲが表示される領域ＷＧＲ、冠動脈のストレートＣＰＲ画像ＳＴ−ＣＰＲが表示される領域ＷＳＴ−ＣＰＲ、冠動脈の直交断面を表すＭＰＲ画像ＭＰＲ−０が表示される領域ＷＭＰＲ−０、アキシャル、サジタル、コロナル断面を表す３つのＭＰＲ画像ＭＰＲ−１、ＭＰＲ−２、ＭＰＲ−３がそれぞれ表示される領域ＷＭＰＲ−１、ＷＭＰＲ−２、ＷＭＰＲ−３、ストレッチＣＰＲ画像ＳＣ−ＣＰＲが表示される領域ＷＳＣ−ＣＰＲ、ボリュームレンダリング画像ＶＲが表示される領域ＷＶＲの８つの領域が配置されたレイアウトを示している。
【０１３６】
本実施形態では、医療情報取得部３６または医療情報抽出部４０が、優先順位の異なる医療情報取得条件の各々を満たす医療情報をすべて取得する。また、医療情報表示制御部３７が、取得条件テーブル４６を参照し、取得された各医療情報が満たしている医療情報取得条件に関連づけられた表示条件を特定し、取得された各医療情報を、特定された表示条件に基づいて表示させる。図４３は、図４１に例示された医療情報取得条件を満たす各医療情報を、各医療情報と関連づけられたレイアウトNo.1の表示条件（図４２に例示）に基づいて表示させた例を表している。
【０１３７】
このように、本実施形態では、医療情報表示制御部３７が、取得条件テーブル４６を参照し、表示対象の医療情報に対応する医療情報取得条件と関連づけられている表示条件を特定し、特定された表示条件に基づいて、表示対象の医療情報を表示させることができる。したがって、上記のように、表示対象の医療情報が複数件存在する場合であっても、適切なレイアウトで医療情報を表示させることが可能になる。
【０１３８】
上記の各実施形態はあくまでも例示であり、上記のすべての説明が本発明の技術的範囲を限定的に解釈するために利用されるべきものではない。また、上記の実施形態におけるシステム構成、ハードウェア構成、処理フロー、モジュール構成、ユーザインターフェースや具体的処理内容等に対して、本発明の趣旨から逸脱しない範囲で様々な改変を行ったものも、本発明の技術的範囲に含まれる。
【０１３９】
例えば、本発明の実施形態は、各実施形態の特徴的構成を適宜組み合わせ実施形態であってもよい。具体的には、本発明の第２の実施形態の取得条件テーブル４６を第３から第８の実施形態で採用してもよいし、第６の実施形態の医療情報選択用ＵＩ４１を第１、第２の実施形態に付加してもよい。
【０１４０】
また、上記各実施形態の医療情報データベース５３は、医療情報の実データも登録されているものとして説明を行ったが、医療情報の実データの代わりに、その実データにアクセスするためのリンク情報（アドレス情報）を登録しておき、実データは、登録元の他システムのデータベースのものを用いるようにし（リンク情報のリンク先を他システムのデータベースとし）、その医療情報が表示対象となった場合にのみ、そのリンク情報に基づいて、実データを取得するようにしてもよい。
【０１４１】
また、上記実施形態では、医療情報が統合的に管理される医療情報管理サーバ２を設け、医療情報表示装置１は、医療情報管理サーバ２が備える医療情報データベース５３から医療情報を取得するようにしていたが、画像診断システム５や内視鏡検査システム６等の他システムの各々から、直接、医療情報を取得するようにしてもよい。
【０１４２】
また、医療情報表示装置１が医療情報データベース５３を備えていてもよい。この場合、医療情報取得部３６または医療情報先行取得部３９に、医療情報検索部５２の機能を持たせればよい。
【０１４３】
また、上記実施形態では、本発明の医療情報表示装置１を、図２に示したように携帯型の装置として説明してきたが、タッチパネル付き液晶ディスプレイとコンピュータ本体を有するデスクトップ型の装置であってもよい。
【０１４４】
また、タッチパネル１１から入力されたジェスチャは、ジェスチャ種別解析部３３およびジェスチャ部位解析部３４で、その内容の解析を行っているが、その全部または一部を、医療情報表示装置１のオペレーティングシステムやタッチパネルドライバ（ソフトウェア）側で行うようにしてもよい。
【０１４５】
また、医療情報の一例である画像は、静止画ではなく、動画であってもよい。
【符号の説明】
【０１４６】
１ 医療情報表示装置
２ 医療情報管理サーバ
３ 医療情報統合システム
４ 電子カルテシステム
５ 画像診断システム
６ 内視鏡検査システム
７ 病理検査システム
８ 各診療科システム
９ ネットワーク
１１ タッチパネル
１２ 液晶ディスプレイ
１３ アンテナ部
１４ 電源スイッチ
１５ ＣＰＵ
１６ 主記憶装置
１７ 補助記憶装置
１８ 通信インターフェース
１９ データバス
３１ 患者ＩＤ入力用ユーザインターフェース（ＵＩ）
３２ 取得条件入力用ユーザインターフェース（ＵＩ）
３３ ジェスチャ種別解析部
３４ ジェスチャ部位解析部
３５ 取得条件特定部
３６ 医療情報取得部
３７ 医療情報表示制御部
３８ 取得条件テーブル編集用ユーザインターフェース（ＵＩ）
３９ 医療情報先行取得部
４０ 医療情報抽出部
４１ 医療情報選択用ユーザインターフェース（ＵＩ）
４２ 表示画像生成部
４５ 人体アイコン
４６ 取得条件テーブル
５１ 医療情報登録部
５２ 医療情報検索部
５３ 医療情報データベース
【技術分野】
【０００１】
本発明は、タッチパネル等の直感的なユーザインターフェースを用いて、ユーザが所望する医療情報を表示させる技術に関するものである。
【背景技術】
【０００２】
医療現場では、ＣＴ、ＭＲＩ、ＵＳ、ＰＥＴ等のモダリティで取得された画像情報の他、心電図や脳波等の波形の情報、血圧、体温等の数値情報、各種検査報告、カルテ等の文字情報等、多種多様な医療情報が発生している。
【０００３】
医療機関には、このような医療情報を管理するシステムが構築されているところがある。例えば、これらの医療情報は電子データとしてデータベースに格納され、クライアント端末からの要求に応じて、ユーザが所望する医療情報がデータベースから選択され、クライアント端末に接続されたディスプレイに表示される。
【０００４】
このような医療情報の選択および表示の操作性を向上するために、様々なユーザインターフェースが提案されている。例えば、表示画面に表示された人型内の部位や、体の一部を示すイメージ内の部位をポインティングデバイスで指定することにより、指定された部分およびその周辺における疾患部位に関する医用画像情報が医用情報データベースから抽出され、抽出された医用画像情報の一覧画面が表示されるものが知られている（例えば、特許文献１）。
【０００５】
また、医用画像処理用ワークステーションに接続されて使用されるタッチパネル式ディスプレイを備えた入力装置で、タッチ操作により、アキシャル断面画像中に基準線を作成すると、作成された基準線を切断面とするコロナル断面画像を作成して表示させるようにしたものが知られている（例えば、特許文献２）。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００３−２６００３０号公報
【特許文献２】特開２００９−１１９０００号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、特許文献１に記載されたユーザインターフェースは、１つの部位を指定することによって、より多くの医用画像情報を取得しようとするものであるが、前述のとおり、医療現場では多種多様な医療情報が発生していることに鑑みると、このユーザインターフェースでは非常に多くの医療情報が一覧表示されてしまい、所望の医療情報を直感的かつ適切にかつ迅速に絞り込むことが困難になってしまうことがありうる。また、特許文献２に記載されたユーザインターフェースは、既に選択されている画像を切り替える操作のためのものであり、所望の医療情報を適切に絞り込むためのものではない。
【０００８】
本発明は上記事情に鑑みてなされたものであり、所望の医療情報を、より直感的な操作で、より容易に取得可能にする医療情報表示装置および方法、並びにプログラムを提供することを目的とするものである。
【課題を解決するための手段】
【０００９】
本発明の医療情報表示装置は、所与の情報を表示する表示手段と、該表示手段の表示面に対するジェスチャ操作を検出し、該検出されたジェスチャ操作の内容を表すジェスチャ情報を出力するジェスチャ入力手段と、被検体の外観を表す被検体外観画像の画像データであって、該画像中の各位置に対して、該被検体の部位を識別する部位識別情報が関連づけられたものに基づいて、該被検体外観画像を前記表示手段の所定の表示位置に表示させる第１の表示制御手段と、該被検体外観画像の表示中に前記ジェスチャ入力手段によって検出されたジェスチャ操作に応じて出力された前記ジェスチャ情報に基づいて、該ジェスチャ操作が所定の複数のジェスチャ操作パターンのうちのいずれであるかを表すジェスチャ種別を判別するジェスチャ種別解析手段と、前記被検体外観画像の表示位置の情報と、前記被検体外観画像データに関連づけられた部位識別情報と、該被検体外観画像の表示中のジェスチャ操作に応じて出力されたジェスチャ情報に含まれる、該ジェスチャ操作が行われた位置を表すジェスチャ位置情報とに基づいて、前記ジェスチャ操作に対応する前記被検体の部位であるジェスチャ部位を特定するジェスチャ部位解析手段と、該ジェスチャ種別および該ジェスチャ部位に基づいて、前記被検体外観画像の表示中のジェスチャ操作に対応する前記被検体についての医療情報を取得するための医療情報取得条件を特定する取得条件特定手段と、該特定された医療情報取得条件を満たす前記医療情報を、複数件の前記医療情報を記憶する医療情報記憶手段から選択的に取得する医療情報取得手段と、該取得された医療情報を前記表示手段に表示させる第２の表示制御手段とを設けたことを特徴とする。
【００１０】
本発明の医療情報表示システムは、被検体についての医療情報を、所与の医療情報取得条件に基づいて選択的に提供する医療情報提供装置と、本発明の医療情報表示装置とがネットワークを介して通信可能に接続されたシステムである。
【００１１】
ここで、医療情報提供装置は、複数件の前記医療情報を、所与の前記医療情報取得条件に基づいて選択可能なデータ構造で記憶する医療情報記憶手段と、前記医療情報表示装置から前記医療情報取得条件を受信する取得条件受信手段と、該受信した医療情報取得条件を満たす前記医療情報を前記医療情報記憶手段から取得する医療情報検索手段と、該取得された医療情報を、前記医療情報取得条件を送信した医療情報表示装置に送信する医療情報送信手段とを有するものとしてもよい。
【００１２】
本発明の医療情報表示方法は、被検体の外観を表す被検体外観画像の画像データであって、該画像中の各位置に対して、該被検体の部位を識別する部位識別情報が関連づけられたものに基づいて、該被検体外観画像を前記表示手段の所定の表示位置に表示するステップと、該被検体外観画像の表示中に該表示手段の表示面に対するジェスチャ操作を検出し、該検出されたジェスチャ操作の内容を表すジェスチャ情報を出力するステップと、前記出力されたジェスチャ情報に基づいて、該ジェスチャ操作が所定の複数のジェスチャ操作パターンのうちのいずれであるかを表すジェスチャ種別を判別するステップと、前記被検体外観画像の表示位置の情報と、前記被検体外観画像データに関連づけられた部位識別情報と、前記ジェスチャ操作に応じて出力されたジェスチャ情報に含まれる、該ジェスチャ操作が行われた位置を表すジェスチャ位置情報とに基づいて、前記ジェスチャ操作に対応する前記被検体の部位であるジェスチャ部位を特定するステップと、該ジェスチャ種別および該ジェスチャ部位に基づいて、前記被検体外観画像の表示中のジェスチャ操作に対応する前記被検体についての医療情報を取得するための医療情報取得条件を特定するステップと、該特定された医療情報取得条件を満たす前記医療情報を、複数件の前記医療情報を記憶する医療情報記憶手段から選択的に取得するステップと、該取得された医療情報を前記表示手段に表示するステップとを有することを特徴とする。
【００１３】
本発明の医療情報表示制御プログラムは、コンピュータに、被検体の外観を表す被検体外観画像の画像データであって、該画像中の各位置に対して、該被検体の部位を識別する部位識別情報が関連づけられたものに基づいて、該被検体外観画像を前記表示手段の所定の表示位置に表示させるステップと、該被検体外観画像の表示中に該表示手段の表示面に対するジェスチャ操作を検出し、該検出されたジェスチャ操作の内容を表すジェスチャ情報を出力するステップと、前記出力されたジェスチャ情報に基づいて、該ジェスチャ操作が所定の複数のジェスチャ操作パターンのうちのいずれであるかを表すジェスチャ種別を判別するステップと、前記被検体外観画像の表示位置の情報と、前記被検体外観画像データに関連づけられた部位識別情報と、前記ジェスチャ操作に応じて出力されたジェスチャ情報に含まれる、該ジェスチャ操作が行われた位置を表すジェスチャ位置情報とに基づいて、前記ジェスチャ操作に対応する前記被検体の部位であるジェスチャ部位を特定するステップと、該ジェスチャ種別および該ジェスチャ部位に基づいて、前記被検体外観画像の表示中のジェスチャ操作に対応する前記被検体についての医療情報を取得するための医療情報取得条件を特定するステップと、該特定された医療情報取得条件を満たす前記医療情報を、複数件の前記医療情報を記憶する医療情報記憶手段から選択的に取得するステップと、該取得された医療情報を前記表示手段に表示させるステップとを実行させることを特徴とする。
【００１４】
本発明において、ジェスチャの入力は、タッチパネル式の入力手段を用いてもよい。
【００１５】
被検体外観画像は、被検体を模式的に表した画像としてもよい。
【００１６】
被検体外観画像の表示については、被検体外観画像の表示中に検出されたジェスチャ操作に対応する、前記ジェスチャ種別および／または前記ジェスチャ部位に基づいて、前記被検体外観画像中の被検体の態様を、前記検出されたジェスチャ操作に応じた所定の態様に変更して表示させるようにしてもよい。
【００１７】
あるいは、被検体外観画像の表示中に検出された第１のジェスチャ操作について判別された第１の前記ジェスチャ種別、および／または、該第１のジェスチャ操作について特定された第１の前記ジェスチャ部位に基づいて、前記被検体外観画像中の被検体の態様を、前記検出されたジェスチャ操作に応じた所定の態様に変更して表示させるようにし、前記第１のジェスチャ種別、前記第１のジェスチャ部位、前記変更後の被検体外観画像の表示中に検出された第２のジェスチャ操作について判別された第２の前記ジェスチャ種別、該第２のジェスチャ操作について特定された第２の前記ジェスチャ部位の少なくとも一部に基づいて、前記第１のジェスチャ操作および前記第２のジェスチャ操作に対応する前記医療情報取得条件を特定するようにしてもよい。
【００１８】
医療情報取得条件の特定の際、前記ジェスチャ種別と前記ジェスチャ部位の組合せに対して前記医療情報取得条件を関連づけた参照データに基づいて、前記医療情報取得条件を特定するようにしてもよい。
【００１９】
ここで、参照データは、１組の前記ジェスチャ種別と前記ジェスチャ部位の組合せに対して、１以上の前記医療情報取得条件が関連づけられたものとし、該組合せに対して２以上の前記医療情報取得条件が関連づけられた場合には、該複数の医療情報取得条件の各々には、該医療情報取得条件の優先順位がさらに関連づけられたものとしてもよい。
【００２０】
さらに、参照データの編集を行えるようにしてもよい。
【００２１】
医療情報の取得については、所与の条件を満たす医療情報を前記医療情報記憶手段から先行取得するようにしてもよい。さらに、前記被検体外観画像に表された被検体中の各部位を、該部位に関する医療情報が該先行取得された医療情報の中に存在する部位と、該部位に関する医療情報が該先行取得された医療情報の中に存在しない部位とが異なる態様となるように表示させるようにしてもよい。
【００２２】
医療情報の表示の際、前記医療情報取得手段によって検査時期の異なる同種の検査に関する複数件の医療情報を取得した場合に、該複数件の医療情報を比較可能な態様で表示させるようにしてもよい。
【００２３】
前記被検体を表す医用画像が前記医療情報記憶手段から取得された場合、必要に応じて、前記取得された医用画像に対して、前記医療情報取得条件を満たす医用画像を得るための所定の画像処理を行うようにしてもよい。
【００２４】
前記医療情報取得条件を満たす医療情報を複数件取得した場合、該複数件の医療情報を前記表示手段に一覧表示させ、表示対象の前記医療情報の選択を受け付けるようにし、選択された医療情報を表示させるようにしてもよい。
【００２５】
ここで、抽出された複数の医療情報の一覧表示の際、前記複数件の医療情報をサムネイルまたはアイコンの態様で表示させるようにしてもよい。
【発明の効果】
【００２６】
本発明によれば、表示手段に被検体外観画像が表示されているときに、その表示面に対するジェスチャ操作を受け付け、そのジェスチャ操作の内容を表すジェスチャ情報に基づいて、ジェスチャ操作が所定の複数のジェスチャ操作パターンのうちのいずれであるかを表すジェスチャ種別を判別し、被検体外観画像の表示位置の情報と、被検体外観画像データに関連づけられた部位識別情報と、ジェスチャ操作が行われた位置を表すジェスチャ位置情報とに基づいて、ジェスチャ操作に対応する被検体の部位であるジェスチャ部位を特定し、ジェスチャ種別およびジェスチャ部位に基づいて、被検体外観画像の表示中のジェスチャ操作に対応する医療情報を取得するための医療情報取得条件を特定し、特定された医療情報取得条件を満たす医療情報を、複数件の医療情報を記憶する医療情報記憶手段から選択的に取得し、取得された医療情報を表示手段に表示することができる。したがって、所望の医療情報を、より直感的なジェスチャ操作で、より容易に取得することが可能になる。
【図面の簡単な説明】
【００２７】
【図１】本発明の実施形態となる医療情報表示装置を含む医療情報統合システムとその周辺システムの構成を表した図
【図２】本発明の実施形態となる医療情報表示装置の外観を模式的に表した図
【図３】本発明の実施形態となる医療情報表示装置の主要構成要素を表したブロック図
【図４】本発明の第１、第２の実施形態において、医療情報表示装置と医療情報管理サーバに実装される機能を模式的に表したブロック図
【図５】本発明の第１、第２の実施形態において、医療情報統合システムで行われる医療情報の表示処理の流れを示したフローチャート
【図６】本発明の第１の実施形態における医療情報データベースのデータ構造と登録されたデータの例を表した図
【図７】人体アイコンの一例を表した図
【図８】人体アイコンの各位置の位置情報と部位情報の関連づけの一例を表した図
【図９Ａ】人体アイコンに対するナイフジェスチャの一例を模式的に表した図
【図９Ｂ】ナイフジェスチャによって人体アイコンが変形する様子を模式的に表した図
【図１０Ａ】人体アイコンに対する指定ジェスチャの一例を模式的に表した図
【図１０Ｂ】指定ジェスチャによって指定された部位が強調表示される様子を模式的に表した図
【図１１Ａ】人体アイコンに対する掴みジェスチャの一例を模式的に表した図
【図１１Ｂ】掴みジェスチャによって指定された部位が掴み出される様子を模式的に表した図
【図１２Ａ】人体アイコンに対するハンマージェスチャの一例を模式的に表した図
【図１２Ｂ】ハンマージェスチャによって人体アイコンが変形する様子を模式的に表した図
【図１３Ａ】取得条件テーブルの設定例を表した図
【図１３Ｂ】取得条件テーブル編集用ユーザインターフェースの一例を表した図
【図１４】ＣＴ断面画像の表示例を模式的に表した図
【図１５】心電図波形データの表示例を表した図
【図１６】心臓を表すボリュームレンダリング画像の表示例を模式的に表した図
【図１７】頭骨、脳実質、脳血管のボリュームレンダリング画像の合成表示例を模式的に表した図
【図１８】本発明の第２の実施形態における取得条件入力用ユーザインターフェースの一例を表した図
【図１９】ナイフジェスチャと上向き指定ジェスチャを組み合わせた取得条件の入力例を模式的に表した図
【図２０】ナイフジェスチャと上向き指定ジェスチャを組み合わせた取得条件の入力例に対応する取得条件テーブルの設定例を表した図
【図２１】ナイフジェスチャと上向き指定ジェスチャを組み合わせた取得条件の入力例に対応する、医療情報データベースに登録された医療情報の例を表した図
【図２２】人体アイコンに対する上下方向のナイフジェスチャの一例を模式的に表した図
【図２３Ａ】人体アイコンに対する左右方向の回転ジェスチャの一例を模式的に表した図
【図２３Ｂ】側面を向いた人体アイコンに対する上下方向のナイフジェスチャの一例を模式的に表した図
【図２４】上下方向のナイフジェスチャと左右方向の回転ジェスチャによる取得条件の入力に対応する取得条件テーブルの設定例を表した図
【図２５】上下方向のナイフジェスチャと左右方向の回転ジェスチャによる取得条件の入力に対応する、医療情報データベースに登録された医療情報の例を表した図
【図２６】掴みジェスチャと指定ジェスチャを組み合わせた取得条件の入力例を模式的に表した図
【図２７】掴みジェスチャと指定ジェスチャを組み合わせた取得条件の入力例に対応する取得条件テーブルの設定例を表した図
【図２８】本発明の第３の実施形態において、医療情報表示装置と医療情報管理サーバに実装される機能を模式的に表したブロック図
【図２９】本発明の第３の実施形態において、医療情報統合システムで行われる医療情報の表示処理の流れを示したフローチャート
【図３０】本発明の第４の実施形態において、医療情報表示装置と医療情報管理サーバに実装される機能を模式的に表したブロック図
【図３１】本発明の第４の実施形態において、医療情報統合システムで行われる医療情報の表示処理の流れを示したフローチャート
【図３２】本発明の第４の実施形態における人体アイコンの表示例を表した図
【図３３】本発明の第５の実施形態に対応する医療情報データベースに登録された医療情報の例を表した図
【図３４】本発明の第５の実施形態における医療情報の比較表示例を表した図
【図３５】本発明の第６の実施形態において、医療情報表示装置と医療情報管理サーバに実装される機能を模式的に表したブロック図
【図３６】本発明の第６の実施形態において、医療情報統合システムで行われる医療情報の表示処理の流れを示したフローチャート
【図３７Ａ】医療情報選択用画面の一例を表した図
【図３７Ｂ】医療情報選択用画面の他の一例を表した図
【図３８】本発明の第７の実施形態において、医療情報表示装置と医療情報管理サーバに実装される機能を模式的に表したブロック図
【図３９】本発明の第７の実施形態において、医療情報統合システムで行われる医療情報の表示処理の流れを示したフローチャート
【図４０】本発明の第７の実施形態に対応する医療情報データベースに登録された医療情報の例を表した図
【図４１】本発明の第８の実施形態における取得条件テーブルの構成と設定例を表した図
【図４２】取得条件テーブルに設定された表示条件（レイアウト）の一例を模式的に表した図
【図４３】本発明の第８の実施形態における医療情報の表示例を模式的に表した図
【発明を実施するための形態】
【００２８】
図１は、本発明の実施形態となる医療情報表示装置１を含む医療情報統合システム３とその周辺のシステムの構成を表したものである。図に示したように、医療情報統合システム３は、電子カルテシステム４、画像診断システム５、内視鏡検査システム６、病理検査システム７、各診療科システム８とネットワーク９を介して通信可能に接続されて構成されている。また、医療情報統合システム３は、本発明の実施形態となる医療情報表示装置１と医療情報管理サーバ２とからなる。
【００２９】
本実施形態では、電子カルテシステム４、画像診断システム５、内視鏡検査システム６、病理検査システム７、各診療科システム８で発生した医療情報は、医療情報管理サーバ２によって統合的に収集・管理されている。そして、医療情報表示装置１は、医療情報管理サーバ２に対して所望の医療情報を要求し、医療情報管理サーバ２から提供された、その要求に合致する医療情報を表示する。
【００３０】
図２は本発明の実施形態となる医療情報表示装置１の外観を模式的に表したものであり、図３は医療情報表示装置１の主要構成要素を表したブロック図である。
【００３１】
図２に示したように、医療情報表示装置１は、タッチパネル１１と一体的に形成された液晶ディスプレイ１２を正面に有しており、側面には、無線通信のためのアンテナ部１３と電源スイッチ１４とを有している。
【００３２】
また、図３に示したように、医療情報表示装置１は、ＣＰＵ１５、主記憶装置１６と、補助記憶装置１７、タッチパネル１１、液晶ディスプレイ１２、通信インターフェース１８等とがデータバスで接続された構成となっている。
【００３３】
ＣＰＵ１５は、補助記憶装置１７に記憶されている、オペレーティングシステム等のミドルウェア、本発明の医療情報の取得および表示のためのアプリケーションソフトウェア等の各プログラムを、主記憶装置１６にロードして各処理を実行する。これにより、タッチパネル１１を介したユーザによる入力操作の受付け、医療情報等の各種情報の液晶ディスプレイ１２への表示等の入出力制御、通信インターフェース１８を介した通信等が行われる。
【００３４】
補助記憶装置１７としては、公知のフラッシュメモリドライブ（ＳＳＤ：Solid State drive）やハードディスクドライブ（ＨＤＤ）が用いられる。補助記憶装置１７には、上記各種プログラムがインストールされている。本発明の医療情報の表示のためのアプリケーションソフトウェアは、医療情報表示装置１に接続されたディスクドライブ等を用いてＣＤ−ＲＯＭ等の記録媒体からインストールされたものであってもよいし、インターネット等のネットワーク経由で接続されたサーバの記憶装置からダウンロードされた後にインストールされたものであってもよい。また、補助記憶装置１７は、医療情報管理サーバ２から取得した医療情報を一時的に記憶するのにも用いられる。
【００３５】
タッチパネル１１としては、抵抗膜、静電容量、電磁誘導、表面弾性波（超音波）、赤外線等の公知の方式のものを用いることができるが、本実施形態では、多様なジェスチャパターンについて説明するため、投影型の静電容量方式等の、複数の位置でのタッチであるマルチタッチを検出可能なものを用いているものとする。タッチパネル１１によるタッチ操作は、ユーザの指や所定のペン等を用いて行う。タッチパネル１１は、その制御プログラムによって規定された時間間隔で、タッチパネル１１に対するタッチの開始、タッチ位置の移動、タッチの終了を検出し、検出されたタッチの種類、および、その時点でのタッチパネル１１の座標系におけるタッチの位置情報を出力する。ここで、タッチの開始とはタッチパネル１１上の新たな位置に触れる操作であり、タッチの移動とはタッチパネル１１に触れたままタッチ位置を移動させる操作であり、タッチの終了とは指やペン等をタッチパネル１１から離す操作である。これによって、タッチパネル１１上で行われる様々なジェスチャ操作を検出することが可能になる。すなわち、タッチの開始から、タッチの移動、タッチの終了までの一連の操作が１つのジェスチャ操作として検出され、一連の操作の各時点で検出されたタッチの種類と位置情報とがジェスチャ情報として得られる。なお、タッチパネル１１の座標系と液晶ディスプレイ１２の座標系は、医療情報表示装置１の製造時等にキャリブレーションを行うことにより、対応関係が特定されており、相互に座標変換を行うことが可能である。以下では、説明を簡潔にするため、液晶ディスプレイ１２の座標系とタッチパネル１１の座標系を同一の座標系とし、表示装置の座標系という。
【００３６】
通信インターフェース１８は、公知の移動体通信網や無線ＬＡＮ等での通信を制御する。本実施形態では、医療情報管理サーバ２等との通信がこの通信インターフェース１８を介して行われる。
【００３７】
一方、医療情報管理サーバ２は、医療情報データベースを備えたコンピュータである。ハードウェア構成としては、ＣＰＵ、主記憶装置、補助記憶装置、入出力インターフェース、通信インターフェース、データバス等の周知のものの他、外部記憶装置を備えている。また、医療情報管理サーバ２には、周知のオペレーティングシステムやデータベース管理用ソフトウェアの他、医療情報データベースへの医療情報の登録やこのデータベースからの医療情報の抽出を行うためのアプリケーションソフトウェアがインストールされている。これらのソフトウェアは、ＣＤ−ＲＯＭ等の記録媒体からインストールされたものか、あるいは、インターネット等のネットワーク経由で接続されたサーバの記憶装置からダウンロードされた後にインストールされたものである。
【００３８】
また、電子カルテシステム４は公知のコンピュータシステムであり、例えば、各診療科等の端末と、電子カルテ情報が格納された電子カルテデータベースを備えた電子カルテ管理サーバとがネットワークを介して通信可能に接続された構成となっている。各診療科等の端末で入力された電子カルテ情報が電子カルテデータベースを用いて管理されている。ここで、電子カルテ情報には、例えば、患者の氏名、生年月日、性別等の患者情報、各種検査の日付、内容、結果等の検査履歴情報、受診した日付、主訴、確定診断名等の診断履歴情報、手術、処置、投薬等の治療が行われた日付、内容等の治療履歴情報等が含まれる。また、本実施形態では、電子カルテデータベースは、各患者を識別する患者ＩＤが上記電子カルテ情報と関連づけられたデータベース構造となっている。
【００３９】
画像診断システム５も公知のコンピュータシステムであり、例えば、画像診断医用ワークステーションと、ＣＴ、ＭＲＩ等のモダリティでの撮影によって得られた画像データが格納された画像データベースを備えた画像管理サーバと、撮影で得られた画像の読影結果を含む読影レポートが格納された読影レポートデータベースを備えた読影レポートサーバとがネットワークを介して通信可能に接続された構成となっている。ここで、画像診断医用ワークステーションは、診断目的・対象に応じて、ＭＩＰ、ＭＰＲ、ＣＰＲ、ボリュームレンダリング（ＶＲ）等の公知の画像処理や、骨抽出・除去、血管抽出、臓器抽出、異常陰影検出等の公知の画像解析処理を組み合わせて実行することが可能であり、これらの処理・解析済みの画像データも、画像データベースに格納される。また、画像データには、２次元画像（ピクセルデータ）と３次元画像（ボクセルデータ）の両方、および、静止画と動画の両方が含まれ得る。さらに、画像データベースでは、患者ＩＤの他、個別の画像を識別する画像ＩＤ、その画像が得られたモダリティの情報、その画像に表されている被検体の部位の情報等の付帯情報が画像データに関連づけられて格納されている。モダリティの情報は、モダリティ側で画像生成時に付与される。一方、被検体の部位の情報は、検査オーダ等に基づいてモダリティ側で画像生成時に付与してもよいし、ＣＴ等の断層画像の場合であれば、公知の部位認識処理（例えば特開２００８−２５９６８２号公報等参照）を用いて、画像診断医用ワークステーション側でスライス毎に付与してもよい。また、読影レポートデータベースは、読影レポートと患者ＩＤと読影対象の画像の画像ＩＤとが関連づけられたデータベース構造となっている。画像データや読影レポートは、個々の検査（撮影）を識別する検査ＩＤを介して間接的に患者ＩＤと関連づけられていてもよい。
【００４０】
内視鏡検査システム６も公知のシステムであり、各種内視鏡での撮影によって得られた実内視鏡画像データや内視鏡検査の結果がまとめられた内視鏡検査レポート等が検査ＩＤや患者ＩＤと関連づけられた内視鏡検査データベースを備えた内視鏡検査管理サーバが、内視鏡検査データベースへのアクセスの制御を行っている。
【００４１】
病理検査システム７も公知のシステムであり、病理検査で得られた顕微鏡画像や病理検査の結果がまとめられた病理検査レポート等が検査ＩＤや患者ＩＤと関連づけられた病理検査データベースを備えた病理検査管理サーバが、病理検査データベースへのアクセスの制御を行っている。
【００４２】
各診療科システム８には、その診療科特有の検査データや検査レポート等が検査ＩＤや患者ＩＤと関連づけられた各診療科のデータベースを備えた各診療科の管理サーバが、各診療科のデータベースへのアクセスの制御を行っている。ここで、各診療科特有の検査データとは、例えば、循環器科であれば心電図データ等（波形、数値等）、耳鼻咽喉科であれば聴覚検査データ等（波形、数値等）、眼科であれば視力検査や眼底検査データ等（数値等）である。
【００４３】
なお、本実施形態では、内視鏡検査システム６と病理検査システム７を各診療科システム８とは別のシステムとしているが、各診療科システム８の一部として構成してもよい。この場合、内視鏡検査や病理検査の情報は、その検査内容に応じて、各診療科の検査データとして管理される。
【００４４】
本発明の第１の実施形態は、医療情報表示装置１での様々なタッチパネル操作に応じて、その操作に応じた医療情報を医療情報管理サーバ２から取得し、医療情報表示装置１の液晶ディスプレイ１２に表示するものである。図４は、本発明の第１の実施形態において、医療情報表示装置１と医療情報管理サーバ２に実装される機能を模式的に表したブロック図である。図に示したように、本発明の医療情報表示装置１は、患者ＩＤ入力用ユーザインターフェース（ＵＩ）３１、取得条件入力用ＵＩ３２、ジェスチャ種別解析部３３、ジェスチャ部位解析部３４、取得条件特定部３５、医療情報取得部３６、医療情報表示制御部３７、人体アイコン４５、取得条件テーブル４６とから構成されている。また、医療情報表示装置１内に示された患者ＩＤ、ジェスチャ情報、ジェスチャ部位情報、ジェスチャ種別情報、医療情報取得条件、医療情報（実データ）は、上記各処理部によって、医療情報表示装置１の主記憶装置１６または補助記憶装置１７内の所定の領域に対して読み書きされるデータである。一方、医療情報管理サーバ２は、医療情報登録部５１と医療情報検索部５２と医療情報データベース５３とから構成されている。医療情報管理サーバ２内に示された医療情報登録条件、医療情報、医療情報取得条件、医療情報（実データ）は、上記各処理部によって、医療情報管理サーバ２の主記憶装置、補助記憶装置、または外部記憶装置内の所定の領域に対して読み書きされるデータである。
【００４５】
医療情報データベース５３は、患者ＩＤと、医療情報取得条件に対応するインデックス情報（詳細は後述）と、医療情報の実データとが関連づけられたデータ構造を有している。
【００４６】
医療情報管理サーバ２の医療情報登録部５１は、他システム（電子カルテシステム４、画像診断システム５、内視鏡検査システム６、病理検査システム７、各診療科システム８を意味する）で発生した医療情報を、所定の時間間隔で取得し、取得した医療情報から患者ＩＤおよびインデックス情報を抽出し、さらに、取得した医療情報を医療情報データベース５３のデータ構造に変換し、医療情報データベース５３に登録する。これにより、医療情報データベース５３には、医療情報表示装置１による表示対象となる医療情報が蓄積される。
【００４７】
図５は、本発明の第１の実施形態において、医療情報統合システム３で行われる医療情報の表示処理の流れを示したフローチャートである。図に示した#1から#7、#11から#12の処理ステップは、医療情報表示装置１で実行されるアプリケーションのメインプログラムによって制御される。以下、図４および図５を主に用いて、この医療情報表示処理の全体の流れとともに、医療情報表示装置１の各処理部と医療情報管理サーバ２の医療情報検索部５２で行われる個々の処理の内容について説明する。
【００４８】
まず、医療情報表示装置１において、患者ＩＤ入力用ＵＩ３１は、患者ＩＤの入力を受け付け、入力された患者ＩＤを主記憶装置１６の所定の領域に格納する(#1)。具体的には、例えば、液晶ディスプレイ１２にキーボードやテンキーの画像を表示させ、タッチパネル１１のタッチ位置に表示されたキーの入力を受け付けるソフトウェアキーボード方式を用いて、患者ＩＤの入力を受け付ける。
【００４９】
次に、取得条件入力用ＵＩ３２は、補助記憶装置１７から人体アイコン画像（図７参照）を読み込み、液晶ディスプレイ１２の所定の表示位置に表示させ(#2)、ユーザによる、人体アイコン４５に対するジェスチャ入力をタッチパネル１１から受け付け、入力されたジェスチャ情報を主記憶装置１６の所定の領域に格納する(#3)。ここで、人体アイコン４５は、図７および図８に例示したように、人体の全身を模式的に表したものであり、人体アイコン４５の座標系の各位置に対して、人体の部位を識別する部位情報が関連づけられている。また、ジェスチャ情報は、各時点でのタッチの種類（開始、移動、終了）、および、表示装置の座標系におけるタッチの位置を表す位置情報を含んでいる。
【００５０】
ジェスチャ種別解析部３３は、ジェスチャ情報に基づいて、入力されたジェスチャが所定の複数のジェスチャパターンのうちのいずれであるかを判別し、判別結果を主記憶装置１６のジェスチャ種別情報を格納する所定の領域に出力する(#4)。なお、入力されたジェスチャに対応するジェスチャパターンが特定されなかった場合は、新たなジェスチャの入力待ち状態に戻る。
【００５１】
ジェスチャ部位解析部３４は、まず、ジェスチャ情報と、人体アイコン４５の位置情報とに基づいて、ジェスチャ入力が人体アイコン４５のどの位置で行われたかを特定する。すなわち、ジェスチャ情報は表示装置の座標系での位置情報であるのに対して、人体アイコン４５の位置情報は人体アイコン４５の座標系での情報であるので、ジェスチャ部位解析部３４は、表示装置の座標系での人体アイコン４５の表示位置の情報を用いて、両位置情報を同じ座標系での位置情報に変換する。これにより、ジェスチャ入力を構成する点の人体アイコン４５上での位置であるジェスチャ相対位置が特定される。なお、ジェスチャ相対位置は、表示装置の座標系と人体アイコン４５の座標系のいずれでも表現することが可能であるが、本実施形態では人体アイコンの座標系で表現されたものとする。次に、ジェスチャ部位解析部３４は、入力されたジェスチャのジェスチャ相対位置と関連づけられた人体アイコン４５の部位を識別する部位情報を特定し、主記憶装置１６のジェスチャ部位情報を格納する所定の領域に出力する(#5)。なお、入力されたジェスチャに対応する人体アイコン４５上の部位が特定されなかった場合、人体アイコン４５の外側のみでジェスチャ操作を行った場合等は、新たなジェスチャの入力待ち状態に戻る。
【００５２】
取得条件特定部３５は、取得条件テーブル４６を参照し、ジェスチャ種別解析部３３で出力されたジェスチャ種別情報とジェスチャ部位解析部３４で出力されたジェスチャ部位情報とに対応する医療情報取得条件を特定し、特定された医療情報取得条件を主記憶装置１６の所定の領域に出力する(#6)。なお、入力されたジェスチャに対応する医療情報取得条件が特定されなかった場合は、新たなジェスチャの入力待ち状態に戻る。
【００５３】
次に、医療情報表示装置１の医療情報取得部３６は、取得条件特定部３５によって設定された医療情報取得条件を医療情報管理サーバ２に送信する(#7)。医療情報管理サーバ２の医療情報検索部５２は、医療情報取得条件を医療情報表示装置１から受信し(#8)、医療情報データベース５３の検索を行い、データベース中の取得条件のインデックス情報が、受信した医療情報取得条件を満たす医療情報の実データを抽出し(#9)、抽出された医療情報の実データを医療情報表示装置１に送信する(#10)。医療情報表示装置１の医療情報取得部３６は、送信されてきた医療情報の実データを受信し、主記憶装置１６または補助記憶装置１７の所定の領域に格納する(#11)。そして、医療情報表示制御部３７は、受信した医療情報の実データに基づいて、その医療情報を液晶ディスプレイ１２に表示させる(#12)。なお、医療情報取得条件を満たす医療情報が医療情報データベース５３に登録されていなかった場合には、その旨が表示される。
【００５４】
このように、本発明の第１の実施形態では、医療情報表示装置１のタッチパネル１１から人体アイコン４５に対するジェスチャが入力されると、そのジェスチャに応じた医療情報取得条件が特定され、特定された医療情報取得条件を満たす医療情報が医療情報管理サーバ２の医療情報データベース５３から抽出され、抽出された医療情報が医療情報表示装置１の液晶ディスプレイ１２に表示される。以下では、様々なジェスチャ入力について、そのジェスチャに対応する医療情報が取得されるまでの一連の処理の詳細について具体的に説明する。
【００５５】
図６は、医療情報データベース５３のデータ構造と、医療情報データベース５３に登録された医療情報の具体例を表したものである。図に示したとおり、本実施形態では、医療情報データベース５３は、患者ＩＤ、検査日時、検査部位、情報種別、実データから構成される。検査部位と情報種別とが医療情報取得条件に対応するインデックス情報となっている。したがって、取得条件特定部３５で特定される医療情報取得条件も、取得対象の医療情報の検査部位の条件を表す検査部位条件と情報種別の条件を表す情報種別条件とからなる。
【００５６】
医療情報登録部５１は、各システムから医療情報を収集し、収集された医療情報を用いて医療情報データベース５３への登録データを作成する。具体的には、医療情報データベース５３の患者ＩＤの項目には、収集された各医療情報から患者ＩＤを抽出して設定する。検査部位の項目には、収集された医療情報の付帯情報等から患者の部位の情報を抽出して設定する。情報種別の項目には、収集された医療情報の付帯情報等からその医療情報の種別を表す情報を抽出して設定する。ここで、検査部位および情報種別は、予め設計されたコード体系に基づく値が定義されている。各医療情報の検査部位および情報種別は、所定の設定条件に基づいて、医療情報登録部５１によって自動的に設定される。実データの項目には、収集された医療情報の実データを設定する。そして、作成した登録データを医療情報データベース５３に登録（挿入）する。例えば、腹部に対するＣＴ撮影で得られたアキシャル断面画像データの場合、本実施形態では、検査部位に「腹部」、情報種別に「ＣＴ」が、インデックス情報として設定される（情報No.11）。
【００５７】
図７は、人体アイコン４５の一例を表したものである。また、図８は、人体アイコン４５が有する情報を表したものである。図８に示したように、人体アイコン４５の座標系の各位置に対して、人体の部位を識別する部位情報が階層的に関連づけられている。すなわち、人体アイコン４５の各位置は、頭部、胸部等の人体の体部を表す体部情報と、臓器、器官等の部位よりも細かい単位を表す部位詳細情報と関連づけられている。例えば、人体アイコンの（ｘ１，ｙ１）の位置は、体部としては頭部に属し、その詳細情報としては脳に属している。また、（ｘ５，ｙ５）の位置のように、１つの位置が複数の部位詳細情報（ここでは心臓、気管、食道）と関連づけられていてもよいし、（ｘ６，ｙ６）の位置のように、部位詳細情報とは関連づけられていなくてもよい。
【００５８】
本実施形態では、ジェスチャ種別解析部３４は、入力されたジェスチャが、ナイフ、指定、掴み、ハンマーの４つのジェスチャパターンのいずれであるかを順次判別するものとする。
【００５９】
図９Ａは、ナイフジェスチャの一例を模式的に表したものである。図に示したように、ユーザが、人体アイコン４５の右脇腹に指をタッチパネル１１にタッチし（タッチの開始）、指をタッチしたまま右方向に移動させ（タッチの移動）、左脇腹で指をタッチパネル１１から離す（タッチの終了）という一連の操作を行う。これにより、人体アイコン４５の腹部をスライスするようなジェスチャが取得条件入力用ＵＩ３２によって受け付けられる。
【００６０】
ジェスチャ種別解析部３３は、ジェスチャ情報に含まれる、上記のタッチの開始から、タッチの移動を経て、終了に至るまでの各時点での位置情報に基づいて、公知のパターン認識処理により、入力されたジェスチャの軌跡が直線（線分）であると認識された場合に、そのジェスチャをナイフジェスチャと認識し、ナイフジェスチャを表すジェスチャ種別情報を出力する。したがって、図９Ａの例では、ジェスチャの軌跡が直線を描いているので、ナイフジェスチャと認識される。
【００６１】
ジェスチャ部位解析部３４は、ジェスチャ種別情報がナイフジェスチャである場合、ジェスチャ情報に含まれる、上記のタッチの開始から、タッチの移動を経て、終了に至るまでの各時点での位置情報に基づいて、上述した座標変換により、各時点での人体アイコン４５上でのジェスチャ相対位置を特定し、さらに、特定された各相対位置と関連づけられた体部および部位詳細の情報を得る。図９Ａの例では、体部の情報として「腹部」、部位詳細の情報として、「大腸」、「小腸」等が得られる。
【００６２】
なお、取得条件入力用ＵＩ３２は、ジェスチャ種別解析部３３によって、入力されたジェスチャがナイフジェスチャであると認識された場合、図９Ｂに例示したように、ジェスチャの軌跡に沿って、人体アイコン４５を分離して表示させるようにしてもよい。
【００６３】
図１０Ａは、指定ジェスチャの一例を模式的に表したものである。図に示したように、ユーザが、人体アイコン４５の心臓の位置を指でタッチし（タッチの開始）、指をタッチしたまま移動させることなく、指をタッチパネル１１から離す（タッチの終了）という一連の操作を行う。これにより、人体アイコン４５の心臓をタップするジェスチャが取得条件入力用ＵＩ３２によって受け付けられる。
【００６４】
ジェスチャ種別解析部３３は、ジェスチャ情報に含まれる、上記のタッチの開始から、タッチの移動を経て、終了に至るまでの各時点での位置情報に基づいて、タッチ位置の移動量が所定の閾値より小さい（ほぼ0に等しい）場合に、そのジェスチャを指定ジェスチャと認識し、指定ジェスチャを表すジェスチャ種別情報を出力する。したがって、図１０Ａの例では、タッチ位置の移動量が0であるから、指定ジェスチャと認識される。
【００６５】
ジェスチャ部位解析部３４は、ジェスチャ種別情報が指定ジェスチャである場合、ジェスチャ情報に含まれる、上記のタッチの開始または終了時点での位置の情報に基づいて、上述した座標変換により、その時点での人体アイコン４５上でのジェスチャ相対位置を特定し、さらに、特定されたジェスチャ相対位置と関連づけられた体部および部位詳細の情報を得る。図１０Ａの例では、体部の情報として「胸部」、部位詳細の情報として、「心臓」等が得られる。
【００６６】
なお、取得条件入力用ＵＩ３２は、ジェスチャ種別解析部３３によって、入力されたジェスチャが指定ジェスチャであると認識された場合、図１０Ｂに例示したように、指定位置と関連づけられた部位詳細情報に表された臓器等（ここでは心臓）を、人体アイコン４５の他の領域とは異なる表示態様で表示させるようにしてもよい。ここで、ジェスチャ相対位置が複数の部位詳細情報と関連づけられている場合（例えば、心臓、気管、食道）、それらすべてを他の領域とは異なる表示態様で表示させてもよいし、それらのうちのどれを異なる表示態様で表示させるかを、ユーザに選択させるようにしてもよい。
【００６７】
図１１Ａは、掴みジェスチャの一例を模式的に表したものである。図に示したように、このジェスチャではマルチタッチを用いる。まず、ユーザは、人体アイコン４５の心臓の上方と下方の位置を２本の指でタッチし（タッチの開始；図の(1)の矢印の始点）、指をタッチしたまま、心臓を掴む向きに移動させ（タッチの移動；図の(1)の矢印の方向）、さらに、指をタッチしたまま、人体アイコン４５の外側に向かって移動させ（タッチの移動；図の(2)の矢印）、指をタッチパネル１１から離す（タッチの終了；図の(2)の矢印の終点）という一連の操作を行う。これにより、人体アイコン４５の心臓を掴み出すジェスチャが取得条件入力用ＵＩ３２によって受け付けられる。
【００６８】
ジェスチャ種別解析部３３は、ジェスチャ情報に含まれる、上記のタッチの開始から、タッチの移動を経て、終了に至るまでの各時点での位置情報に基づいて、公知のパターン認識処理により、タッチされた２点が互いに接近する第１の向きに移動した後、その移動後の２点間の距離を保ちながら、第１の向きとは異なる第２の向きに共に移動するような軌跡が認識された場合に、そのジェスチャを掴みジェスチャと認識し、掴みジェスチャを表すジェスチャ種別情報を出力する。したがって、図１１Ａの例では、タッチ位置が(1)の矢印の区間では接近し、(2)の矢印の区間では、(1)とは異なる向きに平行移動しているので、掴みジェスチャと認識される。
【００６９】
ジェスチャ部位解析部３４は、ジェスチャ種別情報が掴みジェスチャである場合、ジェスチャ情報に含まれる、上記のタッチの開始から移動を経て終了に至るまでの位置情報に基づいて、タッチされた２点が第１の向きに移動した後、移動の向きが変わる時点での２点（図１１Ａの(1)の各矢印の終点）の間の位置をジェスチャ位置と特定し、上述した座標変換により、人体アイコン４５上でのジェスチャ相対位置を特定し、さらに、特定されたジェスチャ相対位置と関連づけられた体部および部位詳細の情報を得る。図１１Ａの例では、(1)の各矢印の終点の間の各位置の体部の情報として「胸部」、部位詳細の情報として、「心臓」等が得られる。
【００７０】
なお、取得条件入力用ＵＩ３２は、ジェスチャ種別解析部３３によって、入力されたジェスチャが指定ジェスチャであると認識された場合、図１１Ｂに例示したように、ジェスチャ部位解析部３４で得られた部位詳細情報に表された臓器等（ここでは心臓）を、人体アイコン４５の他の領域とは異なる表示態様で表示させるとともに、上記第２の向き（図１１Ｂの(2)の矢印の向き）に移動させることにより、心臓が人体アイコン４５から掴み出される様子をアニメーション表示させるようにしてもよい。ここで、ジェスチャ部位解析部３４で特定されたジェスチャ相対位置が複数の部位詳細情報と関連づけられている場合（例えば、心臓、気管、食道）、それらすべてを上記のように表示させてもよいし、それらのうちのどれを上記のように表示させるかを、ユーザに選択させるようにしてもよい。
【００７１】
図１２Ａは、ハンマージェスチャの一例を模式的に表したものである。図に示したように、ユーザが、人体アイコン４５の頭部の位置を指でタッチし（タッチの開始）、指をタッチしたまま所定の時間以上移動させることなく維持してから、指をタッチパネル１１から離す（タッチの終了）という一連の操作を行う。これにより、人体アイコン４５の頭部を砕き割るジェスチャが取得条件入力用ＵＩ３２によって受け付けられる。
【００７２】
ジェスチャ種別解析部３３は、ジェスチャ情報に含まれる、上記のタッチの開始から、タッチの移動を経て、終了に至るまでの各時点での位置情報に基づいて、タッチ位置の移動量が所定の閾値より小さく（ほぼ0に等しく）、かつ、タッチの開始から終了までのジェスチャ時間が所定の閾値となる時間より長い場合に、そのジェスチャをハンマージェスチャと認識し、ハンマージェスチャを表すジェスチャ種別情報を出力する。なお、この認識方法では、ジェスチャ時間が所定の時間以下の場合には、指定ジェスチャと認識される。したがって、図１２Ａの例では、タッチ位置の移動量が0で、かつ、ジェスチャ時間が所定の時間より長いので、ハンマージェスチャと認識される。
【００７３】
ジェスチャ部位解析部３４は、ジェスチャ種別情報がハンマージェスチャである場合、ジェスチャ情報に含まれる、上記のタッチの開始または終了時点での位置の情報に基づいて、上述した座標変換により、その時点での人体アイコン４５上でのジェスチャ相対位置を特定し、さらに、特定されたジェスチャ相対位置と関連づけられた体部および部位詳細の情報を得る。図１２Ａの例では、体部の情報として「頭部」、部位詳細の情報として、「脳」が得られる。
【００７４】
なお、取得条件入力用ＵＩ３２は、ジェスチャ種別解析部３３によって、入力されたジェスチャがハンマージェスチャであると認識された場合、図１２Ｂに例示したように、指定位置と関連づけられた部位詳細情報に表された臓器等（ここでは脳）を砕き割った様子を表す表示態様で表示させるようにしてもよい。ここで、ジェスチャ相対位置が複数の部位詳細情報と関連づけられている場合（例えば、心臓、気管、食道）、それらすべてを他の領域とは異なる表示態様で表示させてもよいし、それらのうちのどれを異なる表示態様で表示させるかを、ユーザに選択させるようにしてもよい。
【００７５】
上記のジェスチャの他、例えば、ジェスチャ種別解析部３３が、所定の医療機器を人体アイコン４５に対して操作するジェスチャ（例えば内視鏡を挿入するジェスチャ）を認識するようにし、ジェスチャ部位解析部３４がその医療機器の操作対象の部位を認識するようにしてもよい。また、上記各ジェスチャとは異なるジェスチャを上記各ジェスチャパターンと対応づけてもよい。
【００７６】
前述のとおり、取得条件特定部３５によって特定される医療情報取得条件は、取得対象の医療情報の検査部位の条件を表す検査部位条件と情報種別の条件を表す情報種別条件とからなる。取得条件特定部３５は、取得条件テーブル４６を参照し、ジェスチャ種別解析部３３で出力されたジェスチャ種別情報とジェスチャ部位解析部３４で出力されたジェスチャ部位情報との組合せに対応する情報種別条件を特定するとともに、この情報種別条件の特定に用いられたジェスチャ部位情報を検査部位条件に設定する。
【００７７】
図１３Ａは、取得条件テーブル４６の設定例を表したものである。図に示したように、本実施形態では、取得条件テーブル４６は、ジェスチャ種別とジェスチャ部位の組合せに対して、医療情報取得条件（情報種別条件）が優先順位を付けて関連づけられている。
【００７８】
この取得条件テーブル４６は、取得条件テーブル編集用ＵＩ３８によって編集可能となっている。図１３Ｂは、取得条件テーブル４６の編集画面の一例であり、図に示したように、取得条件テーブル４６の登録内容をリスト形式で表示している。ユーザが医療情報取得条件を追加したい場合、リストの最終行の各項目にタッチすると、図の下部に示したような、その項目に設定可能な値が一覧表示されたリストボックスが表示される。図１３Ｂでは、ジェスチャ種別の項目が選択されているので、ジェスチャ種別解析部３３によって認識可能なジェスチャパターンの一覧がリストボックスに表示されている。ユーザは、リストボックスに表示された値の一覧から所望の値にタッチして選択することにより、選択された値がその項目に設定される。既に登録済みの医療情報取得条件の内容を変更する場合には、変更したい項目にタッチすることにより、上記と同様のリストボックスが表示され、上記と同様に所望の値にタッチして選択することにより、その項目の値が変更される。既に登録済みの医療情報取得条件を削除したい場合には、削除したい医療情報取得条件を表す行の任意の位置をタッチし、指をタッチしたまま、医療情報取得条件のリストの外まで移動させ、そこで指をタッチパネルから離す操作を行うことにより、その医療情報取得条件が削除される。
【００７９】
図９Ａに例示した腹部に対するナイフジェスチャの場合、取得条件特定部３５は、ジェスチャ種別情報とジェスチャ部位情報のすべての組合せ、すなわち、ジェスチャ種別情報「ナイフ」と体部情報である「腹部」との組合せ、ジェスチャ種別情報「ナイフ」と部位詳細情報である「大腸」、「小腸」等との組合せの各々を用いて取得条件テーブル４６を参照する。その結果、ジェスチャ種別情報「ナイフ」と体部情報である「腹部」との組合せが、取得条件テーブル４６のジェスチャ種別「ナイフ」、ジェスチャ部位「指定体部（ジェスチャ部位解析部３４で出力された体部情報）」との組合せに該当するので、情報種別条件として、「ＣＴ」、「ＭＲ」が優先順位の順に得られるとともに、検査部位条件としては、取得条件テーブル４６の上記エントリを取得するのに用いられたジェスチャ部位情報である「腹部」が得られる。
【００８０】
医療情報管理サーバ２の医療情報検索部５２は、医療情報表示装置１の取得条件特定部３５で特定された医療情報取得条件を医療情報取得部３６から受信し、受信した医療情報取得条件を優先順位の高い順に検索条件として用いて医療情報データベース５３を検索する。ここで、その検索条件を満たす医療情報が抽出された場合には、残りの優先順位のより低い医療情報取得条件による検索は行わない。一方、その検索条件を満たす医療情報が抽出されなかった場合には、受信した医療情報取得条件のうち、現在の検索条件の次に優先順位の高い医療情報取得条件を新たな検索条件として検索を行う。
【００８１】
図９Ａに例示した腹部に対するナイフジェスチャの場合、医療情報検索部５２は、まず、検査部位条件を「腹部」、情報種別条件を優先順位が最も高い「ＣＴ」として、図６に例示された医療情報データベース５３を検索し（患者ＩＤは「012345」が入力されたものとする）、これらの条件を満たす情報No.11の医療情報の実データであるＣＴアキシャル断面画像データを抽出し、検索を終了する。抽出されたデータは医療情報表示装置１の医療情報取得部３６に送信され、医療情報表示制御部３７が、図１４に例示されたようなＣＴアキシャル断面画像を表示させる。なお、情報No.11の医療情報が医療情報データベース５３に登録されていなかった場合には、上記の検索条件に該当する医療情報が存在しないので、情報種別条件を、次に優先順位が高い「ＭＲ」に変更して再度検索が行われる。
【００８２】
図１０Ａに例示した心臓に対する指定ジェスチャの場合、取得条件特定部３５がジェスチャ種別情報とジェスチャ部位情報のすべての組合せを用いて取得条件テーブル４６を参照した結果、ジェスチャ種別「指定」とジェスチャ部位「心臓」と関連づけられた情報種別条件である、「心電図」、「ＣＰＲ」、「ＶＲ」が優先順位の順に得られるとともに、検査部位条件としては、取得条件テーブル４６の上記エントリを取得するのに用いられたジェスチャ部位情報である「心臓」が得られる。そして、医療情報管理サーバ２の医療情報検索部５２では、検査部位条件を「心臓」、情報種別条件を「心電図」とする検索条件に合致する情報No.13の心電図波形データが抽出され、医療情報表示装置１の医療情報取得部３６に送信される。医療情報表示制御部３７は、図１５に例示されたような心電図波形を表示させる。
【００８３】
図１１Ａに例示した心臓に対する掴みジェスチャの場合、取得条件特定部３５がジェスチャ種別情報とジェスチャ部位情報のすべての組合せを用いて取得条件テーブル４６を参照した結果、ジェスチャ種別「掴み」とジェスチャ部位「心臓」と関連づけられた情報種別条件である「ＶＲ」が得られる。検査部位条件としては、取得条件テーブル４６の上記エントリを取得するのに用いられたジェスチャ部位情報である「心臓」が得られる。そして、医療情報管理サーバ２の医療情報検索部５２では、検査部位条件を「心臓」、情報種別条件を「ＶＲ」とする検索条件に合致する情報No.14の心臓ＶＲ画像データが抽出され、医療情報表示装置１の医療情報取得部３６に送信される。医療情報表示制御部３７は、図１６に例示されたような心臓を表すＶＲ画像を表示させる。
【００８４】
図１２Ａに例示した頭部に対するハンマージェスチャの場合、取得条件特定部３５がジェスチャ種別情報とジェスチャ部位情報のすべての組合せを用いて取得条件テーブル４６を参照した結果、ジェスチャ種別「ハンマー」とジェスチャ部位「頭部」と関連づけられた情報種別条件である「頭骨・脳実質・脳血管ＶＲ合成」が得られる。検査部位条件としては、取得条件テーブル４６の上記エントリを取得するのに用いられたジェスチャ部位情報である「頭部」が得られる。そして、医療情報管理サーバ２の医療情報検索部５２では、検査部位条件を「頭部」、情報種別条件を「頭骨・脳実質・脳血管ＶＲ合成」とする検索条件に合致する情報No.16の頭骨・脳実質・脳血管ＶＲ合成画像データが抽出され、医療情報表示装置１の医療情報取得部３６に送信される。医療情報表示制御部３７は、図１７に例示されたような頭骨・脳実質・脳血管ＶＲ合成画像を表示させる。なお、図１７に示した頭骨・脳実質・脳血管ＶＲ合成画像は、頭部非造影ＣＴおよび頭部造影ＣＴのボリュームデータを用いてボリュームレンダリング処理を行い、得られた画像を合成することによって得られる。具体的には、頭部非造影ＣＴのボリュームデータに対して、骨のＣＴ値を有色不透明にするためのカラーテンプレートとオパシティカーブに基づいてボリュームレンダリング処理を行うことにより、頭骨全体のＶＲ画像が得られる。同様に、頭部非造影ＣＴのボリュームデータに対して、脳実質のＣＴ値を有色不透明にするためのカラーテンプレートとオパシティカーブに基づいてボリュームレンダリング処理を行うことにより、脳実質全体のＶＲ画像が得られる。さらに、頭部の左半分および右半分を表す非造影ＣＴのボリュームデータに対しても同様のボリュームレンダリング処理を行うことにより、頭骨、脳実質の左半分、右半分を表すＶＲ画像が得られる。一方、頭部造影ＣＴのボリュームデータに対して、造影剤のＣＴ値を有色不透明にするためのカラーテンプレートとオパシティカーブに基づいてボリュームレンダリング処理を行うことにより、脳血管全体のＶＲ画像が得られる。最後に、これらのＶＲ画像を図１７に示したようなレイアウトになるように合成することによって、頭骨・脳実質・脳血管ＶＲ合成画像が得られる。なお、頭骨全体のＶＲ画像（図１７上段）、左右の頭骨のＶＲ画像および脳実質のＶＲ画像（図１７中段）、左右の頭骨と脳実質のＶＲ画像および脳血管全体のＶＲ画像（図１７下段）の順に各画像を切り替えて表示することによって、頭部を、外側の頭骨、その内側の脳実質の順に砕き割っていく様子を動画的に表現してもよい。
【００８５】
以上のように、本発明の第１の実施形態では、例えば図１０Ａに示した心臓に対する指定ジェスチャと図１１Ａに示した心臓に対する掴みジェスチャの場合のように、人体アイコン４５の同じ部位であっても、ジェスチャパターンによって異なる医療情報を取得して表示させることが可能になる。
【００８６】
また、図１３Ａの取得条件テーブル４６に示したように、例えば同じ指定ジェスチャであっても、ジェスチャが行われた部位が心臓であれば、心電図、冠動脈ＣＰＲ画像、心臓ＶＲ画像が取得されることになり、ジェスチャが行われた部位が肝臓であれば、ＩＣＧ検査結果数値、肝臓ＶＲ画像が取得されることになる。このように、人体アイコン４５に対するジェスチャパターンが同じであっても、そのジェスチャが行われた部位によって異なる医療情報を取得して表示させることが可能になる。
【００８７】
このように、本発明の第１の実施形態では、取得条件入力用ＵＩ３２で入力されたジェスチャを、ジェスチャ種別解析部３３およびジェスチャ部位解析部３４が解析することによって得られた、入力ジェスチャのパターンと位置に応じて、取得条件特定部３５が、そのジェスチャが直感的に表す医療情報取得条件を、取得条件テーブル４６を用いて特定することができる。そして、医療情報取得部３６が、特定された医療情報取得条件を満たす医療情報を医療情報管理サーバ２の医療情報データベース５３から取得し、医療情報表示制御部３７が、取得された医療情報を液晶ディスプレイ１２に表示させることができる。したがって、ユーザは、医療情報表示装置１のタッチパネル１１に対して直感的なジェスチャ操作を行うという１つのアクションのみで、所望の医療情報をきわめて容易に絞り込んで取得し、表示させることが可能になる。このように、本実施形態の医療情報表示装置１は、きわめて操作性が高い、実用的価値の高いものとなっている。
【００８８】
また、取得条件テーブル４６を編集するための取得条件テーブル編集用ＵＩ３８が提供されているので、ユーザの嗜好や医療現場での要求に合致した医療情報取得条件を柔軟に定義することが可能になり、医療情報表示装置１の操作性や柔軟性がさらに向上し、医療現場での作業効率のさらなる向上に資する。
【００８９】
また、人体アイコン４５には、体部情報と部位詳細情報というように、各位置に対して部位情報が階層的に関連づけられているので、より柔軟かつより高度にジェスチャパターンとジェスチャ部位とを組み合わせることが可能になる。
【００９０】
上記第１の実施形態では、タッチの開始から移動を経て終了に至る１つのジェスチャ操作に基づいて、そのジェスチャに対応する医療情報が得られるように構成されているので、比較的単純かつ容易な操作性が提供されており、操作に不慣れな初心者向きのユーザインターフェースとなっている。一方、このユーザインターフェースだけでは、操作に熟練したユーザは操作性が不十分と感じてしまう可能性がある。そこで、本発明の第２の実施形態では、操作に熟練したユーザ向けのより複雑な操作性を有するユーザインターフェースを提供することを目的とする。本発明の第２の実施形態における医療情報表示装置と医療情報管理サーバに実装される機能構成、および、医療情報統合システムで行われる医療情報の表示処理の流れは、第１の実施形態と同様である（図４、図５参照）。
【００９１】
図１８は、本発明の第２の実施形態における取得条件入力用ＵＩ３２の一例を表したものである。図に示したように、人体アイコン４５の他に、医療情報取得ボタン４７が設けられている。ユーザが、人体アイコン４５に対してジェスチャ操作を行った後、この医療情報取得ボタン４７にタッチすると、それまでに行われた１以上のジェスチャ操作に応じた医療情報取得条件の特定処理が、取得条件特定部３５によって行われる。すなわち、第１の実施形態では、１つのジェスチャ操作（タッチの開始から終了まで）が完了すると、自動的に後続の処理が行われていたのに対して、第２の実施形態では、医療情報取得ボタン４７が後続の処理の実行のためのトリガとなっている。これにより、第２の実施形態では、人体アイコン４５に対する複数のジェスチャ操作を受け付けることが可能になる。
【００９２】
図１９は、複数のジェスチャ操作を組み合わせた取得条件の入力例を模式的に表したものである。図の(1)に示したように、ユーザは、まず、人体アイコン４５の腹部に対する左右方向のナイフジェスチャを行う。取得条件入力用ＵＩ３２は、このナイフジェスチャに応じて、ジェスチャの軌跡に沿って人体アイコン４５を分離して表示させる。次に、図の(2)、(3)に示したように、ユーザは、分離された人体アイコン４５の下側、上側の順に指定ジェスチャを行う。
【００９３】
ジェスチャ種別解析部３３およびジェスチャ部位解析部３４は、取得条件入力用ＵＩ３２で入力された複数のジェスチャの各々について、すなわち、タッチの開始から終了までの単位でジェスチャを分割して、各ジェスチャについて、ジェスチャ種別情報およびジェスチャ部位情報を出力する。
【００９４】
図２０は、このような複数のジェスチャの入力に対応する取得条件テーブル４６の一例を表したものである。図に示したように、本実施形態では、取得条件の入力操作が複数のジェスチャからなるものについては、各ジェスチャ種別、各ジェスチャ部位を、それらの複数のジェスチャが行われた順に並べたものを登録しておく。また、本実施形態では、ジェスチャ種別およびジェスチャ部位の組合せに対して、情報種別条件だけでなく、検査部位条件と情報詳細条件が関連づけられている。図１９に例示した入力例では、腹部に対するナイフジェスチャ、腹部より下側の指定ジェスチャ、腹部より上側の指定ジェスチャが行われているので、図２０に例示した取得条件テーブル４６の２番目のジェスチャ種別とジェスチャ部位の組合せに該当する。したがって、取得条件特定部３５によって、この組合せに対応する医療情報取得条件である、検査部位条件「ナイフ指定体部」、すなわち、「腹部」、情報種別条件「ＣＴ」、「ＭＲ」、情報詳細条件「尾頭方向」が特定される。ここで、図１９に例示した入力例において、(2)と(3)のジェスチャを逆順で行った場合には、図２０に例示した取得条件テーブル４６の３番目のジェスチャ種別とジェスチャ部位の組合せに該当し、検査部位条件「ナイフ指定体部（腹部）」、情報種別条件「ＣＴ」、「ＭＲ」、情報詳細条件「頭尾方向」が特定される。このように、図１９に例示した入力例では、第２、第３の指定ジェスチャの位置の並び順によって、情報詳細条件が特定されている。
【００９５】
なお、図９Ａに例示したナイフジェスチャのみの場合には、図２０に例示した取得条件テーブル４６の１番目のジェスチャ種別とジェスチャ部位の組合せに該当し、検査部位条件「ナイフ指定体部（腹部）」、情報種別条件「ＣＴ」、「ＭＲ」、情報詳細条件「尾頭方向」が特定される。このように、本実施形態では、図１８の医療情報取得ボタン４７にタッチするまでを取得条件の入力とすることにより、１つのジェスチャによる取得条件の入力も、２以上のジェスチャによる取得条件の入力も受け付けられるようになっている。
【００９６】
図２１は、本発明の第２の実施形態における医療情報データベースのデータ構造と、図１９および図２０の例に対応する医療情報の登録例を表したものである。図に示したように、第１の実施形態の医療情報データベース（図６参照）に対して、医療情報取得条件に対応するインデックス情報として情報詳細の項目が付加された構成となっている。この情報詳細の項目には、医療情報登録部５１によって、医療情報の付帯情報等から抽出されたその医療情報の情報種別を補足する詳細情報が設定される。
【００９７】
図１９に例示した入力例の場合、取得条件特定部３５で特定された、検査部位条件「腹部」、情報種別条件「ＣＴ」、情報詳細条件「尾頭方向」を満たす情報No.22の医療情報である腹部ＣＴ尾頭方向アキシャル断面画像データが、医療情報検索部５２によって医療情報データベース５３から抽出され、医療情報取得部３６に送信される。なお、腹部ＣＴ尾頭方向アキシャル断面画像とは、腹部ＣＴで得られるアキシャル断面画像で、患者の下から上に向かう向き（尾頭方向）に見た断面を表す画像である。一方、図１９の(2)と(3)の入力を逆順にした場合には、検査部位条件「腹部」、情報種別条件「ＣＴ」、情報詳細条件「頭尾方向」を満たす情報No.21の医療情報である腹部ＣＴ頭尾方向アキシャル断面画像データが、医療情報検索部５２によって医療情報データベース５３から抽出される。
【００９８】
このように、本発明の第２の実施形態では、取得条件入力用ＵＩ３２が、複数のジェスチャからなる、第１の実施形態よりも複雑な入力を受付可能であり、ジェスチャ種別解析部３３およびジェスチャ部位解析部３４が、入力された複数のジェスチャの各々について、そのジェスチャ種別および部位を認識し、取得条件特定部３５が、複数のジェスチャの種別および部位と関連づけられた医療情報取得条件を特定する。これにより、取得条件入力用ＵＩ３２はより多くの情報の入力を受け付けることができ、それに応じて、より詳細な医療情報取得条件が特定可能となる。
【００９９】
図２２から図２５は、本発明の第２の実施形態の他の具体例を説明するためのものである。図２２は、１つのジェスチャによる医療情報取得条件の入力例である。図に示したように、ユーザが人体アイコン４５の胸部から腹部までを上下方向にナイフジェスチャを行うと、本具体例では、ジェスチャ種別解析部３３は、ナイフジェスチャの方向も認識し、ジェスチャ種別情報として、「上下方向ナイフ」を出力する。一方、図２３Ａおよび図２４Ｂは、２つのジェスチャによる医療情報取得条件の入力例である。図に示したように、ユーザが、まず、人体アイコン４５の左手側にタッチし、指をタッチしたまま、円弧を描くように左方向に指を動かし、人体アイコン４５の右手側で指を離す操作を行うと、本具体例では、ジェスチャ種別解析部３３が、このジェスチャの軌跡をパターン認識し、人体アイコン４５の頭側から見て時計回りの回転を表すジェスチャと判定する。取得条件入力用ＵＩ３２は、この判定結果に応じて、人体アイコン４５を上記時計回りに９０度回転させて図２３Ｂのように表示させる。ここで、ユーザが、人体アイコン４５の胸部から腹部までを上下方向にナイフジェスチャを行うと、ジェスチャ種別解析部３３が、上記と同様に、ジェスチャ種別情報として「上下方向ナイフ」を出力する。
【０１００】
図２４は、本具体例に対応する取得条件テーブル４６を表したものである。図２２の入力例の場合、取得条件特定部３５は、ジェスチャ種別情報「上下方向ナイフ」、ジェスチャ部位情報「胸部・腹部」に対応する１番目のエントリに基づいて、情報種別条件として「ＣＴ」、「ＭＲ」、情報詳細条件として「サジタル」を特定する。一方、図２３Ａおよび図２３Ｂの入力例の場合、取得条件特定部３５は、ジェスチャ種別情報「時計回り回転＋上下方向ナイフ」、ジェスチャ部位情報「胸部・腹部」に対応する２番目のエントリに基づいて、情報種別条件として「ＣＴ」、「ＭＲ」、情報詳細条件として「コロナル」を特定する。なお、検査部位条件は、第１の実施形態と同様にして、医療情報取得条件の特定に用いられた部位情報である「胸部・腹部」が、両入力例とも設定されるものとする。また、本具体例に対応するために、取得条件テーブル４６に人体アイコンの向きの項目を追加し、例えば、上記１番目のエントリでは「正面」、２番目のエントリでは「側面」と設定しておいてもよい。この場合、取得条件入力用ＵＩ３２が、各時点での人体アイコン４６の向きを表す情報も出力するようにすればよい。
【０１０１】
図２５は、本具体例に対応する医療情報データベースの医療情報の登録例である。図２２に例示した入力例の場合、取得条件特定部３５で特定された、検査部位条件「胸部・腹部」、情報種別条件「ＣＴ」、情報詳細条件「サジタル」を満たす情報No.31の医療情報である胸部から腹部のＣＴサジタル断面画像データが、医療情報検索部５２によって医療情報データベース５３から抽出され、医療情報取得部３６に送信される。一方、図２３Ａおよび図２３Ｂに例示した入力例の場合、取得条件特定部３５で特定された、検査部位条件「胸部・腹部」、情報種別条件「ＣＴ」、情報詳細条件「コロナル」を満たす情報No.32の医療情報である胸部から腹部のＣＴコロナル断面画像データが、医療情報検索部５２によって医療情報データベース５３から抽出される。
【０１０２】
このように、本具体例では、取得条件入力用ＵＩ３２で行われた第１のジェスチャである回転ジェスチャに応じて人体アイコン４５を回転させ、その後の第２のジェスチャである上下方向ナイフジェスチャによって、コロナル方向の断面画像を取得するための医療情報取得条件を特定することが可能になる。
【０１０３】
図２６および図２７は、本発明の第２の実施形態のさらに他の具体例を説明するためのものである。図２６は本具体例によるジェスチャ入力例を表したものである。図の(1-1)および(1-2)に示したように、ユーザが、まず人体アイコン４５の心臓に対して掴みジェスチャを行うと（図１１Ａ参照）、ジェスチャ種別解析部３３が入力ジェスチャを掴みジェスチャと認識し、ジェスチャ部位解析部３４がそのジェスチャの対象となる詳細部位が心臓であると認識する。本具体例では、取得条件入力用ＵＩ３２は、これらの認識結果に応じて、掴みジェスチャの対象である心臓を人体アイコン４５から掴み出すように移動させる表示を行うとともに（図１１Ｂ参照）、心臓の形状を模式的に表す心臓アイコンを表示させる。この心臓アイコンは、人体アイコン４５と同様に、心臓の各位置に対して、心臓の各部位（冠動脈、左心室等）を表す部位情報が関連づけられたものである。ユーザが、例えば図の(2)に示したように、心臓アイコンの冠動脈の位置に対して指定ジェスチャを行うと、ジェスチャ種別解析部３３が、そのジェスチャを指定ジェスチャと認識するとともに、ジェスチャ部位解析部３４が、そのジェスチャの部位を、心臓アイコンの上記関連づけに基づいて「冠動脈」と認識する。
【０１０４】
図２７は、本具体例に対応する取得条件テーブル４６を表したものである。図２６の入力例の場合、取得条件特定部３５は、ジェスチャ種別情報「掴み→指定」、ジェスチャ部位情報「心臓→冠動脈」に対応する検査部位条件である「冠動脈」、および、各種情報種別条件を特定する。
【０１０５】
このように、本具体例では、取得条件入力用ＵＩ３２で行われた第１のジェスチャである心臓の掴みジェスチャに応じて心臓アイコンを表示させ、その後の第２のジェスチャである冠動脈の指定ジェスチャに応じて、冠動脈の医療情報を取得するための医療情報取得条件を特定することが可能になる。また、本具体例と同様にして、人体アイコン４５の所定の臓器等に対する掴みジェスチャに応じてその臓器等を表すアイコンを表示させ、その臓器等のアイコンに対するジェスチャに応じて、医療情報取得条件を特定できるようにすることができる。したがって、人体アイコン４５では入力しづらい小さな臓器等に対しても、人体アイコンに対する第１のジェスチャに応じてその臓器等のアイコンを拡大表示させ、その拡大表示された臓器等のアイコンに対する第２のジェスチャ入力を受け付けることにより、臓器中の特定の構成要素のような人体アイコン４５では入力しづらい微細な構造物に対してもジェスチャ入力を行うことが可能になり、操作性が向上する。
【０１０６】
なお、第１の実施形態で説明したジェスチャパターンについても、複数のジェスチャから構成されるようにしてもよい。例えば、ジェスチャ種別解析部３３が所定の時間内での２回のタップ操作を指定ジェスチャと認識するようにしてもよいし、所定の時間内での３回以上のタップ操作をハンマージェスチャと認識するようにしてもよい。
【０１０７】
上記の第１、第２の実施形態の場合、医療情報表示装置１の取得条件特定部３５が、入力ジェスチャを解析して医療情報取得条件を特定した後で、医療情報管理サーバ２から医療情報を取得する処理を行うため、医療情報表示装置１のユーザにとっては、ジェスチャの完了から医療情報の表示までの間の待ち時間が長くなってしまい、操作性が低下してしまう。本発明の第３の実施形態は、このような問題点を解決するものである。
【０１０８】
図２８は、本発明の第３の実施形態における医療情報表示装置１と医療情報管理サーバ２の機能ブロック図である。図に示したように、本実施形態は、上記第１、第２の実施形態の医療情報表示装置１に、医療情報先行取得部３９を付加するとともに、第１、第２の実施形態の医療情報取得部３６を医療情報抽出部４０に置換した構成となっている。図２９は、本発明の第３の実施形態において、医療情報統合システム３で行われる医療情報の表示処理の流れを示したフローチャートである。
【０１０９】
図に示したように、患者ＩＤ入力用ＵＩ３１が、第１に実施形態と同様にして患者ＩＤの入力を受け付けた後(#21)、医療情報先行取得部３９が、入力された患者ＩＤのみが設定された医療情報取得条件を医療情報管理サーバ２に送信する(#22)。医療情報管理サーバ２の医療情報検索部５２は、医療情報取得条件（患者ＩＤのみ）を医療情報表示装置１から受信し(#23)、医療情報データベース５３の検索を行い、データベース中の患者ＩＤが、受信した医療情報取得条件の患者ＩＤと一致する医療情報を抽出する(#24)。このとき、医療情報の実データだけでなく、医療情報取得条件に対応するインデックス情報も抽出される。医療情報検索部５２は、抽出された医療情報を医療情報表示装置１に送信する(#25)。医療情報表示装置１の医療情報先行取得部３９は、送信されてきた医療情報を受信し、補助記憶装置１７または主記憶装置１６の所定の領域に格納する(#26)。
【０１１０】
一方、医療情報表示装置１では、医療情報先行取得部３９が上記の処理を行う間、第１の実施形態のステップ#2から#7と同様に、ジェスチャ入力の受付と、そのジェスチャに応じた医療情報取得条件の設定が行われる(#27から#31)。
【０１１１】
そして、医療情報抽出部４０は、入力されたジェスチャに応じて特定された医療情報取得条件と、医療情報先行取得部３９によって取得された医療情報中のインデックス情報とに基づいて、特定された医療情報取得条件を満たす医療情報を、先行取得された医療情報の中から抽出する(#32)。そして、医療情報表示制御部３７は、抽出された医療情報の実データに基づいて、その医療情報を液晶ディスプレイ１２に表示させる(#33)。
【０１１２】
以上のように、本発明の第３の実施形態では、医療情報表示装置１において、医療情報先行取得部３９が、取得条件入力用ＵＩ３２によるジェスチャ入力の受付、および、取得条件特定部３５による医療情報取得条件の特定の各処理と並行して、患者ＩＤ入力用ＵＩ３１で入力された患者ＩＤと関連づけられた医療情報を医療情報管理サーバ２の医療情報データベース５３から先行取得するので、入力されたジェスチャに応じた医療情報を満たす医療情報を取得する際に、医療情報管理サーバ２の医療情報データベース５３にアクセスする必要がなくなる。したがって、医療情報表示装置１のユーザは、取得条件入力用ＵＩ３２でのジェスチャ入力後に、医療情報管理サーバ２による検索処理や、医療情報表示装置１と医療情報管理サーバ２との間の通信処理を待つ必要がなくなるので、ユーザから見たスループットが向上し、操作性が向上する。この実施形態は、特に、医療情報管理サーバ２やネットワーク９の負荷が高かったり、性能が低かったりする場合であっても、医療情報の取得を先行して行うことにより、その影響を軽減することができる。
【０１１３】
上記各実施形態では、ジェスチャが行われた部位に関する医療情報が存在するかどうかについては、取得条件入力用ＵＩ３２でのジェスチャ入力の時点では、ユーザは知ることができない。本発明の第４の実施形態は、この問題を解決するものである。
【０１１４】
図３０は、本発明の第４の実施形態における医療情報表示装置１と医療情報管理サーバ２の機能ブロック図である。図に示したように、本実施形態は、上記第３の実施形態と処理部は同様であるが、取得条件入力用ＵＩ３２が、医療情報先行取得部３９によって取得された医療情報を入力として用いる点が第３の実施形態と異なる。図３１は、本発明の第４の実施形態において、医療情報統合システム３で行われる医療情報の表示処理の流れを示したフローチャートである。
【０１１５】
図に示したように、本発明の第４の実施形態では、第３の実施形態と同様に、患者ＩＤ入力用ＵＩ３１が、第１に実施形態と同様にして患者ＩＤの入力を受け付けた後(#41)、医療情報先行取得部３９が、入力された患者ＩＤのみが設定された医療情報取得条件を医療情報管理サーバ２に送信する(#42)。医療情報管理サーバ２の医療情報検索部５２は、医療情報取得条件（患者ＩＤのみ）を医療情報表示装置１から受信し(#43)、医療情報データベース５３の検索を行い、データベース中の患者ＩＤが、受信した医療情報取得条件の患者ＩＤと一致する医療情報を抽出する(#44)。このとき、医療情報の実データだけでなく、医療情報取得条件に対応するインデックス情報も抽出される。ここで、本実施形態では、医療情報検索部５２は、抽出された医療情報のうちインデックス部のみを医療情報表示装置１に送信する(#45)。医療情報表示装置１の医療情報先行取得部３９は、送信されてきた医療情報のインデックス部を受信し、補助記憶装置１７または主記憶装置１６の所定の領域に格納する(#46)。また、本実施形態では、医療情報先行取得部３９が上記の処理を行う間、取得条件入力用ＵＩ３２による人体アイコンの表示（第３の実施形態におけるステップ#27）は行われない。
【０１１６】
取得条件入力用ＵＩ３２が、送信されてきた医療情報の検査部位の情報を読み込み、人体アイコン中の各部位を、医療情報が存在する部位と存在しない部位に分類し、両部位が識別可能な態様で人体アイコン４５を表示させる(#47)。図３０は表示される人体アイコンの一例である。図に示した例では、医療情報が存在する部位は存在しない部位よりも濃い色となっている。そして、上記各実施形態と同様に、取得条件入力用ＵＩ３２が人体アイコンに対するジェスチャ入力の受付(#48)から取得条件特定部３５による医療情報取得条件の特定(#51)が行われる。その間、バックグラウンドでは、医療情報管理サーバ２の医療情報検索部５２が、ステップ#44で抽出された医療情報の実データ部を医療情報表示装置１に送信し(#52)、医療情報表示装置１の医療情報先行取得部３９が、送信されてきた医療情報の実データ部を受信し、補助記憶装置１７または主記憶装置１６の所定の領域に格納する(#43)。
【０１１７】
そして、上記第３の実施形態のステップ#32と同様に、医療情報抽出部４０が、特定された医療情報取得条件を満たす医療情報を、先行取得された医療情報の中から抽出し(#54)、医療情報表示制御部３７が、抽出された医療情報を表示させる(#55)。
【０１１８】
このように、本発明の第４の実施形態では、取得条件入力用ＵＩ３２が、表示可能な医療情報が存在する部位と存在しない部位とを識別可能な態様で人体アイコン４５を表示させるので、取得条件入力用ＵＩ３２でジェスチャ入力を行う前に、患者ＩＤ入力用ＵＩ３１で指定した患者について、人体アイコン４５の各部位に関する医療情報が存在するかどうかを知ることができ、医療情報が得られない不必要なジェスチャ入力を回避することが可能になり、操作効率が向上する。
【０１１９】
また、人体アイコン４５を上記のように表示するには、取得条件入力用３２が、医療情報先行取得部３９によって先行取得された医療情報を参照する必要があるので、上記第３の実施形態と同様に、人体アイコン４５の表示と医療情報全体の先行取得を並行して行うことができない。ここで、医療情報検索部５２が、上記第３の実施形態と同様に、患者ＩＤに基づいて抽出された医療情報のすべてを医療情報表示装置１に送信してしまうと、患者ＩＤの入力から人体アイコンの表示までの待ち時間が長くなってしまい、操作性や作業効率が低下する。そこで、医療情報検索部５２が、抽出された医療情報のうち、取得条件入力用ＵＩ３２が必要とするインデックス部のみを先行して送信するようにしたので、患者ＩＤの入力から人体アイコンの表示までの待ち時間が、医療情報の全項目を受信する場合に比べて大幅に短縮される。また、並行して行うことが可能な、ジェスチャ入力の受付から医療情報取得条件の特定までの処理と、医療情報の実データ部の受信については、第３の実施形態と同様に並行して行うようにしたので、ジェスチャ入力の完了後に所望の医療情報が表示されるまでの待ち時間は、上記第１、第２の実施形態と比べて短縮される。
【０１２０】
上記各実施形態では、例えば、図３３の医療情報データベースの登録例のように、検査日時の異なる、同一患者、同一検査部位、同一情報種別の医療情報が存在する場合、すなわち、同じ優先順位の医療情報取得条件を満たす医療情報が複数件抽出される場合については考慮されていない。このような場合、検査日時の新しい方の医療情報を自動的に選択して表示させたり、表示対象の医療情報の選択を受け付けるユーザインターフェースを設けたりすることが考えられる。
【０１２１】
本発明の第５の実施形態では、このような場合のさらに効果的な医療情報の表示を実現するものである。本実施形態における医療情報表示装置と医療情報管理サーバに実装される機能構成、および、医療情報統合システムで行われる医療情報の表示処理の流れは、上記各実施形態と同様である。ただし、医療情報管理サーバ２からは、医療情報取得条件を満たす医療情報が複数件あっても、全件が医療情報表示装置１に送信されるものとし、また、送信される医療情報は、実データ部だけでなく、インデックス部も送信されてくるものとする。
【０１２２】
本実施形態では、医療情報表示制御部３７は、表示対象の医療情報のインデックス部を参照し、検査日時の異なる、同一患者、同一検査部位、同一情報種別の医療情報が存在する場合、これらを比較可能な態様で液晶ディスプレイ１２に表示させる。図３４は、図３３に例示した検査日時の異なる２つの腹部ＣＴアキシャル断面画像の表示例である。図に示したように、２つの腹部ＣＴアキシャル断面画像が左右に並べられ、検査日が付されて表示されている。これにより、ユーザは、検査日時のみ異なる複数の医療情報を容易に比較することが可能になり、作業効率が向上する。なお、検査日時の異なる、同一患者、同一検査部位、同一情報種別の医療情報が存在する場合、上記のような表示を行うかどうかの選択を受け付けるユーザインターフェースを設け、ユーザの選択に応じて上記の用事を行うようにしてもよい。
【０１２３】
上記の各実施形態では、医療情報取得条件に付された優先順位に基づいて、より優先順位の高い医療情報が表示されるようになっているが、入力されたジェスチャに対応する、優先順位のより低い医療情報を表示させたい場合も考えられる。本発明の第６の実施形態はこのような場合を考慮に入れたものである。
【０１２４】
図３５は、本発明の第６の実施形態における医療情報表示装置１と医療情報管理サーバ２の機能ブロック図である。図に示したように、本実施形態は、上記第４の実施形態の医療情報表示装置１に医療情報選択用ＵＩ４１を付加した構成となっている。
【０１２５】
図３６は、本発明の第６の実施形態において、医療情報統合システム３で行われる医療情報の表示処理の流れを示したフローチャートである。図に示したように、ステップ#61から#73までは第４の実施形態のステップ#41から#53までと同様である。
【０１２６】
医療情報抽出部４０は、取得条件特定部３５で特定された、優先順位の異なる複数の医療情報取得条件の各々を満たす医療情報を抽出する(#74)。ここで、医療情報抽出部４０によって抽出された医療情報が１件の場合(#75;NO)、上記第４の実施形態と同様に、医療情報表示制御部３７は、抽出された医療情報の実データに基づいて、その医療情報を液晶ディスプレイ１２に表示させる(#78)。一方、医療情報抽出部４０によって抽出された医療情報が複数件の場合(#75;YES)、医療情報選択用ＵＩ４１が、抽出された医療情報を、その医療情報が満たした医療情報取得条件の優先順位の順に並べ替えてリスト化した医療情報選択用画面を液晶ディスプレイ１２に表示させる(#76)。図３７Ａは医療情報選択用画面の一例を表したものである。この画面は、図１０Ａに例示した心臓の指定ジェスチャに対応する医療情報を、図６に例示された医療情報データベース５３中の医療情報から抽出した場合を表している。すなわち、この画面では、患者ＩＤ＝「012345」、検査部位条件＝「心臓」、情報種別条件＝「心電図」または「ＣＰＲ」または「ＶＲ」を満たす医療情報が、医療情報抽出部４０によって抽出された場合を示している。医療情報選択用ＵＩ４１は、抽出された医療情報のインデックス情報を、対応する医療情報取得条件の優先順位の順に並べ替えてリスト表示する。そして、医療情報選択用ＵＩ４１は、ユーザが所望する医療情報を表す行の選択（タッチ操作）を受け付ける(#77)。図３７Ｂは、より視覚的効果の高い医療情報選択用画面の一例を表したものである。図に示したように、この医療情報選択用画面では選択対象の医療情報がサムネイル表示されている。ここで、その医療情報に関する読影レポートや検査報告が存在するものについては、そのレポートや検査報告と関連づけられた医療情報のサムネイルにレポートを表すアイコンを付して表示してもよい。また、サムネイルの並び順は、その医療情報に対応する優先順位の順とすることができる。また、上記第５の実施形態のように、同一優先順位で検査日時の異なる医療情報が抽出される場合を考慮して、検査日時の順でもよいし、これらを組み合わせた並び順でもよい。この画面例では、医療情報選択用ＵＩ４１は、ユーザが所望する医療情報を表すサムネイル画像またはアイコンの選択（タッチ操作）を受け付ける。そして、医療情報表示制御部３７は、医療情報選択用ＵＩ４１で選択された医療情報の実データに基づいて、その医療情報を液晶ディスプレイ１２に表示させる(#78)。
【０１２７】
以上のように、本発明の第６の実施形態では、医療情報表示装置１の医療情報抽出部４０において、取得条件特定部３５によって特定された医療情報取得条件を満たす医療情報が複数件抽出された場合に、医療情報選択用ＵＩ４１が表示対象の医療情報の選択を受け付けるので、ユーザは、簡単なタッチ操作で所望の医療情報を表示させることが可能になり、操作性がさらに向上する。
【０１２８】
上記の各実施形態では、例えば医療情報が画像である場合、画像診断システム５において生成済みの画像が医療情報データベース５３に登録されていることを前提としている。これに対して、本発明の第７の実施形態は、医療情報としてボリュームデータ等が医療情報データベースに格納されている場合に対応したものである。
【０１２９】
図３８は、本発明の第７の実施形態における医療情報表示装置１と医療情報管理サーバ２の機能ブロック図である。図に示したように、本実施形態は、上記第４の実施形態の医療情報表示装置１に表示画像生成部４２を付加した構成となっている。また、医療情報データベース５３には、図４０に具体的に表したように、第１の実施形態のデータ構造において、医療情報の実データとして、生成済みの画像ではなく、ＣＴ等の各種モダリティで得られたボリュームデータが格納されている。
【０１３０】
図３９は、本発明の第７の実施形態において、医療情報統合システム３で行われる医療情報の表示処理の流れを示したフローチャートである。図に示したように、ステップ#81から#94までは第４の実施形態のステップ#41から#54までと同様である。
【０１３１】
ここで、医療情報取得条件を満たす医療情報として、ボリュームデータが医療情報抽出部４０によって抽出された場合(#95;YES)、表示画像生成部４２は、そのボリュームデータと関連づけられた医療情報の検査部位と情報種別を読み込み、それらの内容に応じた表示画像を生成する。例えば、図４０の情報No.51の医療情報の場合、検査部位「腹部」、情報種別「ＣＴ」に基づいて、腹部ＣＴボリュームデータからアキシャル断面画像が生成される。ここで、アキシャル断面の位置は、プログラムの起動パラメータや設定ファイル等で予め定められた位置とすることができる。あるいは、取得条件入力用ＵＩ３２で受け付けられたナイフジェスチャ（図９Ａ参照）の位置に基づいて、その位置が属する部位（腹部）の上下方向の長さに対する、その位置のその部位の上端からの長さの比率を算出し、抽出された腹部ＣＴボリュームデータにおける、その比率に対応する体軸方向の位置をアキシャル断面の位置としてもよい。なお、抽出された情報No.51の医療情報が、アキシャル断面画像の集合体である場合には、その中から前述の方法によって定められた位置におけるアキシャル断面画像を選択すればよい。また、情報No.54の医療情報の場合、検査部位「心臓」、情報種別「ＶＲ」に基づいて、胸部ＣＴボリュームデータから心臓を表すボリュームレンダリング画像が生成される。
【０１３２】
以上のように、本発明の第７の実施形態では、医療情報登録部５１が、生成済みの医用画像の代わりに、その医用画像の生成元データとなるボリュームデータ等を医療情報データベース５３に登録しておき、その医療情報が医療情報取得条件を満たす医療情報として抽出された場合には、表示画像生成部４２が、その医療情報のインデックス情報に応じた表示画像を生成するようにしたので、このような場合でも、上記各実施形態と同様の医療情報（画像）を表示させることが可能になる。
【０１３３】
また、本実施形態において、表示画像の生成条件を変更するためのユーザインターフェースをさらに設ければ、例えば、断面の位置や向き、ボリュームレンダリングのカラーテンプレートやオパシティカーブ、視点の位置や視線方向等の生成条件を自由に変更することが可能になり、表示画像生成部４２は、変更後の生成条件に応じた表示画像を生成することが可能になる。これにより、医療情報表示装置１での、よりインタラクティブな医療情報の表示が実現される。
【０１３４】
上記各実施形態では、取得条件テーブル４６に定義された優先順位の異なる医療情報取得条件に基づいて取得された複数件の医療情報が同時に表示されることがなかったが、ユーザの嗜好や医療現場の要求によっては、これらの医療情報を同時に表示したい場合もありうる。このような場合、複数件の医療情報をどのようなレイアウトで同時表示させるかが問題となる。本発明の第８の実施形態は、このような問題を解決するものである。
【０１３５】
図４１は、本発明の第８の実施形態における取得条件テーブル４６の構成を表したものである。図に示したように、表示条件の項目が付加された構成となっている。この表示条件の項目は、表示対象の複数の医療情報に対して１つ定義されるものであり、この例では、情報No.1から8までの医療情報に対してレイアウトNo.1で識別される表示条件が関連づけられる。図４２は、このレイアウトNo.1の表示条件の一例を模式的に表したものである。図に示したように、この表示条件では、冠動脈の平均径を表すグラフＧＲが表示される領域ＷＧＲ、冠動脈のストレートＣＰＲ画像ＳＴ−ＣＰＲが表示される領域ＷＳＴ−ＣＰＲ、冠動脈の直交断面を表すＭＰＲ画像ＭＰＲ−０が表示される領域ＷＭＰＲ−０、アキシャル、サジタル、コロナル断面を表す３つのＭＰＲ画像ＭＰＲ−１、ＭＰＲ−２、ＭＰＲ−３がそれぞれ表示される領域ＷＭＰＲ−１、ＷＭＰＲ−２、ＷＭＰＲ−３、ストレッチＣＰＲ画像ＳＣ−ＣＰＲが表示される領域ＷＳＣ−ＣＰＲ、ボリュームレンダリング画像ＶＲが表示される領域ＷＶＲの８つの領域が配置されたレイアウトを示している。
【０１３６】
本実施形態では、医療情報取得部３６または医療情報抽出部４０が、優先順位の異なる医療情報取得条件の各々を満たす医療情報をすべて取得する。また、医療情報表示制御部３７が、取得条件テーブル４６を参照し、取得された各医療情報が満たしている医療情報取得条件に関連づけられた表示条件を特定し、取得された各医療情報を、特定された表示条件に基づいて表示させる。図４３は、図４１に例示された医療情報取得条件を満たす各医療情報を、各医療情報と関連づけられたレイアウトNo.1の表示条件（図４２に例示）に基づいて表示させた例を表している。
【０１３７】
このように、本実施形態では、医療情報表示制御部３７が、取得条件テーブル４６を参照し、表示対象の医療情報に対応する医療情報取得条件と関連づけられている表示条件を特定し、特定された表示条件に基づいて、表示対象の医療情報を表示させることができる。したがって、上記のように、表示対象の医療情報が複数件存在する場合であっても、適切なレイアウトで医療情報を表示させることが可能になる。
【０１３８】
上記の各実施形態はあくまでも例示であり、上記のすべての説明が本発明の技術的範囲を限定的に解釈するために利用されるべきものではない。また、上記の実施形態におけるシステム構成、ハードウェア構成、処理フロー、モジュール構成、ユーザインターフェースや具体的処理内容等に対して、本発明の趣旨から逸脱しない範囲で様々な改変を行ったものも、本発明の技術的範囲に含まれる。
【０１３９】
例えば、本発明の実施形態は、各実施形態の特徴的構成を適宜組み合わせ実施形態であってもよい。具体的には、本発明の第２の実施形態の取得条件テーブル４６を第３から第８の実施形態で採用してもよいし、第６の実施形態の医療情報選択用ＵＩ４１を第１、第２の実施形態に付加してもよい。
【０１４０】
また、上記各実施形態の医療情報データベース５３は、医療情報の実データも登録されているものとして説明を行ったが、医療情報の実データの代わりに、その実データにアクセスするためのリンク情報（アドレス情報）を登録しておき、実データは、登録元の他システムのデータベースのものを用いるようにし（リンク情報のリンク先を他システムのデータベースとし）、その医療情報が表示対象となった場合にのみ、そのリンク情報に基づいて、実データを取得するようにしてもよい。
【０１４１】
また、上記実施形態では、医療情報が統合的に管理される医療情報管理サーバ２を設け、医療情報表示装置１は、医療情報管理サーバ２が備える医療情報データベース５３から医療情報を取得するようにしていたが、画像診断システム５や内視鏡検査システム６等の他システムの各々から、直接、医療情報を取得するようにしてもよい。
【０１４２】
また、医療情報表示装置１が医療情報データベース５３を備えていてもよい。この場合、医療情報取得部３６または医療情報先行取得部３９に、医療情報検索部５２の機能を持たせればよい。
【０１４３】
また、上記実施形態では、本発明の医療情報表示装置１を、図２に示したように携帯型の装置として説明してきたが、タッチパネル付き液晶ディスプレイとコンピュータ本体を有するデスクトップ型の装置であってもよい。
【０１４４】
また、タッチパネル１１から入力されたジェスチャは、ジェスチャ種別解析部３３およびジェスチャ部位解析部３４で、その内容の解析を行っているが、その全部または一部を、医療情報表示装置１のオペレーティングシステムやタッチパネルドライバ（ソフトウェア）側で行うようにしてもよい。
【０１４５】
また、医療情報の一例である画像は、静止画ではなく、動画であってもよい。
【符号の説明】
【０１４６】
１ 医療情報表示装置
２ 医療情報管理サーバ
３ 医療情報統合システム
４ 電子カルテシステム
５ 画像診断システム
６ 内視鏡検査システム
７ 病理検査システム
８ 各診療科システム
９ ネットワーク
１１ タッチパネル
１２ 液晶ディスプレイ
１３ アンテナ部
１４ 電源スイッチ
１５ ＣＰＵ
１６ 主記憶装置
１７ 補助記憶装置
１８ 通信インターフェース
１９ データバス
３１ 患者ＩＤ入力用ユーザインターフェース（ＵＩ）
３２ 取得条件入力用ユーザインターフェース（ＵＩ）
３３ ジェスチャ種別解析部
３４ ジェスチャ部位解析部
３５ 取得条件特定部
３６ 医療情報取得部
３７ 医療情報表示制御部
３８ 取得条件テーブル編集用ユーザインターフェース（ＵＩ）
３９ 医療情報先行取得部
４０ 医療情報抽出部
４１ 医療情報選択用ユーザインターフェース（ＵＩ）
４２ 表示画像生成部
４５ 人体アイコン
４６ 取得条件テーブル
５１ 医療情報登録部
５２ 医療情報検索部
５３ 医療情報データベース
【特許請求の範囲】
【請求項１】
所与の情報を表示する表示手段と、
該表示手段の表示面に対するジェスチャ操作を検出し、該検出されたジェスチャ操作の内容を表すジェスチャ情報を出力するジェスチャ入力手段と、
被検体の外観を表す被検体外観画像の画像データであって、該画像中の各位置に対して、該被検体の部位を識別する部位識別情報が関連づけられたものに基づいて、該被検体外観画像を前記表示手段の所定の表示位置に表示させる第１の表示制御手段と、
該被検体外観画像の表示中に前記ジェスチャ入力手段によって検出されたジェスチャ操作に応じて出力された前記ジェスチャ情報に基づいて、該ジェスチャ操作が所定の複数のジェスチャ操作パターンのうちのいずれであるかを表すジェスチャ種別を判別するジェスチャ種別解析手段と、
前記被検体外観画像の表示位置の情報と、前記被検体外観画像データに関連づけられた部位識別情報と、該被検体外観画像の表示中のジェスチャ操作に応じて出力されたジェスチャ情報に含まれる、該ジェスチャ操作が行われた位置を表すジェスチャ位置情報とに基づいて、前記ジェスチャ操作に対応する前記被検体の部位であるジェスチャ部位を特定するジェスチャ部位解析手段と、
該ジェスチャ種別および該ジェスチャ部位に基づいて、前記被検体外観画像の表示中のジェスチャ操作に対応する前記被検体についての医療情報を取得するための医療情報取得条件を特定する取得条件特定手段と、
該特定された医療情報取得条件を満たす前記医療情報を、複数件の前記医療情報を記憶する医療情報記憶手段から選択的に取得する医療情報取得手段と、
該取得された医療情報を前記表示手段に表示させる第２の表示制御手段とを備えたことを特徴とする医療情報表示装置。
【請求項２】
前記ジェスチャ入力手段は、タッチパネル式の入力手段であることを特徴とする請求項１に記載の医療情報表示装置。
【請求項３】
前記被検体外観画像が、前記被検体を模式的に表した画像であることを特徴とする請求項１または２に記載の医療情報表示装置。
【請求項４】
前記第１の表示制御手段が、前記被検体外観画像の表示中に検出されたジェスチャ操作に対応する、前記ジェスチャ種別および／または前記ジェスチャ部位に基づいて、前記被検体外観画像中の被検体の態様を、前記検出されたジェスチャ操作に応じた所定の態様に変更して表示させるものであることを特徴とする請求項１から３のいずれか１項に記載の医療情報表示装置。
【請求項５】
前記第１の表示制御手段が、前記被検体外観画像の表示中に検出された第１のジェスチャ操作について、前記ジェスチャ種別判別手段によって判別された第１の前記ジェスチャ種別、および／または、該第１のジェスチャ操作について、前記ジェスチャ部位判別手段によって特定された第１の前記ジェスチャ部位に基づいて、前記被検体外観画像中の被検体の態様を、前記検出されたジェスチャ操作に応じた所定の態様に変更して表示させるものであり、
前記取得条件特定手段が、前記第１のジェスチャ種別、前記第１のジェスチャ部位、前記変更後の被検体外観画像の表示中に検出された第２のジェスチャ操作について、前記ジェスチャ種別判別手段によって判別された第２の前記ジェスチャ種別、該第２のジェスチャ操作について、前記ジェスチャ部位判別手段によって特定された第２の前記ジェスチャ部位の少なくとも一部に基づいて、前記第１のジェスチャ操作および前記第２のジェスチャ操作に対応する前記医療情報取得条件を特定するものであることを特徴とする請求項１から３のいずれか１項に記載の医療情報表示装置。
【請求項６】
前記取得条件特定手段は、前記ジェスチャ種別と前記ジェスチャ部位の組合せに対して前記医療情報取得条件を関連づけた参照データに基づいて、前記医療情報取得条件を特定するものであることを特徴とする請求項１から５のいずれか１項に記載の医療情報表示装置。
【請求項７】
前記参照データは、１組の前記ジェスチャ種別と前記ジェスチャ部位の組合せに対して、１以上の前記医療情報取得条件が関連づけられたものであり、該組合せに対して２以上の前記医療情報取得条件が関連づけられた場合には、該複数の医療情報取得条件の各々には、該医療情報取得条件の優先順位がさらに関連づけられたものであることを特徴とする請求項６に記載の医療情報表示装置。
【請求項８】
前記参照データの編集を行う参照データ編集手段をさらに備えたことを特徴とする請求項６または７に記載の医療情報表示装置。
【請求項９】
所与の条件を満たす医療情報を前記医療情報記憶手段から先行取得する医療情報先行取得手段をさらに備え、
前記第１の表示制御手段が、前記被検体外観画像に表された被検体中の各部位を、該部位に関する医療情報が該先行取得された医療情報の中に存在する部位と、該部位に関する医療情報が該先行取得された医療情報の中に存在しない部位とが異なる態様となるように表示させるものであることを特徴とする請求項１から８のいずれか１項に記載の医療情報表示装置。
【請求項１０】
前記第２の表示制御手段が、前記医療情報取得手段によって検査時期の異なる同種の検査に関する複数件の医療情報を取得した場合に、該複数件の医療情報を比較可能な態様で表示させるものであることを特徴とする請求項１から９のいずれか１項に記載の医療情報表示装置。
【請求項１１】
前記被検体を表す医用画像が前記医療情報取得手段によって前記医療情報記憶手段から取得された場合、必要に応じて、前記取得された医用画像に対して、前記医療情報取得条件を満たす医用画像を得るための所定の画像処理を行う画像処理手段をさらに備えたことを特徴とする請求項１から１０のいずれか１項に記載の医療情報表示装置。
【請求項１２】
前記医療情報取得手段が前記医療情報取得条件を満たす医療情報を複数件取得した場合、該複数件の医療情報を前記表示手段に一覧表示させ、表示対象の前記医療情報の選択を受け付ける選択受付手段をさらに備え、
前記第２の表示制御手段は、前記選択受付手段によって選択された医療情報を表示させるものであることを特徴とする請求項１から１１のいずれか１項に記載の医療情報表示装置。
【請求項１３】
前記選択受付手段は、前記一覧表示の際、前記複数件の医療情報をサムネイルまたはアイコンの態様で表示させるものであることを特徴とする請求項１２に記載の医療情報表示装置。
【請求項１４】
被検体についての医療情報を、所与の医療情報取得条件に基づいて選択的に提供する医療情報提供装置と、該医療情報を表示する医療情報表示装置とがネットワークを介して通信可能に接続された医療情報表示システムであって、
該医療情報表示装置は、
所与の情報を表示する表示手段と、
該表示手段の表示面に対するジェスチャ操作を検出し、該検出されたジェスチャ操作の内容を表すジェスチャ情報を出力するジェスチャ入力手段と、
被検体の外観を表す被検体外観画像の画像データであって、該画像中の各位置に対して、該被検体の部位を識別する部位識別情報が関連づけられたものに基づいて、該被検体外観画像を前記表示手段の所定の表示位置に表示させる第１の表示制御手段と、
該被検体外観画像の表示中に前記ジェスチャ入力手段によって検出されたジェスチャ操作に応じて出力された前記ジェスチャ情報に基づいて、該ジェスチャ操作が所定の複数のジェスチャ操作パターンのうちのいずれであるかを表すジェスチャ種別を判別するジェスチャ種別解析手段と、
前記被検体外観画像の表示位置の情報と、前記被検体外観画像データに関連づけられた部位識別情報と、該被検体外観画像の表示中のジェスチャ操作に応じて出力されたジェスチャ情報に含まれる、該ジェスチャ操作が行われた位置を表すジェスチャ位置情報とに基づいて、前記ジェスチャ操作に対応する前記被検体の部位であるジェスチャ部位を特定するジェスチャ部位解析手段と、
該ジェスチャ種別および該ジェスチャ部位に基づいて、前記被検体外観画像の表示中のジェスチャ操作に対応する前記被検体についての医療情報を取得するための医療情報取得条件を特定する取得条件特定手段と、
該特定された医療情報取得条件を満たす前記医療情報を前記医療情報提供装置から取得する医療情報取得手段と、
該取得された医療情報を前記表示手段に表示させる第２の表示制御手段とを備えたものであることを特徴とする医療情報表示システム。
【請求項１５】
前記医療情報提供装置は、
複数件の前記医療情報を、所与の前記医療情報取得条件に基づいて選択可能なデータ構造で記憶する医療情報記憶手段と、
前記医療情報表示装置から前記医療情報取得条件を受信する取得条件受信手段と、
該受信した医療情報取得条件を満たす前記医療情報を前記医療情報記憶手段から取得する医療情報検索手段と、
該取得された医療情報を、前記医療情報取得条件を送信した医療情報表示装置に送信する医療情報送信手段とを備えたものであることを特徴とする請求項１４に記載の医療情報表示システム。
【請求項１６】
被検体の外観を表す被検体外観画像の画像データであって、該画像中の各位置に対して、該被検体の部位を識別する部位識別情報が関連づけられたものに基づいて、該被検体外観画像を前記表示手段の所定の表示位置に表示するステップと、
該被検体外観画像の表示中に該表示手段の表示面に対するジェスチャ操作を検出し、該検出されたジェスチャ操作の内容を表すジェスチャ情報を出力するステップと、
前記出力されたジェスチャ情報に基づいて、該ジェスチャ操作が所定の複数のジェスチャ操作パターンのうちのいずれであるかを表すジェスチャ種別を判別するステップと、
前記被検体外観画像の表示位置の情報と、前記被検体外観画像データに関連づけられた部位識別情報と、前記ジェスチャ操作に応じて出力されたジェスチャ情報に含まれる、該ジェスチャ操作が行われた位置を表すジェスチャ位置情報とに基づいて、前記ジェスチャ操作に対応する前記被検体の部位であるジェスチャ部位を特定するステップと、
該ジェスチャ種別および該ジェスチャ部位に基づいて、前記被検体外観画像の表示中のジェスチャ操作に対応する前記被検体についての医療情報を取得するための医療情報取得条件を特定するステップと、
該特定された医療情報取得条件を満たす前記医療情報を、複数件の前記医療情報を記憶する医療情報記憶手段から選択的に取得するステップと、
該取得された医療情報を前記表示手段に表示するステップとを有することを特徴とする医療情報表示方法。
【請求項１７】
コンピュータに、
被検体の外観を表す被検体外観画像の画像データであって、該画像中の各位置に対して、該被検体の部位を識別する部位識別情報が関連づけられたものに基づいて、該被検体外観画像を前記表示手段の所定の表示位置に表示させるステップと、
該被検体外観画像の表示中に該表示手段の表示面に対するジェスチャ操作を検出し、該検出されたジェスチャ操作の内容を表すジェスチャ情報を出力するステップと、
前記出力されたジェスチャ情報に基づいて、該ジェスチャ操作が所定の複数のジェスチャ操作パターンのうちのいずれであるかを表すジェスチャ種別を判別するステップと、
前記被検体外観画像の表示位置の情報と、前記被検体外観画像データに関連づけられた部位識別情報と、前記ジェスチャ操作に応じて出力されたジェスチャ情報に含まれる、該ジェスチャ操作が行われた位置を表すジェスチャ位置情報とに基づいて、前記ジェスチャ操作に対応する前記被検体の部位であるジェスチャ部位を特定するステップと、
該ジェスチャ種別および該ジェスチャ部位に基づいて、前記被検体外観画像の表示中のジェスチャ操作に対応する前記被検体についての医療情報を取得するための医療情報取得条件を特定するステップと、
該特定された医療情報取得条件を満たす前記医療情報を、複数件の前記医療情報を記憶する医療情報記憶手段から選択的に取得するステップと、
該取得された医療情報を前記表示手段に表示させるステップとを実行させることを特徴とする医療情報表示制御プログラム。
【請求項１】
所与の情報を表示する表示手段と、
該表示手段の表示面に対するジェスチャ操作を検出し、該検出されたジェスチャ操作の内容を表すジェスチャ情報を出力するジェスチャ入力手段と、
被検体の外観を表す被検体外観画像の画像データであって、該画像中の各位置に対して、該被検体の部位を識別する部位識別情報が関連づけられたものに基づいて、該被検体外観画像を前記表示手段の所定の表示位置に表示させる第１の表示制御手段と、
該被検体外観画像の表示中に前記ジェスチャ入力手段によって検出されたジェスチャ操作に応じて出力された前記ジェスチャ情報に基づいて、該ジェスチャ操作が所定の複数のジェスチャ操作パターンのうちのいずれであるかを表すジェスチャ種別を判別するジェスチャ種別解析手段と、
前記被検体外観画像の表示位置の情報と、前記被検体外観画像データに関連づけられた部位識別情報と、該被検体外観画像の表示中のジェスチャ操作に応じて出力されたジェスチャ情報に含まれる、該ジェスチャ操作が行われた位置を表すジェスチャ位置情報とに基づいて、前記ジェスチャ操作に対応する前記被検体の部位であるジェスチャ部位を特定するジェスチャ部位解析手段と、
該ジェスチャ種別および該ジェスチャ部位に基づいて、前記被検体外観画像の表示中のジェスチャ操作に対応する前記被検体についての医療情報を取得するための医療情報取得条件を特定する取得条件特定手段と、
該特定された医療情報取得条件を満たす前記医療情報を、複数件の前記医療情報を記憶する医療情報記憶手段から選択的に取得する医療情報取得手段と、
該取得された医療情報を前記表示手段に表示させる第２の表示制御手段とを備えたことを特徴とする医療情報表示装置。
【請求項２】
前記ジェスチャ入力手段は、タッチパネル式の入力手段であることを特徴とする請求項１に記載の医療情報表示装置。
【請求項３】
前記被検体外観画像が、前記被検体を模式的に表した画像であることを特徴とする請求項１または２に記載の医療情報表示装置。
【請求項４】
前記第１の表示制御手段が、前記被検体外観画像の表示中に検出されたジェスチャ操作に対応する、前記ジェスチャ種別および／または前記ジェスチャ部位に基づいて、前記被検体外観画像中の被検体の態様を、前記検出されたジェスチャ操作に応じた所定の態様に変更して表示させるものであることを特徴とする請求項１から３のいずれか１項に記載の医療情報表示装置。
【請求項５】
前記第１の表示制御手段が、前記被検体外観画像の表示中に検出された第１のジェスチャ操作について、前記ジェスチャ種別判別手段によって判別された第１の前記ジェスチャ種別、および／または、該第１のジェスチャ操作について、前記ジェスチャ部位判別手段によって特定された第１の前記ジェスチャ部位に基づいて、前記被検体外観画像中の被検体の態様を、前記検出されたジェスチャ操作に応じた所定の態様に変更して表示させるものであり、
前記取得条件特定手段が、前記第１のジェスチャ種別、前記第１のジェスチャ部位、前記変更後の被検体外観画像の表示中に検出された第２のジェスチャ操作について、前記ジェスチャ種別判別手段によって判別された第２の前記ジェスチャ種別、該第２のジェスチャ操作について、前記ジェスチャ部位判別手段によって特定された第２の前記ジェスチャ部位の少なくとも一部に基づいて、前記第１のジェスチャ操作および前記第２のジェスチャ操作に対応する前記医療情報取得条件を特定するものであることを特徴とする請求項１から３のいずれか１項に記載の医療情報表示装置。
【請求項６】
前記取得条件特定手段は、前記ジェスチャ種別と前記ジェスチャ部位の組合せに対して前記医療情報取得条件を関連づけた参照データに基づいて、前記医療情報取得条件を特定するものであることを特徴とする請求項１から５のいずれか１項に記載の医療情報表示装置。
【請求項７】
前記参照データは、１組の前記ジェスチャ種別と前記ジェスチャ部位の組合せに対して、１以上の前記医療情報取得条件が関連づけられたものであり、該組合せに対して２以上の前記医療情報取得条件が関連づけられた場合には、該複数の医療情報取得条件の各々には、該医療情報取得条件の優先順位がさらに関連づけられたものであることを特徴とする請求項６に記載の医療情報表示装置。
【請求項８】
前記参照データの編集を行う参照データ編集手段をさらに備えたことを特徴とする請求項６または７に記載の医療情報表示装置。
【請求項９】
所与の条件を満たす医療情報を前記医療情報記憶手段から先行取得する医療情報先行取得手段をさらに備え、
前記第１の表示制御手段が、前記被検体外観画像に表された被検体中の各部位を、該部位に関する医療情報が該先行取得された医療情報の中に存在する部位と、該部位に関する医療情報が該先行取得された医療情報の中に存在しない部位とが異なる態様となるように表示させるものであることを特徴とする請求項１から８のいずれか１項に記載の医療情報表示装置。
【請求項１０】
前記第２の表示制御手段が、前記医療情報取得手段によって検査時期の異なる同種の検査に関する複数件の医療情報を取得した場合に、該複数件の医療情報を比較可能な態様で表示させるものであることを特徴とする請求項１から９のいずれか１項に記載の医療情報表示装置。
【請求項１１】
前記被検体を表す医用画像が前記医療情報取得手段によって前記医療情報記憶手段から取得された場合、必要に応じて、前記取得された医用画像に対して、前記医療情報取得条件を満たす医用画像を得るための所定の画像処理を行う画像処理手段をさらに備えたことを特徴とする請求項１から１０のいずれか１項に記載の医療情報表示装置。
【請求項１２】
前記医療情報取得手段が前記医療情報取得条件を満たす医療情報を複数件取得した場合、該複数件の医療情報を前記表示手段に一覧表示させ、表示対象の前記医療情報の選択を受け付ける選択受付手段をさらに備え、
前記第２の表示制御手段は、前記選択受付手段によって選択された医療情報を表示させるものであることを特徴とする請求項１から１１のいずれか１項に記載の医療情報表示装置。
【請求項１３】
前記選択受付手段は、前記一覧表示の際、前記複数件の医療情報をサムネイルまたはアイコンの態様で表示させるものであることを特徴とする請求項１２に記載の医療情報表示装置。
【請求項１４】
被検体についての医療情報を、所与の医療情報取得条件に基づいて選択的に提供する医療情報提供装置と、該医療情報を表示する医療情報表示装置とがネットワークを介して通信可能に接続された医療情報表示システムであって、
該医療情報表示装置は、
所与の情報を表示する表示手段と、
該表示手段の表示面に対するジェスチャ操作を検出し、該検出されたジェスチャ操作の内容を表すジェスチャ情報を出力するジェスチャ入力手段と、
被検体の外観を表す被検体外観画像の画像データであって、該画像中の各位置に対して、該被検体の部位を識別する部位識別情報が関連づけられたものに基づいて、該被検体外観画像を前記表示手段の所定の表示位置に表示させる第１の表示制御手段と、
該被検体外観画像の表示中に前記ジェスチャ入力手段によって検出されたジェスチャ操作に応じて出力された前記ジェスチャ情報に基づいて、該ジェスチャ操作が所定の複数のジェスチャ操作パターンのうちのいずれであるかを表すジェスチャ種別を判別するジェスチャ種別解析手段と、
前記被検体外観画像の表示位置の情報と、前記被検体外観画像データに関連づけられた部位識別情報と、該被検体外観画像の表示中のジェスチャ操作に応じて出力されたジェスチャ情報に含まれる、該ジェスチャ操作が行われた位置を表すジェスチャ位置情報とに基づいて、前記ジェスチャ操作に対応する前記被検体の部位であるジェスチャ部位を特定するジェスチャ部位解析手段と、
該ジェスチャ種別および該ジェスチャ部位に基づいて、前記被検体外観画像の表示中のジェスチャ操作に対応する前記被検体についての医療情報を取得するための医療情報取得条件を特定する取得条件特定手段と、
該特定された医療情報取得条件を満たす前記医療情報を前記医療情報提供装置から取得する医療情報取得手段と、
該取得された医療情報を前記表示手段に表示させる第２の表示制御手段とを備えたものであることを特徴とする医療情報表示システム。
【請求項１５】
前記医療情報提供装置は、
複数件の前記医療情報を、所与の前記医療情報取得条件に基づいて選択可能なデータ構造で記憶する医療情報記憶手段と、
前記医療情報表示装置から前記医療情報取得条件を受信する取得条件受信手段と、
該受信した医療情報取得条件を満たす前記医療情報を前記医療情報記憶手段から取得する医療情報検索手段と、
該取得された医療情報を、前記医療情報取得条件を送信した医療情報表示装置に送信する医療情報送信手段とを備えたものであることを特徴とする請求項１４に記載の医療情報表示システム。
【請求項１６】
被検体の外観を表す被検体外観画像の画像データであって、該画像中の各位置に対して、該被検体の部位を識別する部位識別情報が関連づけられたものに基づいて、該被検体外観画像を前記表示手段の所定の表示位置に表示するステップと、
該被検体外観画像の表示中に該表示手段の表示面に対するジェスチャ操作を検出し、該検出されたジェスチャ操作の内容を表すジェスチャ情報を出力するステップと、
前記出力されたジェスチャ情報に基づいて、該ジェスチャ操作が所定の複数のジェスチャ操作パターンのうちのいずれであるかを表すジェスチャ種別を判別するステップと、
前記被検体外観画像の表示位置の情報と、前記被検体外観画像データに関連づけられた部位識別情報と、前記ジェスチャ操作に応じて出力されたジェスチャ情報に含まれる、該ジェスチャ操作が行われた位置を表すジェスチャ位置情報とに基づいて、前記ジェスチャ操作に対応する前記被検体の部位であるジェスチャ部位を特定するステップと、
該ジェスチャ種別および該ジェスチャ部位に基づいて、前記被検体外観画像の表示中のジェスチャ操作に対応する前記被検体についての医療情報を取得するための医療情報取得条件を特定するステップと、
該特定された医療情報取得条件を満たす前記医療情報を、複数件の前記医療情報を記憶する医療情報記憶手段から選択的に取得するステップと、
該取得された医療情報を前記表示手段に表示するステップとを有することを特徴とする医療情報表示方法。
【請求項１７】
コンピュータに、
被検体の外観を表す被検体外観画像の画像データであって、該画像中の各位置に対して、該被検体の部位を識別する部位識別情報が関連づけられたものに基づいて、該被検体外観画像を前記表示手段の所定の表示位置に表示させるステップと、
該被検体外観画像の表示中に該表示手段の表示面に対するジェスチャ操作を検出し、該検出されたジェスチャ操作の内容を表すジェスチャ情報を出力するステップと、
前記出力されたジェスチャ情報に基づいて、該ジェスチャ操作が所定の複数のジェスチャ操作パターンのうちのいずれであるかを表すジェスチャ種別を判別するステップと、
前記被検体外観画像の表示位置の情報と、前記被検体外観画像データに関連づけられた部位識別情報と、前記ジェスチャ操作に応じて出力されたジェスチャ情報に含まれる、該ジェスチャ操作が行われた位置を表すジェスチャ位置情報とに基づいて、前記ジェスチャ操作に対応する前記被検体の部位であるジェスチャ部位を特定するステップと、
該ジェスチャ種別および該ジェスチャ部位に基づいて、前記被検体外観画像の表示中のジェスチャ操作に対応する前記被検体についての医療情報を取得するための医療情報取得条件を特定するステップと、
該特定された医療情報取得条件を満たす前記医療情報を、複数件の前記医療情報を記憶する医療情報記憶手段から選択的に取得するステップと、
該取得された医療情報を前記表示手段に表示させるステップとを実行させることを特徴とする医療情報表示制御プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９Ａ】
【図１０Ａ】
【図１２Ａ】
【図１３Ａ】
【図１３Ｂ】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３Ａ】
【図２３Ｂ】
【図２４】
【図２５】
【図２７】
【図２８】
【図２９】
【図３０】
【図３１】
【図３３】
【図３４】
【図３５】
【図３６】
【図３７Ａ】
【図３７Ｂ】
【図３８】
【図３９】
【図４０】
【図４１】
【図４２】
【図４３】
【図９Ｂ】
【図１０Ｂ】
【図１１Ａ】
【図１１Ｂ】
【図１２Ｂ】
【図２６】
【図３２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９Ａ】
【図１０Ａ】
【図１２Ａ】
【図１３Ａ】
【図１３Ｂ】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３Ａ】
【図２３Ｂ】
【図２４】
【図２５】
【図２７】
【図２８】
【図２９】
【図３０】
【図３１】
【図３３】
【図３４】
【図３５】
【図３６】
【図３７Ａ】
【図３７Ｂ】
【図３８】
【図３９】
【図４０】
【図４１】
【図４２】
【図４３】
【図９Ｂ】
【図１０Ｂ】
【図１１Ａ】
【図１１Ｂ】
【図１２Ｂ】
【図２６】
【図３２】
【公開番号】特開２０１２−４８６０２（Ｐ２０１２−４８６０２Ａ）
【公開日】平成２４年３月８日（２０１２．３．８）
【国際特許分類】
【出願番号】特願２０１０−１９１８５３（Ｐ２０１０−１９１８５３）
【出願日】平成２２年８月３０日（２０１０．８．３０）
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
【公開日】平成２４年３月８日（２０１２．３．８）
【国際特許分類】
【出願日】平成２２年８月３０日（２０１０．８．３０）
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
[ Back to top ]