医用画像処理装置及びプログラム
【課題】医用画像生成装置から出力される動画データからユーザ操作なしに静止画像を抽出して外部機器に転送できる医用画像処理装置を実現すること。
【解決手段】
制御部は、動画データＰ１０から静止画データＰ１２を選択して文字認識処理を施した結果、“１２：００：００”という日時情報を取得する。この場合、同じ日時情報を含む静止画データＰ１１を既に転送用データとして記憶済みであるため、制御部は、静止画データＰ１２を破棄する。そして、動画データＰ２０から静止画データＰ２１を抽出して文字認識処理を施した結果、“１２：１０：００”という日時情報を取得したとする。このとき、転送用データには、同じ日時情報を含む静止画データは記憶されていないため、静止画データＰ２１を動画データＰ２０から抽出して転送用データとして記憶する。
【解決手段】
制御部は、動画データＰ１０から静止画データＰ１２を選択して文字認識処理を施した結果、“１２：００：００”という日時情報を取得する。この場合、同じ日時情報を含む静止画データＰ１１を既に転送用データとして記憶済みであるため、制御部は、静止画データＰ１２を破棄する。そして、動画データＰ２０から静止画データＰ２１を抽出して文字認識処理を施した結果、“１２：１０：００”という日時情報を取得したとする。このとき、転送用データには、同じ日時情報を含む静止画データは記憶されていないため、静止画データＰ２１を動画データＰ２０から抽出して転送用データとして記憶する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画の医用画像データから静止画データを抽出する医用画像処理装置及びプログラムに関する。
【背景技術】
【０００２】
医療の分野では、患者を撮影した医用画像のデジタル化が実現されており、ＣＲ（Computed Radiography）、ＣＴ（Computed Tomography）、ＭＲＩ（Magnetic Resonance Imaging）、乳房撮影装置、超音波撮影装置、内視鏡撮影装置等といった医用画像生成装置（以下、「モダリティ」という。）は、撮影して得られた医用画像の画像データ（以下、「医用画像データ」という。）を生成する。
【０００３】
特に、超音波撮影装置や内視鏡撮影装置等のモダリティは、動画撮影が可能であり、所定のフレームレイトで撮影した動画像の画像データ（以下「動画データ」という）を生成する。この動画撮影が可能なモダリティ特有の機能として、シネメモリ機能が知られている。シネメモリ機能とは、撮影中の一定期間前（例えば、５秒前）までに得られた動画データをメモリに一時的に記憶しておくことで、遡って動画を再生表示して撮影した動画を確認可能にした機能である。
【０００４】
撮影技師や医師等のユーザは、フリーズ（一時停止）操作を行うことで、シネメモリ機能により記憶された所望のタイミングの動画データをフィルム出力装置やサーバ等の外部機器に転送して、フィルム出力やデータベースへの記憶等を行う。また、シネメモリ機能の関連技術としては、モダリティから出力される動画データを一時的に保存し、その保存した動画データを再生表示して、ユーザ操作に基づいて選択された静止画データを当該動画データの中から抽出して外部機器へ転送する技術が知られている（例えば、特許文献１参照）。
【特許文献１】特開２００５−１０３０３０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ところで、医療の現場では、モダリティがフィルム出力装置やサーバ等の外部機器との間で常にデータ通信可能な状態にあるとは限らず、例えば、可動型のモダリティでは、オフラインの状態で撮影が行われることが多々ある。このような場合、動画データの転送指示がユーザにより為された際には、シネメモリ機能により一時記憶された動画データをデータ転送用として保存しておき、モダリティがオンラインになったときに、その保存した動画データの転送が行われる。
【０００６】
そのため、オフラインの間に撮影・検査が複数回行われた場合には、その撮影により得られた複数の動画データがデータ転送用として保存されるため、外部機器とオンラインになった際には、その複数の動画データがまとめて外部機器へ転送される。
【０００７】
しかし、上述したようにシネメモリ機能は、動画確認用に一定期間の動画データを記憶しているため、略同一の撮影内容を含む動画データが転送されてしまう。医療の診断に当たっては、必ずしも動画である必要はなく、診断可能な静止画像であればよいことが多いため、フィルム出力装置は略同一の撮影内容の動画が複数枚フィルム出力されたり、サーバに記憶されたりしてしまうことは、システム資源の無駄になってしまう。
【０００８】
また、特許文献１の技術では、モダリティから転送された動画データを一時的に記憶して、選択することができるが、モダリティ側でシネメモリ機能を用いてフリーズ操作を行った場合、更に、動画再生の中から静止画像を選択する操作を行わなければならなく、操作が煩雑になってしまった。このように、モダリティで生成された動画データを、外部機器に送信する際には、静止画像単位で送信することが望ましいが、モダリティ側の仕様等の制約によりユーザ操作を介する必要があった。
【０００９】
本発明は、上述した課題に鑑みて為されたものであり、その目的とするところは、動画の医用画像データからユーザ操作なしに静止画像を抽出することができる医用画像処理装置を実現することである。
【課題を解決するための手段】
【００１０】
請求項１に記載の発明は、医用画像処理装置において、
付帯情報を含む動画の医用画像データを入力する入力手段と、
前記入力手段により入力された医用画像データを複数の静止画データに変換する変換手段と、
前記変換手段により変換された複数の静止画データから前記付帯情報を取得する取得手段と、
前記取得手段により取得された付帯情報を個々に判別して、前記変換手段により変換された複数の静止画データの中から当該付帯情報の相異なる静止画データを抽出する抽出手段と、
を備えることを特徴としている。
【００１１】
請求項２に記載の発明は、請求項１に記載の発明において、
前記付帯情報は、日時情報を含み、
前記抽出手段は、
前記変換手段により変換された複数の静止画データの中から、前記日時情報が異なる静止画データを一ずつ判別して抽出する日時別抽出手段を有することを特徴としている。
【００１２】
請求項３に記載の発明は、請求項１又は２に記載の発明において、
前記付帯情報は、患者情報を含み、
前記抽出手段は、
前記変換手段により変換された複数の静止画データの中から、前記患者情報が異なる静止画データを一ずつ判別して抽出する患者別抽出手段を有することを特徴としている。
【００１３】
請求項４に記載の発明は、請求項１〜３の何れか一項に記載の発明において、
前記動画の医用画像データは、前記付帯情報の文字画像を含み、
前記取得手段は、
前記変換手段により変換された複数の静止画データに文字認識処理を施して、前記付帯情報を取得することを特徴としている。
【００１４】
請求項５に記載の発明は、請求項１〜４の何れか一項に記載の発明において、
前記抽出手段により抽出された静止画データに、当該静止画データから取得された前記付帯情報を対応付けて外部機器へ送信する送信制御手段を更に備えることを特徴としている。
【００１５】
請求項６に記載のプログラムは、コンピュータを、
付帯情報を含む動画の医用画像データを入力する入力手段、
前記入力手段により入力された医用画像データを複数の静止画データに変換する変換手段、
前記変換手段により変換された複数の静止画データから前記付帯情報を取得する取得手段、
前記取得手段により取得された付帯情報を個々に判別して、前記変換手段により変換された複数の静止画データの中から当該付帯情報の相異なる静止画データを抽出する抽出手段、
として機能させることを特徴としている。
【発明の効果】
【００１６】
請求項１又は６に記載の発明によれば、動画の医用画像データを複数の静止画データに変換し、この静止画データから付帯情報を取得して個々に判別し、当該付帯情報が相異なる静止画データを抽出する。このため、例えば、医用画像生成装置から出力される略同一の撮影内容を含む動画から静止画データを付帯情報に基づいて抽出することができる。従って、動画の医用画像データからユーザ操作なしに静止画データを抽出する医用画像処理装置を実現することができる。
【００１７】
請求項２に記載の発明によれば、請求項１に記載の発明と同様の効果が得られるのは無論のこと、複数の静止画データの中から、日時情報が異なる静止画データを一ずつ判別して抽出する。このため、例えば、シネメモリ機能等により記憶された一定期間の動画の医用画像データが入力された際には、略同一の撮影内容の静止画データの中から一枚ずつ抽出して、フリーズ操作が行われたときの静止画データを抽出することができる。
【００１８】
請求項３に記載の発明によれば、請求項１又は２に記載の発明と同様の効果が得られるのは無論のこと、複数の静止画データの中から、患者情報が異なる静止画データを一ずつ判別して抽出する。このため、異なる患者の医用画像データが複数入力された際には、患者毎に静止画データを一枚ずつ抽出することができる。
【００１９】
請求項４に記載の発明によれば、請求項１〜３の何れか一項に記載の発明と同様の効果が得られるのは無論のこと、静止画データに文字認識処理を施して付帯情報を取得するため、動画の医用画像データ中に含まれた文字画像に基づいて、静止画データの抽出を行うことができる。
【００２０】
請求項５に記載の発明によれば、請求項１〜４の何れか一項に記載の発明と同様の効果が得られるのは無論のこと、付帯情報が異なると判別して一枚ずつ抽出した静止画データを外部機器に送信するため、例えば、外部機器としてのフィルム出力装置やサーバ等において、システム資源の無駄が生じてしまうことを防止できる。
【発明を実施するための最良の形態】
【００２１】
〔実施形態〕
以下、本発明の医用画像処理装置の実施形態について図１〜図６を参照して説明する。先ず、医用画像処理装置を含む医用画像システム１０のシステム構成について説明する。
【００２２】
図１に、医用画像システム１０のシステム構成の一例を示す。図１に示すように、医用画像システム１０は、各種撮影装置１ａ〜１ｄ、ＤＩＣＯＭ（Digital Imaging and Communication in Medicine）変換装置２、医用画像処理装置３、フィルム出力装置４、表示装置５、プリンタ６、サーバ７を備えて構成されている。
【００２３】
医用画像システム１０は、Ｘ線撮影装置１ａ、超音波／内視鏡撮影装置１ｂ、Ｘ線撮影装置１ｃ及び超音波／内視鏡撮影装置１ｄで生成された医用画像をフィルム出力装置４、表示装置５、プリンタ６（以下、総称して出力装置という）の各出力装置４〜６により出力するものである。
【００２４】
撮影装置１ａ〜１ｄは、撮影動作を行うとともに、その撮影により医用画像データを生成するモダリティである。撮影装置１ａ〜１ｄの中にはそれぞれＤＩＣＯＭ対応（Ｘ線撮影装置１ｃ、超音波／内視鏡撮影装置１ｄ）とＤＩＣＯＭ非対応（Ｘ線撮影装置１ａ、超音波／内視鏡撮影装置１ｂ）のものがある。
【００２５】
ＤＩＣＯＭとは医用画像と通信に関する標準規格であり、これに非対応のものについてはＤＩＣＯＭ変換装置２を介して医用画像処理装置３に接続される。ＤＩＣＯＭ非対応の撮影装置１ａ，１ｂから医用画像処理装置３へ向けてデータを送信する場合には、このＤＩＣＯＭ変換装置２によりＤＩＣＯＭ対応のデータ規格に変換されて医用画像処理装置３へ出力される。一方、ＤＩＣＯＭ対応の撮影装置１ｃ，１ｄでは、各装置においてＤＩＣＯＭ規格に対応したデータが生成されるので、直接医用画像処理装置３へ出力される。
【００２６】
Ｘ線撮影装置１ａ，１ｃは、被写体（患者）にＸ線を照射して撮影を行い、そのＸ線画像を生成する。これに対し、超音波／内視鏡撮影装置１ｂ，１ｄは、超音波撮影及び内視鏡撮影が可能であり、超音波撮影又は内視鏡撮影による撮影画像を生成する。
【００２７】
また、超音波／内視鏡撮影装置１ｂ，１ｄは、動画撮影が可能であり、所定のフレームレイトで撮影して生成した撮影画像の静止画データを複数含む動画データを生成する。 即ち、フレームレイトが３０ｆｐｓの撮影装置であれば、１秒間に３０回の撮影を行って、３０枚の静止画データを動画データとして生成し、この静止画データを連続的に再生出力することで、動画再生が可能になる。
【００２８】
各撮影装置１ａ〜１ｄでは、撮影画像上に文字画像を重ねる画像処理が可能である。例えば、撮影対象の患者のＩＤや氏名といった患者情報、撮影した日付や時刻の日時情報等の情報に対応する文字画像を生成して撮影画像上の所定の位置に付帯情報として配置し、撮影画像と合成する。付帯情報の配置位置は、例えば撮影画像の左上等、統計的に撮影画像中の被写体領域との重複が少ない位置に予め設定されている。各撮影装置１ａ〜１ｄは、文字画像を合成した撮影画像の医用画像データを直接又はＤＩＣＯＭ変換装置２を介して医用画像処理装置３に送信する。
【００２９】
また、超音波／内視鏡撮影装置１ｂ，１ｄは、上述したシネメモリ機能を有して構成される。具体的には、撮影中の一定期間の動画データ（複数の静止画データ）をメモリに一時的に記憶しておき、ユーザのフリーズ操作（例えば、トラックボールの押下操作）が為された際には、メモリに記憶している動画データの再生出力を行う。
【００３０】
ユーザは、フリーズ操作後、トラックボールを回転操作することで、メモリに記憶された動画の巻き戻し再生やコマ送り再生を行うことができる。超音波／内視鏡撮影装置１ｂ，１ｄは、ユーザのトラックボールの操作に従って、メモリに記憶された動画データ中の静止画データを逐次読み出して、当該静止画データに基づいた医用画像（撮影画像）を表示部に表示させることで動画再生を行う。
【００３１】
また、フリーズ操作の後、更に出力装置４〜６やサーバ７に医用画像に出力する指示入力が為された際には、メモリに記憶してある動画データが医用画像処理装置３に転送されるが、当該医用画像処理装置３が接続されていない場合（オフラインの場合）は、その動画データが医用画像処理装置３への転送用のデータとして保存される。そして、医用画像処理装置３と接続された場合には（オンラインの場合）、その保存された転送用のデータが当該医用画像処理装置３へ転送される。
【００３２】
従って、医用画像処理装置３が接続されていない状態で、複数の撮影・検査が行われた際には、シネメモリ機能によって記憶していた動画データが転送用のデータとして複数保存されていき、医用画像処理装置３には、その複数の動画データが転送されることとなる。
【００３３】
医用画像処理装置３は、各撮影装置１ａ〜１ｄから送信された医用画像データ（動画データ又は静止画データ）に文字認識処理を施すことにより、当該医用画像データから患者情報や日時情報等を取得し、当該医用画像データに付帯情報として関連づけて各出力装置４〜６、サーバ７等の外部機器に転送する装置である。
【００３４】
出力装置４〜６は、医用画像処理装置３から送信された医用画像データの出力動作を行うものであり、フィルム出力装置４はフィルム媒体に、表示装置５は表示ディスプレイに、プリンタ６は紙媒体に出力する。サーバ７は、大容量メモリを備え、このメモリに医用画像処理装置３から送信された医用画像データを付帯情報と対応付けて保存してデータベース管理する。
【００３５】
〔医用画像処理装置の機能構成〕
次に医用画像処理装置３の機能構成について図２及び３を参照して説明する。図２は、医用画像処理装置３の機能構成の一例を示すブロック図である。図２に示すように、医用画像処理装置３は、制御部３１、操作部３２、表示部３３、通信部３４、記憶部３５及び画像メモリ３６を備えて構成されている。
【００３６】
制御部３１は、ＣＰＵ（Central Processing Unit）やＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）等を備えて構成され、操作部３２から出力される操作信号に従ってＲＯＭや記憶部３５に記憶された各種プログラムを読み出し、当該プログラムに従った処理を実行して、各機能部を集中制御する。
【００３７】
操作部３２は、キーボードやマウス等を備えて構成され、これらが操作されると、その操作に対応する操作信号を生成して制御部３１に出力する。
【００３８】
表示部３３は、ＬＣＤ（Liquid Crystal Display）等の表示ディスプレイを備え、制御部３１の表示制御に従って撮影画像の他、操作画面や制御部３１の処理結果等の各種表示情報を表示する。
【００３９】
通信部３４は、通信用のインターフェイスを備え、外部装置と相互に通信を行う。例えば、通信部３４は各撮影装置１ａ〜１ｄから医用画像データを受信し、出力装置４〜６、サーバ７へ送信する。
【００４０】
記憶部３５は、各種プログラムの他、プログラムの実行に必要なパラメータやデータ、制御部３１の処理結果等の各種情報を記憶する。画像メモリ３６は、各撮影装置１ａ〜１ｄから送信された医用画像データを一時的に記憶するためのメモリである。記憶部３５及び画像メモリ３６は、フラッシュメモリや半導体メモリ等により構成される。
【００４１】
図３（ａ）は、記憶部３５のデータ構成の一例を示す図であり、辞書ＤＢ３５１を記憶している。辞書ＤＢ３５１は、ひらがな、カタカナ、漢字、アルファベット、数字といった文字や記号と、それらの画像データとを対応付けて記憶するデータベースである。制御部３１は、医用画像データに二値化処理やエッジ強調等を行うことにより、当該医用画像データから文字画像を抽出する。
【００４２】
そして、その抽出した文字画像と辞書ＤＢ３５１が記憶する画像データとのマッチングを行い、当該マッチングの結果、一致した画像データに対応付けられた文字や記号を取得することで文字認識を行う。
【００４３】
図３（ｂ）は、画像メモリ３６のデータ構成の一例を示す図であり、動画データ３６１と転送用データ３６２とを記憶している。制御部３１は、超音波／内視鏡撮影装置１ｂ，１ｄ等の動画撮影が可能なモダリティから受信した動画データを画像メモリ３６に一時的に記憶する。
【００４４】
そして、動画データ３６１を、フレーム単位の静止画データに変換し、１コマずつ静止画データを選択し、その静止画データに文字認識処理を施して、当該静止画データに含まれる日時情報及び患者情報を取得する。制御部３１は、取得した日時情報が異なると判別した静止画データを抽出して、転送用データ３６２として画像メモリ３６に記憶していく。
【００４５】
このようにして、同じ日時情報が合成された静止画データの中から、一枚の静止画データを抽出することで、動画として生成された複数の静止画データから日時情報が相異なる静止画データを一枚抽出して、出力装置４〜６及びサーバ７に転送することとなる。
【００４６】
〔医用画像処理装置の具体的な動作〕
次に、医用画像処理装置３の具体的な動作を図４及び５を参照して説明する。図４は、医用画像処理装置３の制御部３１が行う処理内容を説明するためのフローチャートであり、図５は、医用画像処理装置３の動作例を示す図である。尚、以下の説明では、超音波／内視鏡撮影装置１ｄから動画データを受信した場合を一例として説明するが、他の動画撮影可能なモダリティから動画データを受信することとしてよいのは勿論である。
【００４７】
先ず、ユーザが、超音波／内視鏡撮影装置１ｄを観察しながら、所望のタイミングでフリーズ操作を行って、その際に得られた動画データを転送する指示入力を行う。図５は、ユーザが１２時００分、１２時１０分、１２時１５分にフリーズ操作を行った例を示している。
【００４８】
そして、超音波／内視鏡撮影装置１ｄと医用画像処理装置３とがオフラインであった場合には、上述したシネメモリ機能により１２時００分に一時記憶した動画データＰ１０と、１２時１０分に一時記憶した動画データＰ２０と、１２時１５分に一時記憶した動画データＰ３０とが保存される。その後、超音波／内視鏡撮影装置１ｄが医用画像処理装置３と接続されてオンラインになった際には、その保存された動画データＰ１０，Ｐ２０，Ｐ３０が医用画像処理装置３に出力される。
【００４９】
この保存・出力される動画データＰ１０，Ｐ２０，Ｐ３０の実体は、ある一定期間の間に撮影されて生成された静止画データであり、図５に示すように複数の静止画データ（Ｐ１１〜Ｐ１４，Ｐ２１〜Ｐ２３，Ｐ３１〜Ｐ３３）により構成される。
【００５０】
制御部３１は、超音波／内視鏡撮影装置１ｄから送信される動画データ３６１を受信して画像メモリ３６に記憶した後（ステップＳ１）、その動画データを静止画データに変換して、一コマの静止画データを選択する（ステップＳ３）。尚、ＭＰＥＧ形式やＡＶＩ形式により圧縮された動画データを受信した際には、この動画データに公知の画像処理を施して複数の静止画データに変換する。
【００５１】
そして、選択した静止画データに文字認識処理を施して（ステップＳ５）、その文字認識の結果に基づいて、日時情報及び患者情報を取得する（ステップＳ７）。例えば、図５において、動画データＰ１０に含まれる静止画データＰ１１に文字認識処理を施した際には、日時情報として「１２：００：００」が取得される。
【００５２】
制御部３１は、ステップＳ７において取得した日時情報が、転送用データ３６２として既に取り込んだ静止画データの日時情報と異なるか否かを判定する（ステップＳ９）。図５の静止画データＰ１１を選択した時点において、転送用データ３６２として記憶した静止画データがない場合には、取込済みのデータの日時情報と異なると判別する（ステップＳ９；Ｙｅｓ）。
【００５３】
そして、ステップＳ３において選択した静止画データを動画データ３６１から抽出し、ステップＳ７において取得した患者情報とを関連づけて転送用データ３６２として記憶する（ステップＳ１１）。また、ステップＳ９において、取込済みのデータの日時情報と同じであると判別した場合は（ステップＳ９；Ｎｏ）、ステップＳ３において選択した静止画データを破棄する（ステップＳ１３）。
【００５４】
尚、ステップＳ１３による静止画データの破棄は、例えば、所定期間（例えば、３日間）が経過した後に破棄することとしてもよく、その所定期間内にユーザの操作に従って選択された静止画データを出力装置４〜６やサーバ７に送信することとしてもよい。
【００５５】
制御部３１は、ステップＳ１１及びＳ１３の処理後、ステップＳ３において選択した静止画データが、動画データ３６１に含まれる静止画データの最後の一コマであったか否かを判定し（ステップＳ１５）、最終コマではないと判定した場合には（ステップＳ１５；Ｙｅｓ）、ステップＳ３に処理を移行する。
【００５６】
図５において、制御部３１は、静止画データＰ１２を選択して文字認識処理を施した結果、“１２：００：００”という日時情報を取得したとする。この場合、同じ日時情報を取得した静止画データＰ１１を転送用データ３６２として記憶済みであるため、制御部３１は、画像メモリ３６から静止画データＰ１２を破棄する。同様に、同じ日時情報を取得した静止画データを破棄していくため、“１２：００：００”という日時情報を含む動画データＰ１０の中からは、静止画データＰ１１が一枚抽出されて転送用データ３６２として記憶される。
【００５７】
また、制御部３１は、静止画データＰ２１を抽出して文字認識処理を施した結果、“１２：１０：００”という日時情報を取得したとする。このとき、転送用データ３６２には、“１２：００：００”という日時情報を含む静止画データＰ１１のみが記憶され、同じ日時情報を含む静止画データが記憶されていないため、静止画データＰ２１を動画データＰ２０から一枚抽出して転送用データ３６２として記憶する。
【００５８】
また、静止画データＰ２２を選択して文字認識処理を施した結果、“１２：１０：００”という日時情報を取得したとすると、同じ日時情報を含む静止画データＰ２１を転送用データ３６２として記憶済みであるため、静止画データＰ２２を破棄することとなる。 このようにして、動画データＰ１０，Ｐ２０，Ｐ３０の中から、日時情報の相異なる静止画データＰ１１，Ｐ２１，Ｐ３１が一枚ずつ抽出されて転送用データ３６２として記憶されていく。
【００５９】
尚、日時情報が異なるか否かの判定は、例えば、日時情報を時分秒といった時間情報に変換して比較することしてもよいし、単純に文字列の数値の違いによって比較して行ってもよい。
【００６０】
一方、ステップＳ１５において、制御部３１が、画像メモリ３６に記憶した動画データ３６１の最後の一コマを選択したと判定した場合は（ステップＳ１５；Ｎｏ）、出力先に合わせたフォーマットに転送用データ３６２を変換して（ステップＳ１７）、出力装置４〜６及びサーバ７に送信する（ステップＳ１９）。尚、動画データ３６１から抽出した複数の静止画データを動画データに再変換して出力装置４〜６及びサーバ７に送信することとしてもよい。
【００６１】
以上、本実施形態によれば、超音波／内視鏡撮影装置１ｄから送信された動画データ３６１に含まれる静止画データに文字認識処理を施して、当該静止画データから日時情報を取得し、その日時情報が異なる静止画データを一枚ずつ抽出して転送用データ３６２として記憶する。従って、ユーザが特段の操作を行うことなく、略同一の撮影内容を含む動画データ３６１から日時の異なる静止画データが一枚ずつ抽出されて、出力装置４〜６やサーバ７に送信される。
【００６２】
このため、同じような撮影内容のフィルム出力を複数枚出力したり、サーバ７で撮影内容の同じような静止画データを複数記憶することを防止することができるため、システム資源の節約が図れる。
【００６３】
尚、上述した実施形態では、超音波／内視鏡撮影装置１ｂがオフラインの状態でフリーズ操作が行われて複数の動画データが保存された後に医用画像処理装置３に送信される場合を例にとって説明したが、超音波／内視鏡撮影装置１ｂがオンラインで接続されている場合にも上述した実施形態と同様の効果が得られるのは勿論である。
【００６４】
即ち、超音波／内視鏡撮影装置１ｂでフリーズ操作が行われると、シネメモリ機能により記憶された動画データが医用画像処理装置３に送信され、制御部３１は、その送信された動画データを静止画データに変換する。そして、その静止画データに文字認識処理を施して取得した日時情報や患者情報に基づいて一枚ずつ静止画データを抽出する。このため、動画撮影可能なモダリティから送信される動画データから日時情報や患者情報が異なる静止画データを一枚ずつ抽出することができる。
【００６５】
また、日時情報が異なる静止画データを一枚ずつ抽出することとして説明したが、例えば、患者情報が異なる静止画データを抽出することとしてもよい。具体的には、図４のステップＳ７において取得した日時情報と患者情報とが、転送用データ３６２として既に取り込んだ静止画データの日時情報と患者情報と異なるか否かを判定する。
【００６６】
例えば、ユーザが、図６に示すように、超音波／内視鏡撮影装置１ｂを操作して撮影を行って撮影画像を観察し、１２時００分、１２時１０分にフリーズ操作を行ったとする。その一方で、超音波／内視鏡撮影装置１ｄにより撮影が行われて、１２時００分にフリーズ操作が行われたとする。
【００６７】
そして、超音波／内視鏡撮影装置１ｂ，１ｄが医用画像処理装置３と接続されてオンラインになった際には、保存された動画データＰ４０，Ｐ５０，Ｐ６０が医用画像処理装置３に出力されてくる。制御部３１は、動画データＰ４０から静止画データＰ４１を選択して文字認識処理を施した結果、当該静止画データＰ４１を転送用データ３６２として記憶する。
【００６８】
そして、静止画データＰ４２を選択して文字認識処理を施した結果、日時情報“１２：００：００”と、患者情報“ＩＤ：０００１”とを取得したとすると、同じ日時情報と患者情報を含む静止画データＰ４１が転送用データ３６２として記憶済みであるため、静止画データＰ４２を破棄する。
【００６９】
制御部３１は、静止画データＰ２１を選択して文字認識処理を施した結果、日時情報“１２：１０：００”と、患者情報“ＩＤ：０００１”とを取得すると、転送用データ３６２に、同一の日時情報を含む静止画データは記憶していないため、静止画データＰ５１を動画データＰ５０から抽出して転送用データ３６２として記憶する。
【００７０】
また、静止画データＰ６１を選択して際には、日時情報“１２：００：００”と、患者情報“ＩＤ：１１１１”とを取得し、同じ患者情報を含む静止画データは転送用データ３６２に記憶していないため、当該静止画データＰ６１を抽出して記憶する。このため、同一の日時情報を含む動画データＰ４０及びＰ６０が送信されてきても、異なる患者情報を含む静止画データを一枚ずつ抽出することができる。
【００７１】
また、付帯情報として日時情報と患者情報を静止画データから取得することとして説明したが、検査情報やシリーズ情報、検査部位情報等の情報を取得することとしてもよい。ここで、検査情報は、医師がオーダリングした検査を識別する検査日時や検査内容等を含むデータである。また、シリーズ情報は、一つの検査の中で生成される同じ種類のモダリティで撮影された一連の医用画像データの単位を示すＩＤやモダリティの種別を含むデータである。検査部位情報は、患者の撮影対象となる部位を示すデータである。このような付帯情報を静止画データから取得することにより、異なる検査やシリーズ、検査部位の静止画データを動画データの中から一枚ずつ抽出することができる。
【００７２】
また、撮影が行われた患者の患者情報をモダリティから受信し、撮影が行われた患者が一人であった場合には、日時情報を文字認識して取得して静止画データの抽出を行い、患者が複数であった場合には、日時情報と患者情報とを静止画データから取得して静止画データを抽出することとしてもよい。撮影が行われた患者が一人であった場合には、患者情報に基づいた抽出を行う必要がないため、日時情報のみの文字認識を行うことで、文字認識の処理時間の短縮を図ることができる。
【００７３】
また、ステップＳ９において、転送用データ３６２として記憶した静止画データの日時情報と、選択したが静止画データに含まれる日時情報とが異なるか否かを判別する場合、秒単位で判別してもよいし、分単位で判別してもよく、その判別の基準に適宜幅を持たせることとしてもよい。
【００７４】
例えば、約１０秒の動画データ３６１が送信されてきた場合、秒単位で日時情報が異なるか否かを判別した場合は、１秒おきの静止画データが１０枚程度抽出することとなるが、分単位とすることで、１枚の静止画データが抽出されることとなる。この判別の基準は、ユーザにより設定を可能にすることで、当該ユーザの運用に則した静止画データの抽出を行うことができる。
【００７５】
また、上述した実施形態では、医用画像処理装置３の機能を超音波／内視鏡撮影装置１ｄ等の動画撮影可能なモダリティやＤＩＣＯＭ変換装置２に設けることとしてよく、その構成例は、図示したものに限られない。
【図面の簡単な説明】
【００７６】
【図１】医用画像システムのシステム構成の一例を示すブロック図。
【図２】医用画像処理装置の内部構成を示すブロック図。
【図３】記憶部及び画像メモリのデータ構成の一例を示す図。
【図４】医用画像処理装置の具体的な処理内容を説明するためのフローチャート。
【図５】実施形態における医用画像処理装置の具体的な動作例を示す図。
【図６】変形例における医用画像処理装置の具体的な動作例を示す図。
【符号の説明】
【００７７】
１ｂ，１ｄ 内視鏡撮影装置
３ 医用画像処理装置
４ フィルム出力装置
５ 表示装置
６ プリンタ
７ サーバ
３１ 制御部
３２ 操作部
３３ 表示部
３４ 通信部
３５ 記憶部
３５１ 辞書ＤＢ
３６ 画像メモリ
３６１ 動画データ
３６２ 転送用データ
Ｐ１０，Ｐ２０，Ｐ３０ 動画データ
Ｐ１１，Ｐ２１，Ｐ３１ 静止画データ
【技術分野】
【０００１】
本発明は、動画の医用画像データから静止画データを抽出する医用画像処理装置及びプログラムに関する。
【背景技術】
【０００２】
医療の分野では、患者を撮影した医用画像のデジタル化が実現されており、ＣＲ（Computed Radiography）、ＣＴ（Computed Tomography）、ＭＲＩ（Magnetic Resonance Imaging）、乳房撮影装置、超音波撮影装置、内視鏡撮影装置等といった医用画像生成装置（以下、「モダリティ」という。）は、撮影して得られた医用画像の画像データ（以下、「医用画像データ」という。）を生成する。
【０００３】
特に、超音波撮影装置や内視鏡撮影装置等のモダリティは、動画撮影が可能であり、所定のフレームレイトで撮影した動画像の画像データ（以下「動画データ」という）を生成する。この動画撮影が可能なモダリティ特有の機能として、シネメモリ機能が知られている。シネメモリ機能とは、撮影中の一定期間前（例えば、５秒前）までに得られた動画データをメモリに一時的に記憶しておくことで、遡って動画を再生表示して撮影した動画を確認可能にした機能である。
【０００４】
撮影技師や医師等のユーザは、フリーズ（一時停止）操作を行うことで、シネメモリ機能により記憶された所望のタイミングの動画データをフィルム出力装置やサーバ等の外部機器に転送して、フィルム出力やデータベースへの記憶等を行う。また、シネメモリ機能の関連技術としては、モダリティから出力される動画データを一時的に保存し、その保存した動画データを再生表示して、ユーザ操作に基づいて選択された静止画データを当該動画データの中から抽出して外部機器へ転送する技術が知られている（例えば、特許文献１参照）。
【特許文献１】特開２００５−１０３０３０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ところで、医療の現場では、モダリティがフィルム出力装置やサーバ等の外部機器との間で常にデータ通信可能な状態にあるとは限らず、例えば、可動型のモダリティでは、オフラインの状態で撮影が行われることが多々ある。このような場合、動画データの転送指示がユーザにより為された際には、シネメモリ機能により一時記憶された動画データをデータ転送用として保存しておき、モダリティがオンラインになったときに、その保存した動画データの転送が行われる。
【０００６】
そのため、オフラインの間に撮影・検査が複数回行われた場合には、その撮影により得られた複数の動画データがデータ転送用として保存されるため、外部機器とオンラインになった際には、その複数の動画データがまとめて外部機器へ転送される。
【０００７】
しかし、上述したようにシネメモリ機能は、動画確認用に一定期間の動画データを記憶しているため、略同一の撮影内容を含む動画データが転送されてしまう。医療の診断に当たっては、必ずしも動画である必要はなく、診断可能な静止画像であればよいことが多いため、フィルム出力装置は略同一の撮影内容の動画が複数枚フィルム出力されたり、サーバに記憶されたりしてしまうことは、システム資源の無駄になってしまう。
【０００８】
また、特許文献１の技術では、モダリティから転送された動画データを一時的に記憶して、選択することができるが、モダリティ側でシネメモリ機能を用いてフリーズ操作を行った場合、更に、動画再生の中から静止画像を選択する操作を行わなければならなく、操作が煩雑になってしまった。このように、モダリティで生成された動画データを、外部機器に送信する際には、静止画像単位で送信することが望ましいが、モダリティ側の仕様等の制約によりユーザ操作を介する必要があった。
【０００９】
本発明は、上述した課題に鑑みて為されたものであり、その目的とするところは、動画の医用画像データからユーザ操作なしに静止画像を抽出することができる医用画像処理装置を実現することである。
【課題を解決するための手段】
【００１０】
請求項１に記載の発明は、医用画像処理装置において、
付帯情報を含む動画の医用画像データを入力する入力手段と、
前記入力手段により入力された医用画像データを複数の静止画データに変換する変換手段と、
前記変換手段により変換された複数の静止画データから前記付帯情報を取得する取得手段と、
前記取得手段により取得された付帯情報を個々に判別して、前記変換手段により変換された複数の静止画データの中から当該付帯情報の相異なる静止画データを抽出する抽出手段と、
を備えることを特徴としている。
【００１１】
請求項２に記載の発明は、請求項１に記載の発明において、
前記付帯情報は、日時情報を含み、
前記抽出手段は、
前記変換手段により変換された複数の静止画データの中から、前記日時情報が異なる静止画データを一ずつ判別して抽出する日時別抽出手段を有することを特徴としている。
【００１２】
請求項３に記載の発明は、請求項１又は２に記載の発明において、
前記付帯情報は、患者情報を含み、
前記抽出手段は、
前記変換手段により変換された複数の静止画データの中から、前記患者情報が異なる静止画データを一ずつ判別して抽出する患者別抽出手段を有することを特徴としている。
【００１３】
請求項４に記載の発明は、請求項１〜３の何れか一項に記載の発明において、
前記動画の医用画像データは、前記付帯情報の文字画像を含み、
前記取得手段は、
前記変換手段により変換された複数の静止画データに文字認識処理を施して、前記付帯情報を取得することを特徴としている。
【００１４】
請求項５に記載の発明は、請求項１〜４の何れか一項に記載の発明において、
前記抽出手段により抽出された静止画データに、当該静止画データから取得された前記付帯情報を対応付けて外部機器へ送信する送信制御手段を更に備えることを特徴としている。
【００１５】
請求項６に記載のプログラムは、コンピュータを、
付帯情報を含む動画の医用画像データを入力する入力手段、
前記入力手段により入力された医用画像データを複数の静止画データに変換する変換手段、
前記変換手段により変換された複数の静止画データから前記付帯情報を取得する取得手段、
前記取得手段により取得された付帯情報を個々に判別して、前記変換手段により変換された複数の静止画データの中から当該付帯情報の相異なる静止画データを抽出する抽出手段、
として機能させることを特徴としている。
【発明の効果】
【００１６】
請求項１又は６に記載の発明によれば、動画の医用画像データを複数の静止画データに変換し、この静止画データから付帯情報を取得して個々に判別し、当該付帯情報が相異なる静止画データを抽出する。このため、例えば、医用画像生成装置から出力される略同一の撮影内容を含む動画から静止画データを付帯情報に基づいて抽出することができる。従って、動画の医用画像データからユーザ操作なしに静止画データを抽出する医用画像処理装置を実現することができる。
【００１７】
請求項２に記載の発明によれば、請求項１に記載の発明と同様の効果が得られるのは無論のこと、複数の静止画データの中から、日時情報が異なる静止画データを一ずつ判別して抽出する。このため、例えば、シネメモリ機能等により記憶された一定期間の動画の医用画像データが入力された際には、略同一の撮影内容の静止画データの中から一枚ずつ抽出して、フリーズ操作が行われたときの静止画データを抽出することができる。
【００１８】
請求項３に記載の発明によれば、請求項１又は２に記載の発明と同様の効果が得られるのは無論のこと、複数の静止画データの中から、患者情報が異なる静止画データを一ずつ判別して抽出する。このため、異なる患者の医用画像データが複数入力された際には、患者毎に静止画データを一枚ずつ抽出することができる。
【００１９】
請求項４に記載の発明によれば、請求項１〜３の何れか一項に記載の発明と同様の効果が得られるのは無論のこと、静止画データに文字認識処理を施して付帯情報を取得するため、動画の医用画像データ中に含まれた文字画像に基づいて、静止画データの抽出を行うことができる。
【００２０】
請求項５に記載の発明によれば、請求項１〜４の何れか一項に記載の発明と同様の効果が得られるのは無論のこと、付帯情報が異なると判別して一枚ずつ抽出した静止画データを外部機器に送信するため、例えば、外部機器としてのフィルム出力装置やサーバ等において、システム資源の無駄が生じてしまうことを防止できる。
【発明を実施するための最良の形態】
【００２１】
〔実施形態〕
以下、本発明の医用画像処理装置の実施形態について図１〜図６を参照して説明する。先ず、医用画像処理装置を含む医用画像システム１０のシステム構成について説明する。
【００２２】
図１に、医用画像システム１０のシステム構成の一例を示す。図１に示すように、医用画像システム１０は、各種撮影装置１ａ〜１ｄ、ＤＩＣＯＭ（Digital Imaging and Communication in Medicine）変換装置２、医用画像処理装置３、フィルム出力装置４、表示装置５、プリンタ６、サーバ７を備えて構成されている。
【００２３】
医用画像システム１０は、Ｘ線撮影装置１ａ、超音波／内視鏡撮影装置１ｂ、Ｘ線撮影装置１ｃ及び超音波／内視鏡撮影装置１ｄで生成された医用画像をフィルム出力装置４、表示装置５、プリンタ６（以下、総称して出力装置という）の各出力装置４〜６により出力するものである。
【００２４】
撮影装置１ａ〜１ｄは、撮影動作を行うとともに、その撮影により医用画像データを生成するモダリティである。撮影装置１ａ〜１ｄの中にはそれぞれＤＩＣＯＭ対応（Ｘ線撮影装置１ｃ、超音波／内視鏡撮影装置１ｄ）とＤＩＣＯＭ非対応（Ｘ線撮影装置１ａ、超音波／内視鏡撮影装置１ｂ）のものがある。
【００２５】
ＤＩＣＯＭとは医用画像と通信に関する標準規格であり、これに非対応のものについてはＤＩＣＯＭ変換装置２を介して医用画像処理装置３に接続される。ＤＩＣＯＭ非対応の撮影装置１ａ，１ｂから医用画像処理装置３へ向けてデータを送信する場合には、このＤＩＣＯＭ変換装置２によりＤＩＣＯＭ対応のデータ規格に変換されて医用画像処理装置３へ出力される。一方、ＤＩＣＯＭ対応の撮影装置１ｃ，１ｄでは、各装置においてＤＩＣＯＭ規格に対応したデータが生成されるので、直接医用画像処理装置３へ出力される。
【００２６】
Ｘ線撮影装置１ａ，１ｃは、被写体（患者）にＸ線を照射して撮影を行い、そのＸ線画像を生成する。これに対し、超音波／内視鏡撮影装置１ｂ，１ｄは、超音波撮影及び内視鏡撮影が可能であり、超音波撮影又は内視鏡撮影による撮影画像を生成する。
【００２７】
また、超音波／内視鏡撮影装置１ｂ，１ｄは、動画撮影が可能であり、所定のフレームレイトで撮影して生成した撮影画像の静止画データを複数含む動画データを生成する。 即ち、フレームレイトが３０ｆｐｓの撮影装置であれば、１秒間に３０回の撮影を行って、３０枚の静止画データを動画データとして生成し、この静止画データを連続的に再生出力することで、動画再生が可能になる。
【００２８】
各撮影装置１ａ〜１ｄでは、撮影画像上に文字画像を重ねる画像処理が可能である。例えば、撮影対象の患者のＩＤや氏名といった患者情報、撮影した日付や時刻の日時情報等の情報に対応する文字画像を生成して撮影画像上の所定の位置に付帯情報として配置し、撮影画像と合成する。付帯情報の配置位置は、例えば撮影画像の左上等、統計的に撮影画像中の被写体領域との重複が少ない位置に予め設定されている。各撮影装置１ａ〜１ｄは、文字画像を合成した撮影画像の医用画像データを直接又はＤＩＣＯＭ変換装置２を介して医用画像処理装置３に送信する。
【００２９】
また、超音波／内視鏡撮影装置１ｂ，１ｄは、上述したシネメモリ機能を有して構成される。具体的には、撮影中の一定期間の動画データ（複数の静止画データ）をメモリに一時的に記憶しておき、ユーザのフリーズ操作（例えば、トラックボールの押下操作）が為された際には、メモリに記憶している動画データの再生出力を行う。
【００３０】
ユーザは、フリーズ操作後、トラックボールを回転操作することで、メモリに記憶された動画の巻き戻し再生やコマ送り再生を行うことができる。超音波／内視鏡撮影装置１ｂ，１ｄは、ユーザのトラックボールの操作に従って、メモリに記憶された動画データ中の静止画データを逐次読み出して、当該静止画データに基づいた医用画像（撮影画像）を表示部に表示させることで動画再生を行う。
【００３１】
また、フリーズ操作の後、更に出力装置４〜６やサーバ７に医用画像に出力する指示入力が為された際には、メモリに記憶してある動画データが医用画像処理装置３に転送されるが、当該医用画像処理装置３が接続されていない場合（オフラインの場合）は、その動画データが医用画像処理装置３への転送用のデータとして保存される。そして、医用画像処理装置３と接続された場合には（オンラインの場合）、その保存された転送用のデータが当該医用画像処理装置３へ転送される。
【００３２】
従って、医用画像処理装置３が接続されていない状態で、複数の撮影・検査が行われた際には、シネメモリ機能によって記憶していた動画データが転送用のデータとして複数保存されていき、医用画像処理装置３には、その複数の動画データが転送されることとなる。
【００３３】
医用画像処理装置３は、各撮影装置１ａ〜１ｄから送信された医用画像データ（動画データ又は静止画データ）に文字認識処理を施すことにより、当該医用画像データから患者情報や日時情報等を取得し、当該医用画像データに付帯情報として関連づけて各出力装置４〜６、サーバ７等の外部機器に転送する装置である。
【００３４】
出力装置４〜６は、医用画像処理装置３から送信された医用画像データの出力動作を行うものであり、フィルム出力装置４はフィルム媒体に、表示装置５は表示ディスプレイに、プリンタ６は紙媒体に出力する。サーバ７は、大容量メモリを備え、このメモリに医用画像処理装置３から送信された医用画像データを付帯情報と対応付けて保存してデータベース管理する。
【００３５】
〔医用画像処理装置の機能構成〕
次に医用画像処理装置３の機能構成について図２及び３を参照して説明する。図２は、医用画像処理装置３の機能構成の一例を示すブロック図である。図２に示すように、医用画像処理装置３は、制御部３１、操作部３２、表示部３３、通信部３４、記憶部３５及び画像メモリ３６を備えて構成されている。
【００３６】
制御部３１は、ＣＰＵ（Central Processing Unit）やＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）等を備えて構成され、操作部３２から出力される操作信号に従ってＲＯＭや記憶部３５に記憶された各種プログラムを読み出し、当該プログラムに従った処理を実行して、各機能部を集中制御する。
【００３７】
操作部３２は、キーボードやマウス等を備えて構成され、これらが操作されると、その操作に対応する操作信号を生成して制御部３１に出力する。
【００３８】
表示部３３は、ＬＣＤ（Liquid Crystal Display）等の表示ディスプレイを備え、制御部３１の表示制御に従って撮影画像の他、操作画面や制御部３１の処理結果等の各種表示情報を表示する。
【００３９】
通信部３４は、通信用のインターフェイスを備え、外部装置と相互に通信を行う。例えば、通信部３４は各撮影装置１ａ〜１ｄから医用画像データを受信し、出力装置４〜６、サーバ７へ送信する。
【００４０】
記憶部３５は、各種プログラムの他、プログラムの実行に必要なパラメータやデータ、制御部３１の処理結果等の各種情報を記憶する。画像メモリ３６は、各撮影装置１ａ〜１ｄから送信された医用画像データを一時的に記憶するためのメモリである。記憶部３５及び画像メモリ３６は、フラッシュメモリや半導体メモリ等により構成される。
【００４１】
図３（ａ）は、記憶部３５のデータ構成の一例を示す図であり、辞書ＤＢ３５１を記憶している。辞書ＤＢ３５１は、ひらがな、カタカナ、漢字、アルファベット、数字といった文字や記号と、それらの画像データとを対応付けて記憶するデータベースである。制御部３１は、医用画像データに二値化処理やエッジ強調等を行うことにより、当該医用画像データから文字画像を抽出する。
【００４２】
そして、その抽出した文字画像と辞書ＤＢ３５１が記憶する画像データとのマッチングを行い、当該マッチングの結果、一致した画像データに対応付けられた文字や記号を取得することで文字認識を行う。
【００４３】
図３（ｂ）は、画像メモリ３６のデータ構成の一例を示す図であり、動画データ３６１と転送用データ３６２とを記憶している。制御部３１は、超音波／内視鏡撮影装置１ｂ，１ｄ等の動画撮影が可能なモダリティから受信した動画データを画像メモリ３６に一時的に記憶する。
【００４４】
そして、動画データ３６１を、フレーム単位の静止画データに変換し、１コマずつ静止画データを選択し、その静止画データに文字認識処理を施して、当該静止画データに含まれる日時情報及び患者情報を取得する。制御部３１は、取得した日時情報が異なると判別した静止画データを抽出して、転送用データ３６２として画像メモリ３６に記憶していく。
【００４５】
このようにして、同じ日時情報が合成された静止画データの中から、一枚の静止画データを抽出することで、動画として生成された複数の静止画データから日時情報が相異なる静止画データを一枚抽出して、出力装置４〜６及びサーバ７に転送することとなる。
【００４６】
〔医用画像処理装置の具体的な動作〕
次に、医用画像処理装置３の具体的な動作を図４及び５を参照して説明する。図４は、医用画像処理装置３の制御部３１が行う処理内容を説明するためのフローチャートであり、図５は、医用画像処理装置３の動作例を示す図である。尚、以下の説明では、超音波／内視鏡撮影装置１ｄから動画データを受信した場合を一例として説明するが、他の動画撮影可能なモダリティから動画データを受信することとしてよいのは勿論である。
【００４７】
先ず、ユーザが、超音波／内視鏡撮影装置１ｄを観察しながら、所望のタイミングでフリーズ操作を行って、その際に得られた動画データを転送する指示入力を行う。図５は、ユーザが１２時００分、１２時１０分、１２時１５分にフリーズ操作を行った例を示している。
【００４８】
そして、超音波／内視鏡撮影装置１ｄと医用画像処理装置３とがオフラインであった場合には、上述したシネメモリ機能により１２時００分に一時記憶した動画データＰ１０と、１２時１０分に一時記憶した動画データＰ２０と、１２時１５分に一時記憶した動画データＰ３０とが保存される。その後、超音波／内視鏡撮影装置１ｄが医用画像処理装置３と接続されてオンラインになった際には、その保存された動画データＰ１０，Ｐ２０，Ｐ３０が医用画像処理装置３に出力される。
【００４９】
この保存・出力される動画データＰ１０，Ｐ２０，Ｐ３０の実体は、ある一定期間の間に撮影されて生成された静止画データであり、図５に示すように複数の静止画データ（Ｐ１１〜Ｐ１４，Ｐ２１〜Ｐ２３，Ｐ３１〜Ｐ３３）により構成される。
【００５０】
制御部３１は、超音波／内視鏡撮影装置１ｄから送信される動画データ３６１を受信して画像メモリ３６に記憶した後（ステップＳ１）、その動画データを静止画データに変換して、一コマの静止画データを選択する（ステップＳ３）。尚、ＭＰＥＧ形式やＡＶＩ形式により圧縮された動画データを受信した際には、この動画データに公知の画像処理を施して複数の静止画データに変換する。
【００５１】
そして、選択した静止画データに文字認識処理を施して（ステップＳ５）、その文字認識の結果に基づいて、日時情報及び患者情報を取得する（ステップＳ７）。例えば、図５において、動画データＰ１０に含まれる静止画データＰ１１に文字認識処理を施した際には、日時情報として「１２：００：００」が取得される。
【００５２】
制御部３１は、ステップＳ７において取得した日時情報が、転送用データ３６２として既に取り込んだ静止画データの日時情報と異なるか否かを判定する（ステップＳ９）。図５の静止画データＰ１１を選択した時点において、転送用データ３６２として記憶した静止画データがない場合には、取込済みのデータの日時情報と異なると判別する（ステップＳ９；Ｙｅｓ）。
【００５３】
そして、ステップＳ３において選択した静止画データを動画データ３６１から抽出し、ステップＳ７において取得した患者情報とを関連づけて転送用データ３６２として記憶する（ステップＳ１１）。また、ステップＳ９において、取込済みのデータの日時情報と同じであると判別した場合は（ステップＳ９；Ｎｏ）、ステップＳ３において選択した静止画データを破棄する（ステップＳ１３）。
【００５４】
尚、ステップＳ１３による静止画データの破棄は、例えば、所定期間（例えば、３日間）が経過した後に破棄することとしてもよく、その所定期間内にユーザの操作に従って選択された静止画データを出力装置４〜６やサーバ７に送信することとしてもよい。
【００５５】
制御部３１は、ステップＳ１１及びＳ１３の処理後、ステップＳ３において選択した静止画データが、動画データ３６１に含まれる静止画データの最後の一コマであったか否かを判定し（ステップＳ１５）、最終コマではないと判定した場合には（ステップＳ１５；Ｙｅｓ）、ステップＳ３に処理を移行する。
【００５６】
図５において、制御部３１は、静止画データＰ１２を選択して文字認識処理を施した結果、“１２：００：００”という日時情報を取得したとする。この場合、同じ日時情報を取得した静止画データＰ１１を転送用データ３６２として記憶済みであるため、制御部３１は、画像メモリ３６から静止画データＰ１２を破棄する。同様に、同じ日時情報を取得した静止画データを破棄していくため、“１２：００：００”という日時情報を含む動画データＰ１０の中からは、静止画データＰ１１が一枚抽出されて転送用データ３６２として記憶される。
【００５７】
また、制御部３１は、静止画データＰ２１を抽出して文字認識処理を施した結果、“１２：１０：００”という日時情報を取得したとする。このとき、転送用データ３６２には、“１２：００：００”という日時情報を含む静止画データＰ１１のみが記憶され、同じ日時情報を含む静止画データが記憶されていないため、静止画データＰ２１を動画データＰ２０から一枚抽出して転送用データ３６２として記憶する。
【００５８】
また、静止画データＰ２２を選択して文字認識処理を施した結果、“１２：１０：００”という日時情報を取得したとすると、同じ日時情報を含む静止画データＰ２１を転送用データ３６２として記憶済みであるため、静止画データＰ２２を破棄することとなる。 このようにして、動画データＰ１０，Ｐ２０，Ｐ３０の中から、日時情報の相異なる静止画データＰ１１，Ｐ２１，Ｐ３１が一枚ずつ抽出されて転送用データ３６２として記憶されていく。
【００５９】
尚、日時情報が異なるか否かの判定は、例えば、日時情報を時分秒といった時間情報に変換して比較することしてもよいし、単純に文字列の数値の違いによって比較して行ってもよい。
【００６０】
一方、ステップＳ１５において、制御部３１が、画像メモリ３６に記憶した動画データ３６１の最後の一コマを選択したと判定した場合は（ステップＳ１５；Ｎｏ）、出力先に合わせたフォーマットに転送用データ３６２を変換して（ステップＳ１７）、出力装置４〜６及びサーバ７に送信する（ステップＳ１９）。尚、動画データ３６１から抽出した複数の静止画データを動画データに再変換して出力装置４〜６及びサーバ７に送信することとしてもよい。
【００６１】
以上、本実施形態によれば、超音波／内視鏡撮影装置１ｄから送信された動画データ３６１に含まれる静止画データに文字認識処理を施して、当該静止画データから日時情報を取得し、その日時情報が異なる静止画データを一枚ずつ抽出して転送用データ３６２として記憶する。従って、ユーザが特段の操作を行うことなく、略同一の撮影内容を含む動画データ３６１から日時の異なる静止画データが一枚ずつ抽出されて、出力装置４〜６やサーバ７に送信される。
【００６２】
このため、同じような撮影内容のフィルム出力を複数枚出力したり、サーバ７で撮影内容の同じような静止画データを複数記憶することを防止することができるため、システム資源の節約が図れる。
【００６３】
尚、上述した実施形態では、超音波／内視鏡撮影装置１ｂがオフラインの状態でフリーズ操作が行われて複数の動画データが保存された後に医用画像処理装置３に送信される場合を例にとって説明したが、超音波／内視鏡撮影装置１ｂがオンラインで接続されている場合にも上述した実施形態と同様の効果が得られるのは勿論である。
【００６４】
即ち、超音波／内視鏡撮影装置１ｂでフリーズ操作が行われると、シネメモリ機能により記憶された動画データが医用画像処理装置３に送信され、制御部３１は、その送信された動画データを静止画データに変換する。そして、その静止画データに文字認識処理を施して取得した日時情報や患者情報に基づいて一枚ずつ静止画データを抽出する。このため、動画撮影可能なモダリティから送信される動画データから日時情報や患者情報が異なる静止画データを一枚ずつ抽出することができる。
【００６５】
また、日時情報が異なる静止画データを一枚ずつ抽出することとして説明したが、例えば、患者情報が異なる静止画データを抽出することとしてもよい。具体的には、図４のステップＳ７において取得した日時情報と患者情報とが、転送用データ３６２として既に取り込んだ静止画データの日時情報と患者情報と異なるか否かを判定する。
【００６６】
例えば、ユーザが、図６に示すように、超音波／内視鏡撮影装置１ｂを操作して撮影を行って撮影画像を観察し、１２時００分、１２時１０分にフリーズ操作を行ったとする。その一方で、超音波／内視鏡撮影装置１ｄにより撮影が行われて、１２時００分にフリーズ操作が行われたとする。
【００６７】
そして、超音波／内視鏡撮影装置１ｂ，１ｄが医用画像処理装置３と接続されてオンラインになった際には、保存された動画データＰ４０，Ｐ５０，Ｐ６０が医用画像処理装置３に出力されてくる。制御部３１は、動画データＰ４０から静止画データＰ４１を選択して文字認識処理を施した結果、当該静止画データＰ４１を転送用データ３６２として記憶する。
【００６８】
そして、静止画データＰ４２を選択して文字認識処理を施した結果、日時情報“１２：００：００”と、患者情報“ＩＤ：０００１”とを取得したとすると、同じ日時情報と患者情報を含む静止画データＰ４１が転送用データ３６２として記憶済みであるため、静止画データＰ４２を破棄する。
【００６９】
制御部３１は、静止画データＰ２１を選択して文字認識処理を施した結果、日時情報“１２：１０：００”と、患者情報“ＩＤ：０００１”とを取得すると、転送用データ３６２に、同一の日時情報を含む静止画データは記憶していないため、静止画データＰ５１を動画データＰ５０から抽出して転送用データ３６２として記憶する。
【００７０】
また、静止画データＰ６１を選択して際には、日時情報“１２：００：００”と、患者情報“ＩＤ：１１１１”とを取得し、同じ患者情報を含む静止画データは転送用データ３６２に記憶していないため、当該静止画データＰ６１を抽出して記憶する。このため、同一の日時情報を含む動画データＰ４０及びＰ６０が送信されてきても、異なる患者情報を含む静止画データを一枚ずつ抽出することができる。
【００７１】
また、付帯情報として日時情報と患者情報を静止画データから取得することとして説明したが、検査情報やシリーズ情報、検査部位情報等の情報を取得することとしてもよい。ここで、検査情報は、医師がオーダリングした検査を識別する検査日時や検査内容等を含むデータである。また、シリーズ情報は、一つの検査の中で生成される同じ種類のモダリティで撮影された一連の医用画像データの単位を示すＩＤやモダリティの種別を含むデータである。検査部位情報は、患者の撮影対象となる部位を示すデータである。このような付帯情報を静止画データから取得することにより、異なる検査やシリーズ、検査部位の静止画データを動画データの中から一枚ずつ抽出することができる。
【００７２】
また、撮影が行われた患者の患者情報をモダリティから受信し、撮影が行われた患者が一人であった場合には、日時情報を文字認識して取得して静止画データの抽出を行い、患者が複数であった場合には、日時情報と患者情報とを静止画データから取得して静止画データを抽出することとしてもよい。撮影が行われた患者が一人であった場合には、患者情報に基づいた抽出を行う必要がないため、日時情報のみの文字認識を行うことで、文字認識の処理時間の短縮を図ることができる。
【００７３】
また、ステップＳ９において、転送用データ３６２として記憶した静止画データの日時情報と、選択したが静止画データに含まれる日時情報とが異なるか否かを判別する場合、秒単位で判別してもよいし、分単位で判別してもよく、その判別の基準に適宜幅を持たせることとしてもよい。
【００７４】
例えば、約１０秒の動画データ３６１が送信されてきた場合、秒単位で日時情報が異なるか否かを判別した場合は、１秒おきの静止画データが１０枚程度抽出することとなるが、分単位とすることで、１枚の静止画データが抽出されることとなる。この判別の基準は、ユーザにより設定を可能にすることで、当該ユーザの運用に則した静止画データの抽出を行うことができる。
【００７５】
また、上述した実施形態では、医用画像処理装置３の機能を超音波／内視鏡撮影装置１ｄ等の動画撮影可能なモダリティやＤＩＣＯＭ変換装置２に設けることとしてよく、その構成例は、図示したものに限られない。
【図面の簡単な説明】
【００７６】
【図１】医用画像システムのシステム構成の一例を示すブロック図。
【図２】医用画像処理装置の内部構成を示すブロック図。
【図３】記憶部及び画像メモリのデータ構成の一例を示す図。
【図４】医用画像処理装置の具体的な処理内容を説明するためのフローチャート。
【図５】実施形態における医用画像処理装置の具体的な動作例を示す図。
【図６】変形例における医用画像処理装置の具体的な動作例を示す図。
【符号の説明】
【００７７】
１ｂ，１ｄ 内視鏡撮影装置
３ 医用画像処理装置
４ フィルム出力装置
５ 表示装置
６ プリンタ
７ サーバ
３１ 制御部
３２ 操作部
３３ 表示部
３４ 通信部
３５ 記憶部
３５１ 辞書ＤＢ
３６ 画像メモリ
３６１ 動画データ
３６２ 転送用データ
Ｐ１０，Ｐ２０，Ｐ３０ 動画データ
Ｐ１１，Ｐ２１，Ｐ３１ 静止画データ
【特許請求の範囲】
【請求項１】
付帯情報を含む動画の医用画像データを入力する入力手段と、
前記入力手段により入力された医用画像データを複数の静止画データに変換する変換手段と、
前記変換手段により変換された複数の静止画データから前記付帯情報を取得する取得手段と、
前記取得手段により取得された付帯情報を個々に判別して、前記変換手段により変換された複数の静止画データの中から当該付帯情報の相異なる静止画データを抽出する抽出手段と、
を備えることを特徴とする医用画像処理装置。
【請求項２】
前記付帯情報は、日時情報を含み、
前記抽出手段は、
前記変換手段により変換された複数の静止画データの中から、前記日時情報が異なる静止画データを一ずつ判別して抽出する日時別抽出手段を有することを特徴とする請求項１に記載の医用画像処理装置。
【請求項３】
前記付帯情報は、患者情報を含み、
前記抽出手段は、
前記変換手段により変換された複数の静止画データの中から、前記患者情報が異なる静止画データを一ずつ判別して抽出する患者別抽出手段を有することを特徴とする請求項１又は２に記載の医用画像処理装置。
【請求項４】
前記動画の医用画像データは、前記付帯情報の文字画像を含み、
前記取得手段は、
前記変換手段により変換された複数の静止画データに文字認識処理を施して、前記付帯情報を取得することを特徴とする請求項１〜３の何れか一項に記載の医用画像処理装置。
【請求項５】
前記抽出手段により抽出された静止画データを外部機器へ送信する送信制御手段を更に備えることを特徴とする請求項１〜４の何れか一項に記載の医用画像処理装置。
【請求項６】
コンピュータを、
付帯情報を含む動画の医用画像データを入力する入力手段、
前記入力手段により入力された医用画像データを複数の静止画データに変換する変換手段、
前記変換手段により変換された複数の静止画データから前記付帯情報を取得する取得手段、
前記取得手段により取得された付帯情報を個々に判別して、前記変換手段により変換された複数の静止画データの中から当該付帯情報の相異なる静止画データを抽出する抽出手段、
として機能させるためのプログラム。
【請求項１】
付帯情報を含む動画の医用画像データを入力する入力手段と、
前記入力手段により入力された医用画像データを複数の静止画データに変換する変換手段と、
前記変換手段により変換された複数の静止画データから前記付帯情報を取得する取得手段と、
前記取得手段により取得された付帯情報を個々に判別して、前記変換手段により変換された複数の静止画データの中から当該付帯情報の相異なる静止画データを抽出する抽出手段と、
を備えることを特徴とする医用画像処理装置。
【請求項２】
前記付帯情報は、日時情報を含み、
前記抽出手段は、
前記変換手段により変換された複数の静止画データの中から、前記日時情報が異なる静止画データを一ずつ判別して抽出する日時別抽出手段を有することを特徴とする請求項１に記載の医用画像処理装置。
【請求項３】
前記付帯情報は、患者情報を含み、
前記抽出手段は、
前記変換手段により変換された複数の静止画データの中から、前記患者情報が異なる静止画データを一ずつ判別して抽出する患者別抽出手段を有することを特徴とする請求項１又は２に記載の医用画像処理装置。
【請求項４】
前記動画の医用画像データは、前記付帯情報の文字画像を含み、
前記取得手段は、
前記変換手段により変換された複数の静止画データに文字認識処理を施して、前記付帯情報を取得することを特徴とする請求項１〜３の何れか一項に記載の医用画像処理装置。
【請求項５】
前記抽出手段により抽出された静止画データを外部機器へ送信する送信制御手段を更に備えることを特徴とする請求項１〜４の何れか一項に記載の医用画像処理装置。
【請求項６】
コンピュータを、
付帯情報を含む動画の医用画像データを入力する入力手段、
前記入力手段により入力された医用画像データを複数の静止画データに変換する変換手段、
前記変換手段により変換された複数の静止画データから前記付帯情報を取得する取得手段、
前記取得手段により取得された付帯情報を個々に判別して、前記変換手段により変換された複数の静止画データの中から当該付帯情報の相異なる静止画データを抽出する抽出手段、
として機能させるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図２】
【図３】
【図４】
【図５】
【図６】
【公開番号】特開２００７−２９６０７９（Ｐ２００７−２９６０７９Ａ）
【公開日】平成１９年１１月１５日（２００７．１１．１５）
【国際特許分類】
【出願番号】特願２００６−１２６０８０（Ｐ２００６−１２６０８０）
【出願日】平成１８年４月２８日（２００６．４．２８）
【出願人】（３０３０００４２０）コニカミノルタエムジー株式会社 (2,950)
【Ｆターム（参考）】
【公開日】平成１９年１１月１５日（２００７．１１．１５）
【国際特許分類】
【出願日】平成１８年４月２８日（２００６．４．２８）
【出願人】（３０３０００４２０）コニカミノルタエムジー株式会社 (2,950)
【Ｆターム（参考）】
[ Back to top ]