説明

画像処理装置及び画像処理プログラム

【課題】不要なメモリを早急に解放することができる。
【解決手段】ワークフロー管理部46Aは、画像処理モジュール38から自モジュールの消去通知が出力された場合において、該画像処理モジュール38の前段のバッファモジュール40の消去が可能と判断したときに、消去要求を該バッファモジュール40の前段の画像処理モジュール38に入力する。バッファモジュール40は、自モジュールに連結された全画像処理モジュール38が消去されると自モジュールを消去し、画像処理モジュール38は、画像処理部を構築する画像処理モジュール38の全ての処理が終了した場合、自モジュールの全処理が終了した場合、並びに消去要求が入力された場合又は消去要求が入力され且つ自モジュールの消去が可能と判断した場合に、消去通知をワークフロー管理部46Aに出力し自モジュールを消去する。消去されたモジュールに割り当てられていたメモリは解放される。

【発明の詳細な説明】
【技術分野】
【0001】
本発明は、画像処理装置及び画像処理プログラムに関する。
【背景技術】
【0002】
特許文献1には、画像データに対する予め定められた画像処理を、予め設定された単位処理データ量ずつ行う画像処理エンジンと、自モジュールの前段から取得した画像データを前記画像処理エンジンが前記単位処理データ量ずつ処理するために必要なデータ量単位で入力すると共に、前記画像処理エンジンによる予め定められた画像処理を経た画像データ又は前記予め定められた画像処理の処理結果を自モジュールの後段へ出力する制御手段を備え、前記画像処理エンジンが行う画像処理の種類又は内容が互いに異なる複数種の画像処理モジュールの中から選択された1つ以上の画像処理モジュールと、画像データを記憶するためのバッファと、自モジュールの前段に画像処理モジュールが連結されている場合に、自モジュールに対して事前に設定されるか又は画像データ出力の都度通知される書込データ量のデータを記憶可能な前記バッファ上の記憶領域に前記前段の画像処理モジュールから出力される画像データを書き込ませると共に、自モジュールの後段に画像処理モジュールが連結されている場合に、前記バッファに記憶されている画像データを、前記後段の画像処理モジュールにより、自モジュールに対して事前に設定されるか又は画像データ要求の都度指定される読出データ量だけ読み出させる処理を行うバッファ制御手段を備えた1つ以上のバッファモジュールと、が、前記選択された個々の画像処理モジュールの前段及び後段の少なくとも一方にバッファモジュールが連結されるように、個々のモジュールがパイプライン形態又は有向非循環グラフ形態で連結されて構築された画像処理部を備えた画像処理装置であって、前記画像処理部の構築時又は処理対象の画像データの処理時の個々のモジュールからの要求に応じて、前記画像処理装置に設けられているメモリから前記個々のモジュールに割り当てるメモリを確保して前記個々のモジュールに割り当てると共に、前記個々のモジュールが消去されたときには前記個々のモジュールに割り当てたメモリを解放するメモリ管理処理を複数種の管理方式で実行可能で、前記複数種の管理方式のうち外部から指示された管理方式で前記メモリ管理処理を行うメモリ管理手段を更に備えたことを特徴とする画像処理装置が開示されている。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開2006−338505号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
本発明は、画像処理部の全処理終了時にのみ不要なメモリを解放する場合に比べて、不要なメモリを早急に解放することができる画像処理装置及び画像処理プログラムを得ることを目的とする。
【課題を解決するための手段】
【0005】
請求項1の発明の画像処理装置は、画像データに対する予め定められた画像処理を、予め設定された単位処理データ量ずつ行う画像処理エンジンと、自モジュールの前段から取得した画像データを前記画像処理エンジンが前記単位処理データ量ずつ処理するために必要なデータ量単位で前記画像処理エンジンに入力すると共に、前記画像処理エンジンによる予め定められた画像処理を経た画像データ又は前記予め定められた画像処理の処理結果を自モジュールの後段へ出力する制御手段を備え、前記画像処理エンジンが行う画像処理の種類又は内容が互いに異なる複数種の画像処理モジュールと、画像データを記憶するためのバッファと、自モジュールの前段に画像処理モジュールが連結されている場合に、自モジュールに対して事前に設定されるか又は画像データ出力の都度通知される書込データ量のデータを記憶可能な前記バッファ上の記憶領域に前記前段の画像処理モジュールから出力される画像データを書き込ませると共に、自モジュールの後段に画像処理モジュールが連結されている場合に、前記バッファに記憶されている画像データを、前記後段の画像処理モジュールにより、自モジュールに対して事前に設定されるか又は画像データ要求の都度指定される読出データ量だけ読み出させる処理を行うバッファ制御手段を備えた1つ以上のバッファモジュールと、が、前記個々の画像処理モジュールの前段及び後段の少なくとも一方にバッファモジュールが連結されるように、個々のモジュールがパイプライン形態又は有向非循環グラフ形態で連結されて構築された画像処理部を備えた画像処理装置であって、前記画像処理部の構築時又は処理対象の画像データの処理時の個々のモジュールからの要求に応じて、前記画像処理装置に設けられているメモリから前記個々のモジュールに割り当てるメモリを確保して前記個々のモジュールに割り当てると共に、前記個々のモジュールが消去されたときには前記消去されたモジュールに割り当てたメモリを解放するメモリ管理処理を行うメモリ管理手段と、前記画像処理モジュールから自モジュールの消去を示す消去通知が出力された場合に、該消去通知を出力した画像処理モジュールの前段に連結されたバッファモジュールの消去の可否を判断する判断手段、及び前記判断手段により前記バッファモジュールの消去が可能であると判断された場合に、前記バッファモジュール及び前記バッファモジュールの前段に連結された画像処理モジュールが消去されるように消去要求を前記バッファモジュールの前段に連結された画像処理モジュールに入力する処理を行う処理手段を備えた処理管理手段と、を更に備え、前記バッファモジュールのバッファ制御手段は、自モジュールに連結された全ての画像処理モジュールが消去された場合には、自モジュールを消去する処理を行うと共に、自モジュールに割り当てられていたメモリを前記メモリ管理手段を介して解放させる処理を行い、前記画像処理モジュールの制御手段は、前記画像処理部を構築する画像処理モジュールの全ての処理が終了した場合、自モジュールの全処理が終了した場合、並びに前記処理管理手段から前記消去要求が入力された場合又は前記消去要求が入力され且つ自モジュールの消去が可能であると判断した場合には、前記消去通知を前記処理管理手段に対して出力して自モジュールを消去し且つ前記自モジュールに割り当てられていたメモリを前記メモリ管理手段を介して解放させる処理を行う。
【0006】
請求項2の発明は、請求項1に記載の画像処理装置において、前記処理管理手段の前記判断手段は、前記消去通知を出力した画像処理モジュールの前段に連結されたバッファモジュールの後段に複数の画像処理モジュールが連結されている場合には、前記バッファモジュールの後段に連結された全ての画像処理モジュールから各々の消去通知が出力されたときに、前記バッファモジュールの消去が可能であると判断する。
【0007】
請求項3の発明は、請求項1又は請求項2に記載の画像処理装置において、前記画像処理モジュールの制御手段は、前記画像処理部を構築する画像処理モジュールの全ての処理が終了した場合、自モジュールの全処理が終了した場合、及び前記消去要求が入力され且つ自モジュールの消去が可能であると判断した場合に、前記消去通知を前記処理管理手段に対して出力して自モジュールを消去し且つ前記自モジュールに割り当てられていたメモリを前記メモリ管理手段を介して解放させる処理を行うものであって、前記処理管理手段から前記消去要求が入力された場合において、自モジュールの全処理が終了していないとき、又は自モジュールの後段に連結されたバッファモジュールの後段に連結された複数の画像処理モジュールの全てが消去済みでないときには、自モジュールの消去が不可能であると判断する。
【0008】
請求項4の発明は、コンピュータを、画像データに対する予め定められた画像処理を、予め設定された単位処理データ量ずつ行う画像処理エンジンと、自モジュールの前段から取得した画像データを前記画像処理エンジンが前記単位処理データ量ずつ処理するために必要なデータ量単位で前記画像処理エンジンに入力すると共に、前記画像処理エンジンによる予め定められた画像処理を経た画像データ又は前記予め定められた画像処理の処理結果を自モジュールの後段へ出力する制御手段を備え、前記画像処理エンジンが行う画像処理の種類又は内容が互いに異なる複数種の画像処理モジュールと、画像データを記憶するためのバッファと、自モジュールの前段に画像処理モジュールが連結されている場合に、自モジュールに対して事前に設定されるか又は画像データ出力の都度通知される書込データ量のデータを記憶可能な前記バッファ上の記憶領域に前記前段の画像処理モジュールから出力される画像データを書き込ませると共に、自モジュールの後段に画像処理モジュールが連結されている場合に、前記バッファに記憶されている画像データを、前記後段の画像処理モジュールにより、自モジュールに対して事前に設定されるか又は画像データ要求の都度指定される読出データ量だけ読み出させる処理を行うバッファ制御手段を備えた1つ以上のバッファモジュールと、が、前記個々の画像処理モジュールの前段及び後段の少なくとも一方にバッファモジュールが連結されるように、個々のモジュールがパイプライン形態又は有向非循環グラフ形態で連結されて構築された画像処理部を備えた画像処理装置として機能させるための画像処理プログラムであって、前記画像処理部の構築時又は処理対象の画像データの処理時の個々のモジュールからの要求に応じて、前記画像処理装置に設けられているメモリから前記個々のモジュールに割り当てるメモリを確保して前記個々のモジュールに割り当てると共に、前記個々のモジュールが消去されたときには前記消去されたモジュールに割り当てたメモリを解放するメモリ管理処理を行うメモリ管理手段と、前記画像処理モジュールから自モジュールの消去を示す消去通知が出力された場合に、該消去通知を出力した画像処理モジュールの前段に連結されたバッファモジュールの消去の可否を判断する判断手段、及び前記判断手段により前記バッファモジュールの消去が可能であると判断された場合に、前記バッファモジュール及び前記バッファモジュールの前段に連結された画像処理モジュールが消去されるように消去要求を前記バッファモジュールの前段に連結された画像処理モジュールに入力する処理を行う処理手段を備えた処理管理手段と、を更に備え、前記バッファモジュールのバッファ制御手段は、自モジュールに連結された全ての画像処理モジュールが消去された場合には、自モジュールを消去する処理を行うと共に、自モジュールに割り当てられていたメモリを前記メモリ管理手段を介して解放させる処理を行い、前記画像処理モジュールの制御手段は、前記画像処理部を構築する画像処理モジュールの全ての処理が終了した場合、自モジュールの全処理が終了した場合、並びに前記処理管理手段から前記消去要求が入力された場合又は前記消去要求が入力され且つ自モジュールの消去が可能であると判断した場合には、前記消去通知を前記処理管理手段に対して出力して自モジュールを消去し且つ前記自モジュールに割り当てられていたメモリを前記メモリ管理手段を介して解放させる処理を行う画像処理プログラムである。
【発明の効果】
【0009】
請求項1に記載の発明によれば、画像処理部の全処理終了時にのみ不要なリソースを解放する場合に比べて、不要なメモリを早急に解放することができる。
【0010】
請求項2に記載の発明によれば、バッファモジュールの後段に連結する画像処理モジュールが複数あった場合に、必要なモジュールが誤って消去されることを防止できる。
【0011】
請求項3に記載の発明によれば、誤ってモジュールが消去されることを防止できる。
【0012】
請求項4に記載の発明によれば、画像処理部の全処理終了時にのみ不要なリソースを解放する場合に比べて、不要なメモリを早急に解放することができる。
【図面の簡単な説明】
【0013】
【図1】本実施形態に係るコンピュータ(画像処理装置)の概略構成を示すブロック図である。
【図2】リソース管理部によって実行される、(A)は初期化処理、(B)は第3管理方式でのメモリ確保要求時処理、(C)は第3管理方式でのメモリ解放要求時処理、(D)はリソース確保要求時処理、(E)はリソース解放要求時処理の内容を各々示すフローチャートである。
【図3】アプリケーションによる処理を説明するためのシーケンス図である。
【図4】(A)はモジュール生成部によって実行されるモジュール生成処理の内容を示すフローチャート、(B)はワークフロー管理部のテーブルを説明する概略図である。
【図5】画像処理部の構成例を示すブロック図である。
【図6】バッファモジュールのバッファ制御部によって実行されるバッファ制御処理の内容を示すフローチャートである。
【図7】バッファモジュールのバッファ制御部によって実行される要求受信割込処理の内容を示すフローチャートである。
【図8】バッファモジュールのバッファ制御部によって実行されるデータ書込処理の内容を示すフローチャートである。
【図9】書込対象の画像データが複数の保管用単位バッファ領域に跨る場合の処理を説明する概略図である。
【図10】バッファモジュールのバッファ制御部によって実行されるデータ読出処理の内容を示すフローチャートである。
【図11】読出対象の画像データが複数の保管用単位バッファ領域に跨っていた場合の処理を説明する概略図である。
【図12】画像処理モジュールの制御部によって実行される画像処理モジュール初期化処理の内容を示すフローチャートである。
【図13】画像処理モジュールの制御部によって実行される画像処理モジュール制御処理の内容を示すフローチャートである。
【図14】画像処理モジュールの制御部によって実行される自モジュール消去処理の内容を示すフローチャートである。
【図15】(A)は画像処理モジュール、(B)はバッファモジュールの概略構成及び実行される処理を各々示すブロック図である。
【図16】処理管理部によって実行されるブロック単位制御処理の内容を示すフローチャートである。
【図17】処理管理部によって実行される面単位制御処理の内容を示すフローチャートである。
【図18】ブロック単位処理及び面単位処理の流れを説明する概略図である。
【図19】処理管理部によって実行されるエラー発生割込処理の内容を示すフローチャートである。
【図20】バッファモジュールが前段の画像処理モジュールに画像データを直接要求する態様におけるブロック単位処理の流れを説明する概略図である。
【図21】処理管理部のワークフロー管理部によって実行される消去要求処理の内容を示すフローチャートである。
【図22】(A)は、画像処理モジュールの制御部によって実行される消去要求受付処理の内容を示すフローチャートであり、(B)は、消去要求受付処理の変形例である。
【発明を実施するための形態】
【0014】
以下、図面を参照して本発明の実施形態の一例を詳細に説明する。図1には、本発明に係る画像処理装置として機能することが可能なコンピュータ10が示されている。なお、このコンピュータ10は、複写機、プリンタ、ファクシミリ装置、これらの機能を兼ね備えた複合機、スキャナ、写真プリンタ等のように内部で画像処理を行う必要のある任意の画像取扱機器に組み込まれていてもよいし、パーソナル・コンピュータ(PC)等の独立したコンピュータであってもよく、更にPDA(Personal Digital Assistant)や携帯電話機等の携帯機器に組み込まれたコンピュータであってもよい。
【0015】
コンピュータ10はCPU12、メモリ14、表示部16、操作部18、記憶手段としての記憶部20、画像データ供給部22及び画像出力部24を備えており、これらはバス26を介して互いに接続されている。コンピュータ10が上述したような画像取扱機器に組み込まれている場合、表示部16や操作部18としては、画像取扱機器に設けられたLCD等から成る表示パネルやテンキー等を適用することができる。また、コンピュータ10が独立したコンピュータである場合、表示部16や操作部18としては、当該コンピュータに接続されたディスプレイやキーボード、マウス等を適用することができる。また、記憶部20としてはHDD(Hard Disk Drive)が好適であるが、これに代えてフラッシュメモリ等の他の不揮発性記憶手段を用いることも可能である。
【0016】
また、画像データ供給部22は処理対象の画像データを供給できるものであればよく、例えば紙や写真フィルム等の記録材料に記録されている画像を読み取って画像データを出力する画像読取部、通信回線を介して外部から画像データを受信する受信部、画像データを記憶する画像記憶部(メモリ14又は記憶部20)等を適用することができる。また、画像出力部24は画像処理を経た画像データ又は該画像データが表す画像を出力するものであればよく、例えば画像データが表す画像を紙や感光材料等の記録材料に記録する画像記録部、画像データが表す画像をディスプレイ等に表示する表示部、画像データを記録メディアに書き込む書込装置、画像データを通信回線を介して送信する送信部を適用することができる。また、画像出力部24は画像処理を経た画像データを単に記憶する画像記憶部(メモリ14又は記憶部20)であっても構わない。
【0017】
図1に示すように、記憶部20には、CPU12によって実行される各種のプログラムとして、メモリ14等のリソースの管理やCPU12によるプログラムの実行の管理、コンピュータ10と外部との通信等を司るオペレーティングシステム30のプログラム、コンピュータ10を本発明に係る画像処理装置として機能させるための画像処理プログラム群34、CPU12が上記画像処理プログラム群を実行することで実現される画像処理装置に対して所望の画像処理を行わせる各種のアプリケーション32のプログラム(図1ではアプリケーションプログラム群32と表記)が各々記憶されている。
【0018】
画像処理プログラム群34は、前述した各種の画像取扱機器や携帯機器を開発する際の開発負荷を軽減したり、PC等で利用可能な画像処理プログラムを開発する際の開発負荷を軽減することを目的として、各種の画像取扱機器や携帯機器、PC等の各種機器(プラットフォーム)で共通に使用可能に開発されたプログラムであり、本発明に係る画像処理プログラムに対応している。画像処理プログラム群34によって実現される画像処理装置は、アプリケーション32からの構築指示に従い、アプリケーション32が指示した画像処理を行う画像処理部を構築し、アプリケーション32からの実行指示に従い、前記画像処理部によって画像処理を行うが(詳細は後述)、画像処理プログラム群34は、所望の画像処理を行う画像処理部(所望の構成の画像処理部)の構築を指示したり、構築された画像処理部による画像処理の実行を指示するためのインタフェースをアプリケーション32に提供している。このため、内部で画像処理を行う必要のある任意の機器を新規開発する等の場合にも、前記画像処理を行うプログラムの開発に関しては、当該機器で必要とされる画像処理を上記のインタフェースを利用して画像処理プログラム群34に行わせるアプリケーション32を開発するのみで済み、実際に画像処理を行うプログラムを新たに開発する必要が無くなるので、開発負荷を軽減することができる。
【0019】
また、画像処理プログラム群34によって実現される画像処理装置は、前述のように、アプリケーション32からの構築指示に従い、アプリケーション32が指示した画像処理を行う画像処理部を構築し、構築した画像処理部によって画像処理を行うので、例えば画像処理対象の画像データの色空間や1画素当たりのビット数が不定であったり、実行すべき画像処理の内容や手順・パラメータ等が不定である場合にも、アプリケーション32が画像処理部の再構築を指示することで、画像処理装置(画像処理部)によって実行される画像処理を、処理対象の画像データ等に応じて柔軟に変更することができる。
【0020】
以下、画像処理プログラム群34について説明する。図1に示すように、画像処理プログラム群34はモジュールライブラリ36と、構築手段に相当する処理構築部42のプログラムと、処理管理手段に相当する処理管理部46のプログラムに大別される。詳細は後述するが、本実施形態に係る処理構築部42は、アプリケーションからの指示により、例として図5に示すように、予め定められた画像処理を行う1つ以上の画像処理モジュール38と、個々の画像処理モジュール38の前段及び後段の少なくとも一方に配置され画像データを記憶するためのバッファを備えたバッファモジュール40と、がパイプライン形態又はDAG(Directed Acyclic Graph:有向非循環グラフ)形態で連結されて成る画像処理部50を構築する。画像処理部50を構成する個々の画像処理モジュールの実体はCPU12によって実行されCPU12で予め定められた画像処理を行わせるための第1のプログラム、又は、CPU12によって実行されCPU12により図1に図示されていない外部の画像処理装置(例えば専用画像処理ボード等)に対する処理の実行を指示するための第2のプログラムであり、上述したモジュールライブラリ36には、予め定められた互いに異なる画像処理(例えば入力処理やフィルタ処理、色変換処理、拡大・縮小処理、スキュー角検知処理、画像回転処理、画像合成処理、出力処理等)を行う複数種の画像処理モジュール38のプログラムが各々登録されている。以下では、説明を簡単にするために、画像処理部50を構成する個々の画像処理モジュールの実体が上記の第1のプログラムであるものとして説明する。
【0021】
個々の画像処理モジュール38は、例として図15(A)にも示すように、画像データに対する画像処理を所定の単位処理データ量ずつ行う画像処理エンジン38Aと、画像処理モジュール38の前段及び後段のモジュールとの画像データの入出力及び画像処理エンジン38Aの制御を行う制御部38Bから構成されている。個々の画像処理モジュール38における単位処理データ量は、画像の1ライン分、画像の複数ライン分、画像の1画素分、画像1面分等を含む任意のバイト数の中から、画像処理エンジン38Aが行う画像処理の種類等に応じて予め選択・設定されており、例えば色変換処理やフィルタ処理を行う画像処理モジュール38では単位処理データ量が1画素分とされ、拡大・縮小処理を行う画像処理モジュール38では単位処理データ量が画像の1ライン分又は画像の複数ライン分とされ、画像回転処理を行う画像処理モジュール38では単位処理データ量が画像1面分とされ、画像圧縮伸長処理を行う画像処理モジュール38では単位処理データ量が実行環境に依存するNバイトとされている。
【0022】
また、モジュールライブラリ36には、画像処理エンジン38Aが実行する画像処理の種類が同一でかつ実行する画像処理の内容が異なる画像処理モジュール38も登録されている(図1では、この種の画像処理モジュールを「モジュール1」「モジュール2」と表記して示している)。例えば拡大・縮小処理を行う画像処理モジュール38については、入力された画像データを1画素おきに間引くことで50%に縮小する縮小処理を行う画像処理モジュール38、入力された画像データに対して指定された拡大・縮小率で拡大・縮小処理を行う画像処理モジュール38等の複数の画像処理モジュール38が各々用意されている。また、例えば色変換処理を行う画像処理モジュール38については、RGB色空間をCMY色空間へ変換する画像処理モジュール38やその逆へ変換する画像処理モジュール38、L*a*b*色空間等の他の色空間変換を行う画像処理モジュール38が各々用意されている。
【0023】
また、画像処理モジュール38の制御部38Bは、画像処理エンジン38Aが単位処理データ量ずつ処理するために必要な画像データを入力するために、自モジュールの前段のモジュール(例えばバッファモジュール40)から画像データを単位読出データ量ずつ取得し、画像処理エンジン38Aから出力される画像データを単位書込データずつ後段のモジュール(例えばバッファモジュール40)へ出力する(画像処理エンジン38Aで圧縮等のデータ量の増減を伴う画像処理が行われなければ単位書込データ量=単位処理データ量となる)か、画像処理エンジン38Aによる画像処理の結果を自モジュールの外部へ出力する(例えば画像処理エンジン38Aがスキュー角検知処理等の画像解析処理を行う場合、画像データに代えてスキュー角検知結果等の画像解析処理結果が出力されることがある)処理を行うが、モジュールライブラリ36には、画像処理エンジン38Aが実行する画像処理の種類及び内容が同一で、上記の単位処理データ量や単位読出データ量、単位書込データ量が異なる画像処理モジュール38も登録されている。例えば、先程は画像回転処理を行う画像処理モジュール38における単位処理データ量を画像1面分と説明したが、同じ画像回転処理を行う画像処理モジュール38で単位処理データ量が画像の1ライン分又は画像の複数ライン分であるものがモジュールライブラリ36に含まれていても良い。
【0024】
また、モジュールライブラリ36に登録されている個々の画像処理モジュール38のプログラムは、画像処理エンジン38Aに相当するプログラムと制御部38Bに相当するプログラムから構成されているが、制御部38Bに相当するプログラムは部品化されており、個々の画像処理モジュール38のうち単位読出データ量及び単位書込データ量が同一の画像処理モジュール38は、画像処理エンジン38Aで実行される画像処理の種類や内容に拘わらず、制御部38Bに相当するプログラムが共通化されている(制御部38Bに相当するプログラムとして同一のプログラムが用いられている)。これにより、画像処理モジュール38のプログラムの開発にあたっての開発負荷が軽減される。
【0025】
なお、画像処理モジュール38の中には、入力される画像の属性が未知の状態では単位読出データ量及び単位書込データ量が確定しておらず、入力画像データの属性を取得し、取得した属性を所定の演算式に代入して演算することで単位読出データ量や単位書込データ量が確定するモジュールが存在しているが、この種の画像処理モジュール38については、単位読出データ量と単位書込データ量が互いに同一の演算式を用いて導出される画像処理モジュール38について、制御部38Bに相当するプログラムを共通化するようにすればよい。また、本実施形態に係る画像処理プログラム群34は、前述のように各種機器に実装可能であるが、画像処理プログラム群34のうちモジュールライブラリ36に登録する画像処理モジュール38の数や種類等については、画像処理プログラム群34を実装する各種機器で必要とされる画像処理に応じて、適宜追加・削除・入替等が可能であることは言うまでもない。
【0026】
また、画像処理部50を構成する個々のバッファモジュール40は、例として図15(B)にも示すように、コンピュータ10に設けられたメモリ14からオペレーティングシステム30を通じて確保されたメモリ領域で構成されるバッファ40Aと、バッファモジュール40の前段及び後段のモジュールとの画像データの入出力及びバッファ40Aの管理を行うバッファ制御部40Bから構成されている。個々のバッファモジュール40のバッファ制御部40Bもその実体はCPU12によって実行されるプログラムであり、モジュールライブラリ36にはバッファ制御部40Bのプログラムも登録されている(図1ではバッファ制御部40Bのプログラムを「バッファモジュール」と表記して示している)。
【0027】
また、アプリケーション32からの指示に従って画像処理部50を構築する処理構築部42は、図1に示すように複数種のモジュール生成部44から構成されている。複数種のモジュール生成部44は互いに異なる画像処理に対応しており、アプリケーション32によって起動されることで、対応する画像処理を実現するための画像処理モジュール38及びバッファモジュール40から成るモジュール群を生成する処理を行う。なお、図1ではモジュール生成部44の一例として、モジュールライブラリ36に登録されている個々の画像処理モジュール38が実行する画像処理の種類に対応するモジュール生成部44を示しているが、個々のモジュール生成部44に対応する画像処理は、複数種の画像処理モジュール38によって実現される画像処理(例えばスキュー角検知処理と画像回転処理から成るスキュー補正処理)であってもよい。必要とされる画像処理が複数種の画像処理を組み合わせた処理である場合、アプリケーション32は複数種の画像処理の何れかに対応するモジュール生成部44を順次起動する。これにより、アプリケーション32によって順次起動されたモジュール生成部44により、必要とされる画像処理を行う画像処理部50が構築されることになる。
【0028】
また図1に示すように、処理管理部46は、画像処理部50における画像処理の実行を制御するワークフロー管理部46A、画像処理部50の各モジュールによるメモリ14や各種のファイル等のコンピュータ10のリソースの使用を管理するリソース管理部46B、及び、画像処理部50で発生したエラーを管理するエラー管理部46Cを含んで構成されている。なお、処理構築部42によって構築される画像処理部50は、画像処理部50を構成する個々の画像処理モジュール38が、画像1面分よりも小さいデータ量を単位として後段へ画像データを引き渡しながら並列に画像処理を行うように動作する(ブロック単位処理と称する)ことも、前段の画像処理モジュール38が画像1面分の画像データに対する画像処理を完了した後に、後段の画像処理モジュール38が画像1面分の画像データに対する画像処理を行うように動作する(面単位処理と称する)ことも可能とされており、ワークフロー管理部46Aのプログラムとして、画像処理部50にブロック単位処理を行わせるためのプログラムと、画像処理部50に面単位処理を行わせるためのプログラムが各々用意されている。
【0029】
次に本実施形態の作用を説明する。本実施形態では、コンピュータ10の電源が投入されるとリソース管理部46Bが起動され、リソース管理部46Bによって図2(A)に示す初期化処理が行われる。
【0030】
本実施形態では、リソース管理部46Bによるメモリ管理の方式として、画像処理部50の個々のモジュールからの要求の都度、メモリ14から要求元のモジュールに割り当てるメモリ領域をオペレーティングシステム30を通じて確保する第1管理方式、メモリ14から一定サイズのメモリ領域をオペレーティングシステム30を通じて事前に確保し、個々のモジュールからの要求があると、事前に確保したメモリ領域のうちの一部領域を要求元のモジュールに割り当てる第2管理方式、及び、メモリ14から一定サイズのメモリ領域をオペレーティングシステム30を通じて事前に確保し、個々のモジュールからの要求があると、要求されたメモリ領域のサイズが閾値未満であれば事前に確保したメモリ領域のうちの一部領域を要求元のモジュールに割り当て、要求されたメモリ領域のサイズが閾値以上であれば要求元のモジュールに割り当てるメモリ領域をオペレーティングシステム30を通じて確保する第3管理方式、の3種類の管理方式が用意されており、何れの管理方式でメモリ管理を行うかを選択・設定可能とされている。なお、本発明はこれに限定されるものではなく、他のメモリ管理方式が含まれていても良い。
【0031】
これらの各管理方式は、例えば次のように選択される。特にメモリ制限等の無いアプリケーションから使われ、かつ複雑なメモリ管理によるプログラムサイズの増加を抑えたい場合等には、第1管理方式が好適である。また、本発明による画像処理を行うアプリケーションの全体で使用可能なメモリ量が制限されており、その範囲で動作する必要がある場合には、第2管理方式が好適である。一方、メモリ確保や解放に要する処理時間を高速化する必要がある場合には、細かいメモリ領域の確保や解放にオペレーティングシステム30のメモリ確保/解放機能を使うとオーバーヘッドが大きくなることがあるので、第3管理方式が好適である。
【0032】
図2(A)に示す初期化処理のステップ100では、選択・設定されているメモリ管理方式が第2管理方式又は第3管理方式か否か判定する。なお、メモリ管理方式の選択は、コンピュータ10に画像処理プログラム群34をインストールする際に選択・設定するようにしてもよいし、リソース管理部46Bがコンピュータ10のシステム環境(例えばメモリ14のサイズや画像処理プログラム群34が実装されている機器の種別等)を取得し、取得したシステム環境に基づいて自動的に選択・設定するようにしてもよい。メモリ管理方式が第1管理方式である場合は上記判定が否定されて初期化処理を終了するが、上記判定が肯定された場合はステップ102へ移行し、コンピュータ10に設けられているメモリ14から、オペレーティングシステム30を通じて所定サイズのメモリ領域(連続領域)を確保して終了する。なお、上記の所定サイズについても、システム環境等に応じて選択・設定してもよい。
【0033】
ここで、メモリ管理方式が第1管理方式である場合には、その後に発生するメモリ確保要求に応答してオペレーティングシステム30を通じて要求されたメモリ領域を確保し、またメモリ解放要求に応答して同じくオペレーティングシステム30を通じてメモリ領域を解放する。これらの処理は、通常のプログラムで用いられているものと同様なので、説明を省略する。
【0034】
また、メモリ管理方式が第2管理方式である場合には、その後に発生するメモリ確保要求に応答して、先のステップ102で事前に確保したメモリ領域のうち、状態が「未使用」の未使用領域から要求に対応するサイズのメモリ領域を探索して確保し、確保したメモリ領域の状態を「使用済み」に変更すると共に、確保したメモリ領域を要求元へ引き渡す。メモリ解放要求に対しては、解放が要求されたメモリ領域を事前に確保したメモリ領域のうちの未使用領域に編入すると共に、編入したメモリ領域の状態を「使用済み」から「未使用」に変更する処理を行う。メモリ領域の状態が未使用か使用済みかを表す情報は、例えばテーブルやリスト等で管理することができる。
【0035】
次にメモリ管理方式が第3管理方式である場合を説明する。メモリ管理方式が第3管理方式である場合、メモリ確保要求が発生すると、リソース管理部46Bによって図2(B)に示すメモリ確保要求時処理が行われる。メモリ確保要求時処理では、まずステップ104でその要求サイズが予め定めた閾値以下か否かを判定する。要求サイズが閾値以下でない場合には、第1管理方式と同様に、ステップ106でオペレーティングシステム30を通じて要求サイズのメモリ領域を確保し、ステップ108で確保したメモリ領域の先頭アドレスをリソース管理部46B中のテーブルに登録する。なお、テーブルに代えてリストや連想配列等の他の手段を使っても良い。ステップ104において要求サイズが閾値以下と判定された場合には、第2管理方式と同様に、先のステップ102で事前に確保したメモリ領域のうちの未使用領域から要求サイズのメモリ領域を確保し(ステップ110)、確保した領域の状態を「使用済み」に変更する(ステップ112)。そしてステップ114で、確保したメモリ領域を要求元へ引き渡す。
【0036】
また、メモリ管理方式が第3管理方式である場合、メモリ解放要求が発生すると、リソース管理部46Bによって図2(C)に示すメモリ解放要求時処理が行われる。メモリ解放要求時処理では、まずステップ116において、解放が要求されているメモリ領域の先頭アドレスが前述のテーブルに登録されているか否かを判定する。ステップ116の判定が肯定された場合、解放が要求されているメモリ領域はオペレーティングシステム30を通じて確保したメモリ領域であるので、ステップ118において解放が要求されたメモリ領域をオペレーティングシステム30を通じて解放し、次のステップ120で解放が要求されているメモリ領域の先頭アドレスを前述のテーブルから削除する。また、ステップ116の判定が否定された場合、解放が要求されているメモリ領域は先のステップ102で事前に確保したメモリ領域から確保したメモリ領域であるので、ステップ122において、解放が要求されているメモリ領域を事前に確保したメモリ領域のうちの未使用領域に編入し、編入したメモリ領域の状態を次のステップ124で「未使用」に変更する。このような処理の後、ステップ126において要求されたメモリ領域の解放を要求元に通知してメモリ解放要求時処理を終了する。
【0037】
次に、リソース管理部46Bに対してメモリ以外のリソース(例えば特定のファイル等)の確保・解放が要求された場合について説明する。リソース確保要求が入力されると、リソース管理部46Bは図2(D)に示すリソース確保要求時処理を行う。リソース確保要求時処理では、まずステップ130において、確保が要求されたリソースをオペレーティングシステム30を通じて確保し、次のステップ132では確保したリソースのアドレスを要求元のモジュールを識別する情報と対応付けてリソース管理部46B中のテーブルに登録し、ステップ134で確保したリソースを要求元に引き渡して処理を終了する。また、リソース解放要求が入力されると、リソース管理部46Bは図2(E)に示すリソース解放要求時処理を行う。リソース解放要求時処理では、まずステップ136において、要求元のモジュールを識別する情報と対応付けてリソース管理部46B中のテーブルに登録した情報(確保したリソースのアドレス)を読み出す。次のステップ138では読み出した情報が表すリソースをオペレーティングシステム30を通じて全て解放する。また、ステップ140では解放したリソースに対応する情報がテーブルから削除されるようにテーブルを更新し、次のステップ142でリソースの解放を要求元に通知して処理を終了する。
【0038】
このように、メモリ以外のリソースの確保/解放では、確保したリソースを確保時にテーブルへ登録しておき、解放時にはテーブルに登録されているリソース(同一要求元からの要求に従って確保したリソース)を全て解放するので、リソース解放要求元が解放対象のリソースを指定して解放を要求する方式と比較して、リソースの解放漏れが生ずることを防止することができる。なお、これらメモリやリソースの確保/解放処理においては、リソースの不足等から処理に失敗する場合があり、その場合にはエラー管理部46Cに通知する等の処理が必要となるが、ここではそれらのエラー処理については説明を簡単にするために省略する。
【0039】
一方、画像処理プログラム群34が実装されている機器において、何らかの画像処理を行う必要のある状況になると、この状況が特定のアプリケーション32によって検知され、当該アプリケーション32によって図3に示す処理が行われる。なお、画像処理を行う必要のある状況としては、例えば画像データ供給部22としての画像読取部によって画像を読み取り、画像出力部24としての画像記録部により記録材料に画像として記録するか、画像出力部24としての表示部に画像として表示させるか、画像出力部24としての書込装置により画像データを記録メディアに書き込むか、画像出力部24としての送信部により画像データを送信するか、画像出力部24としての画像記憶部に記憶させるジョブの実行がユーザによって指示された場合、或いは、画像データ供給部22としての受信部によって受信されるか、画像データ供給部22としての画像記憶部に記憶されている画像データに対して、上記の記録材料への記録、表示部への表示、記録メディアへの書き込み、送信、画像記憶部への記憶の何れかを行うジョブの実行がユーザによって指示された場合が挙げられる。また、画像処理を行う必要のある状況は上記に限られるものではなく、例えばユーザからの指示に応じてアプリケーション32が実行可能な処理の名称等を表示部16に一覧表示している状態で、実行対象の処理がユーザによって選択された等の場合であってもよい。
【0040】
上記のように、何らかの画像処理を行う必要のある状況になったことを検知すると、アプリケーション32は、まず画像処理対象の画像データを供給する画像データ供給部22の種別を認識し(図3のステップ150も参照)、認識した種別がバッファ領域(メモリ14の一部領域)であった場合(図3のステップ152の判定が肯定された場合)には、画像データ供給部22として指定されたバッファ領域を含むバッファモジュール40を生成する(図3のステップ154も参照)。後述するバッファモジュール40の新規生成では、バッファモジュール40のバッファ制御部40Bのプログラムを実行するプロセス、スレッド又はオブジェクトを生成することでバッファ制御部40Bを生成し、生成されたバッファ制御部40Bによりバッファ40Aとして使用するメモリ領域が確保されることによって成されるが、このステップ154におけるバッファモジュール40の生成は、指定されたバッファ領域を既に確保されたバッファ40Aとして(バッファ制御部40Bに)認識させるパラメータを設定してバッファ制御部40Bを生成する処理を行うことによって成される。ここで生成されたバッファモジュール40は画像データ供給部22として機能する。
【0041】
続いてアプリケーション32は、上記と同様に、画像処理を行った画像データの出力先としての画像出力部24の種別を認識し(図3のステップ156も参照)、認識した種別がバッファ領域(メモリ14の一部領域)であった場合(図3のステップ158の判定が肯定された場合)は、画像出力部24として指定されたバッファ領域を含むバッファモジュール40を上記と同様にして生成する(図3のステップ160も参照)。ここで生成されたバッファモジュール40は画像出力部24として機能する。また、アプリケーション32は実行すべき画像処理の内容を認識し、実行すべき画像処理を、個々のモジュール生成部44に対応するレベルの画像処理の組み合わせに分解し、実行すべき画像処理を実現するために必要な画像処理の種類及び個々の画像処理の実行順序を判定する(図3のステップ162も参照)。なお、この判定は、例えば上記の画像処理の種類及び個々の画像処理の実行順序を、ユーザが実行を指示可能なジョブの種類と対応付けて予め情報として登録しておき、アプリケーション32は、実行が指示されたジョブの種類に対応する情報を読み出すことによって実現することができる。
【0042】
そしてアプリケーション32は、上記で判定した画像処理の種類及び実行順序に基づいて、まず実行順序が1番の画像処理に対応するモジュール生成部44を起動(モジュール生成部44のプログラムを実行するプロセス、スレッド又はオブジェクトを生成)した後に(図3のステップ164も参照)、起動したモジュール生成部44に対し、当該モジュール生成部44によるモジュール群の生成に必要な情報として、前記モジュール群に画像データを入力する入力モジュールを識別するための入力モジュール識別情報、前記モジュール群が画像データを出力する出力モジュールを識別するための出力モジュール識別情報、前記モジュール群に入力される入力画像データの属性を表す入力画像属性情報、実行すべき画像処理のパラメータを通知し、対応するモジュール群の生成を指示する(図3のステップ166も参照)。
【0043】
なお、上記の入力モジュールは、実行順序が1番目のモジュール群については画像データ供給部22が入力モジュールとなり、実行順序が2番目以降のモジュール群については前段のモジュール群の最終モジュール(通常はバッファモジュール40)が入力モジュールとなる。また、上記の出力モジュールについては、実行順序が最後のモジュール群では画像出力部24が出力モジュールとなるので、画像出力部24が出力モジュールとして指定されるが、その他のモジュール群では出力モジュールは未確定のためにアプリケーション32による指定は行われず、必要な場合はモジュール生成部44によって生成・設定される。また、入力画像属性や画像処理のパラメータについては、例えばユーザが実行を指示可能なジョブの種類と対応付けて予め情報として登録しておき、実行が指示されたジョブの種類に対応する情報を読み出すことでアプリケーション32が認識するようにしてもよいし、ユーザに指定させるようにしてもよい。
【0044】
一方、モジュール生成部44は、アプリケーション32によって起動されると図4(A)に示すモジュール生成処理を行う(図3のステップ168も参照)。モジュール生成処理では、まずステップ200において、このモジュール生成部44で次に生成すべき画像処理モジュール38が有るか否かを判定する。判定が否定された場合はモジュール生成処理を終了する。生成すべき画像処理モジュール38が有る場合には、ステップ202で生成すべき画像処理モジュール38に入力される入力画像データの属性を表す入力画像属性情報を取得し、次のステップ204では、ステップ202で取得した情報が表す入力画像データの属性に照らしても先のステップ200で生成すべきと判定した画像処理モジュール38の生成が必要か否かを判定する。
【0045】
具体的には、例えば実行中のモジュール生成処理に対応するモジュール生成部44が色変換処理を行うモジュール群を生成するモジュール生成部であり、画像処理のパラメータにより出力画像データの色空間としてCMY色空間がアプリケーション32から指定された場合、ステップ202で取得した入力画像属性情報に基づいて入力画像データがRGB色空間のデータであることが判明した場合には、色空間処理を行う画像処理モジュール38としてRGB→CMYの色空間変換を行う画像処理モジュール38を生成する必要があるが、入力画像データがCMY色空間のデータであった場合には、入力画像データの属性と出力画像データの属性が色空間に関して一致しているので、色空間変換処理を行う画像処理モジュール38は生成不要と判断することができる。不要と判断された場合はステップ200に戻る。
【0046】
なお、入力画像データの属性を取得する処理は、生成する画像処理モジュール38の前段にバッファモジュール40が存在している場合、当該バッファモジュール40に画像データの書き込みを行う更に前段の画像処理モジュール38から出力画像データの属性を取得することによって実現できる。
【0047】
次のステップ206では、生成する画像処理モジュール38の後段にバッファモジュール40が必要が否かを判定する。この判定は、画像処理モジュールの後段が出力モジュール(画像出力部24)である場合(例えば図5(A)〜(C)に示す画像処理部50における最後段の画像処理モジュール38を参照)や、例として図5(B)に示す画像処理部50においてスキュー角検知処理を行う画像処理モジュール38のように、画像処理モジュールが、画像データに対して解析等の画像処理を行いその結果を他の画像処理モジュール38へ出力するモジュールである場合は否定され、バッファモジュール40の生成を行うことなくステップ210へ移行するが、上記以外の場合は判定が肯定されてステップ208へ移行し、バッファ制御部40Bを起動する(バッファ制御部40Bのプログラムを実行するプロセス、スレッド又はオブジェクトを生成する)ことで、画像処理モジュールの後段に連結するバッファモジュール40を生成する。バッファ制御部40Bは、モジュール生成部44(或いは前述したアプリケーション32)によって起動されると図6に示すバッファ制御処理を行う。このバッファ制御処理については後述する。
【0048】
次のステップ210では、前段のモジュール(例えばバッファモジュール40)の情報と後段のバッファモジュール40の情報、画像処理モジュール38に入力される入力画像データの属性、処理パラメータを与えて、画像処理モジュール38を生成する。なお、ステップ206で後段のバッファモジュール40が不要と判断された画像処理モジュール38に対しては後段のバッファモジュール40の情報は与えられず、また例えば50%縮小処理のように処理内容が固定的で特別な画像処理パラメータが必要ない場合には処理パラメータは与えられない。
【0049】
モジュール生成処理(ステップ210)では、モジュールライブラリ36に登録されており、画像処理モジュール38として利用可能な複数の候補モジュールの中から、ステップ202で取得した入力画像データの属性、及び、画像処理モジュール38で実行すべき処理パラメータに合致する画像処理モジュール38を選択する。例えば実行中のモジュール生成処理に対応するモジュール生成部44が色変換処理を行うモジュール群を生成するモジュール生成部であり、処理パラメータにより出力画像データの色空間としてCMY色空間がアプリケーション32から指定され、更に入力画像データがRGB色空間のデータであった場合には、モジュールライブラリ36に登録されている各種の色空間処理を行う複数種の画像処理モジュール38の中から、RGB→CMYの色空間変換を行う画像処理モジュール38が選択される。
【0050】
また、画像処理モジュールが拡大・縮小処理を行う画像処理モジュール38であり、指定された拡大縮小率が50%以外であれば、入力された画像データに対して指定された拡大・縮小率で拡大・縮小処理を行う画像処理モジュール38が選択され、指定された拡大縮小率が50%であれば、拡大縮小率50%に特化した拡大縮小処理、すなわち入力された画像データを1画素おきに間引くことで50%に縮小する縮小処理を行う画像処理モジュール38が選択される。なお、画像処理モジュール38の選択は上記に限られるものではなく、例えば画像処理エンジン38Aによる画像処理における単位処理データ量が異なる画像処理モジュール38をモジュールライブラリ36に複数登録しておき、画像処理部50へ割当可能なメモリ領域のサイズ等の動作環境に応じて、適切な単位処理データ量の画像処理モジュール38を選択する(例えば上記サイズが小さくなるに従って単位処理データ量の小さい画像処理モジュール38を選択する等)ようにしてもよいし、アプリケーション32或いはユーザに選択させるようにしてもよい。
【0051】
次のステップ212では、後段のバッファモジュール40のIDと生成した画像処理モジュール38のIDの組をワークフロー管理部46Aに通知する。このIDは、個々のモジュールを一意に判別できる情報であればよく、例えば個々のモジュールの生成順に付与した番号や、バッファモジュール40や画像処理モジュール38のオブジェクトのメモリ上でのアドレス等でも良い。ワークフロー管理部46Aに通知された情報は、例えば図4(B)に示すようなテーブル形式やリスト形式、連想配列形式等でワークフロー管理部46Aの内部に保持され、後の処理で使われる。ここではテーブル形式で保持するものとして説明を続ける。
【0052】
なお、先程述べた後段のバッファモジュール40を持たない画像処理モジュール38の場合には、例えば下記の方法で処理を行う。図5(A)において出力処理を行う画像処理モジュール38のように、生成する画像処理モジュール38がパイプラインの終点又は有向非循環グラフの終点の一つである場合には、当該画像処理モジュール38をモジュール生成部44の出力として呼び出し元のアプリケーション32に戻す。また、図5(B)においてスキュー角検知処理を行う画像処理モジュール38のように、生成した画像処理モジュール38における画像処理の結果が他の画像処理モジュール(図5(B)では画像回転処理を行う画像処理モジュール38)で使われる場合、モジュール生成部44は、当該画像処理モジュール38に対して処理が終了するまで繰り返し処理実行を指示して、処理結果を取得する。
【0053】
ステップ212の処理が終了すると、モジュール生成部44は制御をステップ200に戻して次に生成すべき画像処理モジュールがあるか否かを判定する。なお、個々のモジュール生成部44は、対応する一定の画像処理を行うモジュール群を生成するので、この判定は、個々のモジュール生成部44毎にどのような画像処理モジュールをどのような接続関係で生成するかに関する情報を予め登録して読み出すか、又はモジュール生成部44を動作させるプログラム中に記述しておくことでも実現できる。例えば実行中のモジュール生成処理に対応するモジュール生成部44が、複数種の画像処理モジュール38によって実現される画像処理(例えばスキュー角検知処理を行う画像処理モジュール38と画像回転処理を行う画像処理モジュール38によって実現されるスキュー補正処理)を行うモジュール群を生成する場合には、2個以上の画像処理モジュール38を含むモジュール群が生成される。
【0054】
アプリケーション32は、モジュール群の生成を指示したモジュール生成部44から、上記のようにしてモジュール群の生成完了が通知されると、図3のステップ162における判定の結果に基づいて、必要とされる画像処理を実現するために他の画像処理を行うモジュール群も生成する必要があるか否か判断する。必要とされる画像処理が複数種の画像処理を組み合わせた処理である場合、アプリケーション32は、個々の画像処理に対応する他のモジュール生成部44を起動してモジュール群の生成に必要な情報を通知する処理を順次行う(図3のステップ170,172も参照)。そして、順次起動されたモジュール生成部44によって上述したモジュール生成処理(図4)が順次行われる(図3のステップ174も参照)ことで、例として図5(A)〜(C)に示すように、必要とされる画像処理を行う画像処理部50が構築されることになる。
【0055】
なお、本実施形態では、特定の画像処理の実行頻度が高い等の場合に、アプリケーション32が、特定の画像処理を行う画像処理部50を生成するための複数種のモジュール生成部44に対し、特定の画像処理を行う画像処理部50を生成させた後も処理終了を指示しないことでプロセス、スレッド又はオブジェクトとして残しておき、特定の画像処理を行う必要が生ずる毎に、プロセス、スレッド又はオブジェクトとして残しておいた各モジュール生成部44に対してモジュール群の生成を順次指示することで、特定の画像処理を行う画像処理部50を再生成させることも可能とされている。これにより、特定の画像処理を行う必要が生ずる毎に対応する各モジュール生成部44を各々起動する処理が不要となり、特定の画像処理を行う画像処理部50を再生成するのに要する時間を短縮することができる。
【0056】
ところで、画像処理モジュール38の制御部38Bは、モジュール生成部44によって起動されると図12に示す画像処理モジュール初期化処理を行う。この画像処理モジュール初期化処理では、まずステップ250において、モジュール生成部44がモジュール生成処理(図4)のステップ210の処理を行うことでモジュール生成部44から与えられた自モジュールの前段及び後段のモジュールの情報を記憶する。また、次のステップ252では、自モジュールの画像処理エンジン38Aが行う画像処理の種類や内容等に基づき、自モジュールが使用するメモリのサイズ及び自モジュールが使用する他のリソースを認識する。なお、自モジュールが使用するメモリは、画像処理エンジン38Aが画像処理を行うために必要なメモリが主であるが、前段のモジュールが画像データ供給部22である場合や後段のモジュールが画像出力部24である場合には、前段又は後段のモジュールとの画像データの送受に際して画像データを一時記憶するためのバッファ用のメモリが必要となることもある。また、処理パラメータにテーブル等の情報が含まれている場合には、それを保持するためのメモリ領域が必要となることもある。そしてステップ254では、ステップ252で認識したサイズをリソース管理部46Bへ通知すると共に、通知したサイズのメモリ領域の確保をリソース管理部46Bへ要求する。
【0057】
図2に示すリソース管理処理(リソース管理部46B)では、画像処理モジュール38又はバッファモジュール40からメモリ領域の確保が要求されると、例えば選択・設定されているメモリ管理方式が第1管理方式である場合には、メモリ確保要求元のモジュールから通知されたサイズのメモリ領域(連続領域)をオペレーティングシステム30を通じてメモリ14から確保する。そして確保したメモリ領域の先頭アドレスをメモリ確保要求元のモジュールへ通知することで、確保したメモリ領域をメモリ確保要求元のモジュールに引き渡す。また、メモリ管理方式が第2管理方式であれば、事前に確保したメモリ領域のうちの未使用領域から通知されたサイズのメモリ領域(連続領域)を確保し、確保したメモリ領域を「使用済み」に変更すると共に、確保したメモリ領域をメモリ確保要求元へ引き渡す。また、選択・設定されているメモリ管理方式が第3管理方式であれば、前述したメモリ確保要求時処理(図2(B)参照)が実行されることで、通知されたサイズのメモリ領域の確保・引き渡しが行われる。
【0058】
図12に示す画像処理モジュール初期化処理(画像処理モジュール38の制御部38B)では、上記の処理を経てリソース管理部46B経由で必要なメモリ領域を確保すると、次のステップ256において、先のステップ252の処理結果に基づき、メモリ以外の他のリソースを自モジュール(の画像処理エンジン38A)が必要としているか否か判定する。判定が否定された場合は何ら処理を行うことなくステップ262へ移行するが、判定が肯定された場合はステップ258へ移行し、自モジュールが必要としているメモリ以外の他のリソースの種類等をリソース管理部46Bへ通知すると共に、通知した他のリソースの確保をリソース管理部46Bへ要求して確保する。
【0059】
次に、ステップ262では自モジュールの前段のモジュールを判定し、自モジュールの前段にモジュールが存在していない場合にはステップ272へ移行し、前段のモジュールがバッファモジュール40以外、例えば画像データ供給部22や特定のファイル等である場合には、必要に応じてステップ270でその初期化処理を行ってステップ272に移る。また、自モジュールの前段にモジュールが存在しており、当該前段のモジュールがバッファモジュール40であった場合には、ステップ262からステップ264へ移行し、前段のバッファモジュール40からの1回の画像データの読み出しによって取得する画像データのデータ量(単位読出データ量)を認識する。この単位読出データ量は、自モジュールの前段のバッファモジュール40の数が1個であれば1個だけであるが、例えば図5(C)に示す画像処理部50において画像合成処理を行う画像処理モジュール38のように、前段のバッファモジュール40の数が複数で、複数のバッファモジュール40から各々取得した画像データを用いて画像処理エンジン38Aが画像処理を行う等の場合、前段の個々のバッファモジュール40に対応する単位読出データ量は、自モジュールの画像処理エンジン38Aが行う画像処理の種類や内容、前段のバッファモジュール40の数等に応じて定まる。
【0060】
ステップ266では、ステップ264で認識した単位読出データ量を前段の単一のバッファモジュール40へ通知することで、当該バッファモジュール40に対して単位読出データ量を設定する(図15(A)の(1)も参照)。次のステップ268では、自モジュールの前段の全てのバッファモジュール40に単位読出データ量を設定したか否か判定する。自モジュールの前段のバッファモジュール40の数が1個であれば当該判定は肯定されてステップ272へ移行するが、前段のバッファモジュール40の数が複数であればステップ268の判定が否定されてステップ266に戻り、ステップ268の判定が肯定される迄、ステップ266,268を繰り返す。これにより、前段の全てのバッファモジュール40に対して単位読出データ量が各々設定されることになる。
【0061】
ステップ272では、自モジュールの後段のモジュールを判定し、自モジュールの後段のモジュールがバッファモジュール40以外、例えば画像出力部24や特定のファイル等の場合には、必要に応じてステップ278でその初期化処理を行ってステップ280に移る。例えば後段のモジュールが、画像記録部や表示部、書込装置、送信部の何れかから成る画像出力部24であれば、この画像出力部24に対し、上記の初期化処理として、単位書込データ量に相当するデータ量ずつ画像データを出力することを通知する処理等を行う。また、後段のモジュールがバッファモジュール40である場合には、ステップ274で1回の画像データの書き込みにおける画像データのデータ量(単位書込データ量)を認識し、ステップ276で後段のバッファモジュールに当該単位書込データ量を設定(図15(A)の(2)も参照)した後に、ステップ280に移る。ステップ280では、当該画像処理モジュール初期化処理の完了をモジュール生成部44に通知して、画像処理モジュール初期化処理を終了する。
【0062】
一方、画像処理部50を構成する個々のバッファモジュール40のバッファ制御部40Bは、モジュール生成部44又はアプリケーション32によって起動されると図6に示すバッファ制御処理を行う。このバッファ制御処理では、モジュール生成部44又はアプリケーション32によって起動されてバッファモジュール40の生成が指示されると、ステップ356で待ち要求数を0に初期化する。また、次のステップ358では、自モジュールの前段の画像処理モジュール38から単位書込データ量が通知されるか又は自モジュールの後段の画像処理モジュール38から単位読出データ量が通知されたか否か判定する。判定が否定された場合はステップ362へ移行し、自モジュールと連結されている全ての画像処理モジュール38から単位書込データ量又は単位読出データ量が通知されたか否か判定する。判定が否定された場合はステップ358に戻り、ステップ358又はステップ362の判定が肯定される迄ステップ358,362を繰り返す。
【0063】
自モジュールと連結されている特定の画像処理モジュール38から単位書込データ量又は単位読出データ量が通知されると、ステップ358の判定が肯定されてステップ360へ移行し、通知された単位書込データ量又は単位読出データ量を記憶した後にステップ358に戻る。従って、自モジュールと連結されている個々の画像処理モジュール38の制御部38Bによって画像処理モジュール初期化処理(図12)のステップ266又はステップ276の処理が行われることで、前記個々の画像処理モジュール38から単位書込データ量又は単位読出データ量が通知される毎に、通知された単位書込データ量又は単位読出データ量が記憶されることで、通知された単位書込データ量又は単位読出データ量がバッファモジュール40に設定される(図15(B)の(1),(2)も参照)。
【0064】
自モジュールと連結されている全ての画像処理モジュール38から単位書込データ量又は単位読出データ量が通知され、通知された単位書込データ量及び単位読出データ量が各々設定されると、ステップ362の判定が肯定されてステップ364へ移行し、自モジュールと連結されている個々の画像処理モジュール38によって各々設定された単位書込データ量及び単位読出データ量に基づいて、自モジュールのバッファ40Aの管理単位である単位バッファ領域のサイズを決定し、決定した単位バッファ領域のサイズを記憶する。単位バッファ領域のサイズとしては、自モジュールに設定された単位書込データ量及び単位読出データ量のうちの最大値が好適であるが、単位書込データ量を設定してもよいし、単位読出データ量(自モジュールの後段に複数の画像処理モジュール38が連結されている場合は、個々の画像処理モジュール38によって各々設定された単位読出データ量の最大値)を設定してもよいし、単位書込データ量と単位読出データ量(の最大値)の最小公倍数を設定してもよいし、この最小公倍数が所定値未満であれば最小公倍数を、最小公倍数が所定値以上であれば別の値(例えば上述した単位書込データ量及び単位読出データ量のうちの最大値、単位書込データ量、単位読出データ量(の最大値)の何れか)を設定するようにしてもよい。
【0065】
次のステップ366では、自モジュールのバッファ40Aとして用いるメモリ領域が既に設けられているか否か判定する。この判定は、自モジュールがモジュール生成部44によって生成された場合には否定され、ステップ368でバッファフラグに0を設定した後にステップ374へ移行する。また、自モジュールがアプリケーション32によって生成され、画像データ供給部22又は画像出力部24として機能するバッファモジュール40であった場合には、自モジュールのバッファ40Aとして用いるメモリ領域が既に存在しているので、ステップ366の判定が肯定されてステップ370へ移行し、先程ステップ364で決定した単位バッファ領域のサイズを、自モジュールのバッファ40Aとして用いる既設のメモリ領域のサイズに変更する。また、次のステップ372でバッファフラグに1を設定した後にステップ374へ移行する。
【0066】
更に、ステップ374では自モジュールの後段の個々の画像処理モジュール38に対応する有効データポインタを各々生成し、生成した有効データポインタを各々初期化する。この有効データポインタは、自モジュールの前段の画像処理モジュールによって自モジュールのバッファ40Aに書き込まれた画像データのうち、対応する後段の画像処理モジュール38によって読み出されていない画像データ(有効データ)について、その先頭位置(次の読出開始位置)と末尾位置を各々指し示すポインタであり、ステップ374の初期化処理では通常、有効データが存在していないことを意味する特定の情報が設定されるが、自モジュールが自モジュールがアプリケーション32によって生成され、画像データ供給部22として機能するバッファモジュール40であれば、自モジュールのバッファ40Aとして用いるメモリ領域には既に画像処理対象の画像データが書き込まれている場合があり、この場合には当該画像データの先頭位置及び末尾位置が後段の個々の画像処理モジュール38に対応する有効データポインタに各々設定される。
【0067】
以上の処理によりバッファモジュール40における初期化処理が完了し、次のステップ376では初期化処理の完了をワークフロー管理部46Aへ通知する。また、ステップ378では、先のステップ356で初期設定を行った待ち要求数に0よりも大きい値が設定されているか否か判定する。判定が否定された場合はステップ380へ移行し、自モジュールの前段又は後段に連結されている画像処理モジュール38から、当該画像処理モジュール38を消去する処理を行うことを通知する消去通知を受信したか否か判定する。この判定も否定された場合はステップ378に戻り、何れかの判定が肯定される迄ステップ378,380を繰り返す。
【0068】
一方、アプリケーション32は、順次起動したモジュール生成部44によって前述のモジュール生成処理(図4)が順次行われることで、必要とされる画像処理を行う画像処理部50の構築が完了すると、実行が指示されている画像処理の実行形態がブロック単位処理か面単位処理かを判断し、判断した実行形態に対応するワークフロー管理部46Aのプログラムを実行するプロセス、スレッド又はオブジェクトを起動することで、ワークフロー管理部46Aに対して画像処理部50による画像処理の実行を指示する(図3のステップ176も参照)。
【0069】
処理管理部46のワークフロー管理部46Aは、画像処理の実行形態に応じて異なるプログラムが起動されることで、画像処理の実行形態がブロック単位処理である場合は図16に示すブロック単位制御処理を、画像処理の実行形態が面単位処理である場合は図17に示す面単位制御処理を行う。なお、このブロック単位処理及び面単位制御処理は、図3のステップ178に示す画像処理部制御処理に各々対応している。ワークフロー管理部46Aはブロック単位処理又は面単位制御処理において、画像処理部50を構成する画像処理モジュール38のうちの予め定められた画像処理モジュール38に処理要求を入力することで、画像処理部50による画像処理をブロック単位又は面単位の実行形態で行わせるが、以下では画像処理部50全体の動作説明に先立ち、個々のバッファモジュール40のバッファ制御部40Bによって行われる初期化処理完了以降の処理、個々の画像処理モジュール38の制御部38Bによって行われる画像処理モジュール制御処理について順に説明する。
【0070】
本実施形態では、画像処理モジュール38が後段のバッファモジュール40に画像データを書き込む場合には、画像処理モジュール38からバッファモジュール40へ書込要求が入力され、画像処理モジュール38が前段のバッファモジュール40から画像データを読み出す場合には、画像処理モジュール38からバッファモジュール40へ読出要求が入力される。このため、バッファモジュール40のバッファ制御部40Bは、自モジュールの前段の画像処理モジュール38から書込要求が入力されるか、又は自モジュールの後段の画像処理モジュール38からデータ要求が入力されると、割込が発生することで図7に示す要求受信割込処理を行う。なお、以下では割込発生を前提に説明するが、通常のプログラムのように関数やメソッドの呼び出しで処理が始まっても良い。その場合には、以下で説明するように要求を待ち行列にキューイングするのではなく、要求毎に処理が行われるよう構成しても良い。
【0071】
この要求受信割込処理では、まずステップ400において、自モジュールに書込要求又はデータ要求を入力した要求元を識別する要求元識別情報と要求の種別(書込か読出か)を表す要求種別情報を要求情報として待ち行列の末尾に登録する。この待ち行列は、個々のバッファモジュール40に割り当てられたメモリ上に各々形成される。また、次のステップ402では待ち要求数を1だけインクリメントし、要求受信割込処理を終了する。この要求受信割込処理により、特定のバッファモジュール40の前段又は後段の画像処理モジュールから特定のバッファモジュール40に書込要求又は読出要求が入力される毎に、入力された書込要求又は読出要求に対応する要求情報が特定のバッファモジュール40に対応する待ち行列に順次登録されると共に、待ち要求数が1ずつインクリメントされることになる。
【0072】
また、上記の要求受信割込処理が実行されることで待ち要求数が1以上の値になると、バッファ制御処理(図6)のステップ378の判定が肯定されてステップ382へ移行し、待ち行列の先頭から要求情報を取り出す。次のステップ384では、ステップ382で取り出した要求情報に含まれる要求種別情報に基づいて、取り出した要求情報に対応する要求の種別(書込か読出か)を判定し、判定結果に応じて分岐する。要求の種別が読出であった場合には、ステップ384からステップ386へ移行し、図8に示すデータ書込処理を行う。
【0073】
データ書込処理では、まずステップ410において、バッファフラグに1が設定されているか否か、すなわち自モジュールがアプリケーション32によって生成されたバッファモジュール40か否か判定する。この判定が肯定された場合は、バッファ40Aとして用いるメモリ領域が既に確保されているので、何ら処理を行うことなくステップ422へ移行する。また、ステップ410の判定が否定された場合、すなわち自モジュールがモジュール生成部44によって生成されたバッファモジュール40であった場合にはステップ412へ移行し、自モジュールのバッファ40Aを構成する単位バッファ領域の中に、空き領域が有る単位バッファ領域(画像データが末尾まで書き込まれていない単位バッファ領域)が存在しているか否か判定する。
【0074】
モジュール生成部44によって生成されたバッファモジュール40は、当初はバッファ40Aとして用いるメモリ領域(単位バッファ領域)が確保されておらず、メモリ領域の不足が生ずる度に単位バッファ領域を単位として確保されるので、バッファモジュール40に最初に書込要求が入力されたときにはバッファ40Aとして用いるメモリ領域(単位バッファ領域)が存在しておらず、この判定は否定される。また、後述する処理を経てバッファ40Aとして用いる単位バッファ領域が確保された後も、当該単位バッファ領域への画像データの書込に伴って当該単位バッファ領域が丁度満杯になった場合には上記判定は否定される。
【0075】
ステップ412の判定が否定された場合はステップ414へ移行し、待ち行列から取り出した要求情報に含まれる要求元識別情報に基づいて書込要求元の画像処理モジュール38を認識し、書込要求元の画像処理モジュール38によって設定された単位書込データ量を認識した後に、認識した単位書込データ量が、先のステップ364(図6)で決定した単位バッファ領域のサイズよりも大きいか否か判定する。この判定は、単位バッファ領域のサイズとして、自モジュールに設定された単位書込データ量及び単位読出データ量のうちの最大値、或いは自モジュールに設定された単位書込データ量を採用した場合には常に否定されてステップ420へ移行し、確保すべきメモリ領域のサイズ(単位バッファ領域のサイズ)をリソース管理部46Bに通知すると共に、自モジュールのバッファ40Aとして用いるメモリ領域(画像データの保管に用いる単位バッファ領域)の確保をリソース管理部46Bに要求する。これにより、リソース管理部46Bによって前述のステップ112〜ステップ120(図2)の処理が行われることで単位バッファ領域が確保される。
【0076】
また、自モジュールのバッファ40Aを構成する単位バッファ領域の中に、空き領域有りの単位バッファ領域が存在していた場合には、ステップ412の判定が肯定されてステップ416へ移行し、前述したステップ414と同様にして書込要求元の画像処理モジュール38によって設定された単位書込データ量を認識した後に、空き領域有りの単位バッファ領域における空き領域のサイズが認識した単位書込データ量以上か否か判定する。判定が肯定された場合は、自モジュールのバッファ40Aとして用いる単位バッファ領域を新たに確保する必要は無いので、何ら処理を行うことなくステップ422へ移行する。
【0077】
単位バッファ領域のサイズが単位書込データ量の整数倍である場合には、自モジュールの前段の画像処理モジュール38から書込要求が入力される毎に、上記のようにステップ412,414の判定が各々否定されるか又はステップ412,416の判定が各々肯定され、バッファ40Aとして用いる単位バッファ領域のみが必要に応じて確保される。
【0078】
一方、単位バッファ領域のサイズが単位書込データ量の整数倍でない場合には、バッファ40A(単位バッファ領域)への単位書込データ量の画像データの書込が繰り返されることで、例として図9(A)にも示すように、空き領域有りの単位バッファ領域における空き領域のサイズが単位書込データ量よりも小さい状態が生ずる(ステップ416の判定が肯定される)。また本実施形態では、単位バッファ領域のサイズとして、自モジュールに設定された単位読出データ量(又はその最大値)を採用することも可能であるが、そのサイズが単位書込データ量よりも小さい場合(ステップ414の判定が肯定される場合)には、書込要求が入力されたときに常に上記の状態が生じていることになる。
【0079】
上記のように、空き領域有りの単位バッファ領域における空き領域のサイズが単位書込データ量よりも小さい場合、単位書込データ量の画像データが書き込まれる領域が複数の単位バッファ領域に跨ることになるが、本実施形態では、バッファ40Aとして用いるメモリ領域を単位バッファ領域を単位として確保するので、異なるタイミングで確保した単位バッファ領域が実メモリ(メモリ14)上で連続する領域であることは保証されない。このため、画像データが書き込まれる領域が複数の単位バッファ領域に跨る場合、すなわち、ステップ416の判定が否定されるかステップ414の判定が肯定された場合にはステップ418へ移行し、確保すべきメモリ領域のサイズとして単位書込データ量をリソース管理部46Bに通知すると共に、書込用に用いるメモリ領域(書込用バッファ領域:図9(B)も参照)の確保をリソース管理部46Bに要求する。そして、書込用バッファ領域を確保すると、次のステップ420でバッファ40Aとして用いる単位バッファ領域の確保を行う。
【0080】
ステップ422では、空き領域有りの単位バッファ領域における空き領域のサイズが単位書込データ量以上の場合は当該空き領域を書込領域とする一方、空き領域有りの単位バッファ領域における空き領域のサイズが単位書込データ量よりも小さい場合には、新たに確保した書込用バッファ領域を書込領域として、当該書込領域の先頭アドレスを書込要求元の画像処理モジュール38へ通知すると共に、書込対象の画像データを通知した先頭アドレスから順に書き込むよう要請する。これにより、書込要求元の画像処理モジュール38は、先頭アドレスが通知された書込領域(単位バッファ領域又は書込用バッファ領域)に画像データを書き込む(図9(B)も参照)。前述したように、画像データが書き込まれる領域が複数の単位バッファ領域に跨る場合は書込用バッファ領域を別途確保するので、画像データが書き込まれる領域が複数の単位バッファ領域に跨るか否かに拘わらず、書込要求元の画像処理モジュール38への書込領域の通知は、上記のようにその先頭アドレスを通知するのみで済み、画像処理モジュール38とのインタフェースが簡単になる。
【0081】
次のステップ424では、前段の画像処理モジュール38による書込領域への画像データの書き込みが完了したか否か判定し、判定が肯定される迄ステップ424を繰り返す。前段の画像処理モジュール38から書込完了が通知されると、ステップ424の判定が肯定されてステップ426へ移行し、上記の書込処理における書込領域が、先のステップ416で確保した書込用バッファ領域か否か判定する。判定が否定された場合は何ら処理を行うことなくステップ432へ移行するが、ステップ426の判定が肯定された場合はステップ428へ移行し、例として図9(C)に示すように、書込用バッファ領域に書き込まれた画像データを、空き領域有りの単位バッファ領域と、先のステップ422で確保した新たな単位バッファ領域に分けて複写する。またステップ430では、先のステップ418で書込用バッファ領域として確保したメモリ領域の先頭アドレスをリソース管理部46Bへ通知して、当該メモリ領域の解放をリソース管理部46Bに要求する。
【0082】
なお、ここでは必要な時に書込用バッファ領域を確保して、不要になったら直ぐに解放する態様を説明したが、保管用単位バッファ領域のサイズが単位書込データ量の整数倍になっていない場合には、書込用バッファ領域は必ず必要となるので、初期化時に確保しておき、バッファモジュール40が消去される時に解放するよう構成しても良い。
【0083】
リソース管理部46Bは、画像処理モジュール38又はバッファモジュール40からメモリ領域の解放が要求されると、選択・設定されているメモリ管理方式に応じたメモリ解放の処理を行う。例えばメモリ管理方式が第3管理方式であれば図2(C)のメモリ解放要求時処理(示す処理)を行ってメモリ領域の解放を行う。
【0084】
データ書込処理(図8)において、ステップ426の判定が否定されるか、又はステップ430でメモリ領域の解放を要求した後にリソース管理部46Bから解放完了が通知されるとステップ432へ移行し、自モジュールの後段の個々の画像処理モジュール38に対応する有効データポインタのうち、有効データの末尾位置を表すポインタを各々更新する(図9(C)も参照)。なお、上記のポインタ更新は、ポインタが指し示す有効データの末尾位置を単位書込データ量分だけ後へ移動させることによって成されるが、自モジュールの前段の画像処理モジュール38によって今回書き込まれた画像データが処理対象の画像データの末尾に相当するデータであった場合には、前段の画像処理モジュール38による書込処理完了時に、処理対象の画像データが終了したことを表す全体処理終了通知と共に、書き込んだ画像データのサイズが前段の画像処理モジュール38から入力されるので、書込処理完了時に前段の画像処理モジュール38から全体処理終了通知が入力された場合には、同時に通知されたサイズ分だけ有効データの末尾位置を後へ移動させることでポインタ更新が行われる。
【0085】
次のステップ434では、書込処理完了時に全体処理終了通知が入力されたか否かに基づいて、バッファ40Aへの処理対象の画像データの書込が終了したか否か判定する。判定が否定された場合は何ら処理を行うことなくステップ438へ移行するが、判定が肯定された場合はステップ436へ移行し、ステップ432で更新したポインタ(自モジュールの後段の個々の画像処理モジュール38に対応する有効データポインタのうち有効データの末尾位置を表すポインタ)に対し、処理対象の画像データの末尾であることを表すデータ最終位置情報を付加した後にステップ438へ移行する。そしてステップ438では待ち要求数を1だけデクリメントし、データ書込処理を終了してバッファ制御処理(図6)のステップ378に戻る。
【0086】
またバッファ制御処理(図6)において、ステップ382で取り出した要求情報に対応する要求の種別が読出であった場合には、ステップ384からステップ388へ移行し、図10に示すデータ読込処理を行う。データ読出処理では、まずステップ450において、待ち行列から取り出した要求情報に含まれる要求元識別情報に基づいて読出要求元の画像処理モジュール38を認識し、読出要求元の画像処理モジュール38によって設定された単位読出データ量を認識すると共に、読出要求元の画像処理モジュール38に対応する有効データポインタに基づいて、読出要求元の画像処理モジュール38に対応する有効データのバッファ40A上での先頭位置及び末尾位置を認識する。次のステップ452では、ステップ450で認識した有効データの先頭位置及び末尾位置に基づいて、読出要求元の画像処理モジュール38に対応する有効データ(読出要求元の画像処理モジュール38が読出可能な画像データ)が単位読出データ量以上有るか否か判定する。
【0087】
判定が否定された場合はステップ454へ移行し、バッファ40Aに記憶されており読出要求元の画像処理モジュール38が読出可能な有効データの末尾が処理対象の画像データの末尾か否か判定する。読出要求元の画像処理モジュール38に対応する有効データがバッファ40Aに単位読出データ量以上記憶されているか、又は、バッファ40Aに記憶されている読出要求元の画像処理モジュール38に対応する有効データが単位読出データ量未満であるものの、当該有効データの末尾が処理対象の画像データの末尾であった場合には、ステップ452又はステップ454の判定が肯定されてステップ456へ移行する。ステップ456では、先のステップ450で認識した有効データの先頭位置に基づいて、有効データの先頭部分の画像データを記憶している単位バッファ領域を認識し、認識した単位バッファ領域に記憶されている有効データのデータ量がステップ450で認識した単位読出データ量以上か否かを判断することで、今回の読出対象の有効データが複数の単位バッファ領域に跨っているか否か判定する。
【0088】
ステップ456の判定が否定された場合は何ら処理を行うことなくステップ460へ移行するが、例として図11(A)に示すように、有効データの先頭部分の画像データを記憶している単位バッファ領域に記憶されている有効データのデータ量が単位読出データ量未満であり、今回の読出対象の有効データが複数の単位バッファ領域に跨っている場合、今回の読出対象の有効データが実メモリ(メモリ14)上で連続する領域に記憶されているとは限らない。このため、ステップ456の判定が肯定された場合はステップ460へ移行し、確保すべきメモリ領域のサイズとして読出要求元の画像処理モジュール38に対応する単位読出データ量をリソース管理部46Bに通知すると共に、読出に用いるメモリ領域(読出用バッファ領域:図9(B)も参照)の確保をリソース管理部46Bに要求する。また、読出用バッファ領域を確保すると、次のステップ460で複数の単位バッファ領域に跨って記憶されている読出対象の有効データを、ステップ458で確保した読出用バッファ領域に複写する(図11(B)も参照)。
【0089】
ステップ462では、読出対象の有効データが単一の単位バッファ領域に記憶されている場合は、当該単位バッファ領域のうち読出対象の有効データが記憶されている領域を読出領域とする一方、読出対象の有効データが複数の単位バッファ領域に跨って記憶されている場合には読出用バッファ領域を読出領域とし、当該読出領域の先頭アドレスを読出要求元の画像処理モジュール38へ通知すると共に、通知した先頭アドレスから画像データを順に読み出すよう要請する。これにより、読出要求元の画像処理モジュール38は、先頭アドレスが通知された読出領域(単位バッファ領域又は読出用バッファ領域)からの画像データの読み出しを行う(図11(C)も参照)。なお、読出対象の有効データが処理対象の画像データの末尾に相当するデータであった場合(読出対象の有効データの末尾位置が、読出要求元の画像処理モジュール38に対応する有効データポインタが指し示す有効データの末尾位置に一致しており、かつ前記ポインタにデータ最終位置情報が付加されていた場合)には、画像データの読出要請に際し、読出対象の有効データのサイズと共に、処理対象の画像データの末尾であることも読出要求元の画像処理モジュール38に通知する。
【0090】
前述したように、読出対象の有効データが複数の単位バッファ領域に跨って記憶されている場合は、別途確保した読出用バッファ領域に読出対象の有効データを複写するので、読出対象の有効データが複数の単位バッファ領域に跨って記憶されているか否かに拘わらず、読出要求元の画像処理モジュール38への読出領域の通知は、上記のようにその先頭アドレスを通知するのみで済み、画像処理モジュール38とのインタフェースが簡単になる。なお、自モジュールがアプリケーション32によって生成されたバッファモジュール40である場合は、バッファ40Aとして用いているメモリ領域(単位バッファ領域の集合体)は連続領域であるので、ステップ456の判定を行う前にバッファフラグが1か否か判定し、判定が肯定された場合は読出対象の有効データが複数の単位バッファ領域に跨って記憶されているか否かに拘わらずステップ462へ移行するようにしてもよい。
【0091】
次のステップ464では、読出要求元の画像処理モジュール38による読出領域からの画像データの読み出しが完了したか否か判定し、判定が肯定される迄ステップ464を繰り返す。読出要求元の画像処理モジュール38から読出完了が通知されると、ステップ464の判定が肯定されてステップ466へ移行し、上記の読出処理における読出領域が、先のステップ458で確保した読出用バッファ領域か否か判定する。判定が否定された場合は何ら処理を行うことなくステップ470へ移行するが、ステップ466の判定が肯定された場合はステップ468へ移行し、先のステップ458で読出用バッファ領域として確保したメモリ領域の先頭アドレス及びサイズをリソース管理部46Bへ通知して、当該メモリ領域の解放をリソース管理部46Bに要求する。この読出用バッファ領域についても書込用バッファ領域と同様に、保管用単位バッファ領域のサイズが単位読出データ量の整数倍になっていない場合には、読出用バッファ領域は必ず必要となるので、初期化時に確保しておき、バッファモジュール40が消去される時に解放するよう構成しても良い。
【0092】
次のステップ470では、読出要求元の画像処理モジュール38に対応する有効データポインタのうち、有効データの先頭位置を表すポインタを更新する(図11(C)も参照)。なお、上記のポインタ更新は、ポインタが指し示す有効データの先頭位置を単位読出データ量分だけ後へ移動させることによって成されるが、今回の読出対象の有効データが処理対象の画像データの末尾に相当するデータであった場合には、読出要求元の画像処理モジュール38へも通知した今回の読出対象の有効データのサイズ分だけ有効データの先頭位置を後へ移動させることでポインタ更新が行われる。
【0093】
ステップ472では、後段の個々の画像処理モジュール38に対応する有効データポインタを各々参照し、ステップ470のポインタ更新により、バッファ40Aを構成する単位バッファ領域の中に、記憶している画像データの後段の各画像処理モジュール38による読み出しが全て完了した単位バッファ領域、すなわち有効データを記憶していない単位バッファ領域が出現したか否か判定する。判定が否定された場合は何ら処理を行うことなくステップ478へ移行するが、判定が肯定された場合はステップ474へ移行し、バッファフラグが1か否か判定する。自モジュールがモジュール生成部44によって生成されたバッファモジュール40である場合は判定が否定されてステップ476へ移行し、有効データを記憶していない単位バッファ領域の解放をリソース管理部46Bに要求する。
【0094】
なお、自モジュールがアプリケーション32によって生成されたバッファモジュール40である場合にはステップ474の判定が肯定され、何ら処理を行うことなくステップ478へ移行する。従って、ユーザによって指定されたバッファ領域(メモリ領域)をバッファ40Aとして用いている場合には、前記バッファ領域は解放されることなく保存されることになる。そしてステップ478では待ち要求数を1だけデクリメントし、データ読み出し処理を終了してバッファ制御処理(図6)のステップ378に戻る。
【0095】
一方、バッファ40Aに記憶されており読出要求元の画像処理モジュール38が読出可能な有効データのデータ量が単位読出データ量未満であり、かつ読出可能な有効データの末尾が処理対象の画像データの末尾でない場合(図15(B)の(4)で読出可能な有効データ無が検知された場合)には、ステップ452,454の判定が各々否定されてステップ480へ移行し、新たな画像データを要求するデータ要求をワークフロー管理部46Aへ出力する(図15(B)の(5)も参照)。この場合、ワークフロー管理部46Aにより、自モジュールの前段の画像処理モジュール38に処理要求が入力されることになる。またステップ482では、先のステップ382(図6)で待ち行列から取り出した要求情報を元の待ち行列の末尾に再度登録し、データ読出処理を終了する。
【0096】
図6に示すように、データ読出処理を終了するとステップ378(図6)に戻るので、この場合、待ち行列の末尾に再度登録された要求情報は、待ち行列に他の要求情報が登録されていなければ直ちに、待ち行列に他の要求情報が登録されていれば他の要求情報が取り出されてこの要求情報に応じた処理が行われた後に、待ち行列から再度取り出され、図10のデータ読出処理が再度実行される。従って、後段の画像処理モジュール38から読出要求が入力されたものの、読出要求元の画像処理モジュール38が読出可能な有効データのデータ量が単位読出データ量未満であり、かつ読出可能な有効データの末尾が処理対象の画像データの末尾でない場合には、読出可能な有効データのデータ量が単位読出データ量以上になるか、読出可能な有効データの末尾が処理対象の画像データの末尾であることが検知される迄(ステップ452又はステップ454の判定が肯定される迄)、対応する要求情報が保存されてデータ読出処理が繰り返し実行されることになる。
【0097】
詳細は後述するが、ワークフロー管理部46Aはバッファモジュール40からデータ要求が入力されると、データ要求元のバッファモジュール40の前段の画像処理モジュール38に処理要求を入力する(図15(B)の(6)も参照)。この処理要求の入力をトリガとして前段の画像処理モジュール38の制御部38Bで行われる処理により、前段の画像処理モジュール38がバッファモジュール40へ画像データを書込可能な状態になると、前段の画像処理モジュール38から書込要求が入力されることで前述したデータ書込処理(図8)が行われ、前段の画像処理モジュール38からバッファモジュール40のバッファ40Aに画像データが書き込まれる(図15(B)の(7),(8)も参照)。これにより、後段の画像処理モジュール38によるバッファ40Aからの画像データの読出が行われることになる(図15(B)の(9)も参照)。
【0098】
上述したように、本実施形態に係るバッファ制御処理では、前段の画像処理モジュール38から書込要求が入力されるか、又は後段の画像処理モジュールから読出要求が入力される毎に、入力された要求を要求情報として待ち行列に登録し、待ち行列から要求情報を1つずつ取り出して処理するので、データ書込処理の実行中に読出要求が入力されたり、データ読出処理の実行中に書込要求が入力された場合にも、実行中の処理が完了し入力された要求に対応する処理を実行可能な状態となる迄、入力された要求に対応する処理の実行を停止する排他制御が行われる。これにより、コンピュータ10のCPU12が画像処理部50を構成する個々のモジュールに対応するプロセス又はスレッドを並列に実行しても、単一のバッファモジュール40に複数の要求が同時又は略同時に入力されることによる不都合の発生を回避できるので、コンピュータ10のCPU12が個々のモジュールに対応するプロセス又はスレッドを並列に実行することができる。もちろん、バッファモジュールを通常のプログラム又はオブジェクトとして実現しても良い。
【0099】
続いて、画像処理部50を構成する個々の画像処理モジュール38に対してワークフロー管理部46Aから処理要求が入力される毎に、個々の画像処理モジュール38の制御部38Bによって各々行われる画像処理モジュール制御処理(図13)を説明する。画像処理モジュール制御処理では、まずステップ284において、自モジュールの前段にモジュール(バッファモジュール40や画像データ供給部22、画像処理モジュール38等)が存在している場合に、当該前段のモジュールに対してデータ(画像データ又は解析等の画像処理の処理結果)を要求する。次のステップ286では、前段のモジュールからデータが取得可能であるかを判定する。判定が否定された場合は、ステップ288で全体処理終了が通知されたか否かを判定する。ステップ288の判定が否定された場合はステップ286に戻り、前段のモジュールからデータを取得可能となる迄ステップ286,288を繰り返す。ステップ286の判定が肯定された場合には、ステップ290で前段のモジュールからデータを取得するデータ取得処理を行う。
【0100】
ここで、自モジュールの前段のモジュールがバッファモジュール40である場合には、先のステップ284でデータを要求すると(読出要求)、読出可能な有効データがバッファモジュール40のバッファ40Aに単位読出データ量以上記憶されているか、読出可能な有効データの末尾が処理対象の画像データの末尾に一致している状態であれば直ちに、当該状態でなければ、当該バッファモジュール40の前段の画像処理モジュール38が当該バッファモジュール40のバッファ40Aに画像データを書き込んだことに伴って前記状態へ変化した後に、バッファモジュール40から読出領域の先頭アドレスが通知されて画像データの読出が要請される(図10のステップ462も参照)。これにより、ステップ286の判定が肯定されてステップ290へ移行し、前段のバッファモジュール40より先頭アドレスが通知された読出領域から単位読出データ量(又はそれ未満のデータ量)の画像データを読み出すデータ取得処理を行う(図15(A)の(3)も参照)。
【0101】
また、自モジュールの前段のモジュールが画像データ供給部22であれば、先のステップ284でデータ要求を出力すると画像データを取得可能な状態であることが前段の画像データ供給部22から直ちに通知されることで、ステップ286の判定が肯定されてステップ290へ移行し、前段の画像データ供給部22から単位読出データ量の画像データを取得する画像データ取得処理を行う。また、自モジュールの前段のモジュールが画像処理モジュール38であれば、先のステップ284でデータ要求(処理要求)を出力すると、前段の画像処理モジュール38が画像処理を実行可能な状態であれば書込要求が入力されることでデータ(画像処理結果)を取得可能な状態であることが通知されるので、ステップ286の判定が肯定されてステップ290へ移行し、前段の画像処理モジュール38によってデータを書き込ませるバッファ領域のアドレスを通知して書込を要請することで、前段の画像処理モジュール38から出力されるデータを前記バッファに書き込ませるデータ取得処理を行う。
【0102】
次のステップ292では、自モジュールの前段に複数のモジュールが連結されているか否か判定する。判定が否定された場合には何ら処理を行うことなくステップ296へ移行するが、判定が肯定された場合はステップ294へ移行し、前段に連結されている全てのモジュールからデータを取得したか否か判定する。ステップ294の判定が否定された場合はステップ284に戻り、ステップ294の判定が肯定される迄ステップ284〜ステップ294を繰り返す。前段のモジュールから取得すべきデータが全て揃うと、ステップ292の判定が否定されるかステップ294の判定が肯定されてステップ296へ移行する。
【0103】
次に、ステップ296で自モジュールの後段のモジュールに対してデータ出力用の領域を要求し、ステップ298でデータ出力領域が取得できる迄(データ出力領域の先頭アドレスが通知される迄)繰り返し判定を行う。なお、後段のモジュールがバッファモジュール40であれば、上記のデータ出力用領域の要求は当該バッファモジュール40に対して書込要求を出力することによって成される。データ出力領域(後段のモジュールがバッファモジュール40であれば当該バッファモジュール40から先頭アドレスが通知された書込領域)が取得できたら(図15(A)の(4)も参照)、次のステップ300において、先のデータ取得処理で取得したデータと後段のモジュールから取得したデータ出力領域(の先頭アドレス)を画像処理エンジン38Aに入力し、入力したデータに対して予め定められた画像処理を行わせる(図15(A)の(5)も参照)と共に、処理後のデータをデータ出力領域に書き込ませる(図15(A)の(6)も参照)。画像処理エンジン38Aへの単位読出データ量のデータの入力が完了し、画像処理エンジン38Aから出力されたデータがデータ出力領域に全て書き込まれると、次のステップ302で出力が完了したことを後段のモジュールに通知する。
【0104】
上記のステップ284〜ステップ302により画像処理モジュール38における単位処理データ量のデータに対する処理(単位処理)が完了するが、ワークフロー管理部46Aから画像処理モジュール38に入力される処理要求では、ワークフロー管理部46Aによって単位処理の実行回数が指定されることがある。このためステップ304では、単位処理の実行回数が、入力された処理要求によって指示された実行回数に達したか否か判定する。指示された単位処理の実行回数が1回の場合、この判定は無条件に肯定されるが、指示された単位処理の実行回数が2回以上の場合はステップ284に戻り、ステップ304の判定が肯定される迄ステップ284〜ステップ304を繰り返す。ステップ304の判定が肯定されるとステップ306へ移行し、ワークフロー管理部46Aへ指示回数分の処理完了を示す処理完了通知を出力することで、入力された処理要求に対応する処理が完了したことをワークフロー管理部46Aへ通知する。なお、ステップ304で肯定判定されたとしても、処理対象の画像データについて自モジュールで処理すべき全ての処理が完了していない場合もある。そこで、ステップ306に続いて、ステップ312で、自モジュールの全処理が終了したか否かを判定する。
【0105】
例えば、画像処理モジュール38(ここで、この画像処理モジュール38の末尾に符号aを付して説明する。)で行われる処理が、クロップ(画像の一部切り取り)処理である場合において、当該画像処理モジュール38aが前段のモジュールから受け取った画像データから切り取るべき領域を全て切り取ってしまったときには、たとえ、この画像処理モジュール38aの前段の画像処理モジュール38(ここでは、この前段の画像処理モジュール38の末尾に符号bを付して説明する)において、該画像処理モジュール38aで切り取るべき領域以外の領域についての画像処理が未処理であったとしても、当該画像処理モジュール38aで行うべき処理は終了したとことなる。この場合には、ステップ312では肯定判定される。一方、当該画像処理モジュール38aが切り取るべき領域全てをまだ切り取っていないうちは、ステップ312では、否定判定される。ステップ312で肯定判定された場合には、ステップ314に進み、自モジュール消去処理(後述)を行って、画像処理モジュール制御処理を終了する。一方、ステップ312で否定判定された場合には、ステップ314をスキップして、画像処理モジュール制御処理を終了する。
【0106】
また、ワークフロー管理部46Aから処理要求が入力される毎に上述した処理が繰り返されることで処理対象の画像データを末尾まで処理すると、前段のモジュールから処理対象の画像データの終了が通知されることで、ステップ288の判定が肯定されてステップ308へ移行し、処理対象の画像データに対する処理が終了したことを意味する全体処理終了通知をワークフロー管理部46A及び後段のモジュールへ各々出力する。また、次のステップ310では自モジュール消去処理(後述)を行い、画像処理モジュール制御処理を終了する。
【0107】
なお、スキュー角検知処理等の画像解析処理を行う画像処理エンジン38Aは、単位読出データ量単位では画像処理結果が出力されず、処理対象の画像データ全体が入力された後に画像処理結果が出力される構成であることが多いが、このような画像処理エンジン38Aを備えた画像処理モジュール38の制御部38Bでは、画像処理モジュール制御処理(図13)のステップ296,298及びステップ300における後段のモジュールへのデータの出力を行わず、処理対象の画像データを末尾まで処理することでステップ288の判定が肯定されると、画像処理エンジン38Aから出力されたデータ(画像処理結果)を自モジュールの外部(ワークフロー管理部46A又はアプリケーション32)へ出力する。そして、上記の画像処理結果を必要としている別の画像処理モジュール38(例えばスキュー角検知処理の結果に基づいて画像回転処理を行う画像処理モジュール38等)があれば、ワークフロー管理部46A又はアプリケーション32から当該画像処理モジュール38へ上記の画像処理結果が入力される。
【0108】
一方、画像処理の実行形態としてブロック単位処理が指定された場合、ワークフロー管理部46Aは、アプリケーション32によって起動されると、図16(A)に示すブロック単位制御処理1を行う。先にも述べたように、ワークフロー管理部46Aによる画像処理部50の個々の画像処理モジュール38への処理要求の入力では、単位処理の実行回数を指定可能とされているが、ブロック単位制御処理1のステップ500では、1回の処理要求で指定する単位処理の実行回数を個々の画像処理モジュール38毎に決定する。この処理要求1回当りの単位処理の実行回数は、例えば処理対象の画像データ全体を処理する間の個々の画像処理モジュール38への処理要求の入力回数が平均化されるように定めることができるが、他の基準に従って定めてもよい。そして次のステップ502において、画像処理部50のうち最後段の画像処理モジュール38に処理要求を入力し(図18の(1)も参照)、ブロック単位制御処理1を終了する。
【0109】
ここで、図18に示す画像処理部50において、ワークフロー管理部46Aから最後段の画像処理モジュール384に処理要求が入力されると、画像処理モジュール384の制御部38Bは前段のバッファモジュール403に読出要求を入力する(図18の(2)参照)。このとき、バッファモジュール403のバッファ40Aには画像処理モジュール384が読出可能な有効データ(画像データ)が記憶されていないので、バッファモジュール403のバッファ制御部40Bはワークフロー管理部46Aにデータ要求を入力する(図18の(3)参照)。
【0110】
ワークフロー管理部46Aは、画像処理の実行形態がブロック単位処理である場合、バッファモジュール40からデータ要求が入力される毎に、図16(B)に示すブロック単位制御処理2を行う。このブロック単位制御処理2では、ステップ504において、図4(B)に示したテーブルに登録されている情報に基づいて、データ要求入力元のバッファモジュール40(ここではバッファモジュール403)の前段の画像処理モジュール38(ここでは画像処理モジュール383)を認識し、認識した前段の画像処理モジュール38に処理要求を入力(図18の(4)参照)して処理を終了する。
【0111】
画像処理モジュール383の制御部38Bは、処理要求が入力されると前段のバッファモジュール402に読出要求を入力し(図18の(5)参照)、バッファモジュール402のバッファ40Aにも読出可能な画像データが記憶されていないので、バッファモジュール402のバッファ制御部40Bはワークフロー管理部46Aにデータ要求を入力する(図18の(6)参照)。ワークフロー管理部46Aは、バッファモジュール402からデータ要求が入力された場合も、前述のブロック単位制御処理2を再度行うことで、その前段の画像処理モジュール382に処理要求を入力し(図18の(7)参照)、画像処理モジュール383の制御部38Bは前段のバッファモジュール401に読出要求を入力する(図18の(8)参照)。また、バッファモジュール401のバッファ40Aにも読出可能な画像データが記憶されていないので、バッファモジュール401のバッファ制御部40Bもワークフロー管理部46Aにデータ要求を入力し(図18の(9)参照)。ワークフロー管理部46Aは、バッファモジュール401からデータ要求が入力された場合も、前述のブロック単位制御処理2を再度行うことで、その前段の画像処理モジュール381に処理要求を入力する(図18の(10)参照)。
【0112】
ここで、画像処理モジュール381の前段のモジュールは画像データ供給部22であるので、画像処理モジュール381の制御部38Bは、画像データ供給部22にデータ要求を入力することで画像データ供給部22から単位読出データ量の画像データを取得し(図18の(11)参照)、取得した画像データに対して画像処理エンジン38Aが画像処理を行うことで得られた画像データを、後段のバッファモジュール401のバッファ40Aに書き込む(図18の(12)参照)。なお、画像処理モジュール381の制御部38Bは後段のバッファモジュール401のバッファ40Aへの画像データの書き込みを完了すると、ワークフロー管理部46Aへ処理完了通知を入力する。
【0113】
ワークフロー管理部46Aは、画像処理の実行形態がブロック単位処理である場合、画像処理モジュール38から処理完了通知が入力される毎に、図16(C)に示すブロック単位制御処理3を行う。このブロック単位制御処理3では、ステップ506において、処理完了通知元が画像処理部50の最後段の画像処理モジュール38か否か判定する。この場合は判定が否定され、何ら処理を行うことなく処理を終了する(画像処理モジュール382,383から処理完了通知が入力された場合についても同様)。
【0114】
また、バッファモジュール401のバッファ制御部40Bは、後段の画像処理モジュール382が読出可能な単位読出データ量以上の有効データが書き込まれると画像処理モジュール382に対して読出を要請し、これに伴い画像処理モジュール382の制御部38Bは、バッファモジュール401のバッファ40Aから単位読出データ量の画像データを読み出し(図18の(13)参照)、取得した画像データに対して画像処理エンジン38Aが画像処理を行うことで得られた画像データを、後段のバッファモジュール402のバッファ40Aに書き込む(図18の(14)参照)。バッファモジュール402のバッファ制御部40Bは、後段の画像処理モジュール383が読出可能な単位読出データ量以上の有効データが書き込まれると画像処理モジュール383へ読出を要請し、画像処理モジュール383の制御部38Bは、バッファモジュール402のバッファ40Aから単位読出データ量の画像データを読み出し(図18の(15)参照)、取得した画像データに対して画像処理エンジン38Aが画像処理を行うことで得られた画像データを、後段のバッファモジュール403のバッファ40Aに書き込む(図18の(16)参照)。
【0115】
更に、バッファモジュール403のバッファ制御部40Bは、後段の画像処理モジュール384が読出可能な単位読出データ量以上の有効データが書き込まれると画像処理モジュール384に対して読出を要請し、これに伴い画像処理モジュール384の制御部38Bは、バッファモジュール403のバッファ40Aから単位読出データ量の画像データを読み出し(図18の(17)参照)、取得した画像データに対して画像処理エンジン38Aが画像処理を行うことで得られた画像データを、後段のモジュールである画像出力部24へ出力する(図18の(18)参照)。また、画像処理モジュール384の制御部38Bは後段の画像出力部24への画像データの書き込みを完了すると、ワークフロー管理部46Aへ処理完了通知を入力する(図18の(19)参照)が、この場合は前述のブロック単位制御処理3のステップ506の判定が肯定されてステップ508へ移行し、最後段の画像処理モジュール38である画像処理モジュール384に処理要求を再度入力した後に処理を終了する。
【0116】
この最後段の画像処理モジュール384への処理要求の再入力により、上述した処理シーケンスが再度繰り返され、処理対象の画像データに対し、ブロック単位の実行形態での画像処理が順次行われることになる。画像データ供給部22から供給される画像データが処理対象の画像データの末尾に達すると、個々の画像処理モジュール38からワークフロー管理部46Aへの全体処理終了通知の入力が、前段側の画像処理モジュール38から順次行われる。
【0117】
ワークフロー管理部46Aは、画像処理の実行形態がブロック単位処理である場合、画像処理モジュール38から全体処理終了通知が入力される毎に、図16(D)に示すブロック単位制御処理4を行う。このブロック単位制御処理4では、ステップ510において、全体処理終了通知入力元の画像処理モジュール38が最後段の画像処理モジュール38か否か判定する。判定が否定された場合は何ら処理を行うことなく処理を終了するが、処理対象の画像データに対して必要な画像処理が行われた画像データが画像出力部24へ全て出力されることで、最後段の画像処理モジュール38から全体処理終了通知が入力された場合には、ステップ510の判定が肯定されてステップ512へ移行し、アプリケーション32に対して画像処理の完了を通知し(図3のステップ180も参照)、ブロック単位制御処理を終了する。そして、画像処理の完了が通知されたアプリケーション32は、ユーザに対して画像処理の完了を通知する(図3のステップ182も参照)。
【0118】
このように、ブロック単位処理では、最後段の画像処理モジュール38に入力された処理要求がより前段の画像処理モジュール38へ遡り、最前段の画像処理モジュール38に到達すると、最前段の画像処理モジュール38で画像処理が行われて後段のバッファモジュール40にデータが書き込まれ、それでデータが足りるようならば処理が後段のモジュールへ進んで行くという流れで一連の画像処理が行われる。
【0119】
また、画像処理の実行形態として面単位処理が指定された場合、ワークフロー管理部46Aは、アプリケーション32によって起動されると、図17(A)に示す面単位制御処理1を行う。面単位制御処理1では、前述のブロック単位制御処理1(図16(A))と同様に、1回の処理要求で指定する単位処理の実行回数を個々の画像処理モジュール38毎に決定し(ステップ540)、次のステップ542において、画像処理部50のうち最後段の画像処理モジュール38に処理要求を入力し(図18の(1)参照)、処理を終了する。また、ワークフロー管理部46Aは、画像処理の実行形態が面単位処理である場合、バッファモジュール40からデータ要求が入力される毎に、図17(B)に示す面単位制御処理2を行う。面単位制御処理2では、前述のブロック単位制御処理2(図16(B))と同様に、ステップ544において、図4(B)に示したテーブルに登録されている情報に基づいて、データ要求入力元のバッファモジュール40の前段の画像処理モジュール38を認識し、認識した前段の画像処理モジュール38に処理要求を入力して処理を終了する。
【0120】
このように、画像処理の実行形態が面単位処理であっても、アプリケーション32によって起動された場合にワークフロー管理部46Aが行う処理及びバッファモジュール40からデータ要求が入力される毎にワークフロー管理部46Aが行う処理は、画像処理の実行形態がブロック単位処理のときと同一であるので、面単位処理においても、ワークフロー管理部46Aから画像処理部50の最後段の画像処理モジュール38に処理要求が入力された後は、図18の(2)〜(10)に示すように、処理要求が入力された画像処理モジュール38から前段のバッファモジュール40へのデータ要求の入力、データ要求が入力されたバッファモジュール40からワークフロー管理部46Aへのデータ要求の入力に伴うワークフロー管理部46Aから上記バッファモジュール40の前段の画像処理モジュールへの処理要求の入力が、画像処理部50の最後段の画像処理モジュール38から画像処理部50の最前段の画像処理モジュール38へ向けて順次進んでいくことになる。
【0121】
また、画像処理部50の最前段の画像処理モジュール381は、ワークフロー管理部46Aから処理要求が入力されると、画像データ供給部22から単位読出データ量の画像データを取得し(図18の(11)参照)、取得した画像データに対して画像処理エンジン38Aが画像処理を行うことで得られた画像データを、後段のバッファモジュール401のバッファ40Aに書き込み(図18の(12)参照)、ワークフロー管理部46Aへ処理完了通知を入力するが、ワークフロー管理部46Aは、画像処理の実行形態が面単位処理である場合、画像処理モジュール38から処理完了通知が入力される毎に、図17(C)に示す面単位制御処理3を行う。この面単位制御処理3では、ステップ546において、処理完了通知元の画像処理モジュール38に処理要求を再度入力し、処理を終了する。このように、面単位制御処理では、ワークフロー管理部46Aに処理完了通知を入力した特定の画像処理モジュール38が処理対象の画像データに対する画像処理を完了する迄の間、前記特定の画像処理モジュール38から処理完了通知が入力される毎に、前記特定の画像処理モジュール38に対してのみ処理要求が繰り返し入力される。
【0122】
画像処理モジュール381が処理対象の画像データに対する画像処理を完了し、画像処理モジュール381における画像処理を経た処理対象の画像データがバッファモジュール401のバッファ40Aに全て記憶されると、画像処理モジュール381からワークフロー管理部46Aに全体処理終了通知が入力される。ワークフロー管理部46Aは、画像処理の実行形態が面単位処理である場合、画像処理モジュール38から全体処理終了通知が入力される毎に、図17(D)に示す面単位制御処理4を行う。この面単位制御処理4では、ステップ548において、全体処理終了通知元が画像処理部50の最後段の画像処理モジュール38か否か判定する。判定が否定された場合はステップ550へ移行し、図4(B)に示したテーブルに登録されている情報に基づいて、全体処理終了通知元の画像処理モジュール38の次の画像処理モジュール38を認識し、認識した次の画像処理モジュール38に処理要求を入力して処理を終了する。
【0123】
このように、面単位制御処理では、最後段の画像処理モジュール38に入力された処理要求がより前段の画像処理モジュール38へ遡り、最前段の画像処理モジュール38に到達した後は、最前段の画像処理モジュール38に対してのみ処理要求を繰り返し入力し、当該画像処理モジュール38における処理対象の画像データ全体に対する画像処理が完了すると、次の画像処理モジュール38で処理対象の画像データ全体に対する画像処理を行わせ、この処理を後段の画像処理モジュール38に対して順に進めていくことで、一連の画像処理が行われる。そして、処理対象の画像データに対して必要な画像処理が行われた画像データが画像出力部24へ全て出力されることで、最後段の画像処理モジュール38から全体処理終了通知が入力されると、面単位制御処理4(図17(D))のステップ548の判定が肯定されてステップ552へ移行し、アプリケーション32に対して画像処理の完了を通知し(図3のステップ180も参照)、面単位制御処理を終了する。そして、画像処理の完了が通知されたアプリケーション32は、ユーザに対して画像処理の完了を通知する(図3のステップ182も参照)。
【0124】
なお、図17に示した面単位制御処理では、画像処理モジュールから全体処理終了通知が入力されたことを契機として、処理要求を繰り返し入力する画像処理モジュール38を切り替えていたが、これに限定されるものではなく、異なる画像処理モジュール38から処理完了通知が入力されたことを契機として、処理要求を繰り返し入力する画像処理モジュール38を切り替えるように構成することも可能である。
【0125】
また、上記では最後段の画像処理モジュール38への処理要求の入力はワークフロー管理部46Aが行うものとして説明したが、本発明はこれに限定されるものではなく、パイプラインの最後段又は有向非循環グラフの複数の終点に位置するモジュールをワークフロー管理部46Aが保持して処理要求を行っても、又はアプリケーション32が保持して処理要求を行っても良い。或いは、前述した図5(B)の例のように、モジュール生成部44の内部で、スキュー角検知処理を行う画像処理モジュールと、画像回転処理を行う画像処理モジュールとを組み合わせて、スキュー補正処理モジュールとするような場合には、画像回転処理モジュールの生成時に処理パラメータとしてスキュー角情報が必要なので、スキュー補正モジュール生成部の内部で、スキュー角検知処理モジュールに処理要求を繰り返し行って画像全体を処理し、その結果得られるスキュー角情報を画像回転処理モジュールに処理パラメータとして与えるといった方式も存在する。
【0126】
続いて、画像処理モジュール38の消去について説明する。個々の画像処理モジュール38の制御部38Bは、画像処理モジュール制御処理(図13)のステップ308でワークフロー管理部46A及び後段のモジュールへ全体処理終了通知を出力した後に、ステップ310において自モジュール消去処理を行い、或いは、ステップ312で自モジュールの全処理が終了した後に、ステップ314において自モジュール消去処理を行う。また、モジュールを消去させるための消去要求が外部から入力された場合にも(図15(A)、図15(B)の(12)、図22も参照)、自モジュール消去処理を行う。
【0127】
図14に示すように、自モジュール消去処理では、まずステップ320において、先のステップ254(図12)で確保したメモリ領域の解放をリソース管理部46Bへ要求する。これにより、リソース管理部46Bでメモリ解放要求時処理(図2(C)))が行われることで、上記のメモリ領域が解放される。次のステップ322では、リソース管理部46Bを通じて自モジュールが確保したメモリ以外のリソースが有るか否か判定する。判定が否定された場合は何ら処理を行うことなくステップ326へ移行するが、判定が肯定された場合はステップ324へ移行し、自モジュールの識別情報をリソース管理部46Bへ通知し、自モジュールが確保したメモリ以外のリソースの解放を要求する。これにより、リソース管理部46Bでリソース解放要求時処理(図2(E)))が行われることで、上記のリソースが解放される。
【0128】
自モジュール消去処理(図14)では、ステップ322の判定が否定されるか、ステップ324でメモリ以外のリソースの解放をリソース管理部46Bに要求した後に、リソース管理部46Bからリソースの解放完了が通知されると、ステップ326へ移行して自モジュールの前段のモジュール、後段のモジュール及びワークフロー管理部46Aに対し、自モジュールを消去する処理を行うことを通知するための消去通知を入力する(図15(B)の(10)も参照)。そしてステップ328では自モジュールを消去する処理を行い、図14の自モジュール消去処理(すなわち図13のステップ310)を終了する。なお、自モジュールを消去することは、自モジュールに対応するプロセス、スレッドを終了するか、又はオブジェクトを削除することで実現することができる。
【0129】
なお、バッファモジュール40のバッファ制御部40Bによって行われるバッファ制御処理(図6)では、自モジュールの前段又は後段の画像処理モジュール38から消去通知が入力されると、ステップ380の判定が肯定されてステップ390へ移行し、消去通知入力元のモジュールを記憶した後に、自モジュールの前段及び後段の全てのモジュールから消去通知が入力されたか否か判定する。判定が否定された場合はステップ378へ戻り、先にも説明したようにステップ378,380を繰り返す。また、自モジュールの前段及び後段の全てのモジュールから消去通知が入力されると、ステップ390の判定が肯定されてステップ392へ移行し、ワークフロー管理部46Aに対して消去通知を入力することで、自モジュールを消去する処理を行うことを通知する。そして次のステップ394で自モジュールを消去する処理を行ってバッファ制御処理(図6)を終了する。
【0130】
また、処理管理部46のワークフロー管理部46Aは、画像処理モジュール38から自モジュールの消去通知が入力されると、図21に示す消去要求処理を行う。
【0131】
ステップ600では、自モジュール消去通知を入力した画像処理モジュール38の前段のバッファモジュール40の前段に画像処理モジュール38が存在するか否かを判定する。自モジュール消去通知を入力した画像処理モジュール38の前段にバッファモジュール40が複数連結されている場合もあるが、この場合には、そのうちの1つを処理対象に設定して、ステップ600の判定及び以降の処理を行う。
【0132】
なお、説明を簡単にするため、本消去要求処理の説明においては、図21の下段に示すように、自モジュールの消去通知を入力した画像処理モジュール38の前段に存在するバッファモジュール40を「バッファモジュールB」と呼称し、当該バッファモジュールBの後段に連結された画像処理モジュール38を、「画像処理モジュールMB」と呼称し、当該バッファモジュールBの前段に連結された画像処理モジュール38を、「画像処理モジュールMF」と呼称する。なお、画像処理モジュールMBが複数存在する場合もあるが、この場合には、上記入力された自モジュールの消去通知は、当該複数の画像処理モジュールMBの中の1つから入力されたものとなる。
【0133】
ステップ600で否定判定されると、本消去要求処理を終了する。一方、ステップ600で肯定判定されると、ステップ602で、バッファモジュールBが後段に複数の画像処理モジュールMBを有するか否かを判定する。ここでは、ワークフロー管理部46Aは、バッファモジュールB(バッファモジュールBのバッファ制御部40B)に対して後段に連結されている画像処理モジュールMBの情報を問い合わせ(図15(B)の(11)も参照。)、バッファモジュールBから受け取った該問い合わせについての回答から判定するようにしている。
【0134】
ステップ602で肯定判定されると、ステップ604で、バッファモジュールBの後段の画像処理モジュールMBの1つから自モジュール消去通知が入力されたことを予め定められた記憶領域に記憶する。
【0135】
ステップ606において、上記記憶領域の記憶内容を参照し、バッファモジュールBの後段に連結された全ての画像処理モジュールMBから自モジュール消去通知が入力されたか否かを判定し、ここで肯定判定した場合には、ステップ608で、バッファモジュールBの前段の画像処理モジュールMFに(前段の画像処理モジュールMFが複数存在する場合には、各々に)消去要求を入力する(図15(B)の(12)も参照。)。続いてステップ610では、上記処理対象として設定したバッファモジュールB以外に、他のバッファモジュールBが存在するか否か(すなわち、上記自モジュール消去処理を入力した画像処理モジュールMBの前段に複数のバッファモジュールBが連結されているか否か)を判定する。ステップ610で否定判定した場合には、消去要求処理(図21)を終了し、ステップ610で肯定判定した場合には、ステップ612で、処理対象を次のバッファモジュールBに設定してステップ600に戻り、上記と同様の処理を繰り返す。
【0136】
なお、上記消去要求が画像処理モジュール38の制御部38Bに入力されると、画像処理モジュール38の制御部38Bでは、図22(A)に示す消去要求受付処理が行われる。この消去要求受付処理では、ステップ700において、上記図14を参照して説明した自モジュール消去処理を行って、処理を終了する。なお、画像処理モジュール38の制御部38Bが図13に示す処理の実行中に消去要求が入力された場合には、割込が発生し、図22(A)に示す処理が実行される。
【0137】
このように、本実施の形態では、不要なリソースの早期解放が実現されるように構成されている。消去要求の入力に応じて自モジュールを消去する機能を設けない場合には、例えば、画像処理モジュールMBの処理がクロップ(画像の一部切り取り)処理である場合に、この画像処理モジュールMB自身の切り取り処理が終了して自モジュールを消去したとしても、当該画像処理モジュールMBに対して処理結果を供給する画像処理モジュールMFで処理対象の画像データに対する処理が全て終了していなければ、画像処理モジュールMFは消去されない。従って、バッファモジュールBも消去されず(図6のステップ390で否定判定される)、リソースは確保されたままとなる。しかしながら、本実施の形態では、処理管理部46のワークフロー管理部46Aに画像処理モジュール38に消去要求を入力する機能を設け、画像処理モジュール38に消去要求に応じて自モジュールを消去する機能を設けることで、個別にリソースを解放するようにしている。
【0138】
なお、上記では、図22(A)に示すように、各画像処理モジュール38は、消去要求が入力されると、無条件に自モジュール消去処理を行う例について説明したが(図13も参照。)、これに限定されない。例えば、消去要求が入力された場合に、自モジュールの消去可否を判定し、消去可能と判定した場合に限り、自モジュール消去処理を行うようにしてもよい。この場合、画像処理モジュール38の制御部38Bは、図22(A)に示す消去要求受付処理に代えて、図22(B)に示す消去要求受付処理を行う。なお、ここでも説明を簡単にするため、図22(B)に示す消去要求受付処理を行う主体である制御部38Bを有する画像処理モジュール38を前述と同様に画像処理モジュールMFと呼称し、該画像処理モジュールMFの後段のバッファモジュール40をバッファモジュールBと呼称し、当該バッファモジュールBの後段に連結された画像処理モジュール38を画像処理モジュールMBと呼称する。
【0139】
画像処理モジュール38の制御部38Bは、消去要求が入力されると、ステップ800で、図13のステップ312と同様に、自モジュールの全処理が終了したか否かを判定する。ステップ800で肯定判定した場合には、ステップ806に進み、図14で説明した自モジュール消去処理を行って、本消去要求受付処理を終了する。また、ステップ800で否定判定した場合には、ステップ802に進む。ステップ802では、後段バッファモジュールBの後段の画像処理モジュールMBが全て消去済みか否かを処理管理部46のワークフロー管理部46Aに問い合わせる。問い合わせた結果、ワークフロー管理部46Aから全て消去済みであるとの情報を得た場合には、ステップ804で肯定判定し、図14で説明した自モジュール消去処理を行って、本消去要求処理を終了する。一方、問い合わせた結果、全て消去済みでないとの情報を得た場合には、ステップ804で否定判定し、本消去要求受付処理を終了する。
【0140】
例えば、各画像処理モジュール38に誤って消去要求が入力されてしまった場合でも、図22(B)に示す処理を実行することで、誤動作は防止される。一例を挙げると、ユーザがプログラミングした何らかのモジュールを画像処理部50に組み込んで処理する場合には、ワークフロー管理部46Aからだけでなく、該プログラミングしたモジュールからも消去要求が入力される可能性もある(図15(A)も参照。)。ここで、例えば、プログラミングミス等により該組み込んだモジュールから本来消去要求を入力すべきでない画像処理モジュール38に対して消去要求が誤って入力されると、誤動作が生じてしまうことがあるが、上記図22(B)に示したように、消去要求が入力された各画像処理モジュール38が消去可否を判断して消去可能と判断した場合(すなわち、上記では、ステップ800Y、ステップ804Y)に自モジュールを消去すれば誤動作は防止される。
【0141】
また、ワークフロー管理部46Aが、例えば、図21のステップ602〜606に示す処理を行わずに消去要求を画像処理モジュールMFに入力する構成とした場合、バッファモジュールBに連結された全ての画像処理モジュールMBが消去されていないにも拘わらず画像処理モジュール38に対して消去要求が入力されてしまうこともある。こうした構成であっても、図22(B)に示すように処理することで必要なモジュールが誤って消去されることが防止され誤動作が防止される。
【0142】
最後に、画像処理部50が画像処理を実行している途中でエラーが発生した場合の処理について説明する。処理管理部46のエラー管理部46Cは、画像処理部50が画像処理を実行している途中でエラーが発生すると、割込が発生することで図19に示すエラー発生割込処理を行う。このエラー発生割込処理では、まずステップ570において、発生したエラーの種別・発生箇所等のエラー情報を取得する。また本実施形態では、画像処理プログラム群34がインストールされたコンピュータ10が組み込まれている機器の種別や構成等を表す装置環境情報が記憶部20に記憶されており、次のステップ572では上記の装置環境情報を記憶部20等から取得し、取得した装置環境情報が表す装置環境に応じたエラー通知方法を判断する。
【0143】
例えばコンピュータ10がPC等の独立したコンピュータであれば、表示部16として種々の情報を一度に表示可能なディスプレイが設けられているため、エラー通知方法として、ステップ570で取得したエラー情報の内容をポップアップウインドウ等によって表示部16に全て表示させる等のエラー通知方法を選択する。また、例えばコンピュータ10が組まれている機器が複写機、プリンタ、ファクシミリ装置、複合機、スキャナ、写真プリンタ等の機器であれば、表示部16に一度に表示可能な情報量が限られている一方でブザー等が設けられているため、ブザーを鳴らすことでエラーの発生を通知すると共に、ステップ570で取得したエラー情報のうちエラーの種別のみを表示部16に表示させる等の通知方法を選択する。そしてステップ574では、ステップ572で判断したエラー通知方法でエラーの発生を通知し、エラー発生割込処理を終了する。
【0144】
このように、本実施形態に係るエラー発生割込処理では、複数種のエラー通知方法の中から装置環境に応じたエラー通知方法を選択し、選択したエラー通知方法でエラーの発生を通知するので、本発明に係る画像処理プログラム群34を種々の構成のコンピュータ10にインストールして本発明を適用することが可能になり、汎用性が向上すると共に、画像処理プログラム群34をインストールするコンピュータ10の構成(独立したコンピュータか、各種機器の何れに組み込まれたコンピュータか等)に応じてエラー発生時の処理を切り替える等の設定変更作業を行う必要がなくなるので、インストール時の作業負荷も軽減される。
【0145】
なお、ここではエラー処理を割込を前提に説明したが、割込処理でなくてもよい。例えばエラーが起きた際には、当該モジュールはエラー管理部46Cにエラー情報を通知し、その後の処理指示に対しては処理できない事を示す状態コードを返す。その情報を受け取った処理管理部46は、その情報をアプリケーション32に返し、アプリケーション32は処理管理部46のエラー管理部46Cからエラー情報を受け取り、それに基づいて自身で表示やブザー等の処理を行うように構成しても良い。
【0146】
なお、上記では、後段の画像処理モジュール38からバッファモジュール40に読出要求が入力されたものの、読出要求元の画像処理モジュール38が読出可能な有効データのデータ量が単位読出データ量未満であり、かつ読出可能な有効データの末尾が処理対象の画像データの末尾でない場合に、読出可能な有効データのデータ量が単位読出データ量以上になるか、読出可能な有効データの末尾が処理対象の画像データの末尾であることが検知される迄、バッファモジュール40からワークフロー管理部46Aへデータ要求が繰り返し入力される例を説明したが、これに限定されるものではなく、上記場合にバッファモジュール40はワークフロー管理部46Aへデータ要求を1回のみ入力すると共に、読出可能な有効データのデータ量が単位読出データ量以上になるか、読出可能な有効データの末尾が処理対象の画像データの末尾であることが検知されるとワークフロー管理部46Aへ蓄積完了通知を入力し、ワークフロー管理部46Aはバッファモジュール40からデータ要求が入力されてから蓄積完了通知が入力される迄の間、前記バッファモジュール40の前段の画像処理モジュール38へ処理要求を繰り返し入力するようにしてもよい。
【0147】
また、上記ではバッファモジュール40において、後段の画像処理モジュール38から読出要求が入力され、読出要求元の画像処理モジュール38が読出可能な有効データが自モジュールのバッファ40Aに記憶されていなかった場合に、バッファ制御部40Bがワークフロー管理部46Aへデータ要求を入力する態様を例に説明したが、これに限定されるものではなく、上記場合にバッファ制御部40Bが前段の画像処理モジュール38へデータ要求を直接入力するようにしてもよい。この態様で画像処理の実行形態がブロック単位処理の場合の処理シーケンスを図20に示す。図20からも明らかなように、この態様において、ワークフロー管理部46Aは画像処理部50のうち最後段の画像処理モジュール38についてのみ処理要求を入力すれば済むので、ワークフロー管理部46Aにおける処理が簡単になる。
【0148】
また、上記ではブロック単位の画像処理の一例として、まずワークフロー管理部46Aが画像処理部50の最後段の画像処理モジュール38へ処理要求を入力し、この処理要求がデータ要求又は処理要求として順次前段のモジュールへ伝達される態様を説明したが、これに限定されるものではなく、処理要求又はデータ要求を前段のモジュールから後段のモジュールへ順次伝達させてブロック単位の画像処理を行わせることも可能である。これは、例えばバッファモジュール40のバッファ制御部40Bを、自モジュールの前段の画像処理モジュール38によってバッファ40Aに画像データが書き込まれる毎に、後段の画像処理モジュール38が読出可能な有効データのデータ量が単位読出データ量未満で、かつ読出可能な有効データの末尾が処理対象の画像データの末尾でなければワークフロー管理部46Aへデータ要求を入力する一方、読出可能な有効データのデータ量が単位読出データ量以上になるか、読出可能な有効データの末尾が処理対象の画像データの末尾であることが検知されるとワークフロー管理部46Aへ蓄積完了通知を入力するように構成すると共に、ワークフロー管理部46Aを、画像処理部50の最後段の画像処理モジュール38へ処理要求を入力した後に、任意のバッファモジュール50からデータ要求が入力される毎に、データ要求元のバッファモジュール40の前段の画像処理モジュール38に処理要求を入力し、任意のバッファモジュール40から蓄積完了通知が入力される毎に、当該バッファモジュール40の後段の画像処理モジュール38に処理要求を入力するように構成することで実現することができる。また、上記において、バッファモジュール40からのデータ要求を当該バッファモジュール40の前段の画像処理モジュール38へ処理要求として直接入力させると共に、バッファモジュール40からの蓄積完了通知を当該バッファモジュール40の後段の画像処理モジュール38へ処理要求として直接入力させるようにしてもよい。
【0149】
更に、上記ではバッファモジュール40に対し、前段の画像処理モジュール38からは単位書込データ量が、後段の画像処理モジュールからは単位読出データ量が事前に設定される態様を説明したが、これに限定されるものではなく、バッファモジュール40へのデータの書込やバッファモジュール40からのデータの読出の都度、書込又は読出のデータ量が画像処理モジュール38から通知されるようにしてもよい。
【0150】
また、上記では、バッファモジュール40に書込要求又は読出要求が入力される毎に、入力された要求を要求情報として待ち行列に登録し、待ち行列から要求情報を1つずつ取り出して処理することで、書込要求入力時にバッファ40Aからのデータの読出を実行中であれば、このデータ読出が完了した後に前記書込要求に対応するデータ書込処理を行うと共に、読出要求入力時にバッファ40Aへのデータの書込を実行中であれば、このデータ書込が完了した後に前記読出要求に対応するデータ読出処理を行う排他制御を実現していたが、これに限定されるものではなく、例えば単位バッファ領域を単位とする排他制御、すなわち書込要求入力時に、バッファ40Aのうち当該書込要求における書込対象の単位バッファ領域に対してデータの読出を実行中であれば、このデータ読出が完了した後に前記書込要求に対応するデータ書込処理を行うと共に、読出要求入力時に、バッファ40Aのうち当該読出要求における読出対象の単位バッファ領域に対してデータの書込を実行中であれば、このデータ書込が完了した後に前記読出要求に対応するデータ読出処理を行うようにしてもよい。単位バッファ領域を単位とする排他制御は、例えば個々の単位バッファ領域毎に待ち行列を設けて排他制御を行う等により実現することができる。
【0151】
また、上記では、モジュールライブラリ36にプログラムが登録されている個々の画像処理モジュール38のうち、単位読出データ量及び単位書込データ量が同一の画像処理モジュール38の制御部38Bに相当するプログラムを共通化した例を説明したが、これに限定されるものではなく、例えば制御部38Bに相当するプログラムを、前段のモジュールから画像データを取得して画像処理エンジン38Aに入力する第1制御部に相当するプログラム、画像処理エンジン38Aから出力されたデータを前段のモジュールへ出力する第2制御部に相当するプログラム、単位読出データ量や単位処理データ量、単位書込データ量に依存しない制御(例えばワークフロー管理部46Aとの通信等)を行う共通制御部に相当するプログラムに分割し、全ての画像処理モジュールについて、共通制御部に相当するプログラムを共通化し、更に、単位読出データ量が同一の画像処理モジュール38については第1制御部に相当するプログラムを共通化し、単位書込データ量が同一の画像処理モジュール38については第2制御部に相当するプログラムを共通化するようにしてもよい。
【0152】
更に、画像処理部50を構成する個々のモジュールの実体はプログラムであるので、画像処理部50による画像処理は実際にはCPU12によって実行されるが、ここで、画像処理部50を構成する個々の画像処理モジュール38に相当するプログラムを、CPU12による実行対象のプロセス、スレッド又はオブジェクトとして待ち行列に登録し、当該待ち行列に登録した特定の画像処理モジュールに相当するプログラムがCPU12によって前記待ち行列から取り出される毎に、特定の画像処理モジュール38の前段のモジュールから単位処理データ量の画像データを取得可能か否かを判断し、単位処理データ量の画像データを取得可能と判断した場合にのみ、前記特定の画像処理モジュール38の前段のモジュールから単位処理データ量の画像データを取得し、取得した単位処理データ量の画像データに対して予め定められた画像処理(特定の画像処理モジュール38の画像処理エンジン38Aに相当する処理)を行い、予め定められた画像処理を経た画像データ又は予め定められた画像処理の処理結果を自モジュールの後段のモジュールへ出力する処理を行った後に、処理対象の画像全体に対する処理が終了していなれば、取り出した特定の画像処理モジュールに相当するプログラムを実行対象のプロセス、スレッド又はオブジェクトとして前記待ち行列に再登録する単位画像処理をCPU12によって繰り返させることで、画像処理部50によって処理対象の画像全体を処理させるようにしてもよい(ラウンドロビン方式)。
【符号の説明】
【0153】
10 コンピュータ
14 メモリ
20 記憶部
22 画像データ供給部
24 画像出力部
32 アプリケーション
34 画像処理プログラム群
38 画像処理モジュール
38A 画像処理エンジン
38B 制御部
40 バッファモジュール
40A バッファ
40B バッファ制御部
42 処理構築部
44 モジュール生成部
46 処理管理部
46C エラー管理部
46B リソース管理部
46A ワークフロー管理部
50 画像処理部

【特許請求の範囲】
【請求項1】
画像データに対する予め定められた画像処理を、予め設定された単位処理データ量ずつ行う画像処理エンジンと、自モジュールの前段から取得した画像データを前記画像処理エンジンが前記単位処理データ量ずつ処理するために必要なデータ量単位で前記画像処理エンジンに入力すると共に、前記画像処理エンジンによる予め定められた画像処理を経た画像データ又は前記予め定められた画像処理の処理結果を自モジュールの後段へ出力する制御手段を備え、前記画像処理エンジンが行う画像処理の種類又は内容が互いに異なる複数種の画像処理モジュールと、
画像データを記憶するためのバッファと、自モジュールの前段に画像処理モジュールが連結されている場合に、自モジュールに対して事前に設定されるか又は画像データ出力の都度通知される書込データ量のデータを記憶可能な前記バッファ上の記憶領域に前記前段の画像処理モジュールから出力される画像データを書き込ませると共に、自モジュールの後段に画像処理モジュールが連結されている場合に、前記バッファに記憶されている画像データを、前記後段の画像処理モジュールにより、自モジュールに対して事前に設定されるか又は画像データ要求の都度指定される読出データ量だけ読み出させる処理を行うバッファ制御手段を備えた1つ以上のバッファモジュールと、
が、前記個々の画像処理モジュールの前段及び後段の少なくとも一方にバッファモジュールが連結されるように、個々のモジュールがパイプライン形態又は有向非循環グラフ形態で連結されて構築された画像処理部を備えた画像処理装置であって、
前記画像処理部の構築時又は処理対象の画像データの処理時の個々のモジュールからの要求に応じて、前記画像処理装置に設けられているメモリから前記個々のモジュールに割り当てるメモリを確保して前記個々のモジュールに割り当てると共に、前記個々のモジュールが消去されたときには前記消去されたモジュールに割り当てたメモリを解放するメモリ管理処理を行うメモリ管理手段と、
前記画像処理モジュールから自モジュールの消去を示す消去通知が出力された場合に、該消去通知を出力した画像処理モジュールの前段に連結されたバッファモジュールの消去の可否を判断する判断手段、及び前記判断手段により前記バッファモジュールの消去が可能であると判断された場合に、前記バッファモジュール及び前記バッファモジュールの前段に連結された画像処理モジュールが消去されるように消去要求を前記バッファモジュールの前段に連結された画像処理モジュールに入力する処理を行う処理手段を備えた処理管理手段と、
を更に備え、
前記バッファモジュールのバッファ制御手段は、自モジュールに連結された全ての画像処理モジュールが消去された場合には、自モジュールを消去する処理を行うと共に、自モジュールに割り当てられていたメモリを前記メモリ管理手段を介して解放させる処理を行い、
前記画像処理モジュールの制御手段は、前記画像処理部を構築する画像処理モジュールの全ての処理が終了した場合、自モジュールの全処理が終了した場合、並びに前記処理管理手段から前記消去要求が入力された場合又は前記消去要求が入力され且つ自モジュールの消去が可能であると判断した場合には、前記消去通知を前記処理管理手段に対して出力して自モジュールを消去し且つ前記自モジュールに割り当てられていたメモリを前記メモリ管理手段を介して解放させる処理を行う
画像処理装置。
【請求項2】
前記処理管理手段の前記判断手段は、前記消去通知を出力した画像処理モジュールの前段に連結されたバッファモジュールの後段に複数の画像処理モジュールが連結されている場合には、前記バッファモジュールの後段に連結された全ての画像処理モジュールから各々の消去通知が出力されたときに、前記バッファモジュールの消去が可能であると判断する
請求項1に記載の画像処理装置。
【請求項3】
前記画像処理モジュールの制御手段は、前記画像処理部を構築する画像処理モジュールの全ての処理が終了した場合、自モジュールの全処理が終了した場合、及び前記消去要求が入力され且つ自モジュールの消去が可能であると判断した場合に、前記消去通知を前記処理管理手段に対して出力して自モジュールを消去し且つ前記自モジュールに割り当てられていたメモリを前記メモリ管理手段を介して解放させる処理を行うものであって、前記処理管理手段から前記消去要求が入力された場合において、自モジュールの全処理が終了していないとき、又は自モジュールの後段に連結されたバッファモジュールの後段に連結された複数の画像処理モジュールの全てが消去済みでないときには、自モジュールの消去が不可能であると判断する
請求項1又は請求項2に記載の画像処理装置。
【請求項4】
コンピュータを、
画像データに対する予め定められた画像処理を、予め設定された単位処理データ量ずつ行う画像処理エンジンと、自モジュールの前段から取得した画像データを前記画像処理エンジンが前記単位処理データ量ずつ処理するために必要なデータ量単位で前記画像処理エンジンに入力すると共に、前記画像処理エンジンによる予め定められた画像処理を経た画像データ又は前記予め定められた画像処理の処理結果を自モジュールの後段へ出力する制御手段を備え、前記画像処理エンジンが行う画像処理の種類又は内容が互いに異なる複数種の画像処理モジュールと、
画像データを記憶するためのバッファと、自モジュールの前段に画像処理モジュールが連結されている場合に、自モジュールに対して事前に設定されるか又は画像データ出力の都度通知される書込データ量のデータを記憶可能な前記バッファ上の記憶領域に前記前段の画像処理モジュールから出力される画像データを書き込ませると共に、自モジュールの後段に画像処理モジュールが連結されている場合に、前記バッファに記憶されている画像データを、前記後段の画像処理モジュールにより、自モジュールに対して事前に設定されるか又は画像データ要求の都度指定される読出データ量だけ読み出させる処理を行うバッファ制御手段を備えた1つ以上のバッファモジュールと、
が、前記個々の画像処理モジュールの前段及び後段の少なくとも一方にバッファモジュールが連結されるように、個々のモジュールがパイプライン形態又は有向非循環グラフ形態で連結されて構築された画像処理部を備えた画像処理装置として機能させるための画像処理プログラムであって、
前記画像処理部の構築時又は処理対象の画像データの処理時の個々のモジュールからの要求に応じて、前記画像処理装置に設けられているメモリから前記個々のモジュールに割り当てるメモリを確保して前記個々のモジュールに割り当てると共に、前記個々のモジュールが消去されたときには前記消去されたモジュールに割り当てたメモリを解放するメモリ管理処理を行うメモリ管理手段と、
前記画像処理モジュールから自モジュールの消去を示す消去通知が出力された場合に、該消去通知を出力した画像処理モジュールの前段に連結されたバッファモジュールの消去の可否を判断する判断手段、及び前記判断手段により前記バッファモジュールの消去が可能であると判断された場合に、前記バッファモジュール及び前記バッファモジュールの前段に連結された画像処理モジュールが消去されるように消去要求を前記バッファモジュールの前段に連結された画像処理モジュールに入力する処理を行う処理手段を備えた処理管理手段と、
を更に備え、
前記バッファモジュールのバッファ制御手段は、自モジュールに連結された全ての画像処理モジュールが消去された場合には、自モジュールを消去する処理を行うと共に、自モジュールに割り当てられていたメモリを前記メモリ管理手段を介して解放させる処理を行い、
前記画像処理モジュールの制御手段は、前記画像処理部を構築する画像処理モジュールの全ての処理が終了した場合、自モジュールの全処理が終了した場合、並びに前記処理管理手段から前記消去要求が入力された場合又は前記消去要求が入力され且つ自モジュールの消去が可能であると判断した場合には、前記消去通知を前記処理管理手段に対して出力して自モジュールを消去し且つ前記自モジュールに割り当てられていたメモリを前記メモリ管理手段を介して解放させる処理を行う
画像処理プログラム。

【図1】
image rotate

【図2】
image rotate

【図3】
image rotate

【図4】
image rotate

【図5】
image rotate

【図6】
image rotate

【図7】
image rotate

【図8】
image rotate

【図9】
image rotate

【図10】
image rotate

【図11】
image rotate

【図12】
image rotate

【図13】
image rotate

【図14】
image rotate

【図15】
image rotate

【図16】
image rotate

【図17】
image rotate

【図18】
image rotate

【図19】
image rotate

【図20】
image rotate

【図21】
image rotate

【図22】
image rotate


【公開番号】特開2012−120115(P2012−120115A)
【公開日】平成24年6月21日(2012.6.21)
【国際特許分類】
【出願番号】特願2010−270627(P2010−270627)
【出願日】平成22年12月3日(2010.12.3)
【出願人】(000005496)富士ゼロックス株式会社 (21,908)
【Fターム(参考)】