画像処理装置、画像形成装置、及び画像処理プログラム
【課題】複数の画像処理手段の画像処理が並列に実行される時間を長くする。
【解決手段】待機状態から起動した後は前段のモジュールから単位データ量ずつ画像データを取得して画像処理を行い、画像処理後の画像データ又は処理結果を後段のモジュールへ出力する機能を備え、前段から単位データ量の画像データの取得に失敗した場合は待機状態となり、実行する画像処理の種類又は内容が互いに異なる複数の画像処理モジュール３８と、前段のモジュールからの画像データが書き込まれ、該書き込まれた画像データが後段のモジュールによって読み出されるバッファ４０Ａを備えたバッファモジュール４０とが連結された画像処理部において、バッファ４０Ａに書込まれた画像データのデータ量がバッファモジュール４０に連結された画像処理モジュール３８の各々に応じて定まるデータ量となった場合に後段の像処理モジュール３８を起動する。
【解決手段】待機状態から起動した後は前段のモジュールから単位データ量ずつ画像データを取得して画像処理を行い、画像処理後の画像データ又は処理結果を後段のモジュールへ出力する機能を備え、前段から単位データ量の画像データの取得に失敗した場合は待機状態となり、実行する画像処理の種類又は内容が互いに異なる複数の画像処理モジュール３８と、前段のモジュールからの画像データが書き込まれ、該書き込まれた画像データが後段のモジュールによって読み出されるバッファ４０Ａを備えたバッファモジュール４０とが連結された画像処理部において、バッファ４０Ａに書込まれた画像データのデータ量がバッファモジュール４０に連結された画像処理モジュール３８の各々に応じて定まるデータ量となった場合に後段の像処理モジュール３８を起動する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像形成装置、及び画像処理プログラムに関する。
【背景技術】
【０００２】
前段のモジュールから単位データ量ずつ画像データを取得して画像処理を行い、画像処理後の画像データ又は画像処理結果を後段のモジュールへ出力する機能を備え、実行する画像処理の種類又は内容が互いに異なる複数の画像処理モジュールと、前段のモジュールからの画像データをバッファに書き込ませ、バッファに記憶されている画像データを後段のモジュールによって読み出させるバッファモジュールが、個々の画像処理モジュールの前段及び後段の少なくとも一方にバッファモジュールが連結されるように連結されて構築された画像処理部に対し、個々の画像処理モジュールに処理要求を繰り返し入力して処理対象の画像全体を処理させ、かつ個々の画像処理モジュールに対応するスレッドの実行優先度を画像処理の進行度合に応じて変更する画像処理装置が知られている（特許文献１参照。）。
【０００３】
また、画像処理に係る演算を実行する複数の演算手段と、画像情報に対して前記演算手段により画像処理を実行させる複数の画像処理手段と、前記複数の画像処理手段を、複数のグループに区分するための区分数を取得する区分数取得手段と、前記区分数取得手段により取得された区分数及び画像処理手段が実行させる画像処理の順序に基づき、各画像処理手段を各グループに属させることにより前記複数の画像処理手段を区分する区分手段と、を有する画像処理装置も知られている（特許文献２参照。）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−２８７０８５号公報
【０００５】
【特許文献２】特開２００８−１４００４６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明は、画像処理手段と記憶処理手段とが交互に存在するように、画像処理手段及び記憶処理手段がパイプライン形態又は有向非循環グラフ形態で連結されて構築された画像処理部において、常に記憶処理手段の後段に連結されている画像処理手段の単位読出データ量が記憶処理手段の記憶領域に書き込まれる毎に該後段の画像処理手段を起動させる場合に比べて、記憶処理手段に連結された画像処理手段の各々の画像処理が並列に実行される時間を長くすることができる画像処理装置、画像形成装置、及び画像処理プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
請求項１の発明は、待機状態から起動した後は前段から単位データ量の画像データの取得を試行することを前記単位データ量の画像データの取得が失敗するまで繰り返し、前記単位データ量の画像データの取得に失敗した場合は待機状態となり、前記単位データ量の画像データの取得に成功した場合は該取得した画像データを用いて予め定められた画像処理を実行し、該画像処理を経た画像データ又は該画像処理の処理結果を後段へ出力して書き込む機能を各々備え、実行する画像処理の種類又は内容が互いに異なる複数種の画像処理手段の中から選択された複数の画像処理手段であって、対応するプログラムが並列に実行されることによって並列に動作する複数の画像処理手段と、前段に連結された画像処理手段から出力された画像データが書き込まれると共に、後段に連結された画像処理手段により該書き込まれた画像データが読み出される記憶領域を備え、前記記憶領域に書き込まれたデータ量が、前記連結された画像処理手段の各々に応じて定まるデータ量となった場合に、前記後段に連結された画像処理手段が起動するように制御する記憶処理手段と、が、前記画像処理手段と前記記憶処理手段とが交互に存在するように、前記画像処理手段及び前記記憶処理手段がパイプライン形態又は有向非循環グラフ形態で連結されて構築された画像処理部を備えた画像処理装置である。
【０００８】
請求項２の発明は、請求項１に記載の画像処理装置において、前記記憶処理手段は、前記記憶領域に書き込まれたデータ量が、前記連結された画像処理手段による画像処理において単位処理毎に処理される単位処理データ量、前記連結された画像処理手段による画像処理の単位処理に要する時間、前記連結された画像処理手段の数、及び前記後段に連結された画像処理手段による画像処理の処理対象となる画像データが表す画像の大きさ、の少なくとも１つに応じて定まるデータ量となった場合に、前記後段に連結された画像処理手段が起動するように制御するものである。
【０００９】
請求項３の発明は、請求項１又は請求項２に記載の画像処理装置と、前記画像処理装置で画像処理された画像データに基づいて画像を形成する画像形成手段と、を備えた画像形成装置である。
【００１０】
請求項４の発明は、コンピュータを、待機状態から起動した後は前段から単位データ量の画像データの取得を試行することを前記単位データ量の画像データの取得が失敗するまで繰り返し、前記単位データ量の画像データの取得に失敗した場合は待機状態となり、前記単位データ量の画像データの取得に成功した場合は該取得した画像データを用いて予め定められた画像処理を実行し、該画像処理を経た画像データ又は該画像処理の処理結果を後段へ出力して書き込む機能を各々備え、実行する画像処理の種類又は内容が互いに異なる複数種の画像処理手段の中から選択された複数の画像処理手段であって、対応するプログラムが並列に実行されることによって並列に動作する複数の画像処理手段と、前段に連結された画像処理手段から出力された画像データが書き込まれると共に、後段に連結された画像処理手段により該書き込まれた画像データが読み出される記憶領域を備え、前記記憶領域に書き込まれたデータ量が、前記連結された画像処理手段の各々に応じて定まるデータ量となった場合に、前記後段に連結された画像処理手段が起動するように制御する記憶処理手段と、が、前記画像処理手段と前記記憶処理手段とが交互に存在するように、前記画像処理手段及び前記記憶処理手段がパイプライン形態又は有向非循環グラフ形態で連結されて構築された画像処理部として実行させるためのプログラムである。
【発明の効果】
【００１１】
請求項１の発明によれば、常に記憶処理手段の後段に連結されている画像処理手段の単位読出データ量が記憶処理手段の記憶領域に書き込まれる毎に該後段の画像処理手段を起動させる場合に比べて、記憶処理手段に連結された画像処理手段の各々の画像処理が並列に実行される時間を長くすることができる。
【００１２】
請求項２の発明によれば、並列に実行される時間に影響する変数（単位処理データ量、単位処理に要する時間、連結された画像処理手段の数、及び後段に連結された画像処理手段による画像処理の処理対象となる画像データが表す画像の大きさ）に応じた時期に後段の画像処理手段を起動させることができる。
【００１３】
請求項３の発明によれば、常に記憶処理手段の後段に連結されている画像処理手段の単位読出データ量が記憶処理手段の記憶領域に書き込まれる毎に該後段の画像処理手段を起動させる場合に比べて、記憶処理手段に連結された画像処理手段の各々の画像処理が並列に実行される時間を長くすることができる。
【００１４】
請求項４の発明によれば、常に記憶処理手段の後段に連結されている画像処理手段の単位読出データ量が記憶処理手段の記憶領域に書き込まれる毎に該後段の画像処理手段を起動させる場合に比べて、記憶処理手段に連結された画像処理手段の各々の画像処理が並列に実行される時間を長くすることができる。
【図面の簡単な説明】
【００１５】
【図１】本実施形態に係るコンピュータ（画像処理装置）の概略構成を示すブロック図である。
【図２】アプリケーションによる処理を説明するためのシーケンス図である。
【図３】(Ａ)はモジュール生成部によって実行されるモジュール生成処理の内容を示すフローチャート、(Ｂ)はワークフロー管理部のテーブルを説明する概略図である。
【図４】画像処理部の構成例を示すブロック図である。
【図５】バッファモジュールのバッファ制御部によって実行されるバッファ制御処理の内容を示すフローチャートである。
【図６】バッファモジュールのバッファ制御部によって実行されるデータ書込処理の内容を示すフローチャートである。
【図７】書込対象の画像データが複数の保管用単位バッファ領域に跨る場合の処理を説明する概略図である。
【図８】バッファモジュールのバッファ制御部によって実行されるデータ読出処理の内容を示すフローチャートである。
【図９】読出対象の画像データが複数の保管用単位バッファ領域に跨っていた場合の処理を説明する概略図である。
【図１０】画像処理モジュールの制御部によって実行される画像処理モジュール初期化処理の内容を示すフローチャートである。
【図１１】画像処理モジュールの制御部によって実行される画像処理モジュール制御処理の内容を示すフローチャートである。
【図１２】(Ａ)は画像処理モジュール、(Ｂ)はバッファモジュールの概略構成及び実行される処理を各々示すブロック図である。
【図１３】処理管理部によって実行されるブロック単位制御処理の内容を示すフローチャートである。
【図１４】画像処理部における画像処理の流れを説明する概略図である。
【図１５】処理の重さに基づいて起動条件の決定方法を説明する説明図である。
【図１６】連結された画像処理モジュールの数に基づいて起動条件の決定方法を説明する説明図である。
【図１７】処理の重さ及び連結されたモジュール数に応じた間引き係数が記憶されたテーブルである。
【図１８】バッファモジュールの機能構成を示す図である。
【図１９】バッファモジュールが前段の画像処理モジュールに画像データを直接要求する態様におけるブロック単位処理の流れを説明する概略図である。
【図２０】画像形成装置の概略構成を示すブロック図である。
【発明を実施するための形態】
【００１６】
以下、図面を参照して実施形態の一例を詳細に説明する。
【００１７】
図１には、画像処理装置として機能するコンピュータ１０が示されている。なお、このコンピュータ１０は、複写機、プリンタ、ファクシミリ装置、これらの機能を兼ね備えた装置、スキャナ、写真プリンタ等のように内部で画像処理を行う必要のある画像取扱機器に組み込まれていてもよいし、パーソナル・コンピュータ（ＰＣ）等の独立したコンピュータであってもよく、更にＰＤＡ（Personal Digital Assistant）や携帯電話機等の携帯機器に組み込まれたコンピュータであってもよい。
【００１８】
コンピュータ１０はＣＰＵ１２、メモリ１４、表示部１６、操作部１８、記憶部２０、画像データ供給部２２及び画像出力部２４を備えており、これらはバス２６を介して互いに接続されている。コンピュータ１０が上述した画像取扱機器に組み込まれている場合、表示部１６や操作部１８としては、画像取扱機器に設けられたＬＣＤ等から成る表示パネルやテンキー等を適用してもよい。また、コンピュータ１０が独立したコンピュータである場合、表示部１６や操作部１８としては、当該コンピュータに接続されたディスプレイやキーボード、マウス等を適用してもよい。また、記憶部２０としてはＨＤＤ(Hard Disk Drive)であってもよいが、これに代えてフラッシュメモリ等の他の記憶手段を用いてもよい。
【００１９】
また、画像データ供給部２２は処理対象の画像データを供給するものであり、例えば紙や写真フィルム等の記録材料に記録されている画像を読み取って画像データを出力する画像読取部、通信回線を介して外部から画像データを受信する受信部、画像データを記憶する画像記憶部（メモリ１４又は記憶部２０）等を適用してもよい。また、画像出力部２４は画像処理を経た画像データ又は該画像データが表す画像を出力するものであればよく、例えば画像データが表す画像を紙や感光材料等の記録材料に記録する画像記録部、画像データが表す画像をディスプレイ等に表示する表示部、画像データを記録メディアに書き込む書込装置、画像データを通信回線を介して送信する送信部を適用してもよい。また、画像出力部２４は画像処理を経た画像データを単に記憶する画像記憶部（メモリ１４又は記憶部２０）であっても構わない。
【００２０】
図１に示すように、記憶部２０には、ＣＰＵ１２によって実行される各種のプログラムとして、メモリ１４等のリソースの管理やＣＰＵ１２によるプログラムの実行の管理、コンピュータ１０と外部との通信等を司るオペレーティングシステム３０のプログラム、コンピュータ１０を本発明に係る画像処理装置として機能させるための画像処理プログラム群３４、ＣＰＵ１２が上記画像処理プログラム群を実行することで実現される画像処理装置に対して所望の画像処理を行わせる各種のアプリケーション３２のプログラム（図１ではアプリケーションプログラム群３２と表記）が各々記憶されている。
【００２１】
画像処理プログラム群３４は、前述した各種の画像取扱機器や携帯機器を開発する際の開発負荷を軽減したり、ＰＣ等で利用可能な画像処理プログラムを開発する際の開発負荷を軽減したりすることを目的として、各種の画像取扱機器や携帯機器、ＰＣ等の各種機器（プラットフォーム）で共通に使用可能に開発されたプログラムであり、本発明に係る画像処理プログラムに対応している。画像処理プログラム群３４によって実現される画像処理装置は、アプリケーション３２からの構築指示に従い、アプリケーション３２が指示した画像処理を行う画像処理部を構築し、アプリケーション３２からの実行指示に従い、前記画像処理部によって画像処理を行うが（詳細は後述）、画像処理プログラム群３４は、所望の画像処理を行う画像処理部（所望の構成の画像処理部）の構築を指示したり、構築された画像処理部による画像処理の実行を指示したりするためのインタフェースをアプリケーション３２に提供している。このため、内部で画像処理を行う必要のある機器を新規開発する等の場合にも、前記画像処理を行うプログラムの開発に関しては、当該機器で必要とされる画像処理を上記のインタフェースを利用して画像処理プログラム群３４に行わせるアプリケーション３２を開発するのみで済み、実際に画像処理を行うプログラムを新たに開発する必要がなくなり、開発負荷が軽減される。
【００２２】
また、画像処理プログラム群３４によって実現される画像処理装置は、前述のように、アプリケーション３２からの構築指示に従い、アプリケーション３２が指示した画像処理を行う画像処理部を構築し、構築した画像処理部によって画像処理を行うので、例えば画像処理対象の画像データの色空間や１画素当たりのビット数が不定であったり、実行すべき画像処理の内容や手順・パラメータ等が不定であったりする場合にも、アプリケーション３２が画像処理部の再構築を指示することで、画像処理装置（画像処理部）によって実行される画像処理を、処理対象の画像データ等に応じて柔軟に変更される。
【００２３】
以下、画像処理プログラム群３４について説明する。図１に示すように、画像処理プログラム群３４はモジュールライブラリ３６と、処理構築部４２のプログラムと、処理管理部４６のプログラムに大別される。詳細は後述するが、本実施形態に係る処理構築部４２は、アプリケーションからの指示により、例として図４に示すように、予め定められた画像処理を行う１つ以上の画像処理モジュール３８と、個々の画像処理モジュール３８の前段及び後段の少なくとも一方に配置され画像データを記憶するためのバッファを備えたバッファモジュール４０と、がパイプライン形態又はＤＡＧ(Directed Acyclic Graph：有向非循環グラフ)形態で連結されて成る画像処理部５０を構築する。画像処理部５０を構成する個々の画像処理モジュールの実体はＣＰＵ１２によって実行されＣＰＵ１２で予め定められた画像処理を行わせるためのプログラムであり、上述したモジュールライブラリ３６には、予め定められた互いに異なる画像処理（例えば入力処理やフィルタ処理、色変換処理、拡大・縮小処理、スキュー角検知処理、画像回転処理、画像合成処理、出力処理等）を行う複数種の画像処理モジュール３８のプログラムが各々登録されている。
【００２４】
個々の画像処理モジュール３８は、例として図１２(Ａ)にも示すように、画像データに対する画像処理を予め定められた単位処理データ量ずつ行う画像処理エンジン３８Ａと、画像処理モジュール３８の前段及び後段のモジュールとの画像データの入出力及び画像処理エンジン３８Ａの制御を行う制御部３８Ｂから構成されている。個々の画像処理モジュール３８における単位処理データ量は、画像の１ライン分、画像の複数ライン分、画像の１画素分、画像１面分等を含むバイト数の中から、画像処理エンジン３８Ａが行う画像処理の種類等に応じて予め選択・設定されており、例えば色変換処理やフィルタ処理を行う画像処理モジュール３８では単位処理データ量が１画素分とされ、拡大・縮小処理を行う画像処理モジュール３８では単位処理データ量が画像の１ライン分又は画像の複数ライン分とされ、画像回転処理を行う画像処理モジュール３８では単位処理データ量が画像１面分とされ、画像圧縮伸長処理を行う画像処理モジュール３８では単位処理データ量が実行環境に依存するＮバイトとされている。
【００２５】
また、モジュールライブラリ３６には、画像処理エンジン３８Ａが実行する画像処理の種類が同一でかつ実行する画像処理の内容が異なる画像処理モジュール３８も登録されている（図１では、この種の画像処理モジュールを「モジュール１」「モジュール２」と表記して示している）。例えば拡大・縮小処理を行う画像処理モジュール３８については、入力された画像データを１画素おきに間引くことで50％に縮小する縮小処理を行う画像処理モジュール３８、入力された画像データに対して指定された拡大・縮小率で拡大・縮小処理を行う画像処理モジュール３８等の複数の画像処理モジュール３８が各々用意されている。また、例えば色変換処理を行う画像処理モジュール３８については、ＲＧＢ色空間をＣＭＹ色空間へ変換する画像処理モジュール３８やその逆へ変換する画像処理モジュール３８、Ｌ*ａ*ｂ*色空間等の他の色空間変換を行う画像処理モジュール３８が各々用意されている。
【００２６】
また、画像処理モジュール３８の制御部３８Ｂは、画像処理エンジン３８Ａが単位処理データ量ずつ処理するために必要な画像データを入力するために、自モジュールの前段のモジュール（例えばバッファモジュール４０）から画像データを単位読出データ量ずつ取得し、画像処理エンジン３８Ａから出力される画像データを単位書込データずつ後段のモジュール（例えばバッファモジュール４０）へ出力する（画像処理エンジン３８Ａで圧縮等のデータ量の増減を伴う画像処理が行われなければ単位書込データ量＝単位処理データ量となる）か、画像処理エンジン３８Ａによる画像処理の結果を自モジュールの外部へ出力する（例えば画像処理エンジン３８Ａがスキュー角検知処理等の画像解析処理を行う場合、画像データに代えてスキュー角検知結果等の画像解析処理結果が出力されることがある）処理を行うが、モジュールライブラリ３６には、画像処理エンジン３８Ａが実行する画像処理の種類及び内容が同一で、上記の単位処理データ量や単位読出データ量、単位書込データ量が異なる画像処理モジュール３８も登録されている。例えば、先程は画像回転処理を行う画像処理モジュール３８における単位処理データ量を画像１面分と説明したが、同じ画像回転処理を行う画像処理モジュール３８で単位処理データ量が画像の１ライン分又は画像の複数ライン分であるものがモジュールライブラリ３６に含まれていても良い。
【００２７】
また、モジュールライブラリ３６に登録されている個々の画像処理モジュール３８のプログラムは、画像処理エンジン３８Ａに相当するプログラムと制御部３８Ｂに相当するプログラムから構成されているが、制御部３８Ｂに相当するプログラムは部品化されており、個々の画像処理モジュール３８のうち単位読出データ量及び単位書込データ量が共通の画像処理モジュール３８は、画像処理エンジン３８Ａで実行される画像処理の種類や内容に拘わらず、制御部３８Ｂに相当するプログラムが共通化されている（制御部３８Ｂに相当するプログラムとして共通のプログラムが用いられている）。これにより、画像処理モジュール３８のプログラムの開発にあたっての開発負荷が軽減される。
【００２８】
なお、画像処理モジュール３８の中には、入力される画像の属性が未知の状態では単位読出データ量及び単位書込データ量が確定しておらず、入力画像データの属性を取得し、取得した属性を予め定められた演算式に代入して演算することで単位読出データ量や単位書込データ量が確定するモジュールが存在しているが、この種の画像処理モジュール３８については、単位読出データ量と単位書込データ量が互いに共通の演算式を用いて導出される画像処理モジュール３８について、制御部３８Ｂに相当するプログラムを共通化するようにすればよい。また、本実施形態に係る画像処理プログラム群３４は、前述のように各種機器に実装されてもよいが、画像処理プログラム群３４のうちモジュールライブラリ３６に登録する画像処理モジュール３８の数や種類等については、画像処理プログラム群３４を実装する各種機器で必要とされる画像処理に応じて、追加・削除・入替等してよい。
【００２９】
個々の画像処理モジュール３８は、対応するプログラムが、画像処理装置に設けられたプログラム実行リソース（該対応するプログラムを実行するために用いられるリソース）によって並列に実行されるように構成することで実現される。プログラム実行リソースは、例えばＣＰＵ、或いはＭＭＸ(MultiMedia eXtention)用の演算器やＳＳＥ (Streaming SIMD Extension)用の演算器、或いはＣＰＵと別に設けられたＤＳＰ(Digital Signal Processor)等の高速演算器等が挙げられるが、本実施の形態では、プログラム実行リソースとしてＣＰＵを用いる場合を例に挙げて説明する。
【００３０】
また、画像処理部５０を構成する個々のバッファモジュール４０は、例として図１２(Ｂ)にも示すように、コンピュータ１０に設けられたメモリ１４からオペレーティングシステム３０を通じて確保されたメモリ領域で構成されるバッファ４０Ａと、バッファモジュール４０の前段及び後段のモジュールとの画像データの入出力及びバッファ４０Ａの管理を行うバッファ制御部４０Ｂから構成されている。個々のバッファモジュール４０のバッファ制御部４０Ｂもその実体はＣＰＵ１２によって実行されるプログラムであり、モジュールライブラリ３６にはバッファ制御部４０Ｂのプログラムも登録されている（図１ではバッファ制御部４０Ｂのプログラムを「バッファモジュール」と表記して示している）。
【００３１】
また、アプリケーション３２からの指示に従って画像処理部５０を構築する処理構築部４２は、図１に示すように複数種のモジュール生成部４４から構成されている。複数種のモジュール生成部４４は互いに異なる画像処理に対応しており、アプリケーション３２によって起動されることで、対応する画像処理を実現するための画像処理モジュール３８及びバッファモジュール４０から成るモジュール群を生成する処理を行う。なお、図１ではモジュール生成部４４の一例として、モジュールライブラリ３６に登録されている個々の画像処理モジュール３８が実行する画像処理の種類に対応するモジュール生成部４４を示しているが、個々のモジュール生成部４４に対応する画像処理は、複数種の画像処理モジュール３８によって実現される画像処理（例えばスキュー角検知処理と画像回転処理から成るスキュー補正処理）であってもよい。必要とされる画像処理が複数種の画像処理を組み合わせた処理である場合、アプリケーション３２は複数種の画像処理の何れかに対応するモジュール生成部４４を順次起動する。これにより、アプリケーション３２によって順次起動されたモジュール生成部４４により、必要とされる画像処理を行う画像処理部５０が構築されることになる。
【００３２】
また図１に示すように、処理管理部４６は、画像処理部５０における画像処理の実行を制御するワークフロー管理部４６Ａ、画像処理部５０の各モジュールによるメモリ１４や各種のファイル等のコンピュータ１０のリソースの使用を管理するリソース管理部４６Ｂ、及び、画像処理部５０で発生したエラーを管理するエラー管理部４６Ｃを含んで構成されている。なお、本実施形態において、処理構築部４２によって構築される画像処理部５０は、画像処理部５０を構成する個々の画像処理モジュール３８が、画像１面分よりも小さいデータ量を単位として後段へ画像データを引き渡しながら並列に画像処理を行うように動作する（ブロック単位処理と称する）。
【００３３】
なお、リソース管理部４６Ｂによるメモリ管理の方式としては、例えば、画像処理部５０の個々のモジュールからの要求の都度、メモリ１４から要求元のモジュールに割り当てるメモリ領域をオペレーティングシステム３０を通じて確保する第１管理方式、メモリ１４から予め定められたサイズのメモリ領域をオペレーティングシステム３０を通じて事前に（例えばコンピュータ１０の電源投入する際に）確保し、個々のモジュールからの要求があると、事前に確保したメモリ領域のうちの一部領域を要求元のモジュールに割り当てる第２管理方式、及び、メモリ１４から予め定められたサイズのメモリ領域をオペレーティングシステム３０を通じて事前に確保し、個々のモジュールからの要求があると、要求されたメモリ領域のサイズが閾値未満であれば事前に確保したメモリ領域のうちの一部領域を要求元のモジュールに割り当て、要求されたメモリ領域のサイズが閾値以上であれば要求元のモジュールに割り当てるメモリ領域をオペレーティングシステム３０を通じて確保する第３管理方式の何れかを採用してもよい。また、何れの管理方式でメモリ管理を行うかを選択・設定するようにしてもよい。
【００３４】
またエラー管理部４６Ｃは、画像処理部５０が画像処理を実行している途中でエラーが発生した場合に、発生したエラーの種別・発生箇所等のエラー情報を取得し、画像処理プログラム群３４がインストールされたコンピュータ１０が組み込まれている機器の種別や構成等を表す装置環境情報を記憶部２０等から取得し、取得した装置環境情報が表す装置環境に応じたエラー通知方法を判断し、判断したエラー通知方法でエラーの発生を通知する処理を行う。
【００３５】
次に本実施形態の作用を説明する。画像処理プログラム群３４が実装されている機器において、何らかの画像処理を行う必要のある状況になると、この状況が特定のアプリケーション３２によって検知され、当該アプリケーション３２によって図２に示す処理が行われる。なお、画像処理を行う必要のある状況としては、例えば画像データ供給部２２としての画像読取部によって画像を読み取り、画像出力部２４としての画像記録部により記録材料に画像として記録するか、画像出力部２４としての表示部に画像として表示させるか、画像出力部２４としての書込装置により画像データを記録メディアに書き込むか、画像出力部２４としての送信部により画像データを送信するか、画像出力部２４としての画像記憶部に記憶させる処理の実行がユーザによって指示された場合、或いは、画像データ供給部２２としての受信部によって受信されるか、画像データ供給部２２としての画像記憶部に記憶されている画像データに対して、上記の記録材料への記録、表示部への表示、記録メディアへの書き込み、送信、画像記憶部への記憶の何れかを行う処理の実行がユーザによって指示された場合が挙げられる。また、画像処理を行う必要のある状況は上記に限られるものではなく、例えばユーザからの指示に応じてアプリケーション３２が実行可能な処理の名称等を表示部１６に一覧表示している状態で、実行対象の処理がユーザによって選択された等の場合であってもよい。
【００３６】
上記のように、何らかの画像処理を行う必要のある状況になったことを検知すると、アプリケーション３２は、まず画像処理対象の画像データを供給する画像データ供給部２２の種別を認識し（図２のステップ１５０も参照）、認識した種別がバッファ領域（メモリ１４の一部領域）であった場合（図２のステップ１５２の判定が肯定された場合）には、画像データ供給部２２として指定されたバッファ領域を含むバッファモジュール４０を生成する（図２のステップ１５４も参照）。後述するバッファモジュール４０の新規生成では、バッファモジュール４０のバッファ制御部４０Ｂのプログラムを実行するスレッド（又はプロセス又はオブジェクト）を生成することでバッファ制御部４０Ｂを生成し、生成されたバッファ制御部４０Ｂによりバッファ４０Ａとして使用するメモリ領域が確保されることによって成されるが、このステップ１５４におけるバッファモジュール４０の生成は、指定されたバッファ領域を既に確保されたバッファ４０Ａとして（バッファ制御部４０Ｂに）認識させるパラメータを設定してバッファ制御部４０Ｂを生成する処理を行うことによって成される。ここで生成されたバッファモジュール４０は画像データ供給部２２として機能する。
【００３７】
続いてアプリケーション３２は、上記と同様に、画像処理を行った画像データの出力先としての画像出力部２４の種別を認識し（図２のステップ１５６も参照）、認識した種別がバッファ領域（メモリ１４の一部領域）であった場合（図２のステップ１５８の判定が肯定された場合）は、画像出力部２４として指定されたバッファ領域を含むバッファモジュール４０を上記と同様にして生成する（図２のステップ１６０も参照）。ここで生成されたバッファモジュール４０は画像出力部２４として機能する。また、アプリケーション３２は実行すべき画像処理の内容を認識し、実行すべき画像処理を、個々のモジュール生成部４４に対応するレベルの画像処理の組み合わせに分解し、実行すべき画像処理を実現するために必要な画像処理の種類及び個々の画像処理の実行順序を判定する（図２のステップ１６２も参照）。なお、この判定は、例えば上記の画像処理の種類及び個々の画像処理の実行順序を、ユーザが実行を指示可能な処理の種類と対応付けて予め情報として登録しておき、アプリケーション３２は、実行が指示された処理の種類に対応する情報を読み出すことによって実現する。
【００３８】
そしてアプリケーション３２は、上記で判定した画像処理の種類及び実行順序に基づいて、まず実行順序が１番の画像処理に対応するモジュール生成部４４を起動（モジュール生成部４４のプログラムを実行するスレッド（又はプロセス又はオブジェクト）を生成）した後に（図２のステップ１６４も参照）、起動したモジュール生成部４４に対し、当該モジュール生成部４４によるモジュール群の生成に必要な情報として、前記モジュール群に画像データを入力する入力モジュールを識別するための入力モジュール識別情報、前記モジュール群が画像データを出力する出力モジュールを識別するための出力モジュール識別情報、前記モジュール群に入力される入力画像データの属性を表す入力画像属性情報、実行すべき画像処理のパラメータを通知し、対応するモジュール群の生成を指示する（図２のステップ１６６も参照）。
【００３９】
なお、上記の入力モジュールは、実行順序が１番目のモジュール群については画像データ供給部２２が入力モジュールとなり、実行順序が２番目以降のモジュール群については前段のモジュール群の最終モジュール（通常はバッファモジュール４０）が入力モジュールとなる。また、上記の出力モジュールについては、実行順序が最後のモジュール群では画像出力部２４が出力モジュールとなるので、画像出力部２４が出力モジュールとして指定されるが、その他のモジュール群では出力モジュールは未確定のためにアプリケーション３２による指定は行われず、必要な場合はモジュール生成部４４によって生成・設定される。また、入力画像属性や画像処理のパラメータについては、例えばユーザが実行を指示可能な処理の種類と対応付けて予め情報として登録しておき、実行が指示された処理の種類に対応する情報を読み出すことでアプリケーション３２が認識するようにしてもよいし、ユーザに指定させるようにしてもよい。
【００４０】
一方、モジュール生成部４４は、アプリケーション３２によって起動されると図３(Ａ)に示すモジュール生成処理を行う（図２のステップ１６８も参照）。モジュール生成処理では、まずステップ２００において、このモジュール生成部４４で次に生成すべき画像処理モジュール３８が有るか否かを判定する。判定が否定された場合はモジュール生成処理を終了する。生成すべき画像処理モジュール３８が有る場合には、ステップ２０２で生成すべき画像処理モジュール３８に入力される入力画像データの属性を表す入力画像属性情報を取得し、次のステップ２０４では、ステップ２０２で取得した情報が表す入力画像データの属性に照らしても先のステップ２００で生成すべきと判定した画像処理モジュール３８の生成が必要か否かを判定する。
【００４１】
具体的には、例えば実行中のモジュール生成処理に対応するモジュール生成部４４が色変換処理を行うモジュール群を生成するモジュール生成部であり、画像処理のパラメータにより出力画像データの色空間としてＣＭＹ色空間がアプリケーション３２から指定された場合、ステップ２０２で取得した入力画像属性情報に基づいて入力画像データがＲＧＢ色空間のデータであることが判明した場合には、色空間処理を行う画像処理モジュール３８としてＲＧＢ→ＣＭＹの色空間変換を行う画像処理モジュール３８を生成する必要があるが、入力画像データがＣＭＹ色空間のデータであった場合には、入力画像データの属性と出力画像データの属性が色空間に関して対応しているので、色空間変換処理を行う画像処理モジュール３８は生成不要と判断する。不要と判断された場合はステップ２００に戻る。
【００４２】
なお、入力画像データの属性を取得する処理は、生成する画像処理モジュール３８の前段にバッファモジュール４０が存在している場合、当該バッファモジュール４０に画像データの書き込みを行う更に前段の画像処理モジュール３８から出力画像データの属性を取得することによって実現する。
【００４３】
次のステップ２０６では、生成する画像処理モジュール３８の後段にバッファモジュール４０が必要が否かを判定する。この判定は、画像処理モジュールの後段が出力モジュール（画像出力部２４）である場合（例えば図４(Ａ)から(Ｃ)に示す画像処理部５０における最後段の画像処理モジュール３８を参照）や、例として図４(Ｂ)に示す画像処理部５０においてスキュー角検知処理を行う画像処理モジュール３８のように、画像処理モジュールが、画像データに対して解析等の画像処理を行いその結果を他の画像処理モジュール３８へ出力するモジュールである場合は否定され、バッファモジュール４０の生成を行うことなくステップ２１０へ移行するが、上記以外の場合は判定が肯定されてステップ２０８へ移行し、バッファ制御部４０Ｂを起動する（バッファ制御部４０Ｂのプログラムを実行するスレッド（又はプロセス又はオブジェクト）を生成する）ことで、画像処理モジュールの後段に連結するバッファモジュール４０を生成する。バッファ制御部４０Ｂは、モジュール生成部４４（或いは前述したアプリケーション３２）によって起動されると図５に示すバッファ制御処理を行う。このバッファ制御処理については後述する。
【００４４】
次のステップ２１０では、前段のモジュール（例えばバッファモジュール４０）の情報と後段のバッファモジュール４０の情報、画像処理モジュール３８に入力される入力画像データの属性、処理パラメータを与えて、画像処理モジュール３８を生成する。なお、ステップ２０６で後段のバッファモジュール４０が不要と判断された画像処理モジュール３８に対しては後段のバッファモジュール４０の情報は与えられず、また例えば50％縮小処理のように処理内容が固定的で特別な画像処理パラメータが必要ない場合には処理パラメータは与えられない。
【００４５】
モジュール生成処理（ステップ２１０）では、モジュールライブラリ３６に登録されており、画像処理モジュール３８として利用可能な複数の候補モジュールの中から、ステップ２０２で取得した入力画像データの属性、及び、画像処理モジュール３８で実行すべき処理パラメータに合致する画像処理モジュール３８を選択する。例えば実行中のモジュール生成処理に対応するモジュール生成部４４が色変換処理を行うモジュール群を生成するモジュール生成部であり、処理パラメータにより出力画像データの色空間としてＣＭＹ色空間がアプリケーション３２から指定され、更に入力画像データがＲＧＢ色空間のデータであった場合には、モジュールライブラリ３６に登録されている各種の色空間処理を行う複数種の画像処理モジュール３８の中から、ＲＧＢ→ＣＭＹの色空間変換を行う画像処理モジュール３８が選択される。
【００４６】
また、画像処理モジュールが拡大・縮小処理を行う画像処理モジュール３８であり、指定された拡大縮小率が50％以外であれば、入力された画像データに対して指定された拡大・縮小率で拡大・縮小処理を行う画像処理モジュール３８が選択され、指定された拡大縮小率が50％であれば、拡大縮小率50％に特化した拡大縮小処理、すなわち入力された画像データを１画素おきに間引くことで50％に縮小する縮小処理を行う画像処理モジュール３８が選択される。なお、画像処理モジュール３８の選択は上記に限られるものではなく、例えば画像処理エンジン３８Ａによる画像処理における単位処理データ量が異なる画像処理モジュール３８をモジュールライブラリ３６に複数登録しておき、画像処理部５０へ割当可能なメモリ領域のサイズ等の動作環境に応じて、適切な単位処理データ量の画像処理モジュール３８を選択する（例えば上記サイズが小さくなるに従って単位処理データ量の小さい画像処理モジュール３８を選択する等）ようにしてもよいし、アプリケーション３２或いはユーザに選択させるようにしてもよい。
【００４７】
次のステップ２１２では、後段のバッファモジュール４０のＩＤと生成した画像処理モジュール３８のＩＤの組をワークフロー管理部４６Ａに通知する。このＩＤは、個々のモジュールを一意に判別できる情報であればよく、例えば個々のモジュールの生成順に付与した番号や、バッファモジュール４０や画像処理モジュール３８のオブジェクトのメモリ上でのアドレス等でも良い。ワークフロー管理部４６Ａに通知された情報は、例えば図３(Ｂ)に示すテーブル形式やリスト形式、連想配列形式等でワークフロー管理部４６Ａの内部に保持され、後の処理で使われる。ここではテーブル形式で保持するものとして説明を続ける。
【００４８】
なお、先程述べた後段のバッファモジュール４０を持たない画像処理モジュール３８の場合には、例えば下記の方法で処理を行う。図４(Ａ)において出力処理を行う画像処理モジュール３８のように、生成する画像処理モジュール３８がパイプラインの終点又は有向非循環グラフの終点の一つである場合には、当該画像処理モジュール３８をモジュール生成部４４の出力として呼び出し元のアプリケーション３２に戻す。また、図４(Ｂ)においてスキュー角検知処理を行う画像処理モジュール３８のように、生成した画像処理モジュール３８における画像処理の結果が他の画像処理モジュール（図４(Ｂ)では画像回転処理を行う画像処理モジュール３８）で使われる場合、モジュール生成部４４は、当該画像処理モジュール３８に対して処理が終了するまで繰り返し処理実行を指示して、処理結果を取得する。
【００４９】
ステップ２１２の処理が終了すると、モジュール生成部４４は制御をステップ２００に戻して次に生成すべき画像処理モジュールがあるか否かを判定する。なお、個々のモジュール生成部４４は、対応する予め定められた画像処理を行うモジュール群を生成するので、この判定は、個々のモジュール生成部４４毎にどのような画像処理モジュールをどのような接続関係で生成するかに関する情報を予め登録して読み出すか、又はモジュール生成部４４を動作させるプログラム中に記述しておくことでも実現する。例えば実行中のモジュール生成処理に対応するモジュール生成部４４が、複数種の画像処理モジュール３８によって実現される画像処理（例えばスキュー角検知処理を行う画像処理モジュール３８と画像回転処理を行う画像処理モジュール３８によって実現されるスキュー補正処理）を行うモジュール群を生成する場合には、２個以上の画像処理モジュール３８を含むモジュール群が生成される。
【００５０】
アプリケーション３２は、モジュール群の生成を指示したモジュール生成部４４から、上記のようにしてモジュール群の生成完了が通知されると、図２のステップ１６２における判定の結果に基づいて、必要とされる画像処理を実現するために他の画像処理を行うモジュール群も生成する必要があるか否か判断する。必要とされる画像処理が複数種の画像処理を組み合わせた処理である場合、アプリケーション３２は、個々の画像処理に対応する他のモジュール生成部４４を起動してモジュール群の生成に必要な情報を通知する処理を順次行う（図２のステップ１７０，１７２も参照）。そして、順次起動されたモジュール生成部４４によって上述したモジュール生成処理（図３）が順次行われる（図２のステップ１７４も参照）ことで、例として図４(Ａ)から(Ｃ)に示すように、必要とされる画像処理を行う画像処理部５０が構築されることになる。
【００５１】
なお、本実施形態では、特定の画像処理の実行頻度が高い等の場合に、アプリケーション３２が、特定の画像処理を行う画像処理部５０を生成するための複数種のモジュール生成部４４に対し、特定の画像処理を行う画像処理部５０を生成させた後も処理終了を指示しないことでスレッド（又はプロセス又はオブジェクト）として残しておき、特定の画像処理を行う必要が生ずる毎に、スレッド（又はプロセス又はオブジェクト）として残しておいた各モジュール生成部４４に対してモジュール群の生成を順次指示することで、特定の画像処理を行う画像処理部５０を再生成可能に構成されている。これにより、特定の画像処理を行う必要が生ずる毎に対応する各モジュール生成部４４を各々起動する処理が不要となり、特定の画像処理を行う画像処理部５０を再生成するのに要する時間を短縮される。
【００５２】
ところで、画像処理モジュール３８の制御部３８Ｂは、モジュール生成部４４によって起動されると図１０に示す画像処理モジュール初期化処理を行う。この画像処理モジュール初期化処理では、まずステップ２５０において、モジュール生成部４４がモジュール生成処理（図３）のステップ２１０の処理を行うことでモジュール生成部４４から与えられた自モジュールの前段及び後段のモジュールの情報を記憶する。また、次のステップ２５２では、自モジュールの画像処理エンジン３８Ａが行う画像処理の種類や内容等に基づき、自モジュールが使用するメモリのサイズ及び自モジュールが使用する他のリソースを認識する。なお、自モジュールが使用するメモリは、画像処理エンジン３８Ａが画像処理を行うために必要なメモリが主であるが、前段のモジュールが画像データ供給部２２である場合や後段のモジュールが画像出力部２４である場合には、前段又は後段のモジュールとの画像データの送受に際して画像データを一時記憶するためのバッファ用のメモリが必要となることもある。また、処理パラメータにテーブル等の情報が含まれている場合には、それを保持するためのメモリ領域が必要となることもある。そしてステップ２５４では、ステップ２５２で認識したサイズをリソース管理部４６Ｂへ通知すると共に、通知したサイズのメモリ領域の確保をリソース管理部４６Ｂへ要求し、リソース管理部４６Ｂによって確保されたメモリ領域をリソース管理部４６Ｂから受け取る。
【００５３】
図１０に示す画像処理モジュール初期化処理（画像処理モジュール３８の制御部３８Ｂ）では、上記の処理を経てリソース管理部４６Ｂ経由で必要なメモリ領域を確保すると、次のステップ２５６において、先のステップ２５２の処理結果に基づき、メモリ以外の他のリソースを自モジュール（の画像処理エンジン３８Ａ）が必要としているか否か判定する。判定が否定された場合は何ら処理を行うことなくステップ２６２へ移行するが、判定が肯定された場合はステップ２５８へ移行し、自モジュールが必要としているメモリ以外の他のリソースの種類等をリソース管理部４６Ｂへ通知すると共に、通知した他のリソースの確保をリソース管理部４６Ｂへ要求して確保する。
【００５４】
次に、ステップ２６２では自モジュールの前段のモジュールを判定し、自モジュールの前段にモジュールが存在していない場合にはステップ２７２へ移行し、前段のモジュールがバッファモジュール４０以外、例えば画像データ供給部２２や特定のファイル等である場合には、必要に応じてステップ２７０でその初期化処理を行ってステップ２７２に移る。また、自モジュールの前段にモジュールが存在しており、当該前段のモジュールがバッファモジュール４０であった場合には、ステップ２６２からステップ２６４へ移行し、前段のバッファモジュール４０からの１回の画像データの読み出しによって取得する画像データのデータ量（単位読出データ量）を認識する。この単位読出データ量は、自モジュールの前段のバッファモジュール４０の数が１個であれば１個だけであるが、例えば図４(Ｃ)に示す画像処理部５０において画像合成処理を行う画像処理モジュール３８のように、前段のバッファモジュール４０の数が複数で、複数のバッファモジュール４０から各々取得した画像データを用いて画像処理エンジン３８Ａが画像処理を行う等の場合、前段の個々のバッファモジュール４０に対応する単位読出データ量は、自モジュールの画像処理エンジン３８Ａが行う画像処理の種類や内容、前段のバッファモジュール４０の数等に応じて定まる。
【００５５】
ステップ２６６では、ステップ２６４で認識した単位読出データ量を前段の単一のバッファモジュール４０へ通知することで、当該バッファモジュール４０に対して単位読出データ量を設定する（図１２(Ａ)の(1)も参照）。次のステップ２６８では、自モジュールの前段の全てのバッファモジュール４０に単位読出データ量を設定したか否か判定する。自モジュールの前段のバッファモジュール４０の数が１個であれば当該判定は肯定されてステップ２７２へ移行するが、前段のバッファモジュール４０の数が複数であればステップ２６８の判定が否定されてステップ２６６に戻り、ステップ２６８の判定が肯定される迄、ステップ２６６，２６８を繰り返す。これにより、前段の全てのバッファモジュール４０に対して単位読出データ量が各々設定されることになる。
【００５６】
ステップ２７２では、自モジュールの後段のモジュールを判定し、自モジュールの後段のモジュールがバッファモジュール４０以外、例えば画像出力部２４や特定のファイル等の場合には、必要に応じてステップ２７８でその初期化処理を行ってステップ２８０に移る。例えば後段のモジュールが、画像記録部や表示部、書込装置、送信部の何れかから成る画像出力部２４であれば、この画像出力部２４に対し、上記の初期化処理として、単位書込データ量に相当するデータ量ずつ画像データを出力することを通知する処理等を行う。また、後段のモジュールがバッファモジュール４０である場合には、ステップ２７４で１回の画像データの書き込みにおける画像データのデータ量（単位書込データ量）を認識し、ステップ２７６で後段のバッファモジュールに当該単位書込データ量を設定（図１２(Ａ)の(2)も参照）した後に、ステップ２８０に移る。ステップ２８０では、当該画像処理モジュール初期化処理の完了をモジュール生成部４４に通知して、画像処理モジュール初期化処理を終了する。
【００５７】
一方、画像処理部５０を構成する個々のバッファモジュール４０のバッファ制御部４０Ｂは、モジュール生成部４４又はアプリケーション３２によって起動されると図５に示すバッファ制御処理を行う。このバッファ制御処理では、モジュール生成部４４又はアプリケーション３２によって起動されてバッファモジュール４０の生成が指示されると、ステップ３５６で待ち要求数を０に初期化する。また、次のステップ３５８では、自モジュールの前段の画像処理モジュール３８から単位書込データ量が通知されるか又は自モジュールの後段の画像処理モジュール３８から単位読出データ量が通知されたか否か判定する。判定が否定された場合はステップ３６２へ移行し、自モジュールと連結されている全ての画像処理モジュール３８から単位書込データ量又は単位読出データ量が通知されたか否か判定する。判定が否定された場合はステップ３５８に戻り、ステップ３５８又はステップ３６２の判定が肯定される迄ステップ３５８，３６２を繰り返す。
【００５８】
自モジュールと連結されている特定の画像処理モジュール３８から単位書込データ量又は単位読出データ量が通知されると、ステップ３５８の判定が肯定されてステップ３６０へ移行し、通知された単位書込データ量又は単位読出データ量を記憶した後にステップ３５８に戻る。従って、自モジュールと連結されている個々の画像処理モジュール３８の制御部３８Ｂによって画像処理モジュール初期化処理（図１０）のステップ２６６又はステップ２７６の処理が行われることで、前記個々の画像処理モジュール３８から単位書込データ量又は単位読出データ量が通知される毎に、通知された単位書込データ量又は単位読出データ量が記憶されることで、通知された単位書込データ量又は単位読出データ量がバッファモジュール４０に設定される（図１２(Ｂ)の(1),(2)も参照）。
【００５９】
自モジュールと連結されている全ての画像処理モジュール３８から単位書込データ量又は単位読出データ量が通知され、通知された単位書込データ量及び単位読出データ量が各々設定されると、ステップ３６２の判定が肯定されてステップ３６３へ進む。
【００６０】
ステップ３６３では、自モジュールと連結されている個々の画像処理モジュール３８によって各々設定された単位書込データ量及び単位読出データ量に基づいて、起動条件を設定する。起動条件とは、自モジュールと連結されている後段の画像処理モジュール３８を起動させるための条件である。後述するように、画像処理モジュール３８は、処理要求を入力すると待機状態から起動し、前段のバッファモジュールから画像データを取得して画像処理を開始する。一方、前段のバッファモジュールからの画像データの取得に失敗すると、画像処理の実行を停止して待機状態へ移行し（図１１のステップ２８９も参照。）、次に処理要求が入力されるまで待機状態を継続する。
【００６１】
例えば、「自モジュールに設定された単位読出データ量の有効データ（後述）が自モジュールのバッファ４０Ａに書き込まれる毎に起動する」という単純な起動条件もあるが、起動にも時間を要するため、常にこうした起動条件で起動させると、オーバーヘッドが大きくなり連結された各画像処理モジュール３８が並列に画像処理する時間が短くなる場合もあるため、本実施の形態では一律に起動条件を設定するのではなく、連結された画像処理モジュール３８に応じて起動条件を決定して、設定している。起動条件の具体例については後述する。
【００６２】
ステップ３６４では、自モジュールと連結されている個々の画像処理モジュール３８によって各々設定された単位書込データ量及び単位読出データ量に基づいて、自モジュールのバッファ４０Ａの管理単位である単位バッファ領域のサイズを決定し、決定した単位バッファ領域のサイズを記憶する。単位バッファ領域のサイズとしては、自モジュールに設定された単位書込データ量及び単位読出データ量のうちの最大値を設定してもよいし、単位書込データ量を設定してもよいし、単位読出データ量（自モジュールの後段に複数の画像処理モジュール３８が連結されている場合は、個々の画像処理モジュール３８によって各々設定された単位読出データ量の最大値）を設定してもよい。また、単位書込データ量と単位読出データ量（の最大値）の最小公倍数を設定してもよいし、この最小公倍数が予め定められた値未満であれば最小公倍数を、最小公倍数が予め定められた値以上であれば別の値（例えば上述した単位書込データ量及び単位読出データ量のうちの最大値、単位書込データ量、単位読出データ量（の最大値）の何れか）を設定するようにしてもよい。更にまた、上記ステップ３６３で「自モジュールのバッファ４０Ａに書き込まれた有効データ（後述）のデータ量が、データ量αになった場合に起動する」という起動条件が設定された場合には、自モジュールに設定された単位書込データ量、単位読出データ量、及びデータ量αのうちの最大値を単位バッファ領域のサイズとして設定するようにしてもよい。
【００６３】
次のステップ３６６では、自モジュールのバッファ４０Ａとして用いるメモリ領域が既に設けられているか否か判定する。この判定は、自モジュールがモジュール生成部４４によって生成された場合には否定され、ステップ３６８でバッファフラグに０を設定した後にステップ３７４へ移行する。また、自モジュールがアプリケーション３２によって生成され、画像データ供給部２２又は画像出力部２４として機能するバッファモジュール４０であった場合には、自モジュールのバッファ４０Ａとして用いるメモリ領域が既に存在しているので、ステップ３６６の判定が肯定されてステップ３７０へ移行し、先程ステップ３６４で決定した単位バッファ領域のサイズを、自モジュールのバッファ４０Ａとして用いる既設のメモリ領域のサイズに変更する。また、次のステップ３７２でバッファフラグに１を設定した後にステップ３７４へ移行する。
【００６４】
更に、ステップ３７４では自モジュールの後段の個々の画像処理モジュール３８に対応する有効データポインタを各々生成し、生成した有効データポインタを各々初期化する。この有効データポインタは、自モジュールの前段の画像処理モジュールによって自モジュールのバッファ４０Ａに書き込まれた画像データのうち、対応する後段の画像処理モジュール３８によって読み出されていない画像データ（有効データ）について、その先頭位置（次の読出開始位置）と末尾位置を各々指し示すポインタであり、ステップ３７４の初期化処理では通常、有効データが存在していないことを意味する特定の情報が設定されるが、自モジュールが自モジュールがアプリケーション３２によって生成され、画像データ供給部２２として機能するバッファモジュール４０であれば、自モジュールのバッファ４０Ａとして用いるメモリ領域には既に画像処理対象の画像データが書き込まれている場合があり、この場合には当該画像データの先頭位置及び末尾位置が後段の個々の画像処理モジュール３８に対応する有効データポインタに各々設定される。
【００６５】
以上の処理によりバッファモジュール４０における初期化処理が完了し、次のステップ３７６では初期化処理の完了をワークフロー管理部４６Ａへ通知する。ステップ３８０では、自モジュールの前段又は後段に連結されている画像処理モジュール３８から、当該画像処理モジュール３８を消去する処理を行うことを通知する消去通知を受信したか否か判定する。この判定が否定された場合はステップ３８２に進み、前段の画像処理モジュール３８から書込要求を受信したか否か判定する。更にここで否定判定された場合はステップ３８４に進み、後段の画像処理モジュール３８から読出要求を受信したか否か判定する。ここで、否定判定された場合は、ステップ３８０に戻る。
【００６６】
一方、アプリケーション３２は、順次起動したモジュール生成部４４によって前述のモジュール生成処理（図３）が順次行われることで、必要とされる画像処理を行う画像処理部５０の構築が完了すると、ワークフロー管理部４６Ａのプログラムを実行するスレッド（又はプロセス又はオブジェクト）に処理要求を送信して起動することで、ワークフロー管理部４６Ａに対して画像処理部５０による画像処理の実行を指示する（図２のステップ１７６も参照）。
【００６７】
処理管理部４６のワークフロー管理部４６Ａは、プログラムが起動されることで図１３に示すブロック単位制御処理を行う。なお、このブロック単位処理は、図２のステップ１７８に示す画像処理部制御処理に対応している。ワークフロー管理部４６Ａはブロック単位処理において、画像処理部５０を構成する画像処理モジュール３８のうちの予め定められた画像処理モジュール３８に処理要求を入力することで、画像処理部５０による画像処理をブロック単位の実行形態で行わせるが、以下では画像処理部５０全体の動作説明に先立ち、個々のバッファモジュール４０のバッファ制御部４０Ｂによって行われる初期化処理完了以降の処理、個々の画像処理モジュール３８の制御部３８Ｂによって行われる画像処理モジュール制御処理について順に説明する。
【００６８】
本実施形態では、画像処理モジュール３８が後段のバッファモジュール４０に画像データを書き込む場合には、画像処理モジュール３８からバッファモジュール４０へ書込要求が入力され、画像処理モジュール３８が前段のバッファモジュール４０から画像データを読み出す場合には、画像処理モジュール３８からバッファモジュール４０へ読出要求が入力される。
【００６９】
まず、書込要求が入力された場合について説明する。図５のステップ３８２で、前段の画像処理モジュール３８から書込要求を受信した場合には、ステップ３８６に進み、図６に示すデータ書込処理を行う。
【００７０】
データ書込処理では、まずステップ４１０において、バッファフラグに１が設定されているか否か、すなわち自モジュールがアプリケーション３２によって生成されたバッファモジュール４０か否か判定する。この判定が肯定された場合は、バッファ４０Ａとして用いるメモリ領域が既に確保されているので、何ら処理を行うことなくステップ４２２へ移行する。また、ステップ４１０の判定が否定された場合、すなわち自モジュールがモジュール生成部４４によって生成されたバッファモジュール４０であった場合にはステップ４１２へ移行し、自モジュールのバッファ４０Ａを構成する単位バッファ領域の中に、空き領域が有る単位バッファ領域（画像データが末尾まで書き込まれていない単位バッファ領域）が存在しているか否か判定する。
【００７１】
モジュール生成部４４によって生成されたバッファモジュール４０は、当初はバッファ４０Ａとして用いるメモリ領域（単位バッファ領域）が確保されておらず、メモリ領域の不足が生ずる度に単位バッファ領域を単位として確保されるので、バッファモジュール４０に最初に書込要求が入力されたときにはバッファ４０Ａとして用いるメモリ領域（単位バッファ領域）が存在しておらず、この判定は否定される。また、後述する処理を経てバッファ４０Ａとして用いる単位バッファ領域が確保された後も、当該単位バッファ領域への画像データの書込に伴って当該単位バッファ領域が丁度満杯になった場合には上記判定は否定される。
【００７２】
ステップ４１２の判定が否定された場合はステップ４１４へ移行し、待ち行列から取り出した要求情報に含まれる要求元識別情報に基づいて書込要求元の画像処理モジュール３８を認識し、書込要求元の画像処理モジュール３８によって設定された単位書込データ量を認識した後に、認識した単位書込データ量が、先のステップ３６４（図５）で決定した単位バッファ領域のサイズよりも大きいか否か判定する。この判定は、単位バッファ領域のサイズとして、自モジュールに設定された単位書込データ量及び単位読出データ量のうちの最大値、或いは自モジュールに設定された単位書込データ量を採用した場合には常に否定されてステップ４２０へ移行し、確保すべきメモリ領域のサイズ（単位バッファ領域のサイズ）をリソース管理部４６Ｂに通知すると共に、自モジュールのバッファ４０Ａとして用いるメモリ領域（画像データの保管に用いる単位バッファ領域）の確保をリソース管理部４６Ｂに要求する。これにより、リソース管理部４６Ｂによって単位バッファ領域が確保される。
【００７３】
また、自モジュールのバッファ４０Ａを構成する単位バッファ領域の中に、空き領域有りの単位バッファ領域が存在していた場合には、ステップ４１２の判定が肯定されてステップ４１６へ移行し、前述したステップ４１４と同様にして書込要求元の画像処理モジュール３８によって設定された単位書込データ量を認識した後に、空き領域有りの単位バッファ領域における空き領域のサイズが認識した単位書込データ量以上か否か判定する。判定が肯定された場合は、自モジュールのバッファ４０Ａとして用いる単位バッファ領域を新たに確保する必要はないので、何ら処理を行うことなくステップ４２２へ移行する。
【００７４】
単位バッファ領域のサイズが単位書込データ量の整数倍である場合には、自モジュールの前段の画像処理モジュール３８から書込要求が入力される毎に、上記のようにステップ４１２，４１４の判定が各々否定されるか又はステップ４１２，４１６の判定が各々肯定され、バッファ４０Ａとして用いる単位バッファ領域のみが必要に応じて確保される。
【００７５】
一方、単位バッファ領域のサイズが単位書込データ量の整数倍でない場合には、バッファ４０Ａ（単位バッファ領域）への単位書込データ量の画像データの書込が繰り返されることで、例として図７(Ａ)にも示すように、空き領域有りの単位バッファ領域における空き領域のサイズが単位書込データ量よりも小さい状態が生ずる（ステップ４１６の判定が肯定される）。また本実施形態では、単位バッファ領域のサイズとして、自モジュールに設定された単位読出データ量（又はその最大値）を採用してもよいが、そのサイズが単位書込データ量よりも小さい場合（ステップ４１４の判定が肯定される場合）には、書込要求が入力されたときに常に上記の状態が生じていることになる。
【００７６】
上記のように、空き領域有りの単位バッファ領域における空き領域のサイズが単位書込データ量よりも小さい場合、単位書込データ量の画像データが書き込まれる領域が複数の単位バッファ領域に跨ることになるが、本実施形態では、バッファ４０Ａとして用いるメモリ領域を単位バッファ領域を単位として確保するので、異なるタイミングで確保した単位バッファ領域が実メモリ（メモリ１４）上で連続する領域であることは保証されない。このため、画像データが書き込まれる領域が複数の単位バッファ領域に跨る場合、すなわち、ステップ４１６の判定が否定されるかステップ４１４の判定が肯定された場合にはステップ４１８へ移行し、確保すべきメモリ領域のサイズとして単位書込データ量をリソース管理部４６Ｂに通知すると共に、書込用に用いるメモリ領域（書込用バッファ領域：図７(Ｂ)も参照）の確保をリソース管理部４６Ｂに要求する。そして、書込用バッファ領域を確保すると、次のステップ４２０でバッファ４０Ａとして用いる単位バッファ領域の確保を行う。
【００７７】
ステップ４２２では、空き領域有りの単位バッファ領域における空き領域のサイズが単位書込データ量以上の場合は当該空き領域を書込領域とする一方、空き領域有りの単位バッファ領域における空き領域のサイズが単位書込データ量よりも小さい場合には、新たに確保した書込用バッファ領域を書込領域として、当該書込領域の先頭アドレスを書込要求元の画像処理モジュール３８へ通知すると共に、書込対象の画像データを通知した先頭アドレスから順に書き込むよう要請する。これにより、書込要求元の画像処理モジュール３８は、先頭アドレスが通知された書込領域（単位バッファ領域又は書込用バッファ領域）に画像データを書き込む（図７（Ｂ）も参照）。前述したように、画像データが書き込まれる領域が複数の単位バッファ領域に跨る場合は書込用バッファ領域を別途確保するので、画像データが書き込まれる領域が複数の単位バッファ領域に跨るか否かに拘わらず、書込要求元の画像処理モジュール３８への書込領域の通知は、上記のようにその先頭アドレスを通知するのみで済み、画像処理モジュール３８とのインタフェースが簡単になる。
【００７８】
次のステップ４２４では、前段の画像処理モジュール３８による書込領域への画像データの書き込みが完了したか否か判定し、判定が肯定される迄ステップ４２４を繰り返す。前段の画像処理モジュール３８から書込完了が通知されると、ステップ４２４の判定が肯定されてステップ４２６へ移行し、上記の書込処理における書込領域が、先のステップ４１６で確保した書込用バッファ領域か否か判定する。判定が否定された場合は何ら処理を行うことなくステップ４３２へ移行するが、ステップ４２６の判定が肯定された場合はステップ４２８へ移行し、例として図７(Ｃ)に示すように、書込用バッファ領域に書き込まれた画像データを、空き領域有りの単位バッファ領域と、先のステップ４２２で確保した新たな単位バッファ領域に分けて複写する。またステップ４３０では、先のステップ４１８で書込用バッファ領域として確保したメモリ領域の先頭アドレスをリソース管理部４６Ｂへ通知して、当該メモリ領域の解放をリソース管理部４６Ｂに要求し、リソース管理部４６Ｂによって前記メモリ領域を開放させる。
【００７９】
なお、ここでは必要なときに書込用バッファ領域を確保して、不要になったら解放する態様を説明したが、保管用単位バッファ領域のサイズが単位書込データ量の整数倍になっていない場合には、書込用バッファ領域は必ず必要となるので、初期化の際に確保しておき、バッファモジュール４０が消去されるときに解放するよう構成しても良い。
【００８０】
データ書込処理（図６）において、ステップ４２６の判定が否定されるか、又はステップ４３０でメモリ領域の解放を要求した後にリソース管理部４６Ｂから解放完了が通知されるとステップ４３２へ移行し、自モジュールの後段の個々の画像処理モジュール３８に対応する有効データポインタのうち、有効データの末尾位置を表すポインタを各々更新する（図７(Ｃ)も参照）。なお、上記のポインタ更新は、ポインタが指し示す有効データの末尾位置を単位書込データ量分だけ後へ移動させることによって成されるが、自モジュールの前段の画像処理モジュール３８によって今回書き込まれた画像データが処理対象の画像データの末尾に相当するデータであった場合には、前段の画像処理モジュール３８による書込処理完了した際に、処理対象の画像データが終了したことを表す全体処理終了通知と共に、書き込んだ画像データのサイズが前段の画像処理モジュール３８から入力されるので、書込処理完了した際に前段の画像処理モジュール３８から全体処理終了通知が入力された場合には、これとともに通知されたサイズ分だけ有効データの末尾位置を後へ移動させることでポインタ更新が行われる。
【００８１】
次のステップ４３４では、書込処理完了の際に全体処理終了通知が入力されたか否かに基づいて、バッファ４０Ａへの処理対象の画像データの書込が終了したか否か判定する。判定が否定された場合は何ら処理を行うことなくステップ４３８へ移行するが、判定が肯定された場合はステップ４３６へ移行し、ステップ４３２で更新したポインタ（自モジュールの後段の個々の画像処理モジュール３８に対応する有効データポインタのうち有効データの末尾位置を表すポインタ）に対し、処理対象の画像データの末尾であることを表すデータ最終位置情報を付加した後に、データ書込処理を終了してバッファ制御処理（図５）のステップ３８８に進む。
【００８２】
ステップ３８８では、バッファ４０Ａに書き込まれた有効データのデータ量が起動条件を満たしたか否か判定する。ここで肯定判定した場合には、ステップ３９０で、後段の画像処理モジュール３８を起動する。具体的には、画像処理モジュール３８に対して後段の画像処理モジュール３８を起動するための起動要求を処理管理部４６のワークフロー管理部４６Ａに通知する。該起動要求の通知を受け付けたワークフロー管理部４６Ａは、図１３（Ｅ）に示すブロック単位制御処理５を実行する。
【００８３】
このブロック単位制御処理５では、ステップ５１４において、起動要求通知を送信したバッファモジュール４０の後段の画像処理モジュール３８を認識し、認識した後段の画像処理モジュール３８に処理要求を入力して処理を終了する。これにより、待機状態にあった後段の画像処理モジュール３８が起動する。待機状態から起動した後は、画像処理モジュール３８は図１１に示す画像処理モジュール制御処理を実行する。
【００８４】
またバッファ制御処理（図５）において、ステップ３８４で読出要求を受信した場合には、ステップ３９２へ移行し、図８に示すデータ読出処理を行う。データ読出処理では、まずステップ４５０において、待ち行列から取り出した要求情報に含まれる要求元識別情報に基づいて読出要求元の画像処理モジュール３８を認識し、読出要求元の画像処理モジュール３８によって設定された単位読出データ量を認識すると共に、読出要求元の画像処理モジュール３８に対応する有効データポインタに基づいて、読出要求元の画像処理モジュール３８に対応する有効データのバッファ４０Ａ上での先頭位置及び末尾位置を認識する。次のステップ４５２では、ステップ４５０で認識した有効データの先頭位置及び末尾位置に基づいて、読出要求元の画像処理モジュール３８に対応する有効データ（読出要求元の画像処理モジュール３８が読出可能な画像データ）が単位読出データ量以上有るか否か判定する。
【００８５】
判定が否定された場合はステップ４５４へ移行し、バッファ４０Ａに記憶されており読出要求元の画像処理モジュール３８が読出可能な有効データの末尾が処理対象の画像データの末尾か否か判定する。読出要求元の画像処理モジュール３８に対応する有効データがバッファ４０Ａに単位読出データ量以上記憶されているか、又は、バッファ４０Ａに記憶されている読出要求元の画像処理モジュール３８に対応する有効データが単位読出データ量未満であるものの、当該有効データの末尾が処理対象の画像データの末尾であった場合には、ステップ４５２又はステップ４５４の判定が肯定されてステップ４５６へ移行する。ステップ４５６では、先のステップ４５０で認識した有効データの先頭位置に基づいて、有効データの先頭部分の画像データを記憶している単位バッファ領域を認識し、認識した単位バッファ領域に記憶されている有効データのデータ量がステップ４５０で認識した単位読出データ量以上か否かを判断することで、今回の読出対象の有効データが複数の単位バッファ領域に跨っているか否か判定する。
【００８６】
ステップ４５６の判定が否定された場合は何ら処理を行うことなくステップ４６０へ移行するが、例として図９(Ａ)に示すように、有効データの先頭部分の画像データを記憶している単位バッファ領域に記憶されている有効データのデータ量が単位読出データ量未満であり、今回の読出対象の有効データが複数の単位バッファ領域に跨っている場合、今回の読出対象の有効データが実メモリ（メモリ１４）上で連続する領域に記憶されているとは限らない。このため、ステップ４５６の判定が肯定された場合はステップ４６０へ移行し、確保すべきメモリ領域のサイズとして読出要求元の画像処理モジュール３８に対応する単位読出データ量をリソース管理部４６Ｂに通知すると共に、読出に用いるメモリ領域（読出用バッファ領域：図９(Ｂ)も参照）の確保をリソース管理部４６Ｂに要求する。また、読出用バッファ領域を確保すると、次のステップ４６０で複数の単位バッファ領域に跨って記憶されている読出対象の有効データを、ステップ４５８で確保した読出用バッファ領域に複写する（図９(Ｂ)も参照）。
【００８７】
ステップ４６２では、読出対象の有効データが単一の単位バッファ領域に記憶されている場合は、当該単位バッファ領域のうち読出対象の有効データが記憶されている領域を読出領域とする一方、読出対象の有効データが複数の単位バッファ領域に跨って記憶されている場合には読出用バッファ領域を読出領域とし、当該読出領域の先頭アドレスを読出要求元の画像処理モジュール３８へ通知すると共に、通知した先頭アドレスから画像データを順に読み出すよう要請する。これにより、読出要求元の画像処理モジュール３８は、先頭アドレスが通知された読出領域（単位バッファ領域又は読出用バッファ領域）からの画像データの読み出しを行う（図９（Ｃ）も参照）。なお、読出対象の有効データが処理対象の画像データの末尾に相当するデータであった場合（読出対象の有効データの末尾位置が、読出要求元の画像処理モジュール３８に対応する有効データポインタが指し示す有効データの末尾位置に一致しており、かつ前記ポインタにデータ最終位置情報が付加されていた場合）には、画像データの読出要請に際し、読出対象の有効データのサイズと共に、処理対象の画像データの末尾であることも読出要求元の画像処理モジュール３８に通知する。
【００８８】
前述したように、読出対象の有効データが複数の単位バッファ領域に跨って記憶されている場合は、別途確保した読出用バッファ領域に読出対象の有効データを複写するので、読出対象の有効データが複数の単位バッファ領域に跨って記憶されているか否かに拘わらず、読出要求元の画像処理モジュール３８への読出領域の通知は、上記のようにその先頭アドレスを通知するのみで済み、画像処理モジュール３８とのインタフェースが簡単になる。なお、自モジュールがアプリケーション３２によって生成されたバッファモジュール４０である場合は、バッファ４０Ａとして用いているメモリ領域（単位バッファ領域の集合体）は連続領域であるので、ステップ４５６の判定を行う前にバッファフラグが１か否か判定し、判定が肯定された場合は読出対象の有効データが複数の単位バッファ領域に跨って記憶されているか否かに拘わらずステップ４６２へ移行するようにしてもよい。
【００８９】
次のステップ４６４では、読出要求元の画像処理モジュール３８による読出領域からの画像データの読み出しが完了したか否か判定し、判定が肯定される迄ステップ４６４を繰り返す。読出要求元の画像処理モジュール３８から読出完了が通知されると、ステップ４６４の判定が肯定されてステップ４６６へ移行し、上記の読出処理における読出領域が、先のステップ４５８で確保した読出用バッファ領域か否か判定する。判定が否定された場合は何ら処理を行うことなくステップ４７０へ移行するが、ステップ４６６の判定が肯定された場合はステップ４６８へ移行し、先のステップ４５８で読出用バッファ領域として確保したメモリ領域の先頭アドレス及びサイズをリソース管理部４６Ｂへ通知して、当該メモリ領域の解放をリソース管理部４６Ｂに要求する。この読出用バッファ領域についても、保管用単位バッファ領域のサイズが単位読出データ量の整数倍になっていない場合には、読出用バッファ領域は必ず必要となるので、初期化の際に確保しておき、バッファモジュール４０が消去されるときに解放するよう構成しても良い。
【００９０】
次のステップ４７０では、読出要求元の画像処理モジュール３８に対応する有効データポインタのうち、有効データの先頭位置を表すポインタを更新する（図９(Ｃ)も参照）。なお、上記のポインタ更新は、ポインタが指し示す有効データの先頭位置を単位読出データ量分だけ後へ移動させることによって成されるが、今回の読出対象の有効データが処理対象の画像データの末尾に相当するデータであった場合には、読出要求元の画像処理モジュール３８へも通知した今回の読出対象の有効データのサイズ分だけ有効データの先頭位置を後へ移動させることでポインタ更新が行われる。
【００９１】
ステップ４７２では、後段の個々の画像処理モジュール３８に対応する有効データポインタを各々参照し、ステップ４７０のポインタ更新により、バッファ４０Ａを構成する単位バッファ領域の中に、記憶している画像データの後段の各画像処理モジュール３８による読み出しが全て完了した単位バッファ領域、すなわち有効データを記憶していない単位バッファ領域が出現したか否か判定する。判定が否定された場合は何ら処理を行うことなくステップ４７８へ移行するが、判定が肯定された場合はステップ４７４へ移行し、バッファフラグが１か否か判定する。自モジュールがモジュール生成部４４によって生成されたバッファモジュール４０である場合は判定が否定されてステップ４７６へ移行し、有効データを記憶していない単位バッファ領域の解放をリソース管理部４６Ｂに要求し、データ読出処理を終了してバッファ制御処理（図５）のステップ３８０に戻る。
【００９２】
なお、自モジュールがアプリケーション３２によって生成されたバッファモジュール４０である場合にはステップ４７４の判定が肯定され、何ら処理を行うことなく、データ読出処理を終了してバッファ制御処理（図５）のステップ３８０に戻る。
【００９３】
一方、バッファ４０Ａに記憶されており読出要求元の画像処理モジュール３８が読出可能な有効データのデータ量が単位読出データ量未満であり、かつ読出可能な有効データの末尾が処理対象の画像データの末尾でない場合（図１２(Ｂ)の(4)で読出可能な有効データ無が検知された場合）には、ステップ４５２，４５４の判定が各々否定されてステップ４８０へ移行し、新たな画像データを要求するデータ要求をワークフロー管理部４６Ａへ出力する（図１２(Ｂ)の(5)も参照）。この場合、ワークフロー管理部４６Ａにより、自モジュールの前段の画像処理モジュール３８に処理要求が入力されることになる。そして、データ読出処理を終了する。
【００９４】
図５に示すように、データ読出処理を終了するとステップ３８０（図５）に戻る。その後は、前述したステップ３８８で起動条件が満たされてステップ３９０で起動されるまで後段の画像処理モジュール３８は待機状態を継続する。後段の画像処理モジュール３８が起動された後は、上記と同様にデータ読出処理が実行されることになる。
【００９５】
詳細は後述するが、ワークフロー管理部４６Ａはバッファモジュール４０からデータ要求が入力されると（図１２（Ｂ）の(6)も参照）、データ要求元のバッファモジュール４０の前段の画像処理モジュール３８に処理要求を入力する（図１２(Ｂ)の(7)も参照）。この処理要求の入力をトリガとして前段の画像処理モジュール３８の制御部３８Ｂで行われる処理により、前段の画像処理モジュール３８がバッファモジュール４０へ画像データを書込可能な状態になると、前段の画像処理モジュール３８から書込要求が入力されることで前述したデータ書込処理（図６）が行われ、前段の画像処理モジュール３８からバッファモジュール４０のバッファ４０Ａに画像データが書き込まれる（図１２(Ｂ)の(8),(9)も参照）。そして、書込の結果、前述の起動条件が満たされると、バッファモジュール４０から起動要求が通知され（図１２（Ｂ）の(10)も参照）、ワークフロー管理部４６Ａから後段の画像処理モジュール３８に対して処理要求が入力され（図１２（Ｂ）の(11)も参照）、これを受け付けた後段の画像処理モジュール３８が起動して、後段の画像処理モジュール３８によるバッファ４０Ａからの画像データの読出が行われることになる（図１２(Ｂ)の(12)も参照）。
【００９６】
続いて、画像処理部５０を構成する個々の画像処理モジュール３８に対してワークフロー管理部４６Ａから処理要求が入力される毎に、個々の画像処理モジュール３８の制御部３８Ｂによって各々行われる画像処理モジュール制御処理（図１１）を説明する。画像処理モジュール制御処理では、まずステップ２８４において、自モジュールの前段にモジュール（バッファモジュール４０や画像データ供給部２２、画像処理モジュール３８等）が存在している場合に、当該前段のモジュールに対してデータ（画像データ又は解析等の画像処理の処理結果）を要求する。次のステップ２８６では、前段のモジュールからデータが取得可能であるかを判定する。判定が否定された場合は、ステップ２８８で全体処理終了が通知されたか否かを判定し、判定が肯定された場合はステップ３０８で全体処理終了をワークフロー管理部４６Ａ及び自モジュールの前段及び後段のモジュールに通知した後に、ステップ３１０で自モジュール消去処理（後述）を行う。
【００９７】
一方、ステップ２８８の判定が否定された場合は、ステップ２８９で、自モジュールを待機状態へ移行させる（処理停止）。その後は、新たに処理要求を受信するまで（入力されるまで）、待機状態を継続する。また、ステップ２８６の判定が肯定された場合には、ステップ２９０で前段のモジュールからデータを取得するデータ取得処理を行う。
【００９８】
ここで、自モジュールの前段のモジュールがバッファモジュール４０である場合には、先のステップ２８４でデータを要求すると（読出要求）、読出可能な有効データがバッファモジュール４０のバッファ４０Ａに単位読出データ量以上記憶されているか、読出可能な有効データの末尾が処理対象の画像データの末尾に一致している状態であれば、バッファモジュール４０から読出領域の先頭アドレスが通知されて画像データの読出が要請される（図８のステップ４６２も参照）。これにより、ステップ２８６の判定が肯定されてステップ２９０へ移行し、前段のバッファモジュール４０より先頭アドレスが通知された読出領域から単位読出データ量（又はそれ未満のデータ量）の画像データを読み出すデータ取得処理を行う（図１２(Ａ)の(3)も参照）。
【００９９】
また、自モジュールの前段のモジュールが画像データ供給部２２であれば、先のステップ２８４でデータ要求を出力すると画像データを取得可能な状態であることが前段の画像データ供給部２２から通知されることで、ステップ２８６の判定が肯定されてステップ２９０へ移行し、前段の画像データ供給部２２から単位読出データ量の画像データを取得する画像データ取得処理を行う。また、自モジュールの前段のモジュールが画像処理モジュール３８であれば、先のステップ２８４でデータ要求（処理要求）を出力すると、前段の画像処理モジュール３８が画像処理を実行可能な状態であれば書込要求が入力されることでデータ（画像処理結果）を取得可能な状態であることが通知されるので、ステップ２８６の判定が肯定されてステップ２９０へ移行し、前段の画像処理モジュール３８によってデータを書き込ませるバッファ領域のアドレスを通知して書込を要請することで、前段の画像処理モジュール３８から出力されるデータを前記バッファに書き込ませるデータ取得処理を行う。
【０１００】
次のステップ２９２では、自モジュールの前段に複数のモジュールが連結されているか否か判定する。判定が否定された場合には何ら処理を行うことなくステップ２９６へ移行するが、判定が肯定された場合はステップ２９４へ移行し、前段に連結されている全てのモジュールからデータを取得したか否か判定する。ステップ２９４の判定が否定された場合はステップ２８４に戻り、ステップ２９４の判定が肯定される迄ステップ２８４からステップ２９４を繰り返す。前段のモジュールから取得すべきデータが全て揃うと、ステップ２９２の判定が否定されるかステップ２９４の判定が肯定されてステップ２９６へ移行する。
【０１０１】
次に、ステップ２９６で自モジュールの後段のモジュールに対してデータ出力用の領域を要求し、ステップ２９８でデータ出力領域が取得できる迄（データ出力領域の先頭アドレスが通知される迄）繰り返し判定を行う。なお、後段のモジュールがバッファモジュール４０であれば、上記のデータ出力用領域の要求は当該バッファモジュール４０に対して書込要求を出力することによって成される。データ出力領域（後段のモジュールがバッファモジュール４０であれば当該バッファモジュール４０から先頭アドレスが通知された書込領域）が取得できたら（図１２(Ａ)の(4)も参照）、次のステップ３００において、先のデータ取得処理で取得したデータと後段のモジュールから取得したデータ出力領域（の先頭アドレス）を画像処理エンジン３８Ａに入力し、入力したデータに対して予め定められた画像処理を行わせる（図１２(Ａ)の(5)も参照）と共に、処理後のデータをデータ出力領域に書き込ませる（図１２(Ａ)の(6)も参照）。画像処理エンジン３８Ａへの単位読出データ量のデータの入力が完了し、画像処理エンジン３８Ａから出力されたデータがデータ出力領域に全て書き込まれると、次のステップ３０２で出力が完了したことを後段のモジュールに通知する。
【０１０２】
上記のステップ２８４からステップ３０２により画像処理モジュール３８における単位処理データ量のデータに対する処理（単位処理）が完了するが、ワークフロー管理部４６Ａから画像処理モジュール３８に入力される処理要求では、ワークフロー管理部４６Ａによって単位処理の実行回数が指定されることがある。このためステップ３０４では、単位処理の実行回数が、入力された処理要求によって指示された実行回数に達したか否か判定する。指示された単位処理の実行回数が１回の場合、この判定は無条件に肯定されるが、指示された単位処理の実行回数が２回以上の場合はステップ２８４に戻り、ステップ３０４の判定が肯定される迄ステップ２８４からステップ３０４を繰り返す。ステップ３０４の判定が肯定されるとステップ３０６へ移行し、ワークフロー管理部４６Ａへ処理完了通知を出力することで、入力された処理要求に対応する処理が完了したことをワークフロー管理部４６Ａへ通知し、画像処理モジュール制御処理を終了する。
【０１０３】
また、ワークフロー管理部４６Ａから処理要求が入力される毎に上述した処理が繰り返されることで処理対象の画像データを末尾まで処理すると、前段のモジュールから処理対象の画像データの終了が通知されることで、ステップ２８８の判定が肯定されてステップ３０８へ移行し、処理対象の画像データに対する処理が終了したことを意味する全体処理終了通知をワークフロー管理部４６Ａ及び後段のモジュールへ各々出力する。また、次のステップ３１０では自モジュール消去処理（後述）を行い、画像処理モジュール制御処理を終了する。
【０１０４】
ここで、ワークフロー管理部４６Ａの処理について図１３及び図１４を参照しながら説明する。なお、図１４では、バッファモジュール４０からの起動要求通知、及び該起動要求に応じて出力される処理要求の図示は省略してある。
【０１０５】
ワークフロー管理部４６Ａは、画像処理の実行が指示されると、図１３(Ａ)に示すブロック単位制御処理１を行い、バッファモジュール４０からデータ要求が入力される毎に図１３(Ｂ)に示すブロック単位制御処理２を行い、画像処理モジュール３８から処理完了通知が入力される毎に図１３(Ｃ)に示すブロック単位制御処理３を行い、画像処理モジュール３８から全体処理終了通知が入力される毎に図１３(Ｄ)に示すブロック単位制御処理４を行い、バッファモジュール４０から起動要求通知が入力される毎に図１３(Ｅ)に示すブロック単位制御処理５を行う。
【０１０６】
先にも述べたように、ブロック単位制御処理１では、ワークフロー管理部４６Ａによる画像処理部５０の個々の画像処理モジュール３８への処理要求の入力では、単位処理の実行回数を指定可能とされているが、ステップ５００では、１回の処理要求で指定する単位処理の実行回数を個々の画像処理モジュール３８毎に決定する。この処理要求１回当りの単位処理の実行回数は、例えば処理対象の画像データ全体を処理する間の個々の画像処理モジュール３８への処理要求の入力回数が平均化されるように定めてもよいが、他の基準、例えば、上記設定した起動条件に従って画像処理モジュール３８毎に定めてもよい。例えば、「自モジュールのバッファ４０Ａに書き込まれた有効データのデータ量が、データ量αになった場合に起動する」という起動条件が設定された場合には、データ量αの有効データが後段のバッファモジュール４０のバッファ４０Ａに書き込まれるまで単位処理が繰り返されるように、実行回数を定めてもよい。そして次のステップ５０２において、画像処理部５０のうち最後段の画像処理モジュール３８に処理要求を入力し（図１４の(1)も参照）、ブロック単位制御処理１を終了する。
【０１０７】
ここで、図１４に示す画像処理部５０において、ワークフロー管理部４６Ａから最後段の画像処理モジュール３８4に処理要求が入力されると、画像処理モジュール３８4の制御部３８Ｂは前段のバッファモジュール４０3に読出要求を入力する（図１４の(2)参照）。このとき、バッファモジュール４０3のバッファ４０Ａには画像処理モジュール３８4が読出可能な有効データ（画像データ）が記憶されていないので、バッファモジュール４０3のバッファ制御部４０Ｂはワークフロー管理部４６Ａにデータ要求を入力する（図１４の(3)参照）。また、画像処理モジュール３８4は、待機状態となる。
【０１０８】
ワークフロー管理部４６Ａは、バッファモジュール４０からデータ要求が入力される毎に、図１３(Ｂ)に示すブロック単位制御処理２を行う。このブロック単位制御処理２では、ステップ５０４において、データ要求入力元のバッファモジュール４０（ここではバッファモジュール４０3）の前段の画像処理モジュール３８（ここでは画像処理モジュール３８3）を認識し、認識した前段の画像処理モジュール３８に処理要求を入力（図１４の(4)参照）して処理を終了する。
【０１０９】
画像処理モジュール３８3の制御部３８Ｂは、処理要求が入力されると前段のバッファモジュール４０2に読出要求を入力し（図１４の(5)参照）、バッファモジュール４０2のバッファ４０Ａにも読出可能な画像データが記憶されていないので、バッファモジュール４０2のバッファ制御部４０Ｂはワークフロー管理部４６Ａにデータ要求を入力する（図９の(6)参照）。また、画像処理モジュール３８3は、待機状態となる。ワークフロー管理部４６Ａは、バッファモジュール４０2からデータ要求が入力された場合も、前述のブロック単位制御処理２を再度行うことで、その前段の画像処理モジュール３８2に処理要求を入力し（図１４の(7)参照）、画像処理モジュール３８2の制御部３８Ｂは前段のバッファモジュール４０1に読出要求を入力する（図１４の(8)参照）。また、バッファモジュール４０1のバッファ４０Ａにも読出可能な画像データが記憶されていないので、バッファモジュール４０1のバッファ制御部４０Ｂもワークフロー管理部４６Ａにデータ要求を入力する（図１４の(9)参照）。また、画像処理モジュール３８2は、待機状態となる。ワークフロー管理部４６Ａは、バッファモジュール４０1からデータ要求が入力された場合も、前述のブロック単位制御処理２を再度行うことで、その前段の画像処理モジュール３８1に処理要求を入力する（図１４の(10)参照）。
【０１１０】
ここで、画像処理モジュール３８1の前段のモジュールは画像データ供給部２２であるので、画像処理モジュール３８1の制御部３８Ｂは、画像データ供給部２２にデータ要求を入力することで画像データ供給部２２から単位読出データ量の画像データを取得し（図１４の(11)参照）、取得した画像データに対して画像処理エンジン３８Ａが画像処理を行うことで得られた画像データを、後段のバッファモジュール４０1のバッファ４０Ａに書き込む（図１４の(12)参照）。
【０１１１】
また、バッファモジュール４０1のバッファ制御部４０Ｂは、起動条件を満たすデータ量の有効データが書き込まれるとワークフロー管理部４６Ａに起動要求を通知して、画像処理モジュール３８2を起動させ、画像処理モジュール３８2に対して読出を要請する。これに伴い画像処理モジュール３８2の制御部３８Ｂは、バッファモジュール４０1のバッファ４０Ａから単位読出データ量の画像データを読み出し（図１４の(13)参照）、取得した画像データに対して画像処理エンジン３８Ａが画像処理を行うことで得られた画像データを、後段のバッファモジュール４０2のバッファ４０Ａに書き込む（図１４の(14)参照）。バッファモジュール４０2のバッファ制御部４０Ｂは、起動条件を満たすデータ量の有効データが書き込まれるとワークフロー管理部４６Ａに起動要求を通知して、画像処理モジュール３８3を起動させ、画像処理モジュール３８3へ読出を要請し、画像処理モジュール３８3の制御部３８Ｂは、バッファモジュール４０2のバッファ４０Ａから単位読出データ量の画像データを読み出し（図１４の(15)参照）、取得した画像データに対して画像処理エンジン３８Ａが画像処理を行うことで得られた画像データを、後段のバッファモジュール４０3のバッファ４０Ａに書き込む（図１４の(16)参照）。
【０１１２】
更に、バッファモジュール４０3のバッファ制御部４０Ｂは、起動条件を満たすデータ量の有効データが書き込まれるとワークフロー管理部４６Ａに起動要求を通知して、画像処理モジュール３８4を起動させ、画像処理モジュール３８4に対して読出を要請し、これに伴い画像処理モジュール３８4の制御部３８Ｂは、バッファモジュール４０3のバッファ４０Ａから単位読出データ量の画像データを読み出し（図１４の(17)参照）、取得した画像データに対して画像処理エンジン３８Ａが画像処理を行うことで得られた画像データを、後段のモジュールである画像出力部２４へ出力する（図１４の(18)参照）。
【０１１３】
また、個々の画像処理モジュール３８の制御部３８Ｂは、後段のバッファモジュール４０のバッファ４０Ａへの画像データの書き込みを完了すると、ワークフロー管理部４６Ａへ処理完了通知を入力する。ワークフロー管理部４６Ａは、画像処理モジュール３８から処理完了通知が入力される毎に、図１３(Ｃ)に示すブロック単位制御処理３を行う。このブロック単位制御処理３では、まずステップ５０６において、処理完了通知元の画像処理モジュール３８が最後段の画像処理モジュール３８か否か判定する。判定が否定された場合は何ら処理を行うことなくブロック単位制御処理３を終了する。また、判定が肯定された場合はステップ５０８へ移行し、処理完了通知元の画像処理モジュール３８に処理要求を再度入力して処理を終了する。
【０１１４】
また、ワークフロー管理部４６Ａは、画像処理モジュール３８から全体処理終了通知が入力される毎に、図１３(Ｄ)に示すブロック単位制御処理４を行う。このブロック単位制御処理４では、ステップ５１０において、全体処理終了通知入力元の画像処理モジュール３８が最後段の画像処理モジュール３８か否か判定する。判定が否定された場合は何ら処理を行うことなく処理を終了するが、処理対象の画像データに対して必要な画像処理が行われた画像データが画像出力部２４へ全て出力されることで、最後段の画像処理モジュール３８から全体処理終了通知が入力された場合には、ステップ５１０の判定が肯定されてステップ５１２へ移行し、アプリケーション３２に対して画像処理の完了を通知し（図２のステップ１８０も参照）、ブロック単位制御処理を終了する。そして、画像処理の完了が通知されたアプリケーション３２は、ユーザに対して画像処理の完了を通知する（図２のステップ１８２も参照）。
【０１１５】
なお、ブロック単位制御処理５については、前述のとおりである。
【０１１６】
このように、ブロック単位処理では、最後段の画像処理モジュール３８に入力された処理要求がより前段の画像処理モジュール３８へ遡り、最前段の画像処理モジュール３８に到達すると、最前段の画像処理モジュール３８で画像処理が行われて後段のバッファモジュール４０にデータが書き込まれ、それでデータが足りるようであれば処理が後段のモジュールへ進んで行くという流れで一連の画像処理が行われる。
【０１１７】
次に、処理対象の画像データに対する画像処理を完了した後に行われる画像処理部５０の消去について説明する。個々の画像処理モジュール３８の制御部３８Ｂは、画像処理モジュール制御処理（図１１）のステップ３０８で、ワークフロー管理部４６Ａ及び後段のモジュールへ全体処理終了通知を出力した後に、次のステップ３１０において自モジュール消去処理を行う。この自モジュール消去処理では、先のステップ２５４（図１０）で確保したメモリ領域をリソース管理部４６Ｂによって解放させると共に、リソース管理部４６Ｂを通じて自モジュールが確保したメモリ以外のリソースが有れば、当該リソースをリソース管理部４６Ｂによって解放させ、自モジュールの前段のモジュール、後段のモジュール及びワークフロー管理部４６Ａに対し、自モジュールを消去する処理を行うことを通知するための消去通知を入力した後に、自モジュールを消去する処理が行われる。なお、自モジュールを消去することは、自モジュールに対応するスレッド（又はプロセス）を終了するか、又はオブジェクトを削除することで実現する。
【０１１８】
なお、バッファモジュール４０のバッファ制御部４０Ｂによって行われるバッファ制御処理（図５）では、自モジュールの前段又は後段の画像処理モジュール３８から消去通知が入力されると、ステップ３８０の判定が肯定されてステップ３９４へ移行し、消去通知入力元のモジュールを記憶した後に、自モジュールの前段及び後段の全てのモジュールから消去通知が入力されたか否か判定する。判定が否定された場合はステップ３８０へ戻る。また、自モジュールの前段及び後段の全てのモジュールから消去通知が入力されると、ステップ３９４の判定が肯定されてステップ３９６へ移行し、ワークフロー管理部４６Ａに対して消去通知を入力することで、自モジュールを消去する処理を行うことを通知する。そして次のステップ３９８で自モジュールを消去する処理を行ってバッファ制御処理（図５）を終了する。
【０１１９】
ここで、前述した起動条件の決定方法の具体例について説明する。以下では、データ量を表す単位としてライン、画素数、バイト等を用いる。
【０１２０】
[単位処理データ量に基づく決定方法]
例えば、前段の画像処理モジュール３８及び後段の画像処理モジュール３８の各々の単位処理データ量が１ラインの場合には、バッファモジュール４０に画像データ（有効データ）が１ラインずつ書き込まれる毎に起動を繰り返すのではなく、ある程度まとまったライン数が書き込まれた場合に起動させる起動条件を定める。具体的には、上記単位処理データ量のライン数が予め定められた閾値（例えば１０ライン）以下の場合は、自モジュールのバッファ４０Ａに書き込まれた有効データのデータ量が、１０ライン分のデータ量になった場合に起動する起動条件とする。
【０１２１】
なお、ここで、１０ラインというデータ量は一例であって、これに限定されるものではない。また、連結された画像処理モジュール３８の各々の単位処理データ量が異なる場合であっても、何れも閾値より小さければ、上記と同様に起動条件を決定する。なお、上記閾値は小さすぎると起動回数が増え、オーバーヘッドが大きくなってしまうが、閾値があまりに大きすぎると、前段の画像処理モジュール３８が画像１面分の画像データに対する画像処理が終了した後に後段の画像処理モジュール３８が起動されることにもなりかねず、かえって並列して処理する時間が短くなることもあるため、予め試験等により適切な値を求めて設定しておく。
【０１２２】
更にまた、連結された画像処理モジュール３８の各々の単位処理データ量が閾値より大きい場合には、該単位処理データ量の有効データが自モジュールのバッファ４０Ａに書き込まれた場合に起動させる起動条件を定める。
【０１２３】
なお、連結された各画像処理モジュール３８の単位処理データ量を示す情報は、図５のステップ３６３で起動条件を設定する前に予め取得しておく。例えば、図５のステップ３５８で、連結された各画像処理モジュール３８が単位書込データ量及び単位読出データ量をバッファモジュール４０に通知する際に、各々の単位処理データ量も通知するように構成してもよい。
【０１２４】
[処理の重さ（画像処理の単位処理に要する時間）に基づく決定方法]
単位処理データ量の有効データが書き込まれる毎に後段の画像処理モジュール３８を起動させる場合には、各画像処理モジュール３８の処理の重さが重いほど（単位処理に要する時間が長いほど）は、各画像処理モジュール３８が並列して画像処理を実行する期間も長く（並列度が高く）なり、逆に処理の重さが軽いほど（単位処理に要する時間が長いほど）、待機状態に移行しやすく、並列度が低くなる傾向がある。
【０１２５】
そこで、連結された画像処理モジュール３８が画像処理を実行している時間が平均化されて並列度が上がるように起動条件を設定するようにしてもよい。以下、様々なパターンを例示して説明する。ここでは、処理の重さを１〜５（数値が上がるほど重い）の数値で表すこととし、目標連続処理時間（連続して処理させたい時間の目標値、ここでは処理の重さの最大レベル）を５とし、各画像処理モジュール３８の単位処理データ量を、１ラインで共通とする。また、ここでは、単位処理データ量の有効データが書き込まれる毎に起動要求を出力して後段の画像処理モジュール３８を起動させる場合を基準として、該起動要求の出力を間引くか否か、間引く場合にはどの程度間引くかを連結された画像処理モジュール３８に応じて求め、起動条件を定める場合を例に挙げて説明する。
【０１２６】
図１５の（１）に示すように、前段の画像処理モジュール３８及び後段の画像処理モジュール３８の各々の処理の重さが共に軽い場合には、起動回数が抑制されるように起動条件を定める。例えば、前段の画像処理モジュール３８及び後段の画像処理モジュール３８の処理の重さが共に１である場合には、目標連続処理時間の５を１で割ると、５／１＝５ラインであるため、自モジュールのバッファ４０Ａに書込まれた有効データのデータ量が５ライン分のデータ量になった場合に後段の画像処理モジュール３８を起動する起動条件とする。すなわち、単位処理データ量の有効データが書き込まれる毎に起動要求を出力して後段の画像処理モジュール３８を起動させると起動要求が５回出力されることになるが、これを１回の出力となるよう間引く。
【０１２７】
また、前段の画像処理モジュール３８及び後段の画像処理モジュール３８の処理の重さが共に２である場合には、５／２＝２．５ラインであるため、２ライン分又は３ライン分の有効データが自モジュールのバッファ４０Ａに書き込まれる毎に後段の画像処理モジュール３８を起動させる起動条件を定めてよい。また、２ライン分の有効データが自モジュールのバッファ４０Ａに書き込まれたら後段の画像処理モジュール３８を起動させ、次は３ライン分の有効データが自モジュールのバッファ４０Ａに書き込まれたら後段の画像処理モジュール３８を起動させ、その次は、２ライン分の有効データが自モジュールのバッファ４０Ａに書き込まれたら後段の画像処理モジュール３８を起動させ、・・・というように起動条件を定めてもよい。
【０１２８】
図１５の（２）に示すように、前段の画像処理モジュール３８及び後段の画像処理モジュール３８の処理の重さが共に重い場合には、上記軽い場合に比べて待機状態に移行しにくい。図１５（２）に示す例では、前段の画像処理モジュール３８及び後段の画像処理モジュール３８の処理の重さが共に５であり、前述したように目標連続処理時間が５であるため、起動要求の出力を間引くことなく、自モジュールのバッファ４０Ａに書込まれた有効データが５ライン分のデータ量になった場合に後段の画像処理モジュール３８を起動させる起動条件を定める。
【０１２９】
図１５の（３）に示すように、前段の画像処理モジュール３８の処理の重さが後段の画像処理モジュール３８の処理の重さより重い場合には、後段の画像処理モジュール３８の画像処理の方が前段の画像処理モジュール３８よりも早く終了するため、処理の重さが同じ場合に比べて後段の画像処理モジュール３８の待機状態が多くなる。従って、後段の画像処理モジュール３８を起動要求を間引くことなく起動させて処理させた方が並列度が上がる。そこで、この場合には、自モジュールのバッファ４０Ａに有効データが単位処理データ量１ライン分書き込まれた場合に後段の画像処理モジュール３８を起動させる起動条件を定める。
【０１３０】
図１５の（４）に示すように、前段の画像処理モジュール３８の処理の重さが後段の画像処理モジュール３８の処理の重さより軽い場合には、前段の画像処理モジュール３８の単位処理が終了してバッファ４０Ａに対する書込が終わっても、後段の画像処理モジュール３８はまだ処理途中であるため、起動要求を出力する意味がない。そこで、後段の画像処理モジュール３８の単位処理が終了してから起動されるように、起動要求が間引かれるように起動条件を定める。例えば、自モジュールのバッファ４０Ａに書込まれた有効データのデータ量が５ライン分のデータ量となった場合に後段の画像処理モジュール３８を起動させる起動条件を定める。
【０１３１】
なお、連結された各画像処理モジュール３８の処理の重さを示す情報は、図５のステップ３６３で起動条件を設定する前に予め取得しておく。例えば、図５のステップ３５８で、連結された各画像処理モジュール３８が単位書込データ量及び単位読出データ量をバッファモジュール４０に通知する際に、各々の処理の重さも通知するように構成してもよい。
【０１３２】
[連結された画像処理モジュールの数に基づく決定方法]
図１６の（１）に示すように、後段に画像処理モジュール３８が複数連結されている場合には、一回の起動要求で該複数の画像処理モジュール３８が起動されるため、起動回数が多くなってしまう。そこで、起動要求の出力を間引く。例えば、後段に単位処理データ量が１ラインの画像処理モジュール３８が３つ連結されていた場合、通常３回起動要求を出力するところを１回に減らすように起動要求を定める。
【０１３３】
図１６の（２）に示すように、前段に画像処理モジュール３８が複数連結されている場合には、１つのバッファ４０Ａに複数の画像処理モジュール３８が画像データを書き込むという状況は発生しない。従って、起動要求を間引くことなく起動条件を定める。
【０１３４】
[連結された画像処理モジュールの処理対象の画像データが表す画像の大きさに基づく決定方法]
単位処理データ量が１ラインであっても、処理対象の画像データが横長の画像を表す画像データの場合、１ラインの画素数が大きくなる。一方、処理対象の画像データが縦長の画像を表す画像データの場合、横長の場合に比べて１ラインの画素数は小さい。従って、縦長の画像を表す画像データを処理対象とする場合に、１ライン分の有効データが書き込まれる毎に後段の画像処理モジュール３８を起動すると、横長の画像を示す画像データを処理対象とする場合に比べて起動回数が多くなり、並列度が低くなる、そこで、処理対象の画像データが表す画像の大きさ（すなわち画像１面分の大きさ、或いは画像全体の大きさと言い換えてもよい）起動要求の出力を抑制する（間引く）よう起動条件を定める。
【０１３５】
後段の画像処理モジュール３８の単位処理データ量を１ラインとする場合を例に挙げて説明する。まず、（処理対象の画像データが表す画像の大きさ）／（１ラインのデータ量）を求める。そして、求めた値を予め定められた間引き係数で割ったものを起動条件とする。例えば、上記画像の大きさが1500*1000画素であり、単位処理データ量が１ライン（1000画素）の場合には、（1500*1000画素）／（1000画素）は、1500が求められる。上記間引き係数は、予め実験等で目標の並列度が得られた値として求めておき、これを250とすると、1500/250=6が求められる。従って、自モジュールのバッファ４０Ａに書込まれた有効データが６ライン分のデータ量となった場合に後段の画像処理モジュール３８を起動するという起動条件を定める。
【０１３６】
なお、前段の画像処理モジュール３８の処理対象の画像データが表す画像と後段の画像処理モジュール３８の処理対象の画像データが表す画像の大きさが等しければ、前段の画像処理モジュール３８の処理対象の画像データが表す画像の大きさに基づいて起動条件を定めてもよい。
【０１３７】
なお、後段の画像処理モジュール３８の処理対象となる画像データが表す画像の大きさの情報は、図５のステップ３６３で起動条件を設定する前に予め取得しておく。例えば、図５のステップ３５８で、連結された各画像処理モジュール３８が単位書込データ量及び単位読出データ量をバッファモジュール４０に通知する際に、処理対象となる画像データが表す画像の大きさも通知するように構成してもよい。
【０１３８】
[複数の要素の組み合わせに基づいて起動条件を決定する場合の決定方法]
上記では、単位処理データ量、処理の重さ、連結する画像処理モジュールの数、及び処理対象の画像データが表す画像の大きさの各々に基づいて起動条件を定める例について説明したが、これらのうち、２以上の要素を組み合わせ、この組み合わせに基づいて起動条件を定めるようにしてもよい。なお、ここでも、単位処理データ量の有効データが書き込まれる毎に起動要求を出力して後段の画像処理モジュール３８を起動させる場合を基準として、該起動要求の出力を間引くか否か、間引く場合にはどの程度間引くかを連結された画像処理モジュール３８に応じて求め、起動条件を定める場合を例に挙げて説明する。
【０１３９】
（１）単位処理データ量及び処理対象の画像データが表す画像の大きさに基づく決定方法
単位処理データ量の有効データが書き込まれる毎に起動すると、（処理対象の画像の大きさ）／（単位処理データ量）が、画像処理モジュール３８の起動回数になる。この起動回数が予め定めた閾値より大きい場合には、起動要求の出力を間引き、閾値以下の場合には間引かないようにする。
【０１４０】
以下、具体例を示す。
Ａ．後段の画像処理モジュール３８の処理対象の画像データが表す画像の大きさが1000×1500画素であり、１ラインを1000画素とすると、前段及び後段の画像処理モジュール３８の単位処理データ量が２ラインの場合、単位処理データ量の有効データが書き込まれる毎に起動すると、起動回数は、1500/2=750回になる。
Ｂ．後段の画像処理モジュール３８の処理対象の画像データが表す画像の大きさが250×250画素であり、前段及び後段の画像処理モジュール３８の単位処理データ量が５ラインの場合は、単位処理データ量の有効データが書き込まれる毎に起動すると、起動回数は、250/5=50回になる。
【０１４１】
予め、実験などにより目標となる並列度を達成する間引き係数を定めておき、この間引き係数に基づいて、起動要求が間引かれるよう起動条件を定める。ここで、間引き係数を50とすると、Ａの場合は、750/50=15で１５回に１回起動要求を出力されるように起動条件を定める。すなわち、有効データが３０ライン書き込まれる毎に後段の画像処理モジュール３８を起動する起動条件を定める。また、Ｂの場合は、50/50＝１であるため、起動要求を間引かない。すなわち、自モジュールのバッファ４０Ａに書込まれた有効データのデータ量が単位処理データ量になった場合に起動する起動条件を定める。
【０１４２】
なお、上記起動条件の計算において、単位処理データ量が前段と後段とで異なる場合には、その最大値を用いるものとする。
【０１４３】
（２）単位処理データ量及び処理の重さに基づく決定方法
処理の重さが軽く単位処理データ量が少ないほど起動回数が多くなる傾向があるため、処理の重さが軽く単位処理データ量が少ないほど起動要求の間引きを多くする。
【０１４４】
以下、具体例を示す。
ここでは、前段の画像処理モジュール３８及び後段の画像処理モジュール３８の双方の単位処理データ量、及び処理の重さが等しいものとして説明する。更に、処理の重さを１〜５（数値が上がるほど重い）の数値で表すこととし、目標連続処理時間を２０とする。
【０１４５】
まず、以下ＡからＣの各々の場合について、処理の重さ×単位処理データ量(ライン数）を計算する。
Ａ．処理の重さが5で単位処理データ量が2ラインずつの場合、5×2=10
Ｂ．処理の重さが2で単位処理データ量が1ラインずつの場合、2×1=2
Ｃ．処理の重さが5で単位処理データ量が5ラインずつの場合、5×5=25
【０１４６】
次に、ＡからＣの各々について、目標連続処理時間／（処理の重さ×単位処理データ量）を計算し、これに基づいて起動条件を求める。
Ａの場合は、20/10=2となり、単位処理データ量の有効データが書き込まれる毎に起動要求を出力して後段の画像処理モジュール３８を起動させる場合には起動要求を２回出力することになるが、これを１回に減らす。すなわち、自モジュールのバッファ４０Ａに書込まれた有効データのデータ量が４ライン分のデータ量となった場合に起動する起動条件を定める。
Ｂの場合は、20/2=10となり、単位処理データ量の有効データが書き込まれる毎に起動要求を出力して後段の画像処理モジュール３８を起動させる場合には起動要求を10回出力することになるが、これを１回に減らす。すなわち、自モジュールのバッファ４０Ａに書込まれた有効データのデータ量が１０ライン分のデータ量となった場合に起動する起動条件を定める。
Ｃの場合は、20/25=0.8で１以下になるので、起動要求を間引かない。すなわち、自モジュールのバッファ４０Ａに書込まれた有効データのデータ量が５ライン分のデータ量となった場合に起動する起動条件を定める。
【０１４７】
（３）単位処理データ量、処理対象の画像データが表す画像の大きさ、処理の重さ、及び連結された画像処理モジュールの数に基づく決定方法
ここでは、前段及び後段に連結された各画像処理モジュール３８の各々の単位処理データ量、及び処理の重さが等しいものとして説明する。
まず、後段の画像処理モジュール３８の処理対象の画像データが表す画像の大きさ／単位処理データ量を計算する。以下、２つの計算例を示す。
Ａ．1500/2=750
Ｂ．250/5=50
【０１４８】
次に、図１７に示すテーブルから自モジュールの該当する間引き係数を探し、上記計算した数値/間引き係数を間引き回数とする。図１７に示すテーブルは、処理の重さ及び連結されたモジュール数に応じた間引き係数が記憶されたテーブルである。なお、本テーブルは、処理の重さの方が連結されるモジュール数よりも起動回数に対する影響が大きいため、それを考慮して作成されている。本テーブルは、予め実験等により各係数を求め作成しておく。なお、本テーブルは、例えば、メモリ１４に確保され、生成された各バッファモジュール４０が読出し可能な共通の記憶領域に予め記憶されており、各バッファモジュール４０が該記憶領域から必要な間引き係数を読み出すようにしてもよい。
【０１４９】
上記Ａの場合、間引き係数は100であるため、上記計算した値を間引き係数で割ると、750/100＝7.5となる。従って、単位処理データ量の有効データが書き込まれる毎に起動要求を出力して後段の画像処理モジュール３８を起動させる場合に起動要求を７回出力することになるが、これを１回に減らす。すなわち、自モジュールのバッファ４０Ａに書込まれた有効データのデータ量が１４ライン分のデータ量となった場合に起動する起動条件を定める。
【０１５０】
上記Ｂの場合、間引き係数は10であるため、上記計算した値を間引き係数で割ると、50/10＝5となる。従って、単位処理データ量の有効データが書き込まれる毎に起動要求を出力して後段の画像処理モジュール３８を起動させる場合に起動要求を５回出力することになるが、これを１回に減らす。すなわち、自モジュールのバッファ４０Ａに書込まれた有効データのデータ量が２５ライン分のデータ量となった場合に起動する起動条件を定める。
【０１５１】
なお、上記様々な起動条件の決定方法について説明したが、バッファ４０Ａに書き込まれた有効データのデータ量が後段の画像処理モジュール３８の単位読出データ量未満の状態で起動要求が出力されてしまうことがないように上記方法で決定した起動条件を調整し、該調整した起動条件を最終的な起動条件として決定して設定する。例えば、単位処理データ量が単位読出データ量未満であり、且つ上記方法により、単位処理データ量の有効データが自モジュールのバッファ４０Ａに書き込まれた場合に起動させる起動条件を決定された場合には、単位読出データ量の有効データが自モジュールのバッファ４０Ａに書き込まれた場合に起動させる起動条件に変更し、これを起動条件として設定する。
【０１５２】
図１８は、本実施の形態に係るバッファモジュール４０の機能構成を示す図である。前述したように、バッファモジュール４０は、バッファ４０Ａ及びバッファ制御部４０Ｂを備えている。バッファ制御部４０Ｂは、起動部５０、起動条件決定部５２、書き込み状況監視部５４、及び書込・読出制御部５６を備えている。起動部５０は、起動条件決定部５２が決定した起動条件に従って起動要求を処理管理部４６に送信する（図５のステップ３９０も参照）。起動条件決定部５２は、前述したように、起動条件を決定し、設定する（図５のステップ３６３も参照）。書き込み状況監視部５４は、バッファ４０Ａに対する有効データの書き込み状態を監視する（図５のステップ３８８も参照）。書込・読出制御部５６は、前段に連結された画像処理モジュール３８からの書込要求に対する書き込みの制御、及び後段に連結された画像処理モジュール３８からの読出要求に対する読出しの制御を行う（図５のステップ３６３，３８８，３９０以外の各ステップ、図６、及び図８も参照）。
【０１５３】
上記実施形態ではプログラム実行リソースとしてＣＰＵ１２が１個のみ設けられた構成を説明したが、これに限定されるものではなく、同種のプログラム実行リソースが複数設けられた構成に適用してもよい。また、複数種のプログラム実行リソースが設けられた構成としてもよい。
【０１５４】
更に、上記ではバッファモジュール４０において、後段の画像処理モジュール３８から読出要求が入力され、読出要求元の画像処理モジュール３８が読出可能な有効データが自モジュールのバッファ４０Ａに記憶されていなかった場合に、バッファ制御部４０Ｂがワークフロー管理部４６Ａへデータ要求を入力する態様を例に説明したが、これに限定されるものではなく、上記場合にバッファ制御部４０Ｂが前段の画像処理モジュール３８へデータ要求を直接入力するようにしてもよい。この態様の処理シーケンスを図１９に示す。図１９からも明らかなように、この態様において、ワークフロー管理部４６Ａは画像処理部５０のうち最後段の画像処理モジュール３８についてのみ処理要求を入力すれば済むので、ワークフロー管理部４６Ａにおける処理が簡単になる。
【０１５５】
このように構成した場合には、バッファモジュール４０のバッファ制御部４０Ｂを、自モジュールの前段の画像処理モジュール３８によってバッファ４０Ａに起動条件を満たすデータ量の有効データが書き込まれる毎に後段の画像処理モジュール３８に対して起動要求としての処理要求を入力させるようにする。また、バッファ４０Ａに書き込まれた有効データが後段の画像処理モジュール３８の単位読出データ量未満であり、かつ読出可能な有効データの末尾が処理対象の画像データの末尾でなければ、前段の画像処理モジュール３８に対してデータ要求としての処理要求を入力させる。
【０１５６】
なお、図２０に示すように、上記画像処理装置１０を、画像形成部６０を備えた画像形成装置７０に組み込んでもよい。この画像形成装置７０では、画像処理装置１０の画像処理部５０が画像処理した画像データを用いて画像形成部６０が画像を形成する。画像形成部６０は、有色の液滴を吐出して記録媒体に画像を形成する画像形成部であってもよいし、静電写真方式で画像を形成する画像形成部であってもよい。
【符号の説明】
【０１５７】
１０ コンピュータ
１４ メモリ
２０ 記憶部
２２ 画像データ供給部
２４ 画像出力部
３２ アプリケーション
３４ 画像処理プログラム群
３８ 画像処理モジュール
３８Ａ 画像処理エンジン
３８Ｂ 制御部
４０ バッファモジュール
４０Ａ バッファ
４０Ｂ バッファ制御部
４６ 処理管理部
４６Ａ ワークフロー管理部
５０ 画像処理部
６０ 画像形成部
７０ 画像形成装置
【技術分野】
【０００１】
本発明は、画像処理装置、画像形成装置、及び画像処理プログラムに関する。
【背景技術】
【０００２】
前段のモジュールから単位データ量ずつ画像データを取得して画像処理を行い、画像処理後の画像データ又は画像処理結果を後段のモジュールへ出力する機能を備え、実行する画像処理の種類又は内容が互いに異なる複数の画像処理モジュールと、前段のモジュールからの画像データをバッファに書き込ませ、バッファに記憶されている画像データを後段のモジュールによって読み出させるバッファモジュールが、個々の画像処理モジュールの前段及び後段の少なくとも一方にバッファモジュールが連結されるように連結されて構築された画像処理部に対し、個々の画像処理モジュールに処理要求を繰り返し入力して処理対象の画像全体を処理させ、かつ個々の画像処理モジュールに対応するスレッドの実行優先度を画像処理の進行度合に応じて変更する画像処理装置が知られている（特許文献１参照。）。
【０００３】
また、画像処理に係る演算を実行する複数の演算手段と、画像情報に対して前記演算手段により画像処理を実行させる複数の画像処理手段と、前記複数の画像処理手段を、複数のグループに区分するための区分数を取得する区分数取得手段と、前記区分数取得手段により取得された区分数及び画像処理手段が実行させる画像処理の順序に基づき、各画像処理手段を各グループに属させることにより前記複数の画像処理手段を区分する区分手段と、を有する画像処理装置も知られている（特許文献２参照。）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−２８７０８５号公報
【０００５】
【特許文献２】特開２００８−１４００４６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明は、画像処理手段と記憶処理手段とが交互に存在するように、画像処理手段及び記憶処理手段がパイプライン形態又は有向非循環グラフ形態で連結されて構築された画像処理部において、常に記憶処理手段の後段に連結されている画像処理手段の単位読出データ量が記憶処理手段の記憶領域に書き込まれる毎に該後段の画像処理手段を起動させる場合に比べて、記憶処理手段に連結された画像処理手段の各々の画像処理が並列に実行される時間を長くすることができる画像処理装置、画像形成装置、及び画像処理プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
請求項１の発明は、待機状態から起動した後は前段から単位データ量の画像データの取得を試行することを前記単位データ量の画像データの取得が失敗するまで繰り返し、前記単位データ量の画像データの取得に失敗した場合は待機状態となり、前記単位データ量の画像データの取得に成功した場合は該取得した画像データを用いて予め定められた画像処理を実行し、該画像処理を経た画像データ又は該画像処理の処理結果を後段へ出力して書き込む機能を各々備え、実行する画像処理の種類又は内容が互いに異なる複数種の画像処理手段の中から選択された複数の画像処理手段であって、対応するプログラムが並列に実行されることによって並列に動作する複数の画像処理手段と、前段に連結された画像処理手段から出力された画像データが書き込まれると共に、後段に連結された画像処理手段により該書き込まれた画像データが読み出される記憶領域を備え、前記記憶領域に書き込まれたデータ量が、前記連結された画像処理手段の各々に応じて定まるデータ量となった場合に、前記後段に連結された画像処理手段が起動するように制御する記憶処理手段と、が、前記画像処理手段と前記記憶処理手段とが交互に存在するように、前記画像処理手段及び前記記憶処理手段がパイプライン形態又は有向非循環グラフ形態で連結されて構築された画像処理部を備えた画像処理装置である。
【０００８】
請求項２の発明は、請求項１に記載の画像処理装置において、前記記憶処理手段は、前記記憶領域に書き込まれたデータ量が、前記連結された画像処理手段による画像処理において単位処理毎に処理される単位処理データ量、前記連結された画像処理手段による画像処理の単位処理に要する時間、前記連結された画像処理手段の数、及び前記後段に連結された画像処理手段による画像処理の処理対象となる画像データが表す画像の大きさ、の少なくとも１つに応じて定まるデータ量となった場合に、前記後段に連結された画像処理手段が起動するように制御するものである。
【０００９】
請求項３の発明は、請求項１又は請求項２に記載の画像処理装置と、前記画像処理装置で画像処理された画像データに基づいて画像を形成する画像形成手段と、を備えた画像形成装置である。
【００１０】
請求項４の発明は、コンピュータを、待機状態から起動した後は前段から単位データ量の画像データの取得を試行することを前記単位データ量の画像データの取得が失敗するまで繰り返し、前記単位データ量の画像データの取得に失敗した場合は待機状態となり、前記単位データ量の画像データの取得に成功した場合は該取得した画像データを用いて予め定められた画像処理を実行し、該画像処理を経た画像データ又は該画像処理の処理結果を後段へ出力して書き込む機能を各々備え、実行する画像処理の種類又は内容が互いに異なる複数種の画像処理手段の中から選択された複数の画像処理手段であって、対応するプログラムが並列に実行されることによって並列に動作する複数の画像処理手段と、前段に連結された画像処理手段から出力された画像データが書き込まれると共に、後段に連結された画像処理手段により該書き込まれた画像データが読み出される記憶領域を備え、前記記憶領域に書き込まれたデータ量が、前記連結された画像処理手段の各々に応じて定まるデータ量となった場合に、前記後段に連結された画像処理手段が起動するように制御する記憶処理手段と、が、前記画像処理手段と前記記憶処理手段とが交互に存在するように、前記画像処理手段及び前記記憶処理手段がパイプライン形態又は有向非循環グラフ形態で連結されて構築された画像処理部として実行させるためのプログラムである。
【発明の効果】
【００１１】
請求項１の発明によれば、常に記憶処理手段の後段に連結されている画像処理手段の単位読出データ量が記憶処理手段の記憶領域に書き込まれる毎に該後段の画像処理手段を起動させる場合に比べて、記憶処理手段に連結された画像処理手段の各々の画像処理が並列に実行される時間を長くすることができる。
【００１２】
請求項２の発明によれば、並列に実行される時間に影響する変数（単位処理データ量、単位処理に要する時間、連結された画像処理手段の数、及び後段に連結された画像処理手段による画像処理の処理対象となる画像データが表す画像の大きさ）に応じた時期に後段の画像処理手段を起動させることができる。
【００１３】
請求項３の発明によれば、常に記憶処理手段の後段に連結されている画像処理手段の単位読出データ量が記憶処理手段の記憶領域に書き込まれる毎に該後段の画像処理手段を起動させる場合に比べて、記憶処理手段に連結された画像処理手段の各々の画像処理が並列に実行される時間を長くすることができる。
【００１４】
請求項４の発明によれば、常に記憶処理手段の後段に連結されている画像処理手段の単位読出データ量が記憶処理手段の記憶領域に書き込まれる毎に該後段の画像処理手段を起動させる場合に比べて、記憶処理手段に連結された画像処理手段の各々の画像処理が並列に実行される時間を長くすることができる。
【図面の簡単な説明】
【００１５】
【図１】本実施形態に係るコンピュータ（画像処理装置）の概略構成を示すブロック図である。
【図２】アプリケーションによる処理を説明するためのシーケンス図である。
【図３】(Ａ)はモジュール生成部によって実行されるモジュール生成処理の内容を示すフローチャート、(Ｂ)はワークフロー管理部のテーブルを説明する概略図である。
【図４】画像処理部の構成例を示すブロック図である。
【図５】バッファモジュールのバッファ制御部によって実行されるバッファ制御処理の内容を示すフローチャートである。
【図６】バッファモジュールのバッファ制御部によって実行されるデータ書込処理の内容を示すフローチャートである。
【図７】書込対象の画像データが複数の保管用単位バッファ領域に跨る場合の処理を説明する概略図である。
【図８】バッファモジュールのバッファ制御部によって実行されるデータ読出処理の内容を示すフローチャートである。
【図９】読出対象の画像データが複数の保管用単位バッファ領域に跨っていた場合の処理を説明する概略図である。
【図１０】画像処理モジュールの制御部によって実行される画像処理モジュール初期化処理の内容を示すフローチャートである。
【図１１】画像処理モジュールの制御部によって実行される画像処理モジュール制御処理の内容を示すフローチャートである。
【図１２】(Ａ)は画像処理モジュール、(Ｂ)はバッファモジュールの概略構成及び実行される処理を各々示すブロック図である。
【図１３】処理管理部によって実行されるブロック単位制御処理の内容を示すフローチャートである。
【図１４】画像処理部における画像処理の流れを説明する概略図である。
【図１５】処理の重さに基づいて起動条件の決定方法を説明する説明図である。
【図１６】連結された画像処理モジュールの数に基づいて起動条件の決定方法を説明する説明図である。
【図１７】処理の重さ及び連結されたモジュール数に応じた間引き係数が記憶されたテーブルである。
【図１８】バッファモジュールの機能構成を示す図である。
【図１９】バッファモジュールが前段の画像処理モジュールに画像データを直接要求する態様におけるブロック単位処理の流れを説明する概略図である。
【図２０】画像形成装置の概略構成を示すブロック図である。
【発明を実施するための形態】
【００１６】
以下、図面を参照して実施形態の一例を詳細に説明する。
【００１７】
図１には、画像処理装置として機能するコンピュータ１０が示されている。なお、このコンピュータ１０は、複写機、プリンタ、ファクシミリ装置、これらの機能を兼ね備えた装置、スキャナ、写真プリンタ等のように内部で画像処理を行う必要のある画像取扱機器に組み込まれていてもよいし、パーソナル・コンピュータ（ＰＣ）等の独立したコンピュータであってもよく、更にＰＤＡ（Personal Digital Assistant）や携帯電話機等の携帯機器に組み込まれたコンピュータであってもよい。
【００１８】
コンピュータ１０はＣＰＵ１２、メモリ１４、表示部１６、操作部１８、記憶部２０、画像データ供給部２２及び画像出力部２４を備えており、これらはバス２６を介して互いに接続されている。コンピュータ１０が上述した画像取扱機器に組み込まれている場合、表示部１６や操作部１８としては、画像取扱機器に設けられたＬＣＤ等から成る表示パネルやテンキー等を適用してもよい。また、コンピュータ１０が独立したコンピュータである場合、表示部１６や操作部１８としては、当該コンピュータに接続されたディスプレイやキーボード、マウス等を適用してもよい。また、記憶部２０としてはＨＤＤ(Hard Disk Drive)であってもよいが、これに代えてフラッシュメモリ等の他の記憶手段を用いてもよい。
【００１９】
また、画像データ供給部２２は処理対象の画像データを供給するものであり、例えば紙や写真フィルム等の記録材料に記録されている画像を読み取って画像データを出力する画像読取部、通信回線を介して外部から画像データを受信する受信部、画像データを記憶する画像記憶部（メモリ１４又は記憶部２０）等を適用してもよい。また、画像出力部２４は画像処理を経た画像データ又は該画像データが表す画像を出力するものであればよく、例えば画像データが表す画像を紙や感光材料等の記録材料に記録する画像記録部、画像データが表す画像をディスプレイ等に表示する表示部、画像データを記録メディアに書き込む書込装置、画像データを通信回線を介して送信する送信部を適用してもよい。また、画像出力部２４は画像処理を経た画像データを単に記憶する画像記憶部（メモリ１４又は記憶部２０）であっても構わない。
【００２０】
図１に示すように、記憶部２０には、ＣＰＵ１２によって実行される各種のプログラムとして、メモリ１４等のリソースの管理やＣＰＵ１２によるプログラムの実行の管理、コンピュータ１０と外部との通信等を司るオペレーティングシステム３０のプログラム、コンピュータ１０を本発明に係る画像処理装置として機能させるための画像処理プログラム群３４、ＣＰＵ１２が上記画像処理プログラム群を実行することで実現される画像処理装置に対して所望の画像処理を行わせる各種のアプリケーション３２のプログラム（図１ではアプリケーションプログラム群３２と表記）が各々記憶されている。
【００２１】
画像処理プログラム群３４は、前述した各種の画像取扱機器や携帯機器を開発する際の開発負荷を軽減したり、ＰＣ等で利用可能な画像処理プログラムを開発する際の開発負荷を軽減したりすることを目的として、各種の画像取扱機器や携帯機器、ＰＣ等の各種機器（プラットフォーム）で共通に使用可能に開発されたプログラムであり、本発明に係る画像処理プログラムに対応している。画像処理プログラム群３４によって実現される画像処理装置は、アプリケーション３２からの構築指示に従い、アプリケーション３２が指示した画像処理を行う画像処理部を構築し、アプリケーション３２からの実行指示に従い、前記画像処理部によって画像処理を行うが（詳細は後述）、画像処理プログラム群３４は、所望の画像処理を行う画像処理部（所望の構成の画像処理部）の構築を指示したり、構築された画像処理部による画像処理の実行を指示したりするためのインタフェースをアプリケーション３２に提供している。このため、内部で画像処理を行う必要のある機器を新規開発する等の場合にも、前記画像処理を行うプログラムの開発に関しては、当該機器で必要とされる画像処理を上記のインタフェースを利用して画像処理プログラム群３４に行わせるアプリケーション３２を開発するのみで済み、実際に画像処理を行うプログラムを新たに開発する必要がなくなり、開発負荷が軽減される。
【００２２】
また、画像処理プログラム群３４によって実現される画像処理装置は、前述のように、アプリケーション３２からの構築指示に従い、アプリケーション３２が指示した画像処理を行う画像処理部を構築し、構築した画像処理部によって画像処理を行うので、例えば画像処理対象の画像データの色空間や１画素当たりのビット数が不定であったり、実行すべき画像処理の内容や手順・パラメータ等が不定であったりする場合にも、アプリケーション３２が画像処理部の再構築を指示することで、画像処理装置（画像処理部）によって実行される画像処理を、処理対象の画像データ等に応じて柔軟に変更される。
【００２３】
以下、画像処理プログラム群３４について説明する。図１に示すように、画像処理プログラム群３４はモジュールライブラリ３６と、処理構築部４２のプログラムと、処理管理部４６のプログラムに大別される。詳細は後述するが、本実施形態に係る処理構築部４２は、アプリケーションからの指示により、例として図４に示すように、予め定められた画像処理を行う１つ以上の画像処理モジュール３８と、個々の画像処理モジュール３８の前段及び後段の少なくとも一方に配置され画像データを記憶するためのバッファを備えたバッファモジュール４０と、がパイプライン形態又はＤＡＧ(Directed Acyclic Graph：有向非循環グラフ)形態で連結されて成る画像処理部５０を構築する。画像処理部５０を構成する個々の画像処理モジュールの実体はＣＰＵ１２によって実行されＣＰＵ１２で予め定められた画像処理を行わせるためのプログラムであり、上述したモジュールライブラリ３６には、予め定められた互いに異なる画像処理（例えば入力処理やフィルタ処理、色変換処理、拡大・縮小処理、スキュー角検知処理、画像回転処理、画像合成処理、出力処理等）を行う複数種の画像処理モジュール３８のプログラムが各々登録されている。
【００２４】
個々の画像処理モジュール３８は、例として図１２(Ａ)にも示すように、画像データに対する画像処理を予め定められた単位処理データ量ずつ行う画像処理エンジン３８Ａと、画像処理モジュール３８の前段及び後段のモジュールとの画像データの入出力及び画像処理エンジン３８Ａの制御を行う制御部３８Ｂから構成されている。個々の画像処理モジュール３８における単位処理データ量は、画像の１ライン分、画像の複数ライン分、画像の１画素分、画像１面分等を含むバイト数の中から、画像処理エンジン３８Ａが行う画像処理の種類等に応じて予め選択・設定されており、例えば色変換処理やフィルタ処理を行う画像処理モジュール３８では単位処理データ量が１画素分とされ、拡大・縮小処理を行う画像処理モジュール３８では単位処理データ量が画像の１ライン分又は画像の複数ライン分とされ、画像回転処理を行う画像処理モジュール３８では単位処理データ量が画像１面分とされ、画像圧縮伸長処理を行う画像処理モジュール３８では単位処理データ量が実行環境に依存するＮバイトとされている。
【００２５】
また、モジュールライブラリ３６には、画像処理エンジン３８Ａが実行する画像処理の種類が同一でかつ実行する画像処理の内容が異なる画像処理モジュール３８も登録されている（図１では、この種の画像処理モジュールを「モジュール１」「モジュール２」と表記して示している）。例えば拡大・縮小処理を行う画像処理モジュール３８については、入力された画像データを１画素おきに間引くことで50％に縮小する縮小処理を行う画像処理モジュール３８、入力された画像データに対して指定された拡大・縮小率で拡大・縮小処理を行う画像処理モジュール３８等の複数の画像処理モジュール３８が各々用意されている。また、例えば色変換処理を行う画像処理モジュール３８については、ＲＧＢ色空間をＣＭＹ色空間へ変換する画像処理モジュール３８やその逆へ変換する画像処理モジュール３８、Ｌ*ａ*ｂ*色空間等の他の色空間変換を行う画像処理モジュール３８が各々用意されている。
【００２６】
また、画像処理モジュール３８の制御部３８Ｂは、画像処理エンジン３８Ａが単位処理データ量ずつ処理するために必要な画像データを入力するために、自モジュールの前段のモジュール（例えばバッファモジュール４０）から画像データを単位読出データ量ずつ取得し、画像処理エンジン３８Ａから出力される画像データを単位書込データずつ後段のモジュール（例えばバッファモジュール４０）へ出力する（画像処理エンジン３８Ａで圧縮等のデータ量の増減を伴う画像処理が行われなければ単位書込データ量＝単位処理データ量となる）か、画像処理エンジン３８Ａによる画像処理の結果を自モジュールの外部へ出力する（例えば画像処理エンジン３８Ａがスキュー角検知処理等の画像解析処理を行う場合、画像データに代えてスキュー角検知結果等の画像解析処理結果が出力されることがある）処理を行うが、モジュールライブラリ３６には、画像処理エンジン３８Ａが実行する画像処理の種類及び内容が同一で、上記の単位処理データ量や単位読出データ量、単位書込データ量が異なる画像処理モジュール３８も登録されている。例えば、先程は画像回転処理を行う画像処理モジュール３８における単位処理データ量を画像１面分と説明したが、同じ画像回転処理を行う画像処理モジュール３８で単位処理データ量が画像の１ライン分又は画像の複数ライン分であるものがモジュールライブラリ３６に含まれていても良い。
【００２７】
また、モジュールライブラリ３６に登録されている個々の画像処理モジュール３８のプログラムは、画像処理エンジン３８Ａに相当するプログラムと制御部３８Ｂに相当するプログラムから構成されているが、制御部３８Ｂに相当するプログラムは部品化されており、個々の画像処理モジュール３８のうち単位読出データ量及び単位書込データ量が共通の画像処理モジュール３８は、画像処理エンジン３８Ａで実行される画像処理の種類や内容に拘わらず、制御部３８Ｂに相当するプログラムが共通化されている（制御部３８Ｂに相当するプログラムとして共通のプログラムが用いられている）。これにより、画像処理モジュール３８のプログラムの開発にあたっての開発負荷が軽減される。
【００２８】
なお、画像処理モジュール３８の中には、入力される画像の属性が未知の状態では単位読出データ量及び単位書込データ量が確定しておらず、入力画像データの属性を取得し、取得した属性を予め定められた演算式に代入して演算することで単位読出データ量や単位書込データ量が確定するモジュールが存在しているが、この種の画像処理モジュール３８については、単位読出データ量と単位書込データ量が互いに共通の演算式を用いて導出される画像処理モジュール３８について、制御部３８Ｂに相当するプログラムを共通化するようにすればよい。また、本実施形態に係る画像処理プログラム群３４は、前述のように各種機器に実装されてもよいが、画像処理プログラム群３４のうちモジュールライブラリ３６に登録する画像処理モジュール３８の数や種類等については、画像処理プログラム群３４を実装する各種機器で必要とされる画像処理に応じて、追加・削除・入替等してよい。
【００２９】
個々の画像処理モジュール３８は、対応するプログラムが、画像処理装置に設けられたプログラム実行リソース（該対応するプログラムを実行するために用いられるリソース）によって並列に実行されるように構成することで実現される。プログラム実行リソースは、例えばＣＰＵ、或いはＭＭＸ(MultiMedia eXtention)用の演算器やＳＳＥ (Streaming SIMD Extension)用の演算器、或いはＣＰＵと別に設けられたＤＳＰ(Digital Signal Processor)等の高速演算器等が挙げられるが、本実施の形態では、プログラム実行リソースとしてＣＰＵを用いる場合を例に挙げて説明する。
【００３０】
また、画像処理部５０を構成する個々のバッファモジュール４０は、例として図１２(Ｂ)にも示すように、コンピュータ１０に設けられたメモリ１４からオペレーティングシステム３０を通じて確保されたメモリ領域で構成されるバッファ４０Ａと、バッファモジュール４０の前段及び後段のモジュールとの画像データの入出力及びバッファ４０Ａの管理を行うバッファ制御部４０Ｂから構成されている。個々のバッファモジュール４０のバッファ制御部４０Ｂもその実体はＣＰＵ１２によって実行されるプログラムであり、モジュールライブラリ３６にはバッファ制御部４０Ｂのプログラムも登録されている（図１ではバッファ制御部４０Ｂのプログラムを「バッファモジュール」と表記して示している）。
【００３１】
また、アプリケーション３２からの指示に従って画像処理部５０を構築する処理構築部４２は、図１に示すように複数種のモジュール生成部４４から構成されている。複数種のモジュール生成部４４は互いに異なる画像処理に対応しており、アプリケーション３２によって起動されることで、対応する画像処理を実現するための画像処理モジュール３８及びバッファモジュール４０から成るモジュール群を生成する処理を行う。なお、図１ではモジュール生成部４４の一例として、モジュールライブラリ３６に登録されている個々の画像処理モジュール３８が実行する画像処理の種類に対応するモジュール生成部４４を示しているが、個々のモジュール生成部４４に対応する画像処理は、複数種の画像処理モジュール３８によって実現される画像処理（例えばスキュー角検知処理と画像回転処理から成るスキュー補正処理）であってもよい。必要とされる画像処理が複数種の画像処理を組み合わせた処理である場合、アプリケーション３２は複数種の画像処理の何れかに対応するモジュール生成部４４を順次起動する。これにより、アプリケーション３２によって順次起動されたモジュール生成部４４により、必要とされる画像処理を行う画像処理部５０が構築されることになる。
【００３２】
また図１に示すように、処理管理部４６は、画像処理部５０における画像処理の実行を制御するワークフロー管理部４６Ａ、画像処理部５０の各モジュールによるメモリ１４や各種のファイル等のコンピュータ１０のリソースの使用を管理するリソース管理部４６Ｂ、及び、画像処理部５０で発生したエラーを管理するエラー管理部４６Ｃを含んで構成されている。なお、本実施形態において、処理構築部４２によって構築される画像処理部５０は、画像処理部５０を構成する個々の画像処理モジュール３８が、画像１面分よりも小さいデータ量を単位として後段へ画像データを引き渡しながら並列に画像処理を行うように動作する（ブロック単位処理と称する）。
【００３３】
なお、リソース管理部４６Ｂによるメモリ管理の方式としては、例えば、画像処理部５０の個々のモジュールからの要求の都度、メモリ１４から要求元のモジュールに割り当てるメモリ領域をオペレーティングシステム３０を通じて確保する第１管理方式、メモリ１４から予め定められたサイズのメモリ領域をオペレーティングシステム３０を通じて事前に（例えばコンピュータ１０の電源投入する際に）確保し、個々のモジュールからの要求があると、事前に確保したメモリ領域のうちの一部領域を要求元のモジュールに割り当てる第２管理方式、及び、メモリ１４から予め定められたサイズのメモリ領域をオペレーティングシステム３０を通じて事前に確保し、個々のモジュールからの要求があると、要求されたメモリ領域のサイズが閾値未満であれば事前に確保したメモリ領域のうちの一部領域を要求元のモジュールに割り当て、要求されたメモリ領域のサイズが閾値以上であれば要求元のモジュールに割り当てるメモリ領域をオペレーティングシステム３０を通じて確保する第３管理方式の何れかを採用してもよい。また、何れの管理方式でメモリ管理を行うかを選択・設定するようにしてもよい。
【００３４】
またエラー管理部４６Ｃは、画像処理部５０が画像処理を実行している途中でエラーが発生した場合に、発生したエラーの種別・発生箇所等のエラー情報を取得し、画像処理プログラム群３４がインストールされたコンピュータ１０が組み込まれている機器の種別や構成等を表す装置環境情報を記憶部２０等から取得し、取得した装置環境情報が表す装置環境に応じたエラー通知方法を判断し、判断したエラー通知方法でエラーの発生を通知する処理を行う。
【００３５】
次に本実施形態の作用を説明する。画像処理プログラム群３４が実装されている機器において、何らかの画像処理を行う必要のある状況になると、この状況が特定のアプリケーション３２によって検知され、当該アプリケーション３２によって図２に示す処理が行われる。なお、画像処理を行う必要のある状況としては、例えば画像データ供給部２２としての画像読取部によって画像を読み取り、画像出力部２４としての画像記録部により記録材料に画像として記録するか、画像出力部２４としての表示部に画像として表示させるか、画像出力部２４としての書込装置により画像データを記録メディアに書き込むか、画像出力部２４としての送信部により画像データを送信するか、画像出力部２４としての画像記憶部に記憶させる処理の実行がユーザによって指示された場合、或いは、画像データ供給部２２としての受信部によって受信されるか、画像データ供給部２２としての画像記憶部に記憶されている画像データに対して、上記の記録材料への記録、表示部への表示、記録メディアへの書き込み、送信、画像記憶部への記憶の何れかを行う処理の実行がユーザによって指示された場合が挙げられる。また、画像処理を行う必要のある状況は上記に限られるものではなく、例えばユーザからの指示に応じてアプリケーション３２が実行可能な処理の名称等を表示部１６に一覧表示している状態で、実行対象の処理がユーザによって選択された等の場合であってもよい。
【００３６】
上記のように、何らかの画像処理を行う必要のある状況になったことを検知すると、アプリケーション３２は、まず画像処理対象の画像データを供給する画像データ供給部２２の種別を認識し（図２のステップ１５０も参照）、認識した種別がバッファ領域（メモリ１４の一部領域）であった場合（図２のステップ１５２の判定が肯定された場合）には、画像データ供給部２２として指定されたバッファ領域を含むバッファモジュール４０を生成する（図２のステップ１５４も参照）。後述するバッファモジュール４０の新規生成では、バッファモジュール４０のバッファ制御部４０Ｂのプログラムを実行するスレッド（又はプロセス又はオブジェクト）を生成することでバッファ制御部４０Ｂを生成し、生成されたバッファ制御部４０Ｂによりバッファ４０Ａとして使用するメモリ領域が確保されることによって成されるが、このステップ１５４におけるバッファモジュール４０の生成は、指定されたバッファ領域を既に確保されたバッファ４０Ａとして（バッファ制御部４０Ｂに）認識させるパラメータを設定してバッファ制御部４０Ｂを生成する処理を行うことによって成される。ここで生成されたバッファモジュール４０は画像データ供給部２２として機能する。
【００３７】
続いてアプリケーション３２は、上記と同様に、画像処理を行った画像データの出力先としての画像出力部２４の種別を認識し（図２のステップ１５６も参照）、認識した種別がバッファ領域（メモリ１４の一部領域）であった場合（図２のステップ１５８の判定が肯定された場合）は、画像出力部２４として指定されたバッファ領域を含むバッファモジュール４０を上記と同様にして生成する（図２のステップ１６０も参照）。ここで生成されたバッファモジュール４０は画像出力部２４として機能する。また、アプリケーション３２は実行すべき画像処理の内容を認識し、実行すべき画像処理を、個々のモジュール生成部４４に対応するレベルの画像処理の組み合わせに分解し、実行すべき画像処理を実現するために必要な画像処理の種類及び個々の画像処理の実行順序を判定する（図２のステップ１６２も参照）。なお、この判定は、例えば上記の画像処理の種類及び個々の画像処理の実行順序を、ユーザが実行を指示可能な処理の種類と対応付けて予め情報として登録しておき、アプリケーション３２は、実行が指示された処理の種類に対応する情報を読み出すことによって実現する。
【００３８】
そしてアプリケーション３２は、上記で判定した画像処理の種類及び実行順序に基づいて、まず実行順序が１番の画像処理に対応するモジュール生成部４４を起動（モジュール生成部４４のプログラムを実行するスレッド（又はプロセス又はオブジェクト）を生成）した後に（図２のステップ１６４も参照）、起動したモジュール生成部４４に対し、当該モジュール生成部４４によるモジュール群の生成に必要な情報として、前記モジュール群に画像データを入力する入力モジュールを識別するための入力モジュール識別情報、前記モジュール群が画像データを出力する出力モジュールを識別するための出力モジュール識別情報、前記モジュール群に入力される入力画像データの属性を表す入力画像属性情報、実行すべき画像処理のパラメータを通知し、対応するモジュール群の生成を指示する（図２のステップ１６６も参照）。
【００３９】
なお、上記の入力モジュールは、実行順序が１番目のモジュール群については画像データ供給部２２が入力モジュールとなり、実行順序が２番目以降のモジュール群については前段のモジュール群の最終モジュール（通常はバッファモジュール４０）が入力モジュールとなる。また、上記の出力モジュールについては、実行順序が最後のモジュール群では画像出力部２４が出力モジュールとなるので、画像出力部２４が出力モジュールとして指定されるが、その他のモジュール群では出力モジュールは未確定のためにアプリケーション３２による指定は行われず、必要な場合はモジュール生成部４４によって生成・設定される。また、入力画像属性や画像処理のパラメータについては、例えばユーザが実行を指示可能な処理の種類と対応付けて予め情報として登録しておき、実行が指示された処理の種類に対応する情報を読み出すことでアプリケーション３２が認識するようにしてもよいし、ユーザに指定させるようにしてもよい。
【００４０】
一方、モジュール生成部４４は、アプリケーション３２によって起動されると図３(Ａ)に示すモジュール生成処理を行う（図２のステップ１６８も参照）。モジュール生成処理では、まずステップ２００において、このモジュール生成部４４で次に生成すべき画像処理モジュール３８が有るか否かを判定する。判定が否定された場合はモジュール生成処理を終了する。生成すべき画像処理モジュール３８が有る場合には、ステップ２０２で生成すべき画像処理モジュール３８に入力される入力画像データの属性を表す入力画像属性情報を取得し、次のステップ２０４では、ステップ２０２で取得した情報が表す入力画像データの属性に照らしても先のステップ２００で生成すべきと判定した画像処理モジュール３８の生成が必要か否かを判定する。
【００４１】
具体的には、例えば実行中のモジュール生成処理に対応するモジュール生成部４４が色変換処理を行うモジュール群を生成するモジュール生成部であり、画像処理のパラメータにより出力画像データの色空間としてＣＭＹ色空間がアプリケーション３２から指定された場合、ステップ２０２で取得した入力画像属性情報に基づいて入力画像データがＲＧＢ色空間のデータであることが判明した場合には、色空間処理を行う画像処理モジュール３８としてＲＧＢ→ＣＭＹの色空間変換を行う画像処理モジュール３８を生成する必要があるが、入力画像データがＣＭＹ色空間のデータであった場合には、入力画像データの属性と出力画像データの属性が色空間に関して対応しているので、色空間変換処理を行う画像処理モジュール３８は生成不要と判断する。不要と判断された場合はステップ２００に戻る。
【００４２】
なお、入力画像データの属性を取得する処理は、生成する画像処理モジュール３８の前段にバッファモジュール４０が存在している場合、当該バッファモジュール４０に画像データの書き込みを行う更に前段の画像処理モジュール３８から出力画像データの属性を取得することによって実現する。
【００４３】
次のステップ２０６では、生成する画像処理モジュール３８の後段にバッファモジュール４０が必要が否かを判定する。この判定は、画像処理モジュールの後段が出力モジュール（画像出力部２４）である場合（例えば図４(Ａ)から(Ｃ)に示す画像処理部５０における最後段の画像処理モジュール３８を参照）や、例として図４(Ｂ)に示す画像処理部５０においてスキュー角検知処理を行う画像処理モジュール３８のように、画像処理モジュールが、画像データに対して解析等の画像処理を行いその結果を他の画像処理モジュール３８へ出力するモジュールである場合は否定され、バッファモジュール４０の生成を行うことなくステップ２１０へ移行するが、上記以外の場合は判定が肯定されてステップ２０８へ移行し、バッファ制御部４０Ｂを起動する（バッファ制御部４０Ｂのプログラムを実行するスレッド（又はプロセス又はオブジェクト）を生成する）ことで、画像処理モジュールの後段に連結するバッファモジュール４０を生成する。バッファ制御部４０Ｂは、モジュール生成部４４（或いは前述したアプリケーション３２）によって起動されると図５に示すバッファ制御処理を行う。このバッファ制御処理については後述する。
【００４４】
次のステップ２１０では、前段のモジュール（例えばバッファモジュール４０）の情報と後段のバッファモジュール４０の情報、画像処理モジュール３８に入力される入力画像データの属性、処理パラメータを与えて、画像処理モジュール３８を生成する。なお、ステップ２０６で後段のバッファモジュール４０が不要と判断された画像処理モジュール３８に対しては後段のバッファモジュール４０の情報は与えられず、また例えば50％縮小処理のように処理内容が固定的で特別な画像処理パラメータが必要ない場合には処理パラメータは与えられない。
【００４５】
モジュール生成処理（ステップ２１０）では、モジュールライブラリ３６に登録されており、画像処理モジュール３８として利用可能な複数の候補モジュールの中から、ステップ２０２で取得した入力画像データの属性、及び、画像処理モジュール３８で実行すべき処理パラメータに合致する画像処理モジュール３８を選択する。例えば実行中のモジュール生成処理に対応するモジュール生成部４４が色変換処理を行うモジュール群を生成するモジュール生成部であり、処理パラメータにより出力画像データの色空間としてＣＭＹ色空間がアプリケーション３２から指定され、更に入力画像データがＲＧＢ色空間のデータであった場合には、モジュールライブラリ３６に登録されている各種の色空間処理を行う複数種の画像処理モジュール３８の中から、ＲＧＢ→ＣＭＹの色空間変換を行う画像処理モジュール３８が選択される。
【００４６】
また、画像処理モジュールが拡大・縮小処理を行う画像処理モジュール３８であり、指定された拡大縮小率が50％以外であれば、入力された画像データに対して指定された拡大・縮小率で拡大・縮小処理を行う画像処理モジュール３８が選択され、指定された拡大縮小率が50％であれば、拡大縮小率50％に特化した拡大縮小処理、すなわち入力された画像データを１画素おきに間引くことで50％に縮小する縮小処理を行う画像処理モジュール３８が選択される。なお、画像処理モジュール３８の選択は上記に限られるものではなく、例えば画像処理エンジン３８Ａによる画像処理における単位処理データ量が異なる画像処理モジュール３８をモジュールライブラリ３６に複数登録しておき、画像処理部５０へ割当可能なメモリ領域のサイズ等の動作環境に応じて、適切な単位処理データ量の画像処理モジュール３８を選択する（例えば上記サイズが小さくなるに従って単位処理データ量の小さい画像処理モジュール３８を選択する等）ようにしてもよいし、アプリケーション３２或いはユーザに選択させるようにしてもよい。
【００４７】
次のステップ２１２では、後段のバッファモジュール４０のＩＤと生成した画像処理モジュール３８のＩＤの組をワークフロー管理部４６Ａに通知する。このＩＤは、個々のモジュールを一意に判別できる情報であればよく、例えば個々のモジュールの生成順に付与した番号や、バッファモジュール４０や画像処理モジュール３８のオブジェクトのメモリ上でのアドレス等でも良い。ワークフロー管理部４６Ａに通知された情報は、例えば図３(Ｂ)に示すテーブル形式やリスト形式、連想配列形式等でワークフロー管理部４６Ａの内部に保持され、後の処理で使われる。ここではテーブル形式で保持するものとして説明を続ける。
【００４８】
なお、先程述べた後段のバッファモジュール４０を持たない画像処理モジュール３８の場合には、例えば下記の方法で処理を行う。図４(Ａ)において出力処理を行う画像処理モジュール３８のように、生成する画像処理モジュール３８がパイプラインの終点又は有向非循環グラフの終点の一つである場合には、当該画像処理モジュール３８をモジュール生成部４４の出力として呼び出し元のアプリケーション３２に戻す。また、図４(Ｂ)においてスキュー角検知処理を行う画像処理モジュール３８のように、生成した画像処理モジュール３８における画像処理の結果が他の画像処理モジュール（図４(Ｂ)では画像回転処理を行う画像処理モジュール３８）で使われる場合、モジュール生成部４４は、当該画像処理モジュール３８に対して処理が終了するまで繰り返し処理実行を指示して、処理結果を取得する。
【００４９】
ステップ２１２の処理が終了すると、モジュール生成部４４は制御をステップ２００に戻して次に生成すべき画像処理モジュールがあるか否かを判定する。なお、個々のモジュール生成部４４は、対応する予め定められた画像処理を行うモジュール群を生成するので、この判定は、個々のモジュール生成部４４毎にどのような画像処理モジュールをどのような接続関係で生成するかに関する情報を予め登録して読み出すか、又はモジュール生成部４４を動作させるプログラム中に記述しておくことでも実現する。例えば実行中のモジュール生成処理に対応するモジュール生成部４４が、複数種の画像処理モジュール３８によって実現される画像処理（例えばスキュー角検知処理を行う画像処理モジュール３８と画像回転処理を行う画像処理モジュール３８によって実現されるスキュー補正処理）を行うモジュール群を生成する場合には、２個以上の画像処理モジュール３８を含むモジュール群が生成される。
【００５０】
アプリケーション３２は、モジュール群の生成を指示したモジュール生成部４４から、上記のようにしてモジュール群の生成完了が通知されると、図２のステップ１６２における判定の結果に基づいて、必要とされる画像処理を実現するために他の画像処理を行うモジュール群も生成する必要があるか否か判断する。必要とされる画像処理が複数種の画像処理を組み合わせた処理である場合、アプリケーション３２は、個々の画像処理に対応する他のモジュール生成部４４を起動してモジュール群の生成に必要な情報を通知する処理を順次行う（図２のステップ１７０，１７２も参照）。そして、順次起動されたモジュール生成部４４によって上述したモジュール生成処理（図３）が順次行われる（図２のステップ１７４も参照）ことで、例として図４(Ａ)から(Ｃ)に示すように、必要とされる画像処理を行う画像処理部５０が構築されることになる。
【００５１】
なお、本実施形態では、特定の画像処理の実行頻度が高い等の場合に、アプリケーション３２が、特定の画像処理を行う画像処理部５０を生成するための複数種のモジュール生成部４４に対し、特定の画像処理を行う画像処理部５０を生成させた後も処理終了を指示しないことでスレッド（又はプロセス又はオブジェクト）として残しておき、特定の画像処理を行う必要が生ずる毎に、スレッド（又はプロセス又はオブジェクト）として残しておいた各モジュール生成部４４に対してモジュール群の生成を順次指示することで、特定の画像処理を行う画像処理部５０を再生成可能に構成されている。これにより、特定の画像処理を行う必要が生ずる毎に対応する各モジュール生成部４４を各々起動する処理が不要となり、特定の画像処理を行う画像処理部５０を再生成するのに要する時間を短縮される。
【００５２】
ところで、画像処理モジュール３８の制御部３８Ｂは、モジュール生成部４４によって起動されると図１０に示す画像処理モジュール初期化処理を行う。この画像処理モジュール初期化処理では、まずステップ２５０において、モジュール生成部４４がモジュール生成処理（図３）のステップ２１０の処理を行うことでモジュール生成部４４から与えられた自モジュールの前段及び後段のモジュールの情報を記憶する。また、次のステップ２５２では、自モジュールの画像処理エンジン３８Ａが行う画像処理の種類や内容等に基づき、自モジュールが使用するメモリのサイズ及び自モジュールが使用する他のリソースを認識する。なお、自モジュールが使用するメモリは、画像処理エンジン３８Ａが画像処理を行うために必要なメモリが主であるが、前段のモジュールが画像データ供給部２２である場合や後段のモジュールが画像出力部２４である場合には、前段又は後段のモジュールとの画像データの送受に際して画像データを一時記憶するためのバッファ用のメモリが必要となることもある。また、処理パラメータにテーブル等の情報が含まれている場合には、それを保持するためのメモリ領域が必要となることもある。そしてステップ２５４では、ステップ２５２で認識したサイズをリソース管理部４６Ｂへ通知すると共に、通知したサイズのメモリ領域の確保をリソース管理部４６Ｂへ要求し、リソース管理部４６Ｂによって確保されたメモリ領域をリソース管理部４６Ｂから受け取る。
【００５３】
図１０に示す画像処理モジュール初期化処理（画像処理モジュール３８の制御部３８Ｂ）では、上記の処理を経てリソース管理部４６Ｂ経由で必要なメモリ領域を確保すると、次のステップ２５６において、先のステップ２５２の処理結果に基づき、メモリ以外の他のリソースを自モジュール（の画像処理エンジン３８Ａ）が必要としているか否か判定する。判定が否定された場合は何ら処理を行うことなくステップ２６２へ移行するが、判定が肯定された場合はステップ２５８へ移行し、自モジュールが必要としているメモリ以外の他のリソースの種類等をリソース管理部４６Ｂへ通知すると共に、通知した他のリソースの確保をリソース管理部４６Ｂへ要求して確保する。
【００５４】
次に、ステップ２６２では自モジュールの前段のモジュールを判定し、自モジュールの前段にモジュールが存在していない場合にはステップ２７２へ移行し、前段のモジュールがバッファモジュール４０以外、例えば画像データ供給部２２や特定のファイル等である場合には、必要に応じてステップ２７０でその初期化処理を行ってステップ２７２に移る。また、自モジュールの前段にモジュールが存在しており、当該前段のモジュールがバッファモジュール４０であった場合には、ステップ２６２からステップ２６４へ移行し、前段のバッファモジュール４０からの１回の画像データの読み出しによって取得する画像データのデータ量（単位読出データ量）を認識する。この単位読出データ量は、自モジュールの前段のバッファモジュール４０の数が１個であれば１個だけであるが、例えば図４(Ｃ)に示す画像処理部５０において画像合成処理を行う画像処理モジュール３８のように、前段のバッファモジュール４０の数が複数で、複数のバッファモジュール４０から各々取得した画像データを用いて画像処理エンジン３８Ａが画像処理を行う等の場合、前段の個々のバッファモジュール４０に対応する単位読出データ量は、自モジュールの画像処理エンジン３８Ａが行う画像処理の種類や内容、前段のバッファモジュール４０の数等に応じて定まる。
【００５５】
ステップ２６６では、ステップ２６４で認識した単位読出データ量を前段の単一のバッファモジュール４０へ通知することで、当該バッファモジュール４０に対して単位読出データ量を設定する（図１２(Ａ)の(1)も参照）。次のステップ２６８では、自モジュールの前段の全てのバッファモジュール４０に単位読出データ量を設定したか否か判定する。自モジュールの前段のバッファモジュール４０の数が１個であれば当該判定は肯定されてステップ２７２へ移行するが、前段のバッファモジュール４０の数が複数であればステップ２６８の判定が否定されてステップ２６６に戻り、ステップ２６８の判定が肯定される迄、ステップ２６６，２６８を繰り返す。これにより、前段の全てのバッファモジュール４０に対して単位読出データ量が各々設定されることになる。
【００５６】
ステップ２７２では、自モジュールの後段のモジュールを判定し、自モジュールの後段のモジュールがバッファモジュール４０以外、例えば画像出力部２４や特定のファイル等の場合には、必要に応じてステップ２７８でその初期化処理を行ってステップ２８０に移る。例えば後段のモジュールが、画像記録部や表示部、書込装置、送信部の何れかから成る画像出力部２４であれば、この画像出力部２４に対し、上記の初期化処理として、単位書込データ量に相当するデータ量ずつ画像データを出力することを通知する処理等を行う。また、後段のモジュールがバッファモジュール４０である場合には、ステップ２７４で１回の画像データの書き込みにおける画像データのデータ量（単位書込データ量）を認識し、ステップ２７６で後段のバッファモジュールに当該単位書込データ量を設定（図１２(Ａ)の(2)も参照）した後に、ステップ２８０に移る。ステップ２８０では、当該画像処理モジュール初期化処理の完了をモジュール生成部４４に通知して、画像処理モジュール初期化処理を終了する。
【００５７】
一方、画像処理部５０を構成する個々のバッファモジュール４０のバッファ制御部４０Ｂは、モジュール生成部４４又はアプリケーション３２によって起動されると図５に示すバッファ制御処理を行う。このバッファ制御処理では、モジュール生成部４４又はアプリケーション３２によって起動されてバッファモジュール４０の生成が指示されると、ステップ３５６で待ち要求数を０に初期化する。また、次のステップ３５８では、自モジュールの前段の画像処理モジュール３８から単位書込データ量が通知されるか又は自モジュールの後段の画像処理モジュール３８から単位読出データ量が通知されたか否か判定する。判定が否定された場合はステップ３６２へ移行し、自モジュールと連結されている全ての画像処理モジュール３８から単位書込データ量又は単位読出データ量が通知されたか否か判定する。判定が否定された場合はステップ３５８に戻り、ステップ３５８又はステップ３６２の判定が肯定される迄ステップ３５８，３６２を繰り返す。
【００５８】
自モジュールと連結されている特定の画像処理モジュール３８から単位書込データ量又は単位読出データ量が通知されると、ステップ３５８の判定が肯定されてステップ３６０へ移行し、通知された単位書込データ量又は単位読出データ量を記憶した後にステップ３５８に戻る。従って、自モジュールと連結されている個々の画像処理モジュール３８の制御部３８Ｂによって画像処理モジュール初期化処理（図１０）のステップ２６６又はステップ２７６の処理が行われることで、前記個々の画像処理モジュール３８から単位書込データ量又は単位読出データ量が通知される毎に、通知された単位書込データ量又は単位読出データ量が記憶されることで、通知された単位書込データ量又は単位読出データ量がバッファモジュール４０に設定される（図１２(Ｂ)の(1),(2)も参照）。
【００５９】
自モジュールと連結されている全ての画像処理モジュール３８から単位書込データ量又は単位読出データ量が通知され、通知された単位書込データ量及び単位読出データ量が各々設定されると、ステップ３６２の判定が肯定されてステップ３６３へ進む。
【００６０】
ステップ３６３では、自モジュールと連結されている個々の画像処理モジュール３８によって各々設定された単位書込データ量及び単位読出データ量に基づいて、起動条件を設定する。起動条件とは、自モジュールと連結されている後段の画像処理モジュール３８を起動させるための条件である。後述するように、画像処理モジュール３８は、処理要求を入力すると待機状態から起動し、前段のバッファモジュールから画像データを取得して画像処理を開始する。一方、前段のバッファモジュールからの画像データの取得に失敗すると、画像処理の実行を停止して待機状態へ移行し（図１１のステップ２８９も参照。）、次に処理要求が入力されるまで待機状態を継続する。
【００６１】
例えば、「自モジュールに設定された単位読出データ量の有効データ（後述）が自モジュールのバッファ４０Ａに書き込まれる毎に起動する」という単純な起動条件もあるが、起動にも時間を要するため、常にこうした起動条件で起動させると、オーバーヘッドが大きくなり連結された各画像処理モジュール３８が並列に画像処理する時間が短くなる場合もあるため、本実施の形態では一律に起動条件を設定するのではなく、連結された画像処理モジュール３８に応じて起動条件を決定して、設定している。起動条件の具体例については後述する。
【００６２】
ステップ３６４では、自モジュールと連結されている個々の画像処理モジュール３８によって各々設定された単位書込データ量及び単位読出データ量に基づいて、自モジュールのバッファ４０Ａの管理単位である単位バッファ領域のサイズを決定し、決定した単位バッファ領域のサイズを記憶する。単位バッファ領域のサイズとしては、自モジュールに設定された単位書込データ量及び単位読出データ量のうちの最大値を設定してもよいし、単位書込データ量を設定してもよいし、単位読出データ量（自モジュールの後段に複数の画像処理モジュール３８が連結されている場合は、個々の画像処理モジュール３８によって各々設定された単位読出データ量の最大値）を設定してもよい。また、単位書込データ量と単位読出データ量（の最大値）の最小公倍数を設定してもよいし、この最小公倍数が予め定められた値未満であれば最小公倍数を、最小公倍数が予め定められた値以上であれば別の値（例えば上述した単位書込データ量及び単位読出データ量のうちの最大値、単位書込データ量、単位読出データ量（の最大値）の何れか）を設定するようにしてもよい。更にまた、上記ステップ３６３で「自モジュールのバッファ４０Ａに書き込まれた有効データ（後述）のデータ量が、データ量αになった場合に起動する」という起動条件が設定された場合には、自モジュールに設定された単位書込データ量、単位読出データ量、及びデータ量αのうちの最大値を単位バッファ領域のサイズとして設定するようにしてもよい。
【００６３】
次のステップ３６６では、自モジュールのバッファ４０Ａとして用いるメモリ領域が既に設けられているか否か判定する。この判定は、自モジュールがモジュール生成部４４によって生成された場合には否定され、ステップ３６８でバッファフラグに０を設定した後にステップ３７４へ移行する。また、自モジュールがアプリケーション３２によって生成され、画像データ供給部２２又は画像出力部２４として機能するバッファモジュール４０であった場合には、自モジュールのバッファ４０Ａとして用いるメモリ領域が既に存在しているので、ステップ３６６の判定が肯定されてステップ３７０へ移行し、先程ステップ３６４で決定した単位バッファ領域のサイズを、自モジュールのバッファ４０Ａとして用いる既設のメモリ領域のサイズに変更する。また、次のステップ３７２でバッファフラグに１を設定した後にステップ３７４へ移行する。
【００６４】
更に、ステップ３７４では自モジュールの後段の個々の画像処理モジュール３８に対応する有効データポインタを各々生成し、生成した有効データポインタを各々初期化する。この有効データポインタは、自モジュールの前段の画像処理モジュールによって自モジュールのバッファ４０Ａに書き込まれた画像データのうち、対応する後段の画像処理モジュール３８によって読み出されていない画像データ（有効データ）について、その先頭位置（次の読出開始位置）と末尾位置を各々指し示すポインタであり、ステップ３７４の初期化処理では通常、有効データが存在していないことを意味する特定の情報が設定されるが、自モジュールが自モジュールがアプリケーション３２によって生成され、画像データ供給部２２として機能するバッファモジュール４０であれば、自モジュールのバッファ４０Ａとして用いるメモリ領域には既に画像処理対象の画像データが書き込まれている場合があり、この場合には当該画像データの先頭位置及び末尾位置が後段の個々の画像処理モジュール３８に対応する有効データポインタに各々設定される。
【００６５】
以上の処理によりバッファモジュール４０における初期化処理が完了し、次のステップ３７６では初期化処理の完了をワークフロー管理部４６Ａへ通知する。ステップ３８０では、自モジュールの前段又は後段に連結されている画像処理モジュール３８から、当該画像処理モジュール３８を消去する処理を行うことを通知する消去通知を受信したか否か判定する。この判定が否定された場合はステップ３８２に進み、前段の画像処理モジュール３８から書込要求を受信したか否か判定する。更にここで否定判定された場合はステップ３８４に進み、後段の画像処理モジュール３８から読出要求を受信したか否か判定する。ここで、否定判定された場合は、ステップ３８０に戻る。
【００６６】
一方、アプリケーション３２は、順次起動したモジュール生成部４４によって前述のモジュール生成処理（図３）が順次行われることで、必要とされる画像処理を行う画像処理部５０の構築が完了すると、ワークフロー管理部４６Ａのプログラムを実行するスレッド（又はプロセス又はオブジェクト）に処理要求を送信して起動することで、ワークフロー管理部４６Ａに対して画像処理部５０による画像処理の実行を指示する（図２のステップ１７６も参照）。
【００６７】
処理管理部４６のワークフロー管理部４６Ａは、プログラムが起動されることで図１３に示すブロック単位制御処理を行う。なお、このブロック単位処理は、図２のステップ１７８に示す画像処理部制御処理に対応している。ワークフロー管理部４６Ａはブロック単位処理において、画像処理部５０を構成する画像処理モジュール３８のうちの予め定められた画像処理モジュール３８に処理要求を入力することで、画像処理部５０による画像処理をブロック単位の実行形態で行わせるが、以下では画像処理部５０全体の動作説明に先立ち、個々のバッファモジュール４０のバッファ制御部４０Ｂによって行われる初期化処理完了以降の処理、個々の画像処理モジュール３８の制御部３８Ｂによって行われる画像処理モジュール制御処理について順に説明する。
【００６８】
本実施形態では、画像処理モジュール３８が後段のバッファモジュール４０に画像データを書き込む場合には、画像処理モジュール３８からバッファモジュール４０へ書込要求が入力され、画像処理モジュール３８が前段のバッファモジュール４０から画像データを読み出す場合には、画像処理モジュール３８からバッファモジュール４０へ読出要求が入力される。
【００６９】
まず、書込要求が入力された場合について説明する。図５のステップ３８２で、前段の画像処理モジュール３８から書込要求を受信した場合には、ステップ３８６に進み、図６に示すデータ書込処理を行う。
【００７０】
データ書込処理では、まずステップ４１０において、バッファフラグに１が設定されているか否か、すなわち自モジュールがアプリケーション３２によって生成されたバッファモジュール４０か否か判定する。この判定が肯定された場合は、バッファ４０Ａとして用いるメモリ領域が既に確保されているので、何ら処理を行うことなくステップ４２２へ移行する。また、ステップ４１０の判定が否定された場合、すなわち自モジュールがモジュール生成部４４によって生成されたバッファモジュール４０であった場合にはステップ４１２へ移行し、自モジュールのバッファ４０Ａを構成する単位バッファ領域の中に、空き領域が有る単位バッファ領域（画像データが末尾まで書き込まれていない単位バッファ領域）が存在しているか否か判定する。
【００７１】
モジュール生成部４４によって生成されたバッファモジュール４０は、当初はバッファ４０Ａとして用いるメモリ領域（単位バッファ領域）が確保されておらず、メモリ領域の不足が生ずる度に単位バッファ領域を単位として確保されるので、バッファモジュール４０に最初に書込要求が入力されたときにはバッファ４０Ａとして用いるメモリ領域（単位バッファ領域）が存在しておらず、この判定は否定される。また、後述する処理を経てバッファ４０Ａとして用いる単位バッファ領域が確保された後も、当該単位バッファ領域への画像データの書込に伴って当該単位バッファ領域が丁度満杯になった場合には上記判定は否定される。
【００７２】
ステップ４１２の判定が否定された場合はステップ４１４へ移行し、待ち行列から取り出した要求情報に含まれる要求元識別情報に基づいて書込要求元の画像処理モジュール３８を認識し、書込要求元の画像処理モジュール３８によって設定された単位書込データ量を認識した後に、認識した単位書込データ量が、先のステップ３６４（図５）で決定した単位バッファ領域のサイズよりも大きいか否か判定する。この判定は、単位バッファ領域のサイズとして、自モジュールに設定された単位書込データ量及び単位読出データ量のうちの最大値、或いは自モジュールに設定された単位書込データ量を採用した場合には常に否定されてステップ４２０へ移行し、確保すべきメモリ領域のサイズ（単位バッファ領域のサイズ）をリソース管理部４６Ｂに通知すると共に、自モジュールのバッファ４０Ａとして用いるメモリ領域（画像データの保管に用いる単位バッファ領域）の確保をリソース管理部４６Ｂに要求する。これにより、リソース管理部４６Ｂによって単位バッファ領域が確保される。
【００７３】
また、自モジュールのバッファ４０Ａを構成する単位バッファ領域の中に、空き領域有りの単位バッファ領域が存在していた場合には、ステップ４１２の判定が肯定されてステップ４１６へ移行し、前述したステップ４１４と同様にして書込要求元の画像処理モジュール３８によって設定された単位書込データ量を認識した後に、空き領域有りの単位バッファ領域における空き領域のサイズが認識した単位書込データ量以上か否か判定する。判定が肯定された場合は、自モジュールのバッファ４０Ａとして用いる単位バッファ領域を新たに確保する必要はないので、何ら処理を行うことなくステップ４２２へ移行する。
【００７４】
単位バッファ領域のサイズが単位書込データ量の整数倍である場合には、自モジュールの前段の画像処理モジュール３８から書込要求が入力される毎に、上記のようにステップ４１２，４１４の判定が各々否定されるか又はステップ４１２，４１６の判定が各々肯定され、バッファ４０Ａとして用いる単位バッファ領域のみが必要に応じて確保される。
【００７５】
一方、単位バッファ領域のサイズが単位書込データ量の整数倍でない場合には、バッファ４０Ａ（単位バッファ領域）への単位書込データ量の画像データの書込が繰り返されることで、例として図７(Ａ)にも示すように、空き領域有りの単位バッファ領域における空き領域のサイズが単位書込データ量よりも小さい状態が生ずる（ステップ４１６の判定が肯定される）。また本実施形態では、単位バッファ領域のサイズとして、自モジュールに設定された単位読出データ量（又はその最大値）を採用してもよいが、そのサイズが単位書込データ量よりも小さい場合（ステップ４１４の判定が肯定される場合）には、書込要求が入力されたときに常に上記の状態が生じていることになる。
【００７６】
上記のように、空き領域有りの単位バッファ領域における空き領域のサイズが単位書込データ量よりも小さい場合、単位書込データ量の画像データが書き込まれる領域が複数の単位バッファ領域に跨ることになるが、本実施形態では、バッファ４０Ａとして用いるメモリ領域を単位バッファ領域を単位として確保するので、異なるタイミングで確保した単位バッファ領域が実メモリ（メモリ１４）上で連続する領域であることは保証されない。このため、画像データが書き込まれる領域が複数の単位バッファ領域に跨る場合、すなわち、ステップ４１６の判定が否定されるかステップ４１４の判定が肯定された場合にはステップ４１８へ移行し、確保すべきメモリ領域のサイズとして単位書込データ量をリソース管理部４６Ｂに通知すると共に、書込用に用いるメモリ領域（書込用バッファ領域：図７(Ｂ)も参照）の確保をリソース管理部４６Ｂに要求する。そして、書込用バッファ領域を確保すると、次のステップ４２０でバッファ４０Ａとして用いる単位バッファ領域の確保を行う。
【００７７】
ステップ４２２では、空き領域有りの単位バッファ領域における空き領域のサイズが単位書込データ量以上の場合は当該空き領域を書込領域とする一方、空き領域有りの単位バッファ領域における空き領域のサイズが単位書込データ量よりも小さい場合には、新たに確保した書込用バッファ領域を書込領域として、当該書込領域の先頭アドレスを書込要求元の画像処理モジュール３８へ通知すると共に、書込対象の画像データを通知した先頭アドレスから順に書き込むよう要請する。これにより、書込要求元の画像処理モジュール３８は、先頭アドレスが通知された書込領域（単位バッファ領域又は書込用バッファ領域）に画像データを書き込む（図７（Ｂ）も参照）。前述したように、画像データが書き込まれる領域が複数の単位バッファ領域に跨る場合は書込用バッファ領域を別途確保するので、画像データが書き込まれる領域が複数の単位バッファ領域に跨るか否かに拘わらず、書込要求元の画像処理モジュール３８への書込領域の通知は、上記のようにその先頭アドレスを通知するのみで済み、画像処理モジュール３８とのインタフェースが簡単になる。
【００７８】
次のステップ４２４では、前段の画像処理モジュール３８による書込領域への画像データの書き込みが完了したか否か判定し、判定が肯定される迄ステップ４２４を繰り返す。前段の画像処理モジュール３８から書込完了が通知されると、ステップ４２４の判定が肯定されてステップ４２６へ移行し、上記の書込処理における書込領域が、先のステップ４１６で確保した書込用バッファ領域か否か判定する。判定が否定された場合は何ら処理を行うことなくステップ４３２へ移行するが、ステップ４２６の判定が肯定された場合はステップ４２８へ移行し、例として図７(Ｃ)に示すように、書込用バッファ領域に書き込まれた画像データを、空き領域有りの単位バッファ領域と、先のステップ４２２で確保した新たな単位バッファ領域に分けて複写する。またステップ４３０では、先のステップ４１８で書込用バッファ領域として確保したメモリ領域の先頭アドレスをリソース管理部４６Ｂへ通知して、当該メモリ領域の解放をリソース管理部４６Ｂに要求し、リソース管理部４６Ｂによって前記メモリ領域を開放させる。
【００７９】
なお、ここでは必要なときに書込用バッファ領域を確保して、不要になったら解放する態様を説明したが、保管用単位バッファ領域のサイズが単位書込データ量の整数倍になっていない場合には、書込用バッファ領域は必ず必要となるので、初期化の際に確保しておき、バッファモジュール４０が消去されるときに解放するよう構成しても良い。
【００８０】
データ書込処理（図６）において、ステップ４２６の判定が否定されるか、又はステップ４３０でメモリ領域の解放を要求した後にリソース管理部４６Ｂから解放完了が通知されるとステップ４３２へ移行し、自モジュールの後段の個々の画像処理モジュール３８に対応する有効データポインタのうち、有効データの末尾位置を表すポインタを各々更新する（図７(Ｃ)も参照）。なお、上記のポインタ更新は、ポインタが指し示す有効データの末尾位置を単位書込データ量分だけ後へ移動させることによって成されるが、自モジュールの前段の画像処理モジュール３８によって今回書き込まれた画像データが処理対象の画像データの末尾に相当するデータであった場合には、前段の画像処理モジュール３８による書込処理完了した際に、処理対象の画像データが終了したことを表す全体処理終了通知と共に、書き込んだ画像データのサイズが前段の画像処理モジュール３８から入力されるので、書込処理完了した際に前段の画像処理モジュール３８から全体処理終了通知が入力された場合には、これとともに通知されたサイズ分だけ有効データの末尾位置を後へ移動させることでポインタ更新が行われる。
【００８１】
次のステップ４３４では、書込処理完了の際に全体処理終了通知が入力されたか否かに基づいて、バッファ４０Ａへの処理対象の画像データの書込が終了したか否か判定する。判定が否定された場合は何ら処理を行うことなくステップ４３８へ移行するが、判定が肯定された場合はステップ４３６へ移行し、ステップ４３２で更新したポインタ（自モジュールの後段の個々の画像処理モジュール３８に対応する有効データポインタのうち有効データの末尾位置を表すポインタ）に対し、処理対象の画像データの末尾であることを表すデータ最終位置情報を付加した後に、データ書込処理を終了してバッファ制御処理（図５）のステップ３８８に進む。
【００８２】
ステップ３８８では、バッファ４０Ａに書き込まれた有効データのデータ量が起動条件を満たしたか否か判定する。ここで肯定判定した場合には、ステップ３９０で、後段の画像処理モジュール３８を起動する。具体的には、画像処理モジュール３８に対して後段の画像処理モジュール３８を起動するための起動要求を処理管理部４６のワークフロー管理部４６Ａに通知する。該起動要求の通知を受け付けたワークフロー管理部４６Ａは、図１３（Ｅ）に示すブロック単位制御処理５を実行する。
【００８３】
このブロック単位制御処理５では、ステップ５１４において、起動要求通知を送信したバッファモジュール４０の後段の画像処理モジュール３８を認識し、認識した後段の画像処理モジュール３８に処理要求を入力して処理を終了する。これにより、待機状態にあった後段の画像処理モジュール３８が起動する。待機状態から起動した後は、画像処理モジュール３８は図１１に示す画像処理モジュール制御処理を実行する。
【００８４】
またバッファ制御処理（図５）において、ステップ３８４で読出要求を受信した場合には、ステップ３９２へ移行し、図８に示すデータ読出処理を行う。データ読出処理では、まずステップ４５０において、待ち行列から取り出した要求情報に含まれる要求元識別情報に基づいて読出要求元の画像処理モジュール３８を認識し、読出要求元の画像処理モジュール３８によって設定された単位読出データ量を認識すると共に、読出要求元の画像処理モジュール３８に対応する有効データポインタに基づいて、読出要求元の画像処理モジュール３８に対応する有効データのバッファ４０Ａ上での先頭位置及び末尾位置を認識する。次のステップ４５２では、ステップ４５０で認識した有効データの先頭位置及び末尾位置に基づいて、読出要求元の画像処理モジュール３８に対応する有効データ（読出要求元の画像処理モジュール３８が読出可能な画像データ）が単位読出データ量以上有るか否か判定する。
【００８５】
判定が否定された場合はステップ４５４へ移行し、バッファ４０Ａに記憶されており読出要求元の画像処理モジュール３８が読出可能な有効データの末尾が処理対象の画像データの末尾か否か判定する。読出要求元の画像処理モジュール３８に対応する有効データがバッファ４０Ａに単位読出データ量以上記憶されているか、又は、バッファ４０Ａに記憶されている読出要求元の画像処理モジュール３８に対応する有効データが単位読出データ量未満であるものの、当該有効データの末尾が処理対象の画像データの末尾であった場合には、ステップ４５２又はステップ４５４の判定が肯定されてステップ４５６へ移行する。ステップ４５６では、先のステップ４５０で認識した有効データの先頭位置に基づいて、有効データの先頭部分の画像データを記憶している単位バッファ領域を認識し、認識した単位バッファ領域に記憶されている有効データのデータ量がステップ４５０で認識した単位読出データ量以上か否かを判断することで、今回の読出対象の有効データが複数の単位バッファ領域に跨っているか否か判定する。
【００８６】
ステップ４５６の判定が否定された場合は何ら処理を行うことなくステップ４６０へ移行するが、例として図９(Ａ)に示すように、有効データの先頭部分の画像データを記憶している単位バッファ領域に記憶されている有効データのデータ量が単位読出データ量未満であり、今回の読出対象の有効データが複数の単位バッファ領域に跨っている場合、今回の読出対象の有効データが実メモリ（メモリ１４）上で連続する領域に記憶されているとは限らない。このため、ステップ４５６の判定が肯定された場合はステップ４６０へ移行し、確保すべきメモリ領域のサイズとして読出要求元の画像処理モジュール３８に対応する単位読出データ量をリソース管理部４６Ｂに通知すると共に、読出に用いるメモリ領域（読出用バッファ領域：図９(Ｂ)も参照）の確保をリソース管理部４６Ｂに要求する。また、読出用バッファ領域を確保すると、次のステップ４６０で複数の単位バッファ領域に跨って記憶されている読出対象の有効データを、ステップ４５８で確保した読出用バッファ領域に複写する（図９(Ｂ)も参照）。
【００８７】
ステップ４６２では、読出対象の有効データが単一の単位バッファ領域に記憶されている場合は、当該単位バッファ領域のうち読出対象の有効データが記憶されている領域を読出領域とする一方、読出対象の有効データが複数の単位バッファ領域に跨って記憶されている場合には読出用バッファ領域を読出領域とし、当該読出領域の先頭アドレスを読出要求元の画像処理モジュール３８へ通知すると共に、通知した先頭アドレスから画像データを順に読み出すよう要請する。これにより、読出要求元の画像処理モジュール３８は、先頭アドレスが通知された読出領域（単位バッファ領域又は読出用バッファ領域）からの画像データの読み出しを行う（図９（Ｃ）も参照）。なお、読出対象の有効データが処理対象の画像データの末尾に相当するデータであった場合（読出対象の有効データの末尾位置が、読出要求元の画像処理モジュール３８に対応する有効データポインタが指し示す有効データの末尾位置に一致しており、かつ前記ポインタにデータ最終位置情報が付加されていた場合）には、画像データの読出要請に際し、読出対象の有効データのサイズと共に、処理対象の画像データの末尾であることも読出要求元の画像処理モジュール３８に通知する。
【００８８】
前述したように、読出対象の有効データが複数の単位バッファ領域に跨って記憶されている場合は、別途確保した読出用バッファ領域に読出対象の有効データを複写するので、読出対象の有効データが複数の単位バッファ領域に跨って記憶されているか否かに拘わらず、読出要求元の画像処理モジュール３８への読出領域の通知は、上記のようにその先頭アドレスを通知するのみで済み、画像処理モジュール３８とのインタフェースが簡単になる。なお、自モジュールがアプリケーション３２によって生成されたバッファモジュール４０である場合は、バッファ４０Ａとして用いているメモリ領域（単位バッファ領域の集合体）は連続領域であるので、ステップ４５６の判定を行う前にバッファフラグが１か否か判定し、判定が肯定された場合は読出対象の有効データが複数の単位バッファ領域に跨って記憶されているか否かに拘わらずステップ４６２へ移行するようにしてもよい。
【００８９】
次のステップ４６４では、読出要求元の画像処理モジュール３８による読出領域からの画像データの読み出しが完了したか否か判定し、判定が肯定される迄ステップ４６４を繰り返す。読出要求元の画像処理モジュール３８から読出完了が通知されると、ステップ４６４の判定が肯定されてステップ４６６へ移行し、上記の読出処理における読出領域が、先のステップ４５８で確保した読出用バッファ領域か否か判定する。判定が否定された場合は何ら処理を行うことなくステップ４７０へ移行するが、ステップ４６６の判定が肯定された場合はステップ４６８へ移行し、先のステップ４５８で読出用バッファ領域として確保したメモリ領域の先頭アドレス及びサイズをリソース管理部４６Ｂへ通知して、当該メモリ領域の解放をリソース管理部４６Ｂに要求する。この読出用バッファ領域についても、保管用単位バッファ領域のサイズが単位読出データ量の整数倍になっていない場合には、読出用バッファ領域は必ず必要となるので、初期化の際に確保しておき、バッファモジュール４０が消去されるときに解放するよう構成しても良い。
【００９０】
次のステップ４７０では、読出要求元の画像処理モジュール３８に対応する有効データポインタのうち、有効データの先頭位置を表すポインタを更新する（図９(Ｃ)も参照）。なお、上記のポインタ更新は、ポインタが指し示す有効データの先頭位置を単位読出データ量分だけ後へ移動させることによって成されるが、今回の読出対象の有効データが処理対象の画像データの末尾に相当するデータであった場合には、読出要求元の画像処理モジュール３８へも通知した今回の読出対象の有効データのサイズ分だけ有効データの先頭位置を後へ移動させることでポインタ更新が行われる。
【００９１】
ステップ４７２では、後段の個々の画像処理モジュール３８に対応する有効データポインタを各々参照し、ステップ４７０のポインタ更新により、バッファ４０Ａを構成する単位バッファ領域の中に、記憶している画像データの後段の各画像処理モジュール３８による読み出しが全て完了した単位バッファ領域、すなわち有効データを記憶していない単位バッファ領域が出現したか否か判定する。判定が否定された場合は何ら処理を行うことなくステップ４７８へ移行するが、判定が肯定された場合はステップ４７４へ移行し、バッファフラグが１か否か判定する。自モジュールがモジュール生成部４４によって生成されたバッファモジュール４０である場合は判定が否定されてステップ４７６へ移行し、有効データを記憶していない単位バッファ領域の解放をリソース管理部４６Ｂに要求し、データ読出処理を終了してバッファ制御処理（図５）のステップ３８０に戻る。
【００９２】
なお、自モジュールがアプリケーション３２によって生成されたバッファモジュール４０である場合にはステップ４７４の判定が肯定され、何ら処理を行うことなく、データ読出処理を終了してバッファ制御処理（図５）のステップ３８０に戻る。
【００９３】
一方、バッファ４０Ａに記憶されており読出要求元の画像処理モジュール３８が読出可能な有効データのデータ量が単位読出データ量未満であり、かつ読出可能な有効データの末尾が処理対象の画像データの末尾でない場合（図１２(Ｂ)の(4)で読出可能な有効データ無が検知された場合）には、ステップ４５２，４５４の判定が各々否定されてステップ４８０へ移行し、新たな画像データを要求するデータ要求をワークフロー管理部４６Ａへ出力する（図１２(Ｂ)の(5)も参照）。この場合、ワークフロー管理部４６Ａにより、自モジュールの前段の画像処理モジュール３８に処理要求が入力されることになる。そして、データ読出処理を終了する。
【００９４】
図５に示すように、データ読出処理を終了するとステップ３８０（図５）に戻る。その後は、前述したステップ３８８で起動条件が満たされてステップ３９０で起動されるまで後段の画像処理モジュール３８は待機状態を継続する。後段の画像処理モジュール３８が起動された後は、上記と同様にデータ読出処理が実行されることになる。
【００９５】
詳細は後述するが、ワークフロー管理部４６Ａはバッファモジュール４０からデータ要求が入力されると（図１２（Ｂ）の(6)も参照）、データ要求元のバッファモジュール４０の前段の画像処理モジュール３８に処理要求を入力する（図１２(Ｂ)の(7)も参照）。この処理要求の入力をトリガとして前段の画像処理モジュール３８の制御部３８Ｂで行われる処理により、前段の画像処理モジュール３８がバッファモジュール４０へ画像データを書込可能な状態になると、前段の画像処理モジュール３８から書込要求が入力されることで前述したデータ書込処理（図６）が行われ、前段の画像処理モジュール３８からバッファモジュール４０のバッファ４０Ａに画像データが書き込まれる（図１２(Ｂ)の(8),(9)も参照）。そして、書込の結果、前述の起動条件が満たされると、バッファモジュール４０から起動要求が通知され（図１２（Ｂ）の(10)も参照）、ワークフロー管理部４６Ａから後段の画像処理モジュール３８に対して処理要求が入力され（図１２（Ｂ）の(11)も参照）、これを受け付けた後段の画像処理モジュール３８が起動して、後段の画像処理モジュール３８によるバッファ４０Ａからの画像データの読出が行われることになる（図１２(Ｂ)の(12)も参照）。
【００９６】
続いて、画像処理部５０を構成する個々の画像処理モジュール３８に対してワークフロー管理部４６Ａから処理要求が入力される毎に、個々の画像処理モジュール３８の制御部３８Ｂによって各々行われる画像処理モジュール制御処理（図１１）を説明する。画像処理モジュール制御処理では、まずステップ２８４において、自モジュールの前段にモジュール（バッファモジュール４０や画像データ供給部２２、画像処理モジュール３８等）が存在している場合に、当該前段のモジュールに対してデータ（画像データ又は解析等の画像処理の処理結果）を要求する。次のステップ２８６では、前段のモジュールからデータが取得可能であるかを判定する。判定が否定された場合は、ステップ２８８で全体処理終了が通知されたか否かを判定し、判定が肯定された場合はステップ３０８で全体処理終了をワークフロー管理部４６Ａ及び自モジュールの前段及び後段のモジュールに通知した後に、ステップ３１０で自モジュール消去処理（後述）を行う。
【００９７】
一方、ステップ２８８の判定が否定された場合は、ステップ２８９で、自モジュールを待機状態へ移行させる（処理停止）。その後は、新たに処理要求を受信するまで（入力されるまで）、待機状態を継続する。また、ステップ２８６の判定が肯定された場合には、ステップ２９０で前段のモジュールからデータを取得するデータ取得処理を行う。
【００９８】
ここで、自モジュールの前段のモジュールがバッファモジュール４０である場合には、先のステップ２８４でデータを要求すると（読出要求）、読出可能な有効データがバッファモジュール４０のバッファ４０Ａに単位読出データ量以上記憶されているか、読出可能な有効データの末尾が処理対象の画像データの末尾に一致している状態であれば、バッファモジュール４０から読出領域の先頭アドレスが通知されて画像データの読出が要請される（図８のステップ４６２も参照）。これにより、ステップ２８６の判定が肯定されてステップ２９０へ移行し、前段のバッファモジュール４０より先頭アドレスが通知された読出領域から単位読出データ量（又はそれ未満のデータ量）の画像データを読み出すデータ取得処理を行う（図１２(Ａ)の(3)も参照）。
【００９９】
また、自モジュールの前段のモジュールが画像データ供給部２２であれば、先のステップ２８４でデータ要求を出力すると画像データを取得可能な状態であることが前段の画像データ供給部２２から通知されることで、ステップ２８６の判定が肯定されてステップ２９０へ移行し、前段の画像データ供給部２２から単位読出データ量の画像データを取得する画像データ取得処理を行う。また、自モジュールの前段のモジュールが画像処理モジュール３８であれば、先のステップ２８４でデータ要求（処理要求）を出力すると、前段の画像処理モジュール３８が画像処理を実行可能な状態であれば書込要求が入力されることでデータ（画像処理結果）を取得可能な状態であることが通知されるので、ステップ２８６の判定が肯定されてステップ２９０へ移行し、前段の画像処理モジュール３８によってデータを書き込ませるバッファ領域のアドレスを通知して書込を要請することで、前段の画像処理モジュール３８から出力されるデータを前記バッファに書き込ませるデータ取得処理を行う。
【０１００】
次のステップ２９２では、自モジュールの前段に複数のモジュールが連結されているか否か判定する。判定が否定された場合には何ら処理を行うことなくステップ２９６へ移行するが、判定が肯定された場合はステップ２９４へ移行し、前段に連結されている全てのモジュールからデータを取得したか否か判定する。ステップ２９４の判定が否定された場合はステップ２８４に戻り、ステップ２９４の判定が肯定される迄ステップ２８４からステップ２９４を繰り返す。前段のモジュールから取得すべきデータが全て揃うと、ステップ２９２の判定が否定されるかステップ２９４の判定が肯定されてステップ２９６へ移行する。
【０１０１】
次に、ステップ２９６で自モジュールの後段のモジュールに対してデータ出力用の領域を要求し、ステップ２９８でデータ出力領域が取得できる迄（データ出力領域の先頭アドレスが通知される迄）繰り返し判定を行う。なお、後段のモジュールがバッファモジュール４０であれば、上記のデータ出力用領域の要求は当該バッファモジュール４０に対して書込要求を出力することによって成される。データ出力領域（後段のモジュールがバッファモジュール４０であれば当該バッファモジュール４０から先頭アドレスが通知された書込領域）が取得できたら（図１２(Ａ)の(4)も参照）、次のステップ３００において、先のデータ取得処理で取得したデータと後段のモジュールから取得したデータ出力領域（の先頭アドレス）を画像処理エンジン３８Ａに入力し、入力したデータに対して予め定められた画像処理を行わせる（図１２(Ａ)の(5)も参照）と共に、処理後のデータをデータ出力領域に書き込ませる（図１２(Ａ)の(6)も参照）。画像処理エンジン３８Ａへの単位読出データ量のデータの入力が完了し、画像処理エンジン３８Ａから出力されたデータがデータ出力領域に全て書き込まれると、次のステップ３０２で出力が完了したことを後段のモジュールに通知する。
【０１０２】
上記のステップ２８４からステップ３０２により画像処理モジュール３８における単位処理データ量のデータに対する処理（単位処理）が完了するが、ワークフロー管理部４６Ａから画像処理モジュール３８に入力される処理要求では、ワークフロー管理部４６Ａによって単位処理の実行回数が指定されることがある。このためステップ３０４では、単位処理の実行回数が、入力された処理要求によって指示された実行回数に達したか否か判定する。指示された単位処理の実行回数が１回の場合、この判定は無条件に肯定されるが、指示された単位処理の実行回数が２回以上の場合はステップ２８４に戻り、ステップ３０４の判定が肯定される迄ステップ２８４からステップ３０４を繰り返す。ステップ３０４の判定が肯定されるとステップ３０６へ移行し、ワークフロー管理部４６Ａへ処理完了通知を出力することで、入力された処理要求に対応する処理が完了したことをワークフロー管理部４６Ａへ通知し、画像処理モジュール制御処理を終了する。
【０１０３】
また、ワークフロー管理部４６Ａから処理要求が入力される毎に上述した処理が繰り返されることで処理対象の画像データを末尾まで処理すると、前段のモジュールから処理対象の画像データの終了が通知されることで、ステップ２８８の判定が肯定されてステップ３０８へ移行し、処理対象の画像データに対する処理が終了したことを意味する全体処理終了通知をワークフロー管理部４６Ａ及び後段のモジュールへ各々出力する。また、次のステップ３１０では自モジュール消去処理（後述）を行い、画像処理モジュール制御処理を終了する。
【０１０４】
ここで、ワークフロー管理部４６Ａの処理について図１３及び図１４を参照しながら説明する。なお、図１４では、バッファモジュール４０からの起動要求通知、及び該起動要求に応じて出力される処理要求の図示は省略してある。
【０１０５】
ワークフロー管理部４６Ａは、画像処理の実行が指示されると、図１３(Ａ)に示すブロック単位制御処理１を行い、バッファモジュール４０からデータ要求が入力される毎に図１３(Ｂ)に示すブロック単位制御処理２を行い、画像処理モジュール３８から処理完了通知が入力される毎に図１３(Ｃ)に示すブロック単位制御処理３を行い、画像処理モジュール３８から全体処理終了通知が入力される毎に図１３(Ｄ)に示すブロック単位制御処理４を行い、バッファモジュール４０から起動要求通知が入力される毎に図１３(Ｅ)に示すブロック単位制御処理５を行う。
【０１０６】
先にも述べたように、ブロック単位制御処理１では、ワークフロー管理部４６Ａによる画像処理部５０の個々の画像処理モジュール３８への処理要求の入力では、単位処理の実行回数を指定可能とされているが、ステップ５００では、１回の処理要求で指定する単位処理の実行回数を個々の画像処理モジュール３８毎に決定する。この処理要求１回当りの単位処理の実行回数は、例えば処理対象の画像データ全体を処理する間の個々の画像処理モジュール３８への処理要求の入力回数が平均化されるように定めてもよいが、他の基準、例えば、上記設定した起動条件に従って画像処理モジュール３８毎に定めてもよい。例えば、「自モジュールのバッファ４０Ａに書き込まれた有効データのデータ量が、データ量αになった場合に起動する」という起動条件が設定された場合には、データ量αの有効データが後段のバッファモジュール４０のバッファ４０Ａに書き込まれるまで単位処理が繰り返されるように、実行回数を定めてもよい。そして次のステップ５０２において、画像処理部５０のうち最後段の画像処理モジュール３８に処理要求を入力し（図１４の(1)も参照）、ブロック単位制御処理１を終了する。
【０１０７】
ここで、図１４に示す画像処理部５０において、ワークフロー管理部４６Ａから最後段の画像処理モジュール３８4に処理要求が入力されると、画像処理モジュール３８4の制御部３８Ｂは前段のバッファモジュール４０3に読出要求を入力する（図１４の(2)参照）。このとき、バッファモジュール４０3のバッファ４０Ａには画像処理モジュール３８4が読出可能な有効データ（画像データ）が記憶されていないので、バッファモジュール４０3のバッファ制御部４０Ｂはワークフロー管理部４６Ａにデータ要求を入力する（図１４の(3)参照）。また、画像処理モジュール３８4は、待機状態となる。
【０１０８】
ワークフロー管理部４６Ａは、バッファモジュール４０からデータ要求が入力される毎に、図１３(Ｂ)に示すブロック単位制御処理２を行う。このブロック単位制御処理２では、ステップ５０４において、データ要求入力元のバッファモジュール４０（ここではバッファモジュール４０3）の前段の画像処理モジュール３８（ここでは画像処理モジュール３８3）を認識し、認識した前段の画像処理モジュール３８に処理要求を入力（図１４の(4)参照）して処理を終了する。
【０１０９】
画像処理モジュール３８3の制御部３８Ｂは、処理要求が入力されると前段のバッファモジュール４０2に読出要求を入力し（図１４の(5)参照）、バッファモジュール４０2のバッファ４０Ａにも読出可能な画像データが記憶されていないので、バッファモジュール４０2のバッファ制御部４０Ｂはワークフロー管理部４６Ａにデータ要求を入力する（図９の(6)参照）。また、画像処理モジュール３８3は、待機状態となる。ワークフロー管理部４６Ａは、バッファモジュール４０2からデータ要求が入力された場合も、前述のブロック単位制御処理２を再度行うことで、その前段の画像処理モジュール３８2に処理要求を入力し（図１４の(7)参照）、画像処理モジュール３８2の制御部３８Ｂは前段のバッファモジュール４０1に読出要求を入力する（図１４の(8)参照）。また、バッファモジュール４０1のバッファ４０Ａにも読出可能な画像データが記憶されていないので、バッファモジュール４０1のバッファ制御部４０Ｂもワークフロー管理部４６Ａにデータ要求を入力する（図１４の(9)参照）。また、画像処理モジュール３８2は、待機状態となる。ワークフロー管理部４６Ａは、バッファモジュール４０1からデータ要求が入力された場合も、前述のブロック単位制御処理２を再度行うことで、その前段の画像処理モジュール３８1に処理要求を入力する（図１４の(10)参照）。
【０１１０】
ここで、画像処理モジュール３８1の前段のモジュールは画像データ供給部２２であるので、画像処理モジュール３８1の制御部３８Ｂは、画像データ供給部２２にデータ要求を入力することで画像データ供給部２２から単位読出データ量の画像データを取得し（図１４の(11)参照）、取得した画像データに対して画像処理エンジン３８Ａが画像処理を行うことで得られた画像データを、後段のバッファモジュール４０1のバッファ４０Ａに書き込む（図１４の(12)参照）。
【０１１１】
また、バッファモジュール４０1のバッファ制御部４０Ｂは、起動条件を満たすデータ量の有効データが書き込まれるとワークフロー管理部４６Ａに起動要求を通知して、画像処理モジュール３８2を起動させ、画像処理モジュール３８2に対して読出を要請する。これに伴い画像処理モジュール３８2の制御部３８Ｂは、バッファモジュール４０1のバッファ４０Ａから単位読出データ量の画像データを読み出し（図１４の(13)参照）、取得した画像データに対して画像処理エンジン３８Ａが画像処理を行うことで得られた画像データを、後段のバッファモジュール４０2のバッファ４０Ａに書き込む（図１４の(14)参照）。バッファモジュール４０2のバッファ制御部４０Ｂは、起動条件を満たすデータ量の有効データが書き込まれるとワークフロー管理部４６Ａに起動要求を通知して、画像処理モジュール３８3を起動させ、画像処理モジュール３８3へ読出を要請し、画像処理モジュール３８3の制御部３８Ｂは、バッファモジュール４０2のバッファ４０Ａから単位読出データ量の画像データを読み出し（図１４の(15)参照）、取得した画像データに対して画像処理エンジン３８Ａが画像処理を行うことで得られた画像データを、後段のバッファモジュール４０3のバッファ４０Ａに書き込む（図１４の(16)参照）。
【０１１２】
更に、バッファモジュール４０3のバッファ制御部４０Ｂは、起動条件を満たすデータ量の有効データが書き込まれるとワークフロー管理部４６Ａに起動要求を通知して、画像処理モジュール３８4を起動させ、画像処理モジュール３８4に対して読出を要請し、これに伴い画像処理モジュール３８4の制御部３８Ｂは、バッファモジュール４０3のバッファ４０Ａから単位読出データ量の画像データを読み出し（図１４の(17)参照）、取得した画像データに対して画像処理エンジン３８Ａが画像処理を行うことで得られた画像データを、後段のモジュールである画像出力部２４へ出力する（図１４の(18)参照）。
【０１１３】
また、個々の画像処理モジュール３８の制御部３８Ｂは、後段のバッファモジュール４０のバッファ４０Ａへの画像データの書き込みを完了すると、ワークフロー管理部４６Ａへ処理完了通知を入力する。ワークフロー管理部４６Ａは、画像処理モジュール３８から処理完了通知が入力される毎に、図１３(Ｃ)に示すブロック単位制御処理３を行う。このブロック単位制御処理３では、まずステップ５０６において、処理完了通知元の画像処理モジュール３８が最後段の画像処理モジュール３８か否か判定する。判定が否定された場合は何ら処理を行うことなくブロック単位制御処理３を終了する。また、判定が肯定された場合はステップ５０８へ移行し、処理完了通知元の画像処理モジュール３８に処理要求を再度入力して処理を終了する。
【０１１４】
また、ワークフロー管理部４６Ａは、画像処理モジュール３８から全体処理終了通知が入力される毎に、図１３(Ｄ)に示すブロック単位制御処理４を行う。このブロック単位制御処理４では、ステップ５１０において、全体処理終了通知入力元の画像処理モジュール３８が最後段の画像処理モジュール３８か否か判定する。判定が否定された場合は何ら処理を行うことなく処理を終了するが、処理対象の画像データに対して必要な画像処理が行われた画像データが画像出力部２４へ全て出力されることで、最後段の画像処理モジュール３８から全体処理終了通知が入力された場合には、ステップ５１０の判定が肯定されてステップ５１２へ移行し、アプリケーション３２に対して画像処理の完了を通知し（図２のステップ１８０も参照）、ブロック単位制御処理を終了する。そして、画像処理の完了が通知されたアプリケーション３２は、ユーザに対して画像処理の完了を通知する（図２のステップ１８２も参照）。
【０１１５】
なお、ブロック単位制御処理５については、前述のとおりである。
【０１１６】
このように、ブロック単位処理では、最後段の画像処理モジュール３８に入力された処理要求がより前段の画像処理モジュール３８へ遡り、最前段の画像処理モジュール３８に到達すると、最前段の画像処理モジュール３８で画像処理が行われて後段のバッファモジュール４０にデータが書き込まれ、それでデータが足りるようであれば処理が後段のモジュールへ進んで行くという流れで一連の画像処理が行われる。
【０１１７】
次に、処理対象の画像データに対する画像処理を完了した後に行われる画像処理部５０の消去について説明する。個々の画像処理モジュール３８の制御部３８Ｂは、画像処理モジュール制御処理（図１１）のステップ３０８で、ワークフロー管理部４６Ａ及び後段のモジュールへ全体処理終了通知を出力した後に、次のステップ３１０において自モジュール消去処理を行う。この自モジュール消去処理では、先のステップ２５４（図１０）で確保したメモリ領域をリソース管理部４６Ｂによって解放させると共に、リソース管理部４６Ｂを通じて自モジュールが確保したメモリ以外のリソースが有れば、当該リソースをリソース管理部４６Ｂによって解放させ、自モジュールの前段のモジュール、後段のモジュール及びワークフロー管理部４６Ａに対し、自モジュールを消去する処理を行うことを通知するための消去通知を入力した後に、自モジュールを消去する処理が行われる。なお、自モジュールを消去することは、自モジュールに対応するスレッド（又はプロセス）を終了するか、又はオブジェクトを削除することで実現する。
【０１１８】
なお、バッファモジュール４０のバッファ制御部４０Ｂによって行われるバッファ制御処理（図５）では、自モジュールの前段又は後段の画像処理モジュール３８から消去通知が入力されると、ステップ３８０の判定が肯定されてステップ３９４へ移行し、消去通知入力元のモジュールを記憶した後に、自モジュールの前段及び後段の全てのモジュールから消去通知が入力されたか否か判定する。判定が否定された場合はステップ３８０へ戻る。また、自モジュールの前段及び後段の全てのモジュールから消去通知が入力されると、ステップ３９４の判定が肯定されてステップ３９６へ移行し、ワークフロー管理部４６Ａに対して消去通知を入力することで、自モジュールを消去する処理を行うことを通知する。そして次のステップ３９８で自モジュールを消去する処理を行ってバッファ制御処理（図５）を終了する。
【０１１９】
ここで、前述した起動条件の決定方法の具体例について説明する。以下では、データ量を表す単位としてライン、画素数、バイト等を用いる。
【０１２０】
[単位処理データ量に基づく決定方法]
例えば、前段の画像処理モジュール３８及び後段の画像処理モジュール３８の各々の単位処理データ量が１ラインの場合には、バッファモジュール４０に画像データ（有効データ）が１ラインずつ書き込まれる毎に起動を繰り返すのではなく、ある程度まとまったライン数が書き込まれた場合に起動させる起動条件を定める。具体的には、上記単位処理データ量のライン数が予め定められた閾値（例えば１０ライン）以下の場合は、自モジュールのバッファ４０Ａに書き込まれた有効データのデータ量が、１０ライン分のデータ量になった場合に起動する起動条件とする。
【０１２１】
なお、ここで、１０ラインというデータ量は一例であって、これに限定されるものではない。また、連結された画像処理モジュール３８の各々の単位処理データ量が異なる場合であっても、何れも閾値より小さければ、上記と同様に起動条件を決定する。なお、上記閾値は小さすぎると起動回数が増え、オーバーヘッドが大きくなってしまうが、閾値があまりに大きすぎると、前段の画像処理モジュール３８が画像１面分の画像データに対する画像処理が終了した後に後段の画像処理モジュール３８が起動されることにもなりかねず、かえって並列して処理する時間が短くなることもあるため、予め試験等により適切な値を求めて設定しておく。
【０１２２】
更にまた、連結された画像処理モジュール３８の各々の単位処理データ量が閾値より大きい場合には、該単位処理データ量の有効データが自モジュールのバッファ４０Ａに書き込まれた場合に起動させる起動条件を定める。
【０１２３】
なお、連結された各画像処理モジュール３８の単位処理データ量を示す情報は、図５のステップ３６３で起動条件を設定する前に予め取得しておく。例えば、図５のステップ３５８で、連結された各画像処理モジュール３８が単位書込データ量及び単位読出データ量をバッファモジュール４０に通知する際に、各々の単位処理データ量も通知するように構成してもよい。
【０１２４】
[処理の重さ（画像処理の単位処理に要する時間）に基づく決定方法]
単位処理データ量の有効データが書き込まれる毎に後段の画像処理モジュール３８を起動させる場合には、各画像処理モジュール３８の処理の重さが重いほど（単位処理に要する時間が長いほど）は、各画像処理モジュール３８が並列して画像処理を実行する期間も長く（並列度が高く）なり、逆に処理の重さが軽いほど（単位処理に要する時間が長いほど）、待機状態に移行しやすく、並列度が低くなる傾向がある。
【０１２５】
そこで、連結された画像処理モジュール３８が画像処理を実行している時間が平均化されて並列度が上がるように起動条件を設定するようにしてもよい。以下、様々なパターンを例示して説明する。ここでは、処理の重さを１〜５（数値が上がるほど重い）の数値で表すこととし、目標連続処理時間（連続して処理させたい時間の目標値、ここでは処理の重さの最大レベル）を５とし、各画像処理モジュール３８の単位処理データ量を、１ラインで共通とする。また、ここでは、単位処理データ量の有効データが書き込まれる毎に起動要求を出力して後段の画像処理モジュール３８を起動させる場合を基準として、該起動要求の出力を間引くか否か、間引く場合にはどの程度間引くかを連結された画像処理モジュール３８に応じて求め、起動条件を定める場合を例に挙げて説明する。
【０１２６】
図１５の（１）に示すように、前段の画像処理モジュール３８及び後段の画像処理モジュール３８の各々の処理の重さが共に軽い場合には、起動回数が抑制されるように起動条件を定める。例えば、前段の画像処理モジュール３８及び後段の画像処理モジュール３８の処理の重さが共に１である場合には、目標連続処理時間の５を１で割ると、５／１＝５ラインであるため、自モジュールのバッファ４０Ａに書込まれた有効データのデータ量が５ライン分のデータ量になった場合に後段の画像処理モジュール３８を起動する起動条件とする。すなわち、単位処理データ量の有効データが書き込まれる毎に起動要求を出力して後段の画像処理モジュール３８を起動させると起動要求が５回出力されることになるが、これを１回の出力となるよう間引く。
【０１２７】
また、前段の画像処理モジュール３８及び後段の画像処理モジュール３８の処理の重さが共に２である場合には、５／２＝２．５ラインであるため、２ライン分又は３ライン分の有効データが自モジュールのバッファ４０Ａに書き込まれる毎に後段の画像処理モジュール３８を起動させる起動条件を定めてよい。また、２ライン分の有効データが自モジュールのバッファ４０Ａに書き込まれたら後段の画像処理モジュール３８を起動させ、次は３ライン分の有効データが自モジュールのバッファ４０Ａに書き込まれたら後段の画像処理モジュール３８を起動させ、その次は、２ライン分の有効データが自モジュールのバッファ４０Ａに書き込まれたら後段の画像処理モジュール３８を起動させ、・・・というように起動条件を定めてもよい。
【０１２８】
図１５の（２）に示すように、前段の画像処理モジュール３８及び後段の画像処理モジュール３８の処理の重さが共に重い場合には、上記軽い場合に比べて待機状態に移行しにくい。図１５（２）に示す例では、前段の画像処理モジュール３８及び後段の画像処理モジュール３８の処理の重さが共に５であり、前述したように目標連続処理時間が５であるため、起動要求の出力を間引くことなく、自モジュールのバッファ４０Ａに書込まれた有効データが５ライン分のデータ量になった場合に後段の画像処理モジュール３８を起動させる起動条件を定める。
【０１２９】
図１５の（３）に示すように、前段の画像処理モジュール３８の処理の重さが後段の画像処理モジュール３８の処理の重さより重い場合には、後段の画像処理モジュール３８の画像処理の方が前段の画像処理モジュール３８よりも早く終了するため、処理の重さが同じ場合に比べて後段の画像処理モジュール３８の待機状態が多くなる。従って、後段の画像処理モジュール３８を起動要求を間引くことなく起動させて処理させた方が並列度が上がる。そこで、この場合には、自モジュールのバッファ４０Ａに有効データが単位処理データ量１ライン分書き込まれた場合に後段の画像処理モジュール３８を起動させる起動条件を定める。
【０１３０】
図１５の（４）に示すように、前段の画像処理モジュール３８の処理の重さが後段の画像処理モジュール３８の処理の重さより軽い場合には、前段の画像処理モジュール３８の単位処理が終了してバッファ４０Ａに対する書込が終わっても、後段の画像処理モジュール３８はまだ処理途中であるため、起動要求を出力する意味がない。そこで、後段の画像処理モジュール３８の単位処理が終了してから起動されるように、起動要求が間引かれるように起動条件を定める。例えば、自モジュールのバッファ４０Ａに書込まれた有効データのデータ量が５ライン分のデータ量となった場合に後段の画像処理モジュール３８を起動させる起動条件を定める。
【０１３１】
なお、連結された各画像処理モジュール３８の処理の重さを示す情報は、図５のステップ３６３で起動条件を設定する前に予め取得しておく。例えば、図５のステップ３５８で、連結された各画像処理モジュール３８が単位書込データ量及び単位読出データ量をバッファモジュール４０に通知する際に、各々の処理の重さも通知するように構成してもよい。
【０１３２】
[連結された画像処理モジュールの数に基づく決定方法]
図１６の（１）に示すように、後段に画像処理モジュール３８が複数連結されている場合には、一回の起動要求で該複数の画像処理モジュール３８が起動されるため、起動回数が多くなってしまう。そこで、起動要求の出力を間引く。例えば、後段に単位処理データ量が１ラインの画像処理モジュール３８が３つ連結されていた場合、通常３回起動要求を出力するところを１回に減らすように起動要求を定める。
【０１３３】
図１６の（２）に示すように、前段に画像処理モジュール３８が複数連結されている場合には、１つのバッファ４０Ａに複数の画像処理モジュール３８が画像データを書き込むという状況は発生しない。従って、起動要求を間引くことなく起動条件を定める。
【０１３４】
[連結された画像処理モジュールの処理対象の画像データが表す画像の大きさに基づく決定方法]
単位処理データ量が１ラインであっても、処理対象の画像データが横長の画像を表す画像データの場合、１ラインの画素数が大きくなる。一方、処理対象の画像データが縦長の画像を表す画像データの場合、横長の場合に比べて１ラインの画素数は小さい。従って、縦長の画像を表す画像データを処理対象とする場合に、１ライン分の有効データが書き込まれる毎に後段の画像処理モジュール３８を起動すると、横長の画像を示す画像データを処理対象とする場合に比べて起動回数が多くなり、並列度が低くなる、そこで、処理対象の画像データが表す画像の大きさ（すなわち画像１面分の大きさ、或いは画像全体の大きさと言い換えてもよい）起動要求の出力を抑制する（間引く）よう起動条件を定める。
【０１３５】
後段の画像処理モジュール３８の単位処理データ量を１ラインとする場合を例に挙げて説明する。まず、（処理対象の画像データが表す画像の大きさ）／（１ラインのデータ量）を求める。そして、求めた値を予め定められた間引き係数で割ったものを起動条件とする。例えば、上記画像の大きさが1500*1000画素であり、単位処理データ量が１ライン（1000画素）の場合には、（1500*1000画素）／（1000画素）は、1500が求められる。上記間引き係数は、予め実験等で目標の並列度が得られた値として求めておき、これを250とすると、1500/250=6が求められる。従って、自モジュールのバッファ４０Ａに書込まれた有効データが６ライン分のデータ量となった場合に後段の画像処理モジュール３８を起動するという起動条件を定める。
【０１３６】
なお、前段の画像処理モジュール３８の処理対象の画像データが表す画像と後段の画像処理モジュール３８の処理対象の画像データが表す画像の大きさが等しければ、前段の画像処理モジュール３８の処理対象の画像データが表す画像の大きさに基づいて起動条件を定めてもよい。
【０１３７】
なお、後段の画像処理モジュール３８の処理対象となる画像データが表す画像の大きさの情報は、図５のステップ３６３で起動条件を設定する前に予め取得しておく。例えば、図５のステップ３５８で、連結された各画像処理モジュール３８が単位書込データ量及び単位読出データ量をバッファモジュール４０に通知する際に、処理対象となる画像データが表す画像の大きさも通知するように構成してもよい。
【０１３８】
[複数の要素の組み合わせに基づいて起動条件を決定する場合の決定方法]
上記では、単位処理データ量、処理の重さ、連結する画像処理モジュールの数、及び処理対象の画像データが表す画像の大きさの各々に基づいて起動条件を定める例について説明したが、これらのうち、２以上の要素を組み合わせ、この組み合わせに基づいて起動条件を定めるようにしてもよい。なお、ここでも、単位処理データ量の有効データが書き込まれる毎に起動要求を出力して後段の画像処理モジュール３８を起動させる場合を基準として、該起動要求の出力を間引くか否か、間引く場合にはどの程度間引くかを連結された画像処理モジュール３８に応じて求め、起動条件を定める場合を例に挙げて説明する。
【０１３９】
（１）単位処理データ量及び処理対象の画像データが表す画像の大きさに基づく決定方法
単位処理データ量の有効データが書き込まれる毎に起動すると、（処理対象の画像の大きさ）／（単位処理データ量）が、画像処理モジュール３８の起動回数になる。この起動回数が予め定めた閾値より大きい場合には、起動要求の出力を間引き、閾値以下の場合には間引かないようにする。
【０１４０】
以下、具体例を示す。
Ａ．後段の画像処理モジュール３８の処理対象の画像データが表す画像の大きさが1000×1500画素であり、１ラインを1000画素とすると、前段及び後段の画像処理モジュール３８の単位処理データ量が２ラインの場合、単位処理データ量の有効データが書き込まれる毎に起動すると、起動回数は、1500/2=750回になる。
Ｂ．後段の画像処理モジュール３８の処理対象の画像データが表す画像の大きさが250×250画素であり、前段及び後段の画像処理モジュール３８の単位処理データ量が５ラインの場合は、単位処理データ量の有効データが書き込まれる毎に起動すると、起動回数は、250/5=50回になる。
【０１４１】
予め、実験などにより目標となる並列度を達成する間引き係数を定めておき、この間引き係数に基づいて、起動要求が間引かれるよう起動条件を定める。ここで、間引き係数を50とすると、Ａの場合は、750/50=15で１５回に１回起動要求を出力されるように起動条件を定める。すなわち、有効データが３０ライン書き込まれる毎に後段の画像処理モジュール３８を起動する起動条件を定める。また、Ｂの場合は、50/50＝１であるため、起動要求を間引かない。すなわち、自モジュールのバッファ４０Ａに書込まれた有効データのデータ量が単位処理データ量になった場合に起動する起動条件を定める。
【０１４２】
なお、上記起動条件の計算において、単位処理データ量が前段と後段とで異なる場合には、その最大値を用いるものとする。
【０１４３】
（２）単位処理データ量及び処理の重さに基づく決定方法
処理の重さが軽く単位処理データ量が少ないほど起動回数が多くなる傾向があるため、処理の重さが軽く単位処理データ量が少ないほど起動要求の間引きを多くする。
【０１４４】
以下、具体例を示す。
ここでは、前段の画像処理モジュール３８及び後段の画像処理モジュール３８の双方の単位処理データ量、及び処理の重さが等しいものとして説明する。更に、処理の重さを１〜５（数値が上がるほど重い）の数値で表すこととし、目標連続処理時間を２０とする。
【０１４５】
まず、以下ＡからＣの各々の場合について、処理の重さ×単位処理データ量(ライン数）を計算する。
Ａ．処理の重さが5で単位処理データ量が2ラインずつの場合、5×2=10
Ｂ．処理の重さが2で単位処理データ量が1ラインずつの場合、2×1=2
Ｃ．処理の重さが5で単位処理データ量が5ラインずつの場合、5×5=25
【０１４６】
次に、ＡからＣの各々について、目標連続処理時間／（処理の重さ×単位処理データ量）を計算し、これに基づいて起動条件を求める。
Ａの場合は、20/10=2となり、単位処理データ量の有効データが書き込まれる毎に起動要求を出力して後段の画像処理モジュール３８を起動させる場合には起動要求を２回出力することになるが、これを１回に減らす。すなわち、自モジュールのバッファ４０Ａに書込まれた有効データのデータ量が４ライン分のデータ量となった場合に起動する起動条件を定める。
Ｂの場合は、20/2=10となり、単位処理データ量の有効データが書き込まれる毎に起動要求を出力して後段の画像処理モジュール３８を起動させる場合には起動要求を10回出力することになるが、これを１回に減らす。すなわち、自モジュールのバッファ４０Ａに書込まれた有効データのデータ量が１０ライン分のデータ量となった場合に起動する起動条件を定める。
Ｃの場合は、20/25=0.8で１以下になるので、起動要求を間引かない。すなわち、自モジュールのバッファ４０Ａに書込まれた有効データのデータ量が５ライン分のデータ量となった場合に起動する起動条件を定める。
【０１４７】
（３）単位処理データ量、処理対象の画像データが表す画像の大きさ、処理の重さ、及び連結された画像処理モジュールの数に基づく決定方法
ここでは、前段及び後段に連結された各画像処理モジュール３８の各々の単位処理データ量、及び処理の重さが等しいものとして説明する。
まず、後段の画像処理モジュール３８の処理対象の画像データが表す画像の大きさ／単位処理データ量を計算する。以下、２つの計算例を示す。
Ａ．1500/2=750
Ｂ．250/5=50
【０１４８】
次に、図１７に示すテーブルから自モジュールの該当する間引き係数を探し、上記計算した数値/間引き係数を間引き回数とする。図１７に示すテーブルは、処理の重さ及び連結されたモジュール数に応じた間引き係数が記憶されたテーブルである。なお、本テーブルは、処理の重さの方が連結されるモジュール数よりも起動回数に対する影響が大きいため、それを考慮して作成されている。本テーブルは、予め実験等により各係数を求め作成しておく。なお、本テーブルは、例えば、メモリ１４に確保され、生成された各バッファモジュール４０が読出し可能な共通の記憶領域に予め記憶されており、各バッファモジュール４０が該記憶領域から必要な間引き係数を読み出すようにしてもよい。
【０１４９】
上記Ａの場合、間引き係数は100であるため、上記計算した値を間引き係数で割ると、750/100＝7.5となる。従って、単位処理データ量の有効データが書き込まれる毎に起動要求を出力して後段の画像処理モジュール３８を起動させる場合に起動要求を７回出力することになるが、これを１回に減らす。すなわち、自モジュールのバッファ４０Ａに書込まれた有効データのデータ量が１４ライン分のデータ量となった場合に起動する起動条件を定める。
【０１５０】
上記Ｂの場合、間引き係数は10であるため、上記計算した値を間引き係数で割ると、50/10＝5となる。従って、単位処理データ量の有効データが書き込まれる毎に起動要求を出力して後段の画像処理モジュール３８を起動させる場合に起動要求を５回出力することになるが、これを１回に減らす。すなわち、自モジュールのバッファ４０Ａに書込まれた有効データのデータ量が２５ライン分のデータ量となった場合に起動する起動条件を定める。
【０１５１】
なお、上記様々な起動条件の決定方法について説明したが、バッファ４０Ａに書き込まれた有効データのデータ量が後段の画像処理モジュール３８の単位読出データ量未満の状態で起動要求が出力されてしまうことがないように上記方法で決定した起動条件を調整し、該調整した起動条件を最終的な起動条件として決定して設定する。例えば、単位処理データ量が単位読出データ量未満であり、且つ上記方法により、単位処理データ量の有効データが自モジュールのバッファ４０Ａに書き込まれた場合に起動させる起動条件を決定された場合には、単位読出データ量の有効データが自モジュールのバッファ４０Ａに書き込まれた場合に起動させる起動条件に変更し、これを起動条件として設定する。
【０１５２】
図１８は、本実施の形態に係るバッファモジュール４０の機能構成を示す図である。前述したように、バッファモジュール４０は、バッファ４０Ａ及びバッファ制御部４０Ｂを備えている。バッファ制御部４０Ｂは、起動部５０、起動条件決定部５２、書き込み状況監視部５４、及び書込・読出制御部５６を備えている。起動部５０は、起動条件決定部５２が決定した起動条件に従って起動要求を処理管理部４６に送信する（図５のステップ３９０も参照）。起動条件決定部５２は、前述したように、起動条件を決定し、設定する（図５のステップ３６３も参照）。書き込み状況監視部５４は、バッファ４０Ａに対する有効データの書き込み状態を監視する（図５のステップ３８８も参照）。書込・読出制御部５６は、前段に連結された画像処理モジュール３８からの書込要求に対する書き込みの制御、及び後段に連結された画像処理モジュール３８からの読出要求に対する読出しの制御を行う（図５のステップ３６３，３８８，３９０以外の各ステップ、図６、及び図８も参照）。
【０１５３】
上記実施形態ではプログラム実行リソースとしてＣＰＵ１２が１個のみ設けられた構成を説明したが、これに限定されるものではなく、同種のプログラム実行リソースが複数設けられた構成に適用してもよい。また、複数種のプログラム実行リソースが設けられた構成としてもよい。
【０１５４】
更に、上記ではバッファモジュール４０において、後段の画像処理モジュール３８から読出要求が入力され、読出要求元の画像処理モジュール３８が読出可能な有効データが自モジュールのバッファ４０Ａに記憶されていなかった場合に、バッファ制御部４０Ｂがワークフロー管理部４６Ａへデータ要求を入力する態様を例に説明したが、これに限定されるものではなく、上記場合にバッファ制御部４０Ｂが前段の画像処理モジュール３８へデータ要求を直接入力するようにしてもよい。この態様の処理シーケンスを図１９に示す。図１９からも明らかなように、この態様において、ワークフロー管理部４６Ａは画像処理部５０のうち最後段の画像処理モジュール３８についてのみ処理要求を入力すれば済むので、ワークフロー管理部４６Ａにおける処理が簡単になる。
【０１５５】
このように構成した場合には、バッファモジュール４０のバッファ制御部４０Ｂを、自モジュールの前段の画像処理モジュール３８によってバッファ４０Ａに起動条件を満たすデータ量の有効データが書き込まれる毎に後段の画像処理モジュール３８に対して起動要求としての処理要求を入力させるようにする。また、バッファ４０Ａに書き込まれた有効データが後段の画像処理モジュール３８の単位読出データ量未満であり、かつ読出可能な有効データの末尾が処理対象の画像データの末尾でなければ、前段の画像処理モジュール３８に対してデータ要求としての処理要求を入力させる。
【０１５６】
なお、図２０に示すように、上記画像処理装置１０を、画像形成部６０を備えた画像形成装置７０に組み込んでもよい。この画像形成装置７０では、画像処理装置１０の画像処理部５０が画像処理した画像データを用いて画像形成部６０が画像を形成する。画像形成部６０は、有色の液滴を吐出して記録媒体に画像を形成する画像形成部であってもよいし、静電写真方式で画像を形成する画像形成部であってもよい。
【符号の説明】
【０１５７】
１０ コンピュータ
１４ メモリ
２０ 記憶部
２２ 画像データ供給部
２４ 画像出力部
３２ アプリケーション
３４ 画像処理プログラム群
３８ 画像処理モジュール
３８Ａ 画像処理エンジン
３８Ｂ 制御部
４０ バッファモジュール
４０Ａ バッファ
４０Ｂ バッファ制御部
４６ 処理管理部
４６Ａ ワークフロー管理部
５０ 画像処理部
６０ 画像形成部
７０ 画像形成装置
【特許請求の範囲】
【請求項１】
待機状態から起動した後は前段から単位データ量の画像データの取得を試行することを前記単位データ量の画像データの取得が失敗するまで繰り返し、前記単位データ量の画像データの取得に失敗した場合は待機状態となり、前記単位データ量の画像データの取得に成功した場合は該取得した画像データを用いて予め定められた画像処理を実行し、該画像処理を経た画像データ又は該画像処理の処理結果を後段へ出力して書き込む機能を各々備え、実行する画像処理の種類又は内容が互いに異なる複数種の画像処理手段の中から選択された複数の画像処理手段であって、対応するプログラムが並列に実行されることによって並列に動作する複数の画像処理手段と、
前段に連結された画像処理手段から出力された画像データが書き込まれると共に、後段に連結された画像処理手段により該書き込まれた画像データが読み出される記憶領域を備え、前記記憶領域に書き込まれたデータ量が、前記連結された画像処理手段の各々に応じて定まるデータ量となった場合に、前記後段に連結された画像処理手段が起動するように制御する記憶処理手段と、
が、少なくとも前記画像処理手段と前記記憶処理手段とが交互に存在するように、前記画像処理手段及び前記記憶処理手段がパイプライン形態又は有向非循環グラフ形態で連結されて構築された画像処理部を備えた画像処理装置。
【請求項２】
前記記憶処理手段は、前記記憶領域に書き込まれたデータ量が、前記連結された画像処理手段による画像処理において単位処理毎に処理される単位処理データ量、前記連結された画像処理手段による画像処理の単位処理に要する時間、前記連結された画像処理手段の数、及び前記後段に連結された画像処理手段による画像処理の処理対象となる画像データが表す画像の大きさ、の少なくとも１つに応じて定まるデータ量となった場合に、前記後段に連結された画像処理手段が起動するように制御する
請求項１に記載の画像処理装置。
【請求項３】
請求項１又は請求項２に記載の画像処理装置と、
前記画像処理装置で画像処理された画像データに基づいて画像を形成する画像形成手段と、
を備えた画像形成装置。
【請求項４】
コンピュータを、
待機状態から起動した後は前段から単位データ量の画像データの取得を試行することを前記単位データ量の画像データの取得が失敗するまで繰り返し、前記単位データ量の画像データの取得に失敗した場合は待機状態となり、前記単位データ量の画像データの取得に成功した場合は該取得した画像データを用いて予め定められた画像処理を実行し、該画像処理を経た画像データ又は該画像処理の処理結果を後段へ出力して書き込む機能を各々備え、実行する画像処理の種類又は内容が互いに異なる複数種の画像処理手段の中から選択された複数の画像処理手段であって、対応するプログラムが並列に実行されることによって並列に動作する複数の画像処理手段と、
前段に連結された画像処理手段から出力された画像データが書き込まれると共に、後段に連結された画像処理手段により該書き込まれた画像データが読み出される記憶領域を備え、前記記憶領域に書き込まれたデータ量が、前記連結された画像処理手段の各々に応じて定まるデータ量となった場合に、前記後段に連結された画像処理手段が起動するように制御する記憶処理手段と、
が、前記画像処理手段と前記記憶処理手段とが交互に存在するように、前記画像処理手段及び前記記憶処理手段がパイプライン形態又は有向非循環グラフ形態で連結されて構築された画像処理部
として実行させるためのプログラム。
【請求項１】
待機状態から起動した後は前段から単位データ量の画像データの取得を試行することを前記単位データ量の画像データの取得が失敗するまで繰り返し、前記単位データ量の画像データの取得に失敗した場合は待機状態となり、前記単位データ量の画像データの取得に成功した場合は該取得した画像データを用いて予め定められた画像処理を実行し、該画像処理を経た画像データ又は該画像処理の処理結果を後段へ出力して書き込む機能を各々備え、実行する画像処理の種類又は内容が互いに異なる複数種の画像処理手段の中から選択された複数の画像処理手段であって、対応するプログラムが並列に実行されることによって並列に動作する複数の画像処理手段と、
前段に連結された画像処理手段から出力された画像データが書き込まれると共に、後段に連結された画像処理手段により該書き込まれた画像データが読み出される記憶領域を備え、前記記憶領域に書き込まれたデータ量が、前記連結された画像処理手段の各々に応じて定まるデータ量となった場合に、前記後段に連結された画像処理手段が起動するように制御する記憶処理手段と、
が、少なくとも前記画像処理手段と前記記憶処理手段とが交互に存在するように、前記画像処理手段及び前記記憶処理手段がパイプライン形態又は有向非循環グラフ形態で連結されて構築された画像処理部を備えた画像処理装置。
【請求項２】
前記記憶処理手段は、前記記憶領域に書き込まれたデータ量が、前記連結された画像処理手段による画像処理において単位処理毎に処理される単位処理データ量、前記連結された画像処理手段による画像処理の単位処理に要する時間、前記連結された画像処理手段の数、及び前記後段に連結された画像処理手段による画像処理の処理対象となる画像データが表す画像の大きさ、の少なくとも１つに応じて定まるデータ量となった場合に、前記後段に連結された画像処理手段が起動するように制御する
請求項１に記載の画像処理装置。
【請求項３】
請求項１又は請求項２に記載の画像処理装置と、
前記画像処理装置で画像処理された画像データに基づいて画像を形成する画像形成手段と、
を備えた画像形成装置。
【請求項４】
コンピュータを、
待機状態から起動した後は前段から単位データ量の画像データの取得を試行することを前記単位データ量の画像データの取得が失敗するまで繰り返し、前記単位データ量の画像データの取得に失敗した場合は待機状態となり、前記単位データ量の画像データの取得に成功した場合は該取得した画像データを用いて予め定められた画像処理を実行し、該画像処理を経た画像データ又は該画像処理の処理結果を後段へ出力して書き込む機能を各々備え、実行する画像処理の種類又は内容が互いに異なる複数種の画像処理手段の中から選択された複数の画像処理手段であって、対応するプログラムが並列に実行されることによって並列に動作する複数の画像処理手段と、
前段に連結された画像処理手段から出力された画像データが書き込まれると共に、後段に連結された画像処理手段により該書き込まれた画像データが読み出される記憶領域を備え、前記記憶領域に書き込まれたデータ量が、前記連結された画像処理手段の各々に応じて定まるデータ量となった場合に、前記後段に連結された画像処理手段が起動するように制御する記憶処理手段と、
が、前記画像処理手段と前記記憶処理手段とが交互に存在するように、前記画像処理手段及び前記記憶処理手段がパイプライン形態又は有向非循環グラフ形態で連結されて構築された画像処理部
として実行させるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【公開番号】特開２０１１−１１３４１２（Ｐ２０１１−１１３４１２Ａ）
【公開日】平成２３年６月９日（２０１１．６．９）
【国際特許分類】
【出願番号】特願２００９−２７０６８９（Ｐ２００９−２７０６８９）
【出願日】平成２１年１１月２７日（２００９．１１．２７）
【出願人】（０００００５４９６）富士ゼロックス株式会社 (21,908)
【Ｆターム（参考）】
【公開日】平成２３年６月９日（２０１１．６．９）
【国際特許分類】
【出願日】平成２１年１１月２７日（２００９．１１．２７）
【出願人】（０００００５４９６）富士ゼロックス株式会社 (21,908)
【Ｆターム（参考）】
[ Back to top ]