画像処理装置及び画像処理方法
【課題】アップコンバート前の元画像の解像度を高精度に判定する。
【解決手段】本発明の画像処理装置１００は、スケーリングされた画像を取得し、設定された再スケーリング率で前記画像を再スケーリングする再スケーリング部１０２と、再スケーリング後の画像からブロックサイズを検出するブロック境界情報検出部１０４と、指定された再スケーリング率とブロック境界情報検出部１０４で検出されたブロックサイズとに基づいて、スケーリングされる前の元画像のフォーマットを推定する推定処理部１２２と、推定処理部１２２で推定された元画像のフォーマットに基づいて画像処理を行う画像処理部１１０と、を備える。
【解決手段】本発明の画像処理装置１００は、スケーリングされた画像を取得し、設定された再スケーリング率で前記画像を再スケーリングする再スケーリング部１０２と、再スケーリング後の画像からブロックサイズを検出するブロック境界情報検出部１０４と、指定された再スケーリング率とブロック境界情報検出部１０４で検出されたブロックサイズとに基づいて、スケーリングされる前の元画像のフォーマットを推定する推定処理部１２２と、推定処理部１２２で推定された元画像のフォーマットに基づいて画像処理を行う画像処理部１１０と、を備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置及び画像処理方法に関する。
【背景技術】
【０００２】
近時においては、例えばテレビ受像機（ＴＶ）等の映像処理において、「オート」、「インテリジェント」などのメニュー項目で示されるような、自動で画質を制御する機能が普及している。
【０００３】
また、例えば下記の特許文献１には、任意の倍率でスケーリングが行われた場合に、ブロックサイズ及びブロック境界を高精度に検出する技術が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１０−１１０９４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
自動画質制御では、映像に付随する情報や、映像信号を解析した結果によって画質制御処理を適したモードや設定に動的に変更するなどして映像シーンに最適な制御が行われる。例えばスポーツ、シネマ、アニメなどのコンテンツの種類に応じて画質処理設定を最適化したり、映像信号の輝度分布によってコントラスト処理を制御する。また、映像の周波数分布状態によってシャープネス等の信号強調処理設定を変える制御を行なう。
【０００６】
これらの動的な画質処理制御において、画像の解像度は重要な要素となる。しかし、例えば水平方向１９２０画素（ｄｏｔ）×垂直方向１０８０画素（ｄｏｔ）の解像度の大画面ＴＶなどにおいて、入力されている映像が１９２０画素×１０８０画素の解像度で作成されたものとは限らない。例えば、ＤＶＤプレイヤーが４８０ｉフォーマット(水平７２０画素、垂直４８０画素のインタレース映像)をアップコンバートして１９２０画素×１０８０画素の解像度のプログレッシブ映像としてＴＶの外部入力に入力する場合等が考えられる。
【０００７】
また、録画機器では、３５２画素×２４０画素の低解像度でデータ容量を抑えるものがあったり、コンテンツによってはオーサリングの過程でＤＶＤやブルーレイディスク（Ｂｌｕ−ｒａｙＤｉｓｋ）であっても、元画像の解像度は様々なものが混入していることがある。これらがＨＤＭＩやＣｏｍｐｏｎｅｎｔなどの外部入力として画像処理装置に入力された場合、元画像の解像度を判別または推定することは困難である。
【０００８】
そして、これらのアップコンバートされた映像がＴＶへ入力されると、周波数特性が異なることにより、シャープネス等の画像処理が効果的に機能しなかったり、ブロックノイズが拡大されたりする。このため、ブロックノイズリダクションなどの機能の効果が減少してしまうなどの問題が生じる。
【０００９】
また、映像の周波数特性などを解析し、最適な画質制御を行なうテレビ受像機等も知られているが、映像の変動が激しいシーンや、異なる周波数特性の映像信号が混在しているようなシーンでは分析が困難なケースがある。
【００１０】
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、元画像の解像度を高精度に判定することが可能な、新規かつ改良された画像処理装置及び画像処理方法を提供することにある。
【課題を解決するための手段】
【００１１】
上記課題を解決するために、本発明のある観点によれば、スケーリングされた画像を取得し、設定された再スケーリング率で前記画像を再スケーリングする再スケーリング部と、前記再スケーリング後の画像からブロックサイズを検出するブロック境界情報検出部と、前記再スケーリング率と前記ブロック境界情報検出部で検出されたブロックサイズとに基づいて、スケーリングされる前の元画像のフォーマットを推定する推定処理部と、前記推定処理部で推定された前記元画像のフォーマットに基づいて画像処理を行う画像処理部と、を備える画像処理装置が提供される。
【００１２】
また、前記再スケーリング率を設定するとともに、前記ブロック境界検出部で前記ブロックサイズが検出されなかった場合は、前記再スケーリング率を再設定する制御部を備えるものであってもよい。
【００１３】
また、前記ブロック境界情報検出部は、前記再スケーリング後の画像のブロックノイズのサイズから前記ブロックサイズを検出するものであってもよい。
【００１４】
また、前記ブロック境界情報検出部は、デジタル放送規格を含む伝送用のフォーマット又はディスク状記録媒体の記録フォーマットに基づいて前記ブロックサイズを検出するものであってもよい。
【００１５】
また、前記画像処理部は、前記元画像のフォーマットに基づいてシャープネス処理又はブロックノイズリダクション処理を行うものであってもよい。
【００１６】
また、上記課題を解決するために、本発明の別の観点によれば、スケーリングされた画像を取得し、設定された再スケーリング率で前記画像を再スケーリングするステップと、前記再スケーリング後の画像からブロックサイズを検出するステップと、前記ブロックサイズが検出された場合、前記再スケーリング率と前記ブロック境界情報検出部で検出されたブロックサイズとに基づいて、スケーリングされる前の元画像のフォーマットを推定するステップと、前記推定された前記元画像のフォーマットに基づいて画像処理を行うステップと、を備える画像処理方法が提供される。
【００１７】
また、前記ブロックサイズが検出されなかった場合、前記再スケーリング率を再設定して前記画像を再スケーリングするステップを備えるものであってもよい。
【００１８】
また、前記ブロックサイズを検出するステップにおいて、前記再スケーリング後の画像のブロックノイズのサイズから前記ブロックサイズを検出するものであってもよい。
【００１９】
また、前記ブロックサイズを検出するステップにおいて、前記ブロック境界情報検出部は、デジタル放送規格を含む伝送用のフォーマット又はディスク状記録媒体の記録フォーマットに基づいて前記ブロックサイズを検出するものであってもよい。
【００２０】
また、前記画像処理を行うステップにおいて、前記元画像のフォーマットに基づいてシャープネス処理又はブロックノイズリダクション処理を行うものであってもよい。
【発明の効果】
【００２１】
本発明によれば、元画像の解像度を高精度に判定することが可能な画像処理装置及び画像処理方法を提供することができる。
【図面の簡単な説明】
【００２２】
【図１】本発明の一実施形態に係る画像処理装置の構成例を示す断面図である。
【図２】元画像の水平解像度と、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズ（水平画素数）と、元画像の入力例を示す模式図である。
【図３】図１の画像処理装置で行われる処理を示すフローチャートである。
【図４】再スケーリング部にて設定される再スケーリング率と、推定可能な水平解像度との関係を示す模式図である。
【図５】シャープネス処理（エッジ強調処理）を元画像のサイズに応じて変更する例を示す模式図である。
【発明を実施するための形態】
【００２３】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２４】
なお、説明は以下の順序で行うものとする。
１．画像処理装置の構成例
２．元画像の水平解像度と、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズとの関係について
３．画像処理装置における処理
４．各種画像処理部における画像処理の例
【００２５】
１．画像処理装置の構成例
まず、図１を参照して、本発明の一実施形態に係る画像処理装置１００の構成例について説明する。本実施形態では、上述した特許文献１の技術を用いて検出したＭＰＥＧ圧縮時に生じるブロックノイズのサイズを用いて、アップコンバートされている映像に対しても元画像フォーマット（解像度）を判定できるようにする。図１は、画像処理装置１００の構成を示すブロック図である。図１に示すように、画像処理装置１００は、再スケーリング部１０２、ブロック境界情報検出部１０４、検出情報補正部１０６、ブロックノイズ低減処理部１０８、各種画像処理部１１０、制御部１２０、推定処理部１２２を有して構成される。
【００２６】
画像処理装置１００の再スケーリング部１０２には、元画像を所定のスケーリング率でスケーリングすることにより解像度変換やＩＰ変換（インターレース−プログレッシブ変換）が行われた画像データ（以下、入力画像という）、が入力される。ここで、元画像は、ＢＳデジタル放送フォーマット、地上デジタル放送フォーマット等により規定された画像データである。また、元画像は、ブルーレイディスク、若しくはＤＶＤやＨＤＤなどの記録媒体に記録されている圧縮された記録信号が読み出されて、デコードされることにより得られた画像データである。
【００２７】
再スケーリング部１０２は、元画像に対して解像度変換やＩＰ変換などのスケーリングが行われた入力画像を取得する。再スケーリング部１０２は、制御部１２０から指定される再スケーリング率で入力画像を再度スケーリングし、入力画像のサイズおよび構造を、スケーリング前の元画像のサイズおよび構造に戻す。制御部１２０による再スケーリング率の設定については、後で詳細に説明する。そして、再スケーリング部１０２は、再度スケーリングを行うことにより得られた入力画像（以下、再スケーリング画像という）をブロック境界情報検出部１０４に供給する。
【００２８】
より詳細には、再スケーリング部１０２に入力される入力画像は、解像度変換やＩＰ変換が行われた元画像である。従って、図２に示すように、入力画像の垂直方向のブロックサイズ（以下、垂直ブロックサイズという）は、元画像の解像度、エンコード時の条件、およびＩＰ変換の有無によって変化する。
【００２９】
ブロック境界情報検出部１０４は、再スケーリング部１０２から供給された再スケーリング画像から、デコード前にエンコードされていた状態におけるＤＣＴ（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）処理される単位であるブロックサイズ、ブロック境界位置、および信頼度を検出する。そして、ブロック境界情報検出部１０４は、検出されたブロックサイズと信頼度をブロックサイズ情報として検出情報補正部１０６に供給するとともに、ブロック境界位置の情報をブロック境界位置情報として検出情報補正部１０６に供給する。
【００３０】
ブロック境界情報検出部１０４におけるブロックサイズの検出は、特許文献１に記載されている方法と同様に行うことができる。ここでは、注目画素と注目画素の水平方向に隣接する複数の画素の画素値を用い、画素値のピークを判定することによってブロックサイズを検出する。例えば、ブロックノイズが、最初のピークとして検出される位置から８画素毎に検出される場合、水平ブロックサイズが８画素の画像がブロック境界情報判定部１０４に入力されたものと判断できる。
【００３１】
検出情報補正部１０６は、入力画像とともに画像処理装置１００に入力されたスケーリング率に基づいて、ブロック境界情報検出部１０４からの情報が表すブロックサイズとブロック境界位置を補正する。そして、検出情報補正部１０６は、補正後のブロックサイズ情報およびブロック境界位置情報を、入力画像のブロックサイズ情報およびブロック境界位置情報としてブロックノイズ低減処理部１０８に供給する。
【００３２】
ブロックノイズ低減処理部１０８は、検出情報補正部１０６より供給されてくるブロックサイズ情報およびブロック境界位置情報に基づいて、入力画像に対するブロックノイズ低減処理の強度を適応的に変化させて、入力画像のブロックノイズを低減する。そして、ブロックノイズ低減処理部１０８は、ブロックノイズを低減したブロックノイズ低減処理画像を出力画像として出力する。
【００３３】
なお、再スケーリング部１０２、ブロック境界情報検出部１０４、検出情報補正部１０６、及びブロックノイズ低減処理部１０８における基本的な処理は、前述した特許文献１と同様である。
【００３４】
一般的に、ＭＰＥＧ圧縮におけるブロックノイズは、圧縮の単位であるマクロブロックサイズ単位で発生し、通常、８×８画素（ｄｏｔ）のサイズとなる。このため、デコード直後の映像内のブロックサイズは８×８画素であり、１９２０画素×１０８０画素の解像度で収録されたブルーレイディスク（Ｂｌｕ−ｒａｙ Ｄｉｓｋ）映像をフルＨＤ（ＦｕｌｌＨＤ：１９２０画素×１０８０画素の解像度)のテレビ受像機（ＴＶ）に表示した場合、内部の映像信号処理過程においてもブロックサイズは８×８画素のままである。このため、そのブロック境界を平滑化するなどしてブロックノイズリダクション処理を行なうことができる。
【００３５】
一方、拡大された映像が画像処理装置１００に入力されると、ブロックサイズが変わってしまい、効果的なブロックノイズリダクションを行うことができない。このため、特許文献１に記載された技術では、図１に示すように、ブロック境界情報検出部１０４の前段に再スケーリング部１０２を設けている。そして、様々な縮小率で画像を縮小した状態でブロック境界を検出することで、アップコンバートされた映像でもブロック境界を検出できるようにしている。
【００３６】
２．元画像の水平解像度と、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズとの関係について
本実施形態では、特許文献１の技術を利用して、アップコンバートされた映像の元フォーマット（解像度）を判定する。図２は、元画像の水平解像度と、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズ（水平画素数）と、元画像の入力例を示す模式図である。
【００３７】
図２に示すように、ＢＳデジタル放送フォーマット、ブルーレイディスクからデコードされた映像等においては、元画像の水平解像度は１９２０画素であるため、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズ（水平画素数）は“８”である。また、地上デジタル放送フォーマット等においては、水平解像度は１４４０画素であるため、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズ（水平画素数）は“１０．６７”である。
【００３８】
同様に、元画像の水平解像度が１２８０画素の場合、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズ（水平画素数）は“１２”であり、元画像の水平解像度が７２０画素の場合、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズ（水平画素数）は“２１．３”である。また、元画像の水平解像度が６４０画素の場合、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズ（水平画素数）は“２４”であり、元画像の水平解像度が５４４画素の場合、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズ（水平画素数）は“２８．２３”である。従って、 ブロック境界情報検出部１０４がこれらのマクロブロックサイズを検出する機能を備えることで、元画像の解像度（元画像のフォーマット）を検出することが可能である。
【００３９】
３．画像処理装置における処理
以下、図１及び図３に基づいて処理の詳細について説明する。図３は、図１の画像処理装置１００で行われる処理を示すフローチャートである。先ず、ステップＳ１０では、制御部１２０が再スケーリング部１０２に対して、アップコンバートされる可能性のある元の解像度まで入力画像を縮小するため、再スケーリング率を設定する。処理の初期段階では、再スケーリング率として複数の選択肢が考えられるが、対応すべきフォーマット、地域などから使用される可能性のある放送規格を選択するなどして優先順位を与え、複数の再スケーリング率を順次に設定する。ここで選択する再スケーリング率については、ブロック境界情報検出部１０４で検出できるブロックサイズに依存する。
【００４０】
図４は、再スケーリング部１０２にて設定される再スケーリング率と、推定可能な水平解像度との関係を示す模式図である。ここでは、一例として、水平解像度を用いて判定を行うものとし、ブロック境界情報検出部１０４で検出できるブロックサイズが“８”であるものとする。この場合、再スケーリング率を１／１．０倍の縮小率とすると、１９２０画素の解像度を検出することができる。また、再スケーリング率を１／１．３３倍、１／１．５倍の縮小率とすると、それぞれ１４４０画素の解像度、１２８０画素の解像度を検出することができる。他の解像度（＝ｘ）でブロック境界を検出するためには、再スケーリング率をｘ／１９２０倍に指定する。
【００４１】
ステップＳ１２において、制御部１２０は、再スケーリング率を図４に示す１／１．０倍、１／１．３３倍、１／１．５倍、１／２．０倍の縮小率に順次設定する。ここでは、最初に１／１．０倍に設定するものとする。
【００４２】
次に、ステップＳ１４では、ブロック境界情報検出部１０４よりブロック境界情報を取得する。この時点でブロック境界が検出できていなければステップＳ１２に戻り、他の可能性のある解像度に縮小するスケーリング率を再スケーリング部１０２に再び設定しなおす。例えば、元画像の解像度が１４４０画素の場合、再スケーリング率を１／１．０倍に設定すると、ブロック境界情報検出部１０４において、水平ブロックサイズが“１０．６７”となる。このとき、ブロック境界情報検出部１０４で検出できるブロックサイズが“８”の場合、ブロック境界を検出することができない。従って、この場合は、ステップＳ１０に戻り、制御部１２０によって再スケーリング率が１／１．３３倍に設定される。
【００４３】
一方、ステップＳ１２において、ブロック境界情報検出部１０４よりブロック境界情報を取得し、ブロック境界が検出できている場合は、更に「ブロック境界サイズ」を取得する。例えば、元画像の解像度が１４４０画素の場合、再スケーリング率が１／１．３３倍に設定された状態では、水平ブロックサイズが“８”となり、ブロック境界情報検出部１０４ではブロック境界を検出できる。従って、推定処理部１２２は、ブロック境界情報検出部１０４より水平ブロックサイズ（ブロック境界サイズ）“８”を取得する。取得されたブロックサイズ
“８”は、推定処理部１２２へ送られる。
【００４４】
このように、ブロック境界が検出できるまで、ステップＳ１０、ステップＳ１２の処理を繰り返す。ブロック境界が検出できた場合、再スケーリング画像に対して検出情報補正部１０６、ブロックノイズ低減処理部１０８による処理が行われる。この際、ブロックノイズリダクション処理としては、特許文献１に記載されている通りに、検出情報補正部１０８以降の後段の処理を続行し、検出できたブロック境界情報に従ってブロックノイズリダクション処理を行なう。
【００４５】
ステップＳ１２でブロック境界が検出されると、ステップＳ１４へ進む。ステップＳ１４では、推定処理部１２２において、現在の「再スケーリング率」と、検出された「ブロック境界サイズ」からアップコンバート前の画像フォーマットを推定する。例えば、現在の再スケーリング率が１／１．３３倍であり、水平ブロックサイズが“８”と検出された場合、図４に基づいて、アップコンバート前の元画像の水平解像度が“１４４０”と推定される。また、現在の再スケーリング率が１／１．５倍であり、水平ブロックサイズが“８”と検出された場合、図４に基づいて、アップコンバート前の元画像の水平解像度が“１２８０”と推定される。
【００４６】
ステップＳ１４の後はステップＳ１６へ進む。ステップＳ１６では、各種画像処理部１１０に対して、推定したアップコンバート前の画像フォーマットが、入力画像としてアップコンバートされているものとして、最適な画像処理を行なう。推定処理部１２２は、制御部１２０の制御により、推定した元画像の水平解像度を各種画像処理部１１０へ送る。これにより、元画像の解像度に基づいて、各種画像処理部１１０の処理内容に応じた様々な制御を最適に行うことができる。例えば、各種画像処理部１０がシャープネス処理を行う場合は、周波数特性にアップコンバートの影響を加味してフィルタ係数や処理モードを切り替える処理を行うことができる。また、ブロックノイズリダクション処理としては、拡大したブロックサイズを考慮した処理を行なうことができる。また低減しにくくなったブロックノイズを強調しないようシャープネスを弱めたりするようなことが可能である。
【００４７】
上述した例では、ブロック境界情報検出部１０４で検出できるブロックサイズが“８”である場合について説明したが、ブロック境界情報検出部１０４で検出できるブロックサイズがより多い場合は、より多くの水平解像度のフォーマットを判定することができる。
【００４８】
例えば、ブロック境界情報検出部１０４がブロックサイズ“８”に加えてブロックサイズ“２１．３３”も検出できる場合は、より多くの水平解像度のフォーマットを判定することができる。この場合、図４に示すように、再スケーリング率を１／１．０倍に設定することで、ブロックサイズ“８”を検出した場合は元画像の水平解像度が“１９２０”であると判定できる。また、ブロックサイズ“２１．３３”を検出した場合は元画像の水平解像度が“７２０”であると判定できる。また、再スケーリング率を１／１．３３倍に設定することで、ブロックサイズ“８”を検出した場合は元画像の水平解像度が“１４４０”であると判定でき、ブロックサイズ“２１．３３”を検出した場合は元画像の水平解像度が“５４０”であると判定できる。また、再スケーリング率を１／１．５倍に設定することで、ブロックサイズ“８”を検出した場合は元画像の水平解像度が“１２８０”であると判定できる。また、再スケーリング率を１／２．０倍に設定することで、ブロックサイズ“２１．３３”を検出した場合は元画像の水平解像度が“３６０”であると判定できる。従って、この場合、元画像の水平解像度が“１９２０”,“１４４０”，“１２８０”，“７２０”，“５４０”，“３６０”の６通りのフォーマットに対応することができる。
【００４９】
より多くのブロックサイズを検出可能とするためには、ハードウェア、ソフトウェア（ＨＷ／ＳＷ）の実装のために製造コストの上昇が想定される。また、ステップＳ１０、ステップＳ１２の処理を繰り返すことにより、元画像のフォーマットを検出までの時間が長くなり、検出速度が低下する。このため、画像処理装置１００が推定できるように対応したいフォーマットと検出速度とを考慮して、ブロック境界情報検出部１０４が検出可能なブロックサイズを決定する。ここで、検出速度は、再スケーリング部１０２における再スケーリング率の設定処理と、ブロック境界情報検出部１０４及び推定処理部１２２におけるブロック境界検出の探索処理（ステップＳ１０，Ｓ１２）とに応じて定めることができる。
【００５０】
４．各種画像処理部における画像処理の例
図５は、シャープネス処理を元画像のサイズに応じて変更する例を示している。アップコンバートされた画像では、元画像のサイズが小さいほど画像がボケる傾向がある。このため、図５に示すように、元画像のサイズが小さいほど例えばエッジ強調の強度を強くしたり、信号の周波数特性に応じたフィルタ処理を選択することで高画質化を行うことが可能である。
【００５１】
このように、アップコンバート前の元画像の画像フォーマットを推定することで、最適な高画質化処理を行なうことができる。ブロックノイズは画面全体に規則性をもって現れるため、元画像のフォーマットを検出することで、画像処理の信頼度を大幅に高めることができる。また、画像の周波数解析などの結果と合わせることで、より精度の高い映像フォーマットの推定が可能となる。
【００５２】
以上説明したように本実施形態によれば、アップコンバートされた映像であっても元画像フォーマットを推定することができる。そして、推定したアップコンバート前の画像フォーマットに基づいて、各種高画質化処理において最適な制御を行なうことが可能となる。従って、元画像のフォーマットに応じた最適な処理を行うことで、より高画質の画像を得ることが可能となる。
【００５３】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【符号の説明】
【００５４】
１００ 画像処理装置
１０２ 再スケーリング部
１０４ ブロック境界情報検出部
１１０ 各種画像処理部
１２０ 制御部
１２２ 推定処理部
【技術分野】
【０００１】
本発明は、画像処理装置及び画像処理方法に関する。
【背景技術】
【０００２】
近時においては、例えばテレビ受像機（ＴＶ）等の映像処理において、「オート」、「インテリジェント」などのメニュー項目で示されるような、自動で画質を制御する機能が普及している。
【０００３】
また、例えば下記の特許文献１には、任意の倍率でスケーリングが行われた場合に、ブロックサイズ及びブロック境界を高精度に検出する技術が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１０−１１０９４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
自動画質制御では、映像に付随する情報や、映像信号を解析した結果によって画質制御処理を適したモードや設定に動的に変更するなどして映像シーンに最適な制御が行われる。例えばスポーツ、シネマ、アニメなどのコンテンツの種類に応じて画質処理設定を最適化したり、映像信号の輝度分布によってコントラスト処理を制御する。また、映像の周波数分布状態によってシャープネス等の信号強調処理設定を変える制御を行なう。
【０００６】
これらの動的な画質処理制御において、画像の解像度は重要な要素となる。しかし、例えば水平方向１９２０画素（ｄｏｔ）×垂直方向１０８０画素（ｄｏｔ）の解像度の大画面ＴＶなどにおいて、入力されている映像が１９２０画素×１０８０画素の解像度で作成されたものとは限らない。例えば、ＤＶＤプレイヤーが４８０ｉフォーマット(水平７２０画素、垂直４８０画素のインタレース映像)をアップコンバートして１９２０画素×１０８０画素の解像度のプログレッシブ映像としてＴＶの外部入力に入力する場合等が考えられる。
【０００７】
また、録画機器では、３５２画素×２４０画素の低解像度でデータ容量を抑えるものがあったり、コンテンツによってはオーサリングの過程でＤＶＤやブルーレイディスク（Ｂｌｕ−ｒａｙＤｉｓｋ）であっても、元画像の解像度は様々なものが混入していることがある。これらがＨＤＭＩやＣｏｍｐｏｎｅｎｔなどの外部入力として画像処理装置に入力された場合、元画像の解像度を判別または推定することは困難である。
【０００８】
そして、これらのアップコンバートされた映像がＴＶへ入力されると、周波数特性が異なることにより、シャープネス等の画像処理が効果的に機能しなかったり、ブロックノイズが拡大されたりする。このため、ブロックノイズリダクションなどの機能の効果が減少してしまうなどの問題が生じる。
【０００９】
また、映像の周波数特性などを解析し、最適な画質制御を行なうテレビ受像機等も知られているが、映像の変動が激しいシーンや、異なる周波数特性の映像信号が混在しているようなシーンでは分析が困難なケースがある。
【００１０】
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、元画像の解像度を高精度に判定することが可能な、新規かつ改良された画像処理装置及び画像処理方法を提供することにある。
【課題を解決するための手段】
【００１１】
上記課題を解決するために、本発明のある観点によれば、スケーリングされた画像を取得し、設定された再スケーリング率で前記画像を再スケーリングする再スケーリング部と、前記再スケーリング後の画像からブロックサイズを検出するブロック境界情報検出部と、前記再スケーリング率と前記ブロック境界情報検出部で検出されたブロックサイズとに基づいて、スケーリングされる前の元画像のフォーマットを推定する推定処理部と、前記推定処理部で推定された前記元画像のフォーマットに基づいて画像処理を行う画像処理部と、を備える画像処理装置が提供される。
【００１２】
また、前記再スケーリング率を設定するとともに、前記ブロック境界検出部で前記ブロックサイズが検出されなかった場合は、前記再スケーリング率を再設定する制御部を備えるものであってもよい。
【００１３】
また、前記ブロック境界情報検出部は、前記再スケーリング後の画像のブロックノイズのサイズから前記ブロックサイズを検出するものであってもよい。
【００１４】
また、前記ブロック境界情報検出部は、デジタル放送規格を含む伝送用のフォーマット又はディスク状記録媒体の記録フォーマットに基づいて前記ブロックサイズを検出するものであってもよい。
【００１５】
また、前記画像処理部は、前記元画像のフォーマットに基づいてシャープネス処理又はブロックノイズリダクション処理を行うものであってもよい。
【００１６】
また、上記課題を解決するために、本発明の別の観点によれば、スケーリングされた画像を取得し、設定された再スケーリング率で前記画像を再スケーリングするステップと、前記再スケーリング後の画像からブロックサイズを検出するステップと、前記ブロックサイズが検出された場合、前記再スケーリング率と前記ブロック境界情報検出部で検出されたブロックサイズとに基づいて、スケーリングされる前の元画像のフォーマットを推定するステップと、前記推定された前記元画像のフォーマットに基づいて画像処理を行うステップと、を備える画像処理方法が提供される。
【００１７】
また、前記ブロックサイズが検出されなかった場合、前記再スケーリング率を再設定して前記画像を再スケーリングするステップを備えるものであってもよい。
【００１８】
また、前記ブロックサイズを検出するステップにおいて、前記再スケーリング後の画像のブロックノイズのサイズから前記ブロックサイズを検出するものであってもよい。
【００１９】
また、前記ブロックサイズを検出するステップにおいて、前記ブロック境界情報検出部は、デジタル放送規格を含む伝送用のフォーマット又はディスク状記録媒体の記録フォーマットに基づいて前記ブロックサイズを検出するものであってもよい。
【００２０】
また、前記画像処理を行うステップにおいて、前記元画像のフォーマットに基づいてシャープネス処理又はブロックノイズリダクション処理を行うものであってもよい。
【発明の効果】
【００２１】
本発明によれば、元画像の解像度を高精度に判定することが可能な画像処理装置及び画像処理方法を提供することができる。
【図面の簡単な説明】
【００２２】
【図１】本発明の一実施形態に係る画像処理装置の構成例を示す断面図である。
【図２】元画像の水平解像度と、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズ（水平画素数）と、元画像の入力例を示す模式図である。
【図３】図１の画像処理装置で行われる処理を示すフローチャートである。
【図４】再スケーリング部にて設定される再スケーリング率と、推定可能な水平解像度との関係を示す模式図である。
【図５】シャープネス処理（エッジ強調処理）を元画像のサイズに応じて変更する例を示す模式図である。
【発明を実施するための形態】
【００２３】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２４】
なお、説明は以下の順序で行うものとする。
１．画像処理装置の構成例
２．元画像の水平解像度と、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズとの関係について
３．画像処理装置における処理
４．各種画像処理部における画像処理の例
【００２５】
１．画像処理装置の構成例
まず、図１を参照して、本発明の一実施形態に係る画像処理装置１００の構成例について説明する。本実施形態では、上述した特許文献１の技術を用いて検出したＭＰＥＧ圧縮時に生じるブロックノイズのサイズを用いて、アップコンバートされている映像に対しても元画像フォーマット（解像度）を判定できるようにする。図１は、画像処理装置１００の構成を示すブロック図である。図１に示すように、画像処理装置１００は、再スケーリング部１０２、ブロック境界情報検出部１０４、検出情報補正部１０６、ブロックノイズ低減処理部１０８、各種画像処理部１１０、制御部１２０、推定処理部１２２を有して構成される。
【００２６】
画像処理装置１００の再スケーリング部１０２には、元画像を所定のスケーリング率でスケーリングすることにより解像度変換やＩＰ変換（インターレース−プログレッシブ変換）が行われた画像データ（以下、入力画像という）、が入力される。ここで、元画像は、ＢＳデジタル放送フォーマット、地上デジタル放送フォーマット等により規定された画像データである。また、元画像は、ブルーレイディスク、若しくはＤＶＤやＨＤＤなどの記録媒体に記録されている圧縮された記録信号が読み出されて、デコードされることにより得られた画像データである。
【００２７】
再スケーリング部１０２は、元画像に対して解像度変換やＩＰ変換などのスケーリングが行われた入力画像を取得する。再スケーリング部１０２は、制御部１２０から指定される再スケーリング率で入力画像を再度スケーリングし、入力画像のサイズおよび構造を、スケーリング前の元画像のサイズおよび構造に戻す。制御部１２０による再スケーリング率の設定については、後で詳細に説明する。そして、再スケーリング部１０２は、再度スケーリングを行うことにより得られた入力画像（以下、再スケーリング画像という）をブロック境界情報検出部１０４に供給する。
【００２８】
より詳細には、再スケーリング部１０２に入力される入力画像は、解像度変換やＩＰ変換が行われた元画像である。従って、図２に示すように、入力画像の垂直方向のブロックサイズ（以下、垂直ブロックサイズという）は、元画像の解像度、エンコード時の条件、およびＩＰ変換の有無によって変化する。
【００２９】
ブロック境界情報検出部１０４は、再スケーリング部１０２から供給された再スケーリング画像から、デコード前にエンコードされていた状態におけるＤＣＴ（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）処理される単位であるブロックサイズ、ブロック境界位置、および信頼度を検出する。そして、ブロック境界情報検出部１０４は、検出されたブロックサイズと信頼度をブロックサイズ情報として検出情報補正部１０６に供給するとともに、ブロック境界位置の情報をブロック境界位置情報として検出情報補正部１０６に供給する。
【００３０】
ブロック境界情報検出部１０４におけるブロックサイズの検出は、特許文献１に記載されている方法と同様に行うことができる。ここでは、注目画素と注目画素の水平方向に隣接する複数の画素の画素値を用い、画素値のピークを判定することによってブロックサイズを検出する。例えば、ブロックノイズが、最初のピークとして検出される位置から８画素毎に検出される場合、水平ブロックサイズが８画素の画像がブロック境界情報判定部１０４に入力されたものと判断できる。
【００３１】
検出情報補正部１０６は、入力画像とともに画像処理装置１００に入力されたスケーリング率に基づいて、ブロック境界情報検出部１０４からの情報が表すブロックサイズとブロック境界位置を補正する。そして、検出情報補正部１０６は、補正後のブロックサイズ情報およびブロック境界位置情報を、入力画像のブロックサイズ情報およびブロック境界位置情報としてブロックノイズ低減処理部１０８に供給する。
【００３２】
ブロックノイズ低減処理部１０８は、検出情報補正部１０６より供給されてくるブロックサイズ情報およびブロック境界位置情報に基づいて、入力画像に対するブロックノイズ低減処理の強度を適応的に変化させて、入力画像のブロックノイズを低減する。そして、ブロックノイズ低減処理部１０８は、ブロックノイズを低減したブロックノイズ低減処理画像を出力画像として出力する。
【００３３】
なお、再スケーリング部１０２、ブロック境界情報検出部１０４、検出情報補正部１０６、及びブロックノイズ低減処理部１０８における基本的な処理は、前述した特許文献１と同様である。
【００３４】
一般的に、ＭＰＥＧ圧縮におけるブロックノイズは、圧縮の単位であるマクロブロックサイズ単位で発生し、通常、８×８画素（ｄｏｔ）のサイズとなる。このため、デコード直後の映像内のブロックサイズは８×８画素であり、１９２０画素×１０８０画素の解像度で収録されたブルーレイディスク（Ｂｌｕ−ｒａｙ Ｄｉｓｋ）映像をフルＨＤ（ＦｕｌｌＨＤ：１９２０画素×１０８０画素の解像度)のテレビ受像機（ＴＶ）に表示した場合、内部の映像信号処理過程においてもブロックサイズは８×８画素のままである。このため、そのブロック境界を平滑化するなどしてブロックノイズリダクション処理を行なうことができる。
【００３５】
一方、拡大された映像が画像処理装置１００に入力されると、ブロックサイズが変わってしまい、効果的なブロックノイズリダクションを行うことができない。このため、特許文献１に記載された技術では、図１に示すように、ブロック境界情報検出部１０４の前段に再スケーリング部１０２を設けている。そして、様々な縮小率で画像を縮小した状態でブロック境界を検出することで、アップコンバートされた映像でもブロック境界を検出できるようにしている。
【００３６】
２．元画像の水平解像度と、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズとの関係について
本実施形態では、特許文献１の技術を利用して、アップコンバートされた映像の元フォーマット（解像度）を判定する。図２は、元画像の水平解像度と、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズ（水平画素数）と、元画像の入力例を示す模式図である。
【００３７】
図２に示すように、ＢＳデジタル放送フォーマット、ブルーレイディスクからデコードされた映像等においては、元画像の水平解像度は１９２０画素であるため、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズ（水平画素数）は“８”である。また、地上デジタル放送フォーマット等においては、水平解像度は１４４０画素であるため、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズ（水平画素数）は“１０．６７”である。
【００３８】
同様に、元画像の水平解像度が１２８０画素の場合、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズ（水平画素数）は“１２”であり、元画像の水平解像度が７２０画素の場合、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズ（水平画素数）は“２１．３”である。また、元画像の水平解像度が６４０画素の場合、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズ（水平画素数）は“２４”であり、元画像の水平解像度が５４４画素の場合、水平解像度を１９２０画素に拡大した場合のマクロブロックサイズ（水平画素数）は“２８．２３”である。従って、 ブロック境界情報検出部１０４がこれらのマクロブロックサイズを検出する機能を備えることで、元画像の解像度（元画像のフォーマット）を検出することが可能である。
【００３９】
３．画像処理装置における処理
以下、図１及び図３に基づいて処理の詳細について説明する。図３は、図１の画像処理装置１００で行われる処理を示すフローチャートである。先ず、ステップＳ１０では、制御部１２０が再スケーリング部１０２に対して、アップコンバートされる可能性のある元の解像度まで入力画像を縮小するため、再スケーリング率を設定する。処理の初期段階では、再スケーリング率として複数の選択肢が考えられるが、対応すべきフォーマット、地域などから使用される可能性のある放送規格を選択するなどして優先順位を与え、複数の再スケーリング率を順次に設定する。ここで選択する再スケーリング率については、ブロック境界情報検出部１０４で検出できるブロックサイズに依存する。
【００４０】
図４は、再スケーリング部１０２にて設定される再スケーリング率と、推定可能な水平解像度との関係を示す模式図である。ここでは、一例として、水平解像度を用いて判定を行うものとし、ブロック境界情報検出部１０４で検出できるブロックサイズが“８”であるものとする。この場合、再スケーリング率を１／１．０倍の縮小率とすると、１９２０画素の解像度を検出することができる。また、再スケーリング率を１／１．３３倍、１／１．５倍の縮小率とすると、それぞれ１４４０画素の解像度、１２８０画素の解像度を検出することができる。他の解像度（＝ｘ）でブロック境界を検出するためには、再スケーリング率をｘ／１９２０倍に指定する。
【００４１】
ステップＳ１２において、制御部１２０は、再スケーリング率を図４に示す１／１．０倍、１／１．３３倍、１／１．５倍、１／２．０倍の縮小率に順次設定する。ここでは、最初に１／１．０倍に設定するものとする。
【００４２】
次に、ステップＳ１４では、ブロック境界情報検出部１０４よりブロック境界情報を取得する。この時点でブロック境界が検出できていなければステップＳ１２に戻り、他の可能性のある解像度に縮小するスケーリング率を再スケーリング部１０２に再び設定しなおす。例えば、元画像の解像度が１４４０画素の場合、再スケーリング率を１／１．０倍に設定すると、ブロック境界情報検出部１０４において、水平ブロックサイズが“１０．６７”となる。このとき、ブロック境界情報検出部１０４で検出できるブロックサイズが“８”の場合、ブロック境界を検出することができない。従って、この場合は、ステップＳ１０に戻り、制御部１２０によって再スケーリング率が１／１．３３倍に設定される。
【００４３】
一方、ステップＳ１２において、ブロック境界情報検出部１０４よりブロック境界情報を取得し、ブロック境界が検出できている場合は、更に「ブロック境界サイズ」を取得する。例えば、元画像の解像度が１４４０画素の場合、再スケーリング率が１／１．３３倍に設定された状態では、水平ブロックサイズが“８”となり、ブロック境界情報検出部１０４ではブロック境界を検出できる。従って、推定処理部１２２は、ブロック境界情報検出部１０４より水平ブロックサイズ（ブロック境界サイズ）“８”を取得する。取得されたブロックサイズ
“８”は、推定処理部１２２へ送られる。
【００４４】
このように、ブロック境界が検出できるまで、ステップＳ１０、ステップＳ１２の処理を繰り返す。ブロック境界が検出できた場合、再スケーリング画像に対して検出情報補正部１０６、ブロックノイズ低減処理部１０８による処理が行われる。この際、ブロックノイズリダクション処理としては、特許文献１に記載されている通りに、検出情報補正部１０８以降の後段の処理を続行し、検出できたブロック境界情報に従ってブロックノイズリダクション処理を行なう。
【００４５】
ステップＳ１２でブロック境界が検出されると、ステップＳ１４へ進む。ステップＳ１４では、推定処理部１２２において、現在の「再スケーリング率」と、検出された「ブロック境界サイズ」からアップコンバート前の画像フォーマットを推定する。例えば、現在の再スケーリング率が１／１．３３倍であり、水平ブロックサイズが“８”と検出された場合、図４に基づいて、アップコンバート前の元画像の水平解像度が“１４４０”と推定される。また、現在の再スケーリング率が１／１．５倍であり、水平ブロックサイズが“８”と検出された場合、図４に基づいて、アップコンバート前の元画像の水平解像度が“１２８０”と推定される。
【００４６】
ステップＳ１４の後はステップＳ１６へ進む。ステップＳ１６では、各種画像処理部１１０に対して、推定したアップコンバート前の画像フォーマットが、入力画像としてアップコンバートされているものとして、最適な画像処理を行なう。推定処理部１２２は、制御部１２０の制御により、推定した元画像の水平解像度を各種画像処理部１１０へ送る。これにより、元画像の解像度に基づいて、各種画像処理部１１０の処理内容に応じた様々な制御を最適に行うことができる。例えば、各種画像処理部１０がシャープネス処理を行う場合は、周波数特性にアップコンバートの影響を加味してフィルタ係数や処理モードを切り替える処理を行うことができる。また、ブロックノイズリダクション処理としては、拡大したブロックサイズを考慮した処理を行なうことができる。また低減しにくくなったブロックノイズを強調しないようシャープネスを弱めたりするようなことが可能である。
【００４７】
上述した例では、ブロック境界情報検出部１０４で検出できるブロックサイズが“８”である場合について説明したが、ブロック境界情報検出部１０４で検出できるブロックサイズがより多い場合は、より多くの水平解像度のフォーマットを判定することができる。
【００４８】
例えば、ブロック境界情報検出部１０４がブロックサイズ“８”に加えてブロックサイズ“２１．３３”も検出できる場合は、より多くの水平解像度のフォーマットを判定することができる。この場合、図４に示すように、再スケーリング率を１／１．０倍に設定することで、ブロックサイズ“８”を検出した場合は元画像の水平解像度が“１９２０”であると判定できる。また、ブロックサイズ“２１．３３”を検出した場合は元画像の水平解像度が“７２０”であると判定できる。また、再スケーリング率を１／１．３３倍に設定することで、ブロックサイズ“８”を検出した場合は元画像の水平解像度が“１４４０”であると判定でき、ブロックサイズ“２１．３３”を検出した場合は元画像の水平解像度が“５４０”であると判定できる。また、再スケーリング率を１／１．５倍に設定することで、ブロックサイズ“８”を検出した場合は元画像の水平解像度が“１２８０”であると判定できる。また、再スケーリング率を１／２．０倍に設定することで、ブロックサイズ“２１．３３”を検出した場合は元画像の水平解像度が“３６０”であると判定できる。従って、この場合、元画像の水平解像度が“１９２０”,“１４４０”，“１２８０”，“７２０”，“５４０”，“３６０”の６通りのフォーマットに対応することができる。
【００４９】
より多くのブロックサイズを検出可能とするためには、ハードウェア、ソフトウェア（ＨＷ／ＳＷ）の実装のために製造コストの上昇が想定される。また、ステップＳ１０、ステップＳ１２の処理を繰り返すことにより、元画像のフォーマットを検出までの時間が長くなり、検出速度が低下する。このため、画像処理装置１００が推定できるように対応したいフォーマットと検出速度とを考慮して、ブロック境界情報検出部１０４が検出可能なブロックサイズを決定する。ここで、検出速度は、再スケーリング部１０２における再スケーリング率の設定処理と、ブロック境界情報検出部１０４及び推定処理部１２２におけるブロック境界検出の探索処理（ステップＳ１０，Ｓ１２）とに応じて定めることができる。
【００５０】
４．各種画像処理部における画像処理の例
図５は、シャープネス処理を元画像のサイズに応じて変更する例を示している。アップコンバートされた画像では、元画像のサイズが小さいほど画像がボケる傾向がある。このため、図５に示すように、元画像のサイズが小さいほど例えばエッジ強調の強度を強くしたり、信号の周波数特性に応じたフィルタ処理を選択することで高画質化を行うことが可能である。
【００５１】
このように、アップコンバート前の元画像の画像フォーマットを推定することで、最適な高画質化処理を行なうことができる。ブロックノイズは画面全体に規則性をもって現れるため、元画像のフォーマットを検出することで、画像処理の信頼度を大幅に高めることができる。また、画像の周波数解析などの結果と合わせることで、より精度の高い映像フォーマットの推定が可能となる。
【００５２】
以上説明したように本実施形態によれば、アップコンバートされた映像であっても元画像フォーマットを推定することができる。そして、推定したアップコンバート前の画像フォーマットに基づいて、各種高画質化処理において最適な制御を行なうことが可能となる。従って、元画像のフォーマットに応じた最適な処理を行うことで、より高画質の画像を得ることが可能となる。
【００５３】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【符号の説明】
【００５４】
１００ 画像処理装置
１０２ 再スケーリング部
１０４ ブロック境界情報検出部
１１０ 各種画像処理部
１２０ 制御部
１２２ 推定処理部
【特許請求の範囲】
【請求項１】
スケーリングされた画像を取得し、設定された再スケーリング率で前記画像を再スケーリングする再スケーリング部と、
前記再スケーリング後の画像からブロックサイズを検出するブロック境界情報検出部と、
前記再スケーリング率と前記ブロック境界情報検出部で検出されたブロックサイズとに基づいて、スケーリングされる前の元画像のフォーマットを推定する推定処理部と、
前記推定処理部で推定された前記元画像のフォーマットに基づいて画像処理を行う画像処理部と、
を備える画像処理装置。
【請求項２】
前記再スケーリング率を設定するとともに、前記ブロック境界検出部で前記ブロックサイズが検出されなかった場合は、前記再スケーリング率を再設定する制御部を備える、請求項１に記載の画像処理装置。
【請求項３】
前記ブロック境界情報検出部は、前記再スケーリング後の画像のブロックノイズのサイズから前記ブロックサイズを検出する、請求項１に記載の画像処理装置。
【請求項４】
前記ブロック境界情報検出部は、デジタル放送規格を含む伝送用のフォーマット又はディスク状記録媒体の記録フォーマットに基づいて前記ブロックサイズを検出する、請求項１に記載の画像処理装置。
【請求項５】
前記画像処理部は、前記元画像のフォーマットに基づいてシャープネス処理又はブロックノイズリダクション処理を行う、請求項１に記載の画像処理装置。
【請求項６】
スケーリングされた画像を取得し、設定された再スケーリング率で前記画像を再スケーリングするステップと、
前記再スケーリング後の画像からブロックサイズを検出するステップと、
前記ブロックサイズが検出された場合、前記再スケーリング率と前記ブロック境界情報検出部で検出されたブロックサイズとに基づいて、スケーリングされる前の元画像のフォーマットを推定するステップと、
前記推定された前記元画像のフォーマットに基づいて画像処理を行うステップと、
を備える画像処理方法。
【請求項７】
前記ブロックサイズが検出されなかった場合、前記再スケーリング率を再設定して前記画像を再スケーリングするステップを備える、請求項６に記載の画像処理方法。
【請求項８】
前記ブロックサイズを検出するステップにおいて、前記再スケーリング後の画像のブロックノイズのサイズから前記ブロックサイズを検出する、請求項６に記載の画像処理方法。
【請求項９】
前記ブロックサイズを検出するステップにおいて、前記ブロック境界情報検出部は、デジタル放送規格を含む伝送用のフォーマット又はディスク状記録媒体の記録フォーマットに基づいて前記ブロックサイズを検出する、請求項６に記載の画像処理方法。
【請求項１０】
前記画像処理を行うステップにおいて、前記元画像のフォーマットに基づいてシャープネス処理又はブロックノイズリダクション処理を行う、請求項６に記載の画像処理方法。
【請求項１】
スケーリングされた画像を取得し、設定された再スケーリング率で前記画像を再スケーリングする再スケーリング部と、
前記再スケーリング後の画像からブロックサイズを検出するブロック境界情報検出部と、
前記再スケーリング率と前記ブロック境界情報検出部で検出されたブロックサイズとに基づいて、スケーリングされる前の元画像のフォーマットを推定する推定処理部と、
前記推定処理部で推定された前記元画像のフォーマットに基づいて画像処理を行う画像処理部と、
を備える画像処理装置。
【請求項２】
前記再スケーリング率を設定するとともに、前記ブロック境界検出部で前記ブロックサイズが検出されなかった場合は、前記再スケーリング率を再設定する制御部を備える、請求項１に記載の画像処理装置。
【請求項３】
前記ブロック境界情報検出部は、前記再スケーリング後の画像のブロックノイズのサイズから前記ブロックサイズを検出する、請求項１に記載の画像処理装置。
【請求項４】
前記ブロック境界情報検出部は、デジタル放送規格を含む伝送用のフォーマット又はディスク状記録媒体の記録フォーマットに基づいて前記ブロックサイズを検出する、請求項１に記載の画像処理装置。
【請求項５】
前記画像処理部は、前記元画像のフォーマットに基づいてシャープネス処理又はブロックノイズリダクション処理を行う、請求項１に記載の画像処理装置。
【請求項６】
スケーリングされた画像を取得し、設定された再スケーリング率で前記画像を再スケーリングするステップと、
前記再スケーリング後の画像からブロックサイズを検出するステップと、
前記ブロックサイズが検出された場合、前記再スケーリング率と前記ブロック境界情報検出部で検出されたブロックサイズとに基づいて、スケーリングされる前の元画像のフォーマットを推定するステップと、
前記推定された前記元画像のフォーマットに基づいて画像処理を行うステップと、
を備える画像処理方法。
【請求項７】
前記ブロックサイズが検出されなかった場合、前記再スケーリング率を再設定して前記画像を再スケーリングするステップを備える、請求項６に記載の画像処理方法。
【請求項８】
前記ブロックサイズを検出するステップにおいて、前記再スケーリング後の画像のブロックノイズのサイズから前記ブロックサイズを検出する、請求項６に記載の画像処理方法。
【請求項９】
前記ブロックサイズを検出するステップにおいて、前記ブロック境界情報検出部は、デジタル放送規格を含む伝送用のフォーマット又はディスク状記録媒体の記録フォーマットに基づいて前記ブロックサイズを検出する、請求項６に記載の画像処理方法。
【請求項１０】
前記画像処理を行うステップにおいて、前記元画像のフォーマットに基づいてシャープネス処理又はブロックノイズリダクション処理を行う、請求項６に記載の画像処理方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図２】
【図３】
【図４】
【図５】
【公開番号】特開２０１２−１９３８０（Ｐ２０１２−１９３８０Ａ）
【公開日】平成２４年１月２６日（２０１２．１．２６）
【国際特許分類】
【出願番号】特願２０１０−１５５５９９（Ｐ２０１０−１５５５９９）
【出願日】平成２２年７月８日（２０１０．７．８）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２４年１月２６日（２０１２．１．２６）
【国際特許分類】
【出願日】平成２２年７月８日（２０１０．７．８）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]