無線通信システム、送信機及び受信機
【課題】無線通信システムに係わり、無線通信環境に応じた受信側での表示映像等の品質低下を抑制または改善等できる技術を提供する。
【解決手段】本無線通信システムにおいて、送信機１００では、無線伝送路の混雑度（空き時間率）を検出し、その検出結果に応じて、受信機１１０へ伝送する映像データの符号化レートを変更する。また対応して、受信機１１０は、受信映像データに対し、画質改善処理（超解像処理など）を施すか否かを切り替え制御する。例えば、混雑時に送信側で低レートに変更して伝送したデータを、受信側で画質改善処理して表示する。
【解決手段】本無線通信システムにおいて、送信機１００では、無線伝送路の混雑度（空き時間率）を検出し、その検出結果に応じて、受信機１１０へ伝送する映像データの符号化レートを変更する。また対応して、受信機１１０は、受信映像データに対し、画質改善処理（超解像処理など）を施すか否かを切り替え制御する。例えば、混雑時に送信側で低レートに変更して伝送したデータを、受信側で画質改善処理して表示する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、無線により映像や音声等のデータ（信号）を伝送するシステム（無線通信システム）に関し、特に、映像レート制御や画像処理などに関する。
【背景技術】
【０００２】
無線ＬＡＮをはじめとした近距離無線通信システムは、インターネット接続の広がりと相俟ってオフィス等から家庭内に至るまで急速に普及が進んでいる。その用途も近年ではコンピュータ間のファイル転送に留まらず、ＡＶ機器を結んで映像や音声の配信に利用する需要が高まっている。
【０００３】
一方で、無線伝送時の伝送品質は、有線に比べ、通信環境（伝送路環境、周囲環境）による影響を大きく受けることが知られている。一般に高い伝送品質を必要とする映像や音声は、環境の影響により所望の品質での無線伝送が困難な場合がある。例えば、無線ＬＡＮなどで使われるアクセス方式であるＣＳＭＡ／ＣＡ（Carrier Sense Multiple Access / Collision Avoidance）を用いた場合、近隣で同種の機器が同じ周波数を使って動作すると、それが干渉となって働く。これにより無線伝送のスループットが大きく低下し、無線伝送後の映像や音声の品質に重大な支障をきたす。即ち、無線伝送品質（無線伝送路での干渉や混雑等）に由来して、受信映像における乱れや停止などの破綻が発生し、品質が大きく低下する。
【０００４】
こうした映像乱れ等の品質低下を抑えるための一つの方法として、以下のような技術（映像レート制御技術、第１の技術とする）が知られている。この技術では、変化する通信環境に合わせて、送信（伝送）する映像等のレート（圧縮率等）を変化させることにより、通信環境で実際に伝送するデータの量を調整する。これにより受信側での品質低下を抑制する。この技術では、特に、通信環境（無線伝送路状況）が悪い場合には（通信環境の悪化に応じて）、映像レート制御により、送信する映像データ（ストリームデータ）の圧縮率を高く（符号化レートを低く）して伝送する。これにより無線伝送路で伝送するデータ量を減少させる。また一方、通信環境が良好な場合には、当該映像データの圧縮率を低く（符号化レートを高く）して伝送する。
【０００５】
上記のような技術は、例えば、特開２００２−２０４２７８号公報（特許文献１）、特開２００４−１５３６１０号公報（特許文献２）に記載されている。
【０００６】
しかしながら、上記のような技術では、レートを低下させた映像データは、受信側（受信機）で当該映像を表示する際の品質（画質）も当然低下することとなり、視聴者の満足度を低下させることは否めない。
【０００７】
一方、低画質の画像から高画質の画像を得る技術として、超解像処理技術（第２の技術とする）が知られている。この技術は、時間軸又は空間軸上で近い条件の複数の低解像度の画像から１枚の高解像度の画像を合成して得るものである。この技術については、例えば特開平８−３３６０４６号公報（特許文献３）に記載されている。また、この技術の応用として、動画像（映像）データ中の複数のフレーム（画像）を用いて、より高画質のフレームのデータを得ることにより、動画像の高画質化を実現する方法が知られている。
【特許文献１】特開２００２−２０４２７８号公報
【特許文献２】特開２００４−１５３６１０号公報
【特許文献３】特開平８−３３６０４６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００８】
前記従来技術において、無線により映像等（映像データ等）を送信（伝送）する際、周囲環境（伝送路状況の悪化）により所望の伝送レートが得られないことがあり、この場合、受信映像等に乱れや停止等の破綻や画質劣化等が発生する。これを防ぐために上記映像等の伝送レート（符号化レート）を低く設定した場合には、受信映像等の品質が低下し、視聴者の満足度を低下させる。
【０００９】
換言すれば、前記第１の技術において、周囲環境に応じて、受信映像が破綻等しないように、送信側（送信機）で、送信（伝送）する映像等のレートを制御（低い符号化レートへの変更等）した場合には、受信側（受信機）で、表示（再生）する映像等の品質が低下することとなる。
【００１０】
本発明は以上のような問題に鑑みてなされたものであり、その主な目的は、無線通信システムに係わり、無線通信環境（無線伝送路状況）に応じた受信側での表示映像等の品質低下を抑制または改善等できる技術を提供することにある。
【課題を解決するための手段】
【００１１】
本願において開示される発明のうち、代表的なものの概要を簡単に説明すれば、次のとおりである。前記目的を達成するために、代表的な実施の形態は、送信機（送信側）と受信機（受信側）の間で無線により映像等のデータ（信号）を伝送（送受信）する無線通信システムの技術であって、以下に示す構成を有することを特徴とする。
【００１２】
本無線通信システムでは、無線通信環境（周囲環境）に応じて、送信側から受信側へ伝送（送信）する対象データ（特に映像データ）のレート（画質）を変更する処理制御（前記第１の技術（映像レート制御技術）に対応した第１の処理制御）を、例えば送信側が行う。そして、その第１の処理制御に対応して、受信側では、受信した対象データに対し、そのレートに応じて、当該データの表示（再生）等における画質の改善（回復）のための処理を施す処理制御（前記第２の技術（超解像処理技術）に対応した第２の処理制御）を行う。これらにより、無線通信環境における伝送効率（伝送データ量の調整）と共に、受信側での映像表示等の品質（画質）の低下が抑制または改善される。
【００１３】
本無線通信システムでは、例えば、送信側（送信機）には、無線伝送路（自機及び周辺の他機が使用する無線周波数）等の状況（干渉や混雑（空き）等）を検出または測定等する手段と、その検出の結果に応じて、対象データ（映像データ等）の伝送レート（符号化レート、圧縮率など）を変更する手段と、を有する。
【００１４】
また、送信側の構成と対応して、受信側（受信機）には、受信した対象データに対する画質改善処理（超解像処理等）を施す手段と、その処理を施すか否か（オン／オフ）の切り替え等を制御する手段と、を有する。
【００１５】
前記レートを変更する手段では、例えば、映像ソースまたは符号化映像データ等の切り替え（選択）、あるいは符号化処理の符号化レートの変更等を行う。
【００１６】
前記画質改善処理の手段では、例えば、受信映像データを構成する画像（フレーム）群に対し、超解像処理（フレーム単位の解像度変換処理）、フレームレート変換処理などを行う。超解像処理では、複数の低解像度の画像から１つの高解像度の画像を得る処理を施す。
【００１７】
本システムにおける処理動作（例えば送信機から受信機への映像データの伝送）及び制御は、例えば以下である。送信機では、第１の処理制御として、送信機と受信機の間の無線伝送路（使用する無線周波数チャネル（電波））の状況として混雑度を検出し、混雑度が低い（即ち状況が良好な）場合には、対象データの伝送レートを相対的に高くして（例えば元の高レートのままで）送信する。そしてその場合、受信機では、第２の処理制御として、受信対象データに対する画質改善処理（超解像処理等）をオフする。また、送信機では、第１の処理制御として、上記状況として混雑度が高い（即ち状況が悪い）場合には、対象データの伝送レートを相対的に低くして（例えば元の高レートから低レートへ変更して）送信する。そしてその場合、受信機では、第２の処理制御として、受信対象データに対する画質改善処理（超解像処理等）をオンすることにより、表示映像の画質を上げる（少なくとも伝送レート（受信映像データのレート）よりも表示時のレート（画質）を高くする）。
【００１８】
上記により、前記第１の処理制御で通信環境（その変化）に合わせて対象データの伝送レートを変化させることにより、無線伝送時の伝送効率（伝送データ量の調整）が実現され、また、受信側での受信以後には、前記第２の処理制御で画質改善することにより、元の高レートまたは画質改善後のレートでの表示映像が得られる。
【００１９】
本システムは、例えば、送信機と受信機の間で無線により映像等のデータを伝送する無線通信システムであって、前記送信機は、当該送信機と前記受信機の間の無線伝送路の状況に応じて、前記受信機へ送信する第１の映像データの符号化レートを変更し、前記受信機は、前記送信機から受信した前記第１の映像データに対しそのレートに応じて、フレーム単位で画素間を補完して解像度を上げる超解像処理を含む画質改善処理を施すものであり、前記無線伝送路の状況が良好でない場合に、前記送信機では、前記第１の映像データの符号化レートを低く変更して伝送し、それに対応して、前記受信機では、前記超解像処理を含む画質改善処理をオンすること、を特徴とする。
【発明の効果】
【００２０】
本願において開示される発明のうち、代表的なものによって得られる効果を簡単に説明すれば以下のとおりである。代表的な実施の形態によれば、無線通信システムに係わり、無線通信環境（無線伝送路状況）に応じた受信側での表示映像等の品質低下を抑制または改善等できる。
【発明を実施するための最良の形態】
【００２１】
以下、本発明の実施の形態を図面に基づいて詳細に説明する。なお、実施の形態を説明するための全図において、同一部には原則として同一符号を付し、その繰り返しの説明は省略する。
【００２２】
（実施の形態１）
図１，図２を用いて、本発明の実施の形態１の無線通信システムを説明する。図１において、実施の形態１の無線通信システムにおける機能ブロック構成を示している。なお、実施の形態１では、アクセス制御に、無線ＬＡＮで用いられるＣＳＭＡ／ＣＡを採用した無線通信システムとする。本システムは、無線通信を行う送信機１００と受信機１１０を含んで成る。送信機１００は、符号化レート変更部１０１、ベースバンド部１０２、無線送信部１０３、アンテナ（送信アンテナ）１０４、アンテナ（受信アンテナ）１０５、無線受信部１０６、制御部１０７を有する。受信機１１０は、アンテナ１１１、無線受信部１１２、ベースバンド部１１３、映像復号部１１４、超解像処理部１１５及びスイッチ１１６，１１７（画質改善部１１８）等を有する。受信機１１０には例えば表示部（ディスプレイ）１２０が接続されている。
【００２３】
図１を用いて、本システムにおける処理等の全体の流れを説明する。本処理は、送信機１００から受信機１１０への無線伝送路（無線周波数チャネル）を通じた映像データ等の伝送（送信）、及び受信機１１０での当該受信した映像データ等の表示（再生）、等である。
【００２４】
送信機１００には、映像ソース１０８が入力される。映像ソース１０８は特に限定されない。符号化レート変更部１０１では、制御部１０７からの指示（制御）に応じて、映像ソース１０８に対し、当該映像を構成する各フレーム（画像）の解像度を変換する処理（符号化レートを変更する処理）を施す。これにより、無線伝送路で伝送すべき映像データ量を調整するものである。制御部１０７から符号化レート変更部１０１へは、映像レート指示の信号（Ａ３）を入力する。制御部１０７の指示等については後述する。
【００２５】
送信機１００は、符号化レート変更部１０１の後、ベースバンド部１０２及び無線送信部１０３での処理を通じて、アンテナ１０４から当該映像データ１０９（伝送無線信号：パケットまたはそれ以外の電波等）を無線送信する。無線送信部１０３では、当該映像データ１０９（パケット等）を当該送信機１００から無線送信開始及び終了したタイミング（自機送信タイミング）を、制御部１０７に通知する。無線送信部１０３から制御部１０７へは、その自機送信タイミングの信号（Ａ１）を入力する。
【００２６】
一方、送信機１００のもう一つのアンテナ１０５では、送信機１００と受信機１１０の間の無線伝送路（無線周波数チャネル）に関係する電波を受信する。アンテナ１０５では、当該送信機１００の近隣に存在する機器（無線通信機器）における当該送信機１００が伝送に使用する無線周波数チャネルに含まれる無線周波数を用いるパケット及びそれ以外の電波を受信する。そして、アンテナ１０５から、無線受信部１０６を通じて、その受信開始及び終了タイミング（他機送信タイミング）を、制御部１０７に他機送信タイミングの信号（Ａ２）として通知する。換言すれば、送信機１００は、ＣＳＭＡ／ＣＡに基づくキャリアセンス（送信機１００が使用する無線周波数チャネル内の電波の検出）を行うことにより、他機送信タイミングの情報を得る。
【００２７】
実施の形態１では、送信機１００に送受それぞれのアンテナ１０４，１０５を備える構成としたが、これに限らず、送受兼用のアンテナを設ける構成などとしてもよい。
【００２８】
以上により、制御部１０７には、送信機１００の周囲環境の関連する電波の情報が集まることとなる。この情報は、送信機１００で受信できる範囲に位置し送信機１００の使用する無線周波数チャネルと同様の無線周波数の電波を用いて通信等を行うすべての機器についての送信開始及び終了タイミングの情報である。これにより、制御部１０７は、時間軸上で、送信機１００（自機）が送信に用いた時間（自機送信時間）及び他機が送信に用いた時間（他機送信時間）を、算出できる。この情報（時間）は、送信機１００が対象データの伝送に使用する無線周波数の混雑具合の指標（混雑度）となる。即ち、制御部１０７は、使用する無線伝送路（無線周波数）における干渉や混雑（空き）の状況を、混雑度（空き時間率）として検出及び把握することができる。
【００２９】
上記情報に基づいて、制御部１０７は、その混雑度に応じた符号化レート（伝送レート）を、信号（Ａ３）として、符号化レート変更部１０１に指示することができる。例えば、制御部１０７は、混雑度が大きい場合（空き時間率が小さい場合）は、低い符号化レートを指示し、混雑度が小さい場合（空き時間率が大きい場合）は、高い符号化レートを指示する。
【００３０】
以上により、送信機１００では、受信機１１０への映像データ１０９の伝送レートに関し、周辺機器からの無線干渉によりＣＳＭＡ／ＣＡによる送信機会が十分とれないとき（混雑度が大きい場合）には、低い符号化レートに変更して送信し、そうでないとき（混雑度が小さい場合）には、高い符号化レートのまま送信することができる。その結果、無線伝送における映像データ１０９のパケットの損失や廃棄を抑制しつつ、受信機１１０へ当該映像データ１０９を届けることができる。
【００３１】
図２を用いて、送信機１００での処理制御について更に詳細に説明する。図２において、送信機１００の制御部１０７における無線伝送路状況検出及び符号化レート指示（機能切り替え動作）の処理フローを示している（なおＳは処理ステップを表す）。
【００３２】
制御部１０７から符号化レート変更部１０１への制御及び指示は、例えば以下のように実現可能である。制御部１０７は、周囲環境において、一定観測時間中で、送信機１００（自機）を含むすべての機器について、無線送信を行わなかった時間の割合（空き時間率）を算出し、この値を予め定めた閾値と比較し、この閾値よりも大きい場合には、高い符号化レートを指示し、逆に小さい場合には、低い符号化レートを指示する。これは詳しくは以下のような処理になる。
【００３３】
Ｓ２０１では、制御部１０７は、以下のような空き時間率算出処理（混雑度算出処理）を行う。前述のように、制御部１０７には、無線伝送路の状況、即ち、送信機１００（自機）が無線送信を行っている時間、及び自機と同様の周波数を用いる周辺機器（他機）が無線送信を行っている時間の情報が集められる。ここで、時間軸上、現時点ｔ０（ｔ０＝０）から予め定めた大きさの観測時間Ｔｍだけ過去に遡った時間ｔ１（ｔ１＝−Ｔｍ）を起点として、現時点ｔ０を終点とする、Ｔｍの長さの時間内で、送信機１００（自機）が無線送信していた時間（自機送信時間Ｔｘ）と他機が無線送信していた時間（他機送信時間Ｔｙ）とを除いた時間（Ｔｍ−Ｔｘ−Ｔｙ）、即ち自機含め周辺のどの機器も無線送信していなかった時間、がＴｍ中に占める割合を算出することができる。ここでは、この割合を、空き時間率（α）と呼ぶ。算出式としては、α＝（Ｔｍ−Ｔｘ−Ｔｙ）÷Ｔｍである。この空き時間率（α）は、送信機１００が使用する無線周波数についての、時間軸上での混雑具合を示す指標（混雑度）に対応するものとして用いることができる（空き時間率（α）が大きいことは、混雑度が低いことに対応する）。
【００３４】
Ｓ２０２において、上記算出した空き時間率（α）を、予め定めた閾値と比較する。αが閾値よりも大きかった場合（Ｓ２０２−Ｙ）、送信機１００が送信する機会は十分にあると看做して、Ｓ２０３で、制御部１０７は、符号化レート変更部１０１に、信号（Ａ３）により、高い符号化レートを指示する（換言すれば高解像度設定を通知する）。具体的には例えば、制御部１０７は、映像データの各フレームの画素数（解像度）をそのまま（映像ソース１０８のレート（解像度）のまま）にして送信すること（機能オフ）を、所定値（例えば０）により指示する。
【００３５】
一方、空き時間率（α）が閾値以下であった場合には（Ｓ２０２−Ｎ）、送信機１００が送信する機会が十分無かったと看做して、制御部１０７は、符号化レート変更部１０１に対して、低い符号化レートを指示する（換言すれば低解像度設定を通知する）。具体的には例えば、制御部１０７は、映像データの各フレームの画素数（解像度）を、元（映像ソース１０８）よりも少なくなるように変換（符号化）してから送信すること（機能オン）を、所定値（例えば１）により指示する。
【００３６】
なお、上記のように機能（符号化レート変更）のオン（１）／オフ（０）の切り替えを指示する構成に限らず、符号化レートの値を直接に指示する構成などとしてもよい。
【００３７】
符号化レート変更部１０１は、対象映像データ（映像ソース１０８）に対し、上記各指示（Ｓ２０３，Ｓ２０４）に応じた符号化処理を行う。本例では特に低レートへの変更の指示（Ｓ２０４）の場合のみ当該処理を実行（機能オン）する。
【００３８】
以上のような処理を、対象映像データの画像（フレーム）群の送信中に繰り返す。これにより、時間軸上の各時点（画像と対応付けられる）における混雑度（空き時間率（α））に応じた映像レート（伝送レート）で無線送信を行うことができる。
【００３９】
一方、図１で、受信機１１０では、アンテナ１１１から入力（受信）された無線信号（映像データ１０９）を、無線受信部１１２、ベースバンド部１１３、及び映像復号部１１４を通じて、映像信号（映像データ）に復元（復号）する。復元した信号は、必要に応じ画質改善部１１８などを経由してから、表示部１２０などに送られ、表示部１２０（画面）で映像が表示（再生）される。表示部１２０は、受信機１１０に外部接続されてもよいし、受信機１１０内に具備されてもよいし、また、受信機１１０に接続されるホスト装置などに具備されてもよい。
【００４０】
ここで、受信機１１０では、送信機１００での処理制御（映像データ１０９の伝送レート）に応じて、以下のような処理制御を行う。受信機１１０は、送信機１００での処理制御により当該映像データ１０９の符号化レート（伝送レート）が低く変更されていた場合（前記Ｓ２０４）には、以下の処理制御を行う。即ち、受信機１１０では、映像復号部１１４からの信号（データ）を、スイッチ１１６，１１７の切り替え動作を通じて、画質改善処理部１１８（超解像処理部１１５）を通すようにする。即ち当該映像データに対し超解像処理をオンする。この超解像処理により、当該映像における各フレームの解像度を回復する（高める）ことによって、当該映像の表示の画質を改善する。
【００４１】
また一方、受信機１１０は、送信機１００での処理制御により当該映像データ１０９の符号化レート（伝送レート）が高くされていた場合（前記Ｓ２０３）には、映像復号部１１４からの信号（データ）を、スイッチ１１６，１１７の切り替え動作を通じて、画質改善処理部１１８（超解像処理部１１５）を通さないようにする。即ち当該映像データに対し超解像処理をオフする。
【００４２】
以上のように、受信機１１０では、送信機１００でレートが低く変更された映像データ１０９を受信したときには、画質改善（回復）して表示でき、そうでないときには、そのまま高画質の映像データ１０９を得て表示できる。いずれも、受信映像表示における低画質や破綻などを避けることができる。
【００４３】
本システムでは、送信機１００と受信機１１０の間の無線伝送路（無線区間）において、使用する無線周波数が周辺他機にも用いられること（干渉有り）により空きが少なく、送信（伝送）可能なデータレートが制限され十分に確保できないときには、当該無線区間での伝送レートを低く設定して無線伝送することで伝送データ量を減少する（混雑の緩和）。そして、それによる当該映像データの画質の低下を、受信側（受信機１１０）にて画質改善部１１８（超解像処理部１１５）を通すことで改善（回復）した後に、映像表示（再生）することができる。また、本システムで、無線区間において、使用する無線周波数における混雑が少なく、データレートが十分に確保できるときには、映像の画質をできるだけ低下させないように伝送レートを高く設定して無線伝送する。そして、受信側（受信機１１０）でも送信側（送信機１００）と同等の画質で映像表示（再生）することができる。以上のように、通信環境（無線伝送路状況等）に応じて、受信側（受信機１１０）での表示映像等の品質低下を抑制または改善等できる。
【００４４】
なお、図１の構成では特に記載していないが、受信機１１０は、送信機１００側同様に、スイッチ１１６，１１７の切り替え（超解像処理機能のオン／オフ）制御等を行う制御部を備えてもよい。また、図１の構成では、受信機１１０は、機能のオン／オフの制御を、スイッチ１１６，１１７の切り替えにより、ハードウェア、回路的に行う構成としたが、プロセッサによるプログラム処理等によりソフトウェア的に行う構成などとしてもよい。
【００４５】
また、高／低の伝送レート及び機能のオン／オフなど、２つの状態を切り替える制御の構成としたが、これに限らず、例えば複数の状態を段階的に切り替える構成などとしてもよい。
【００４６】
また、送信機１００が周囲機器すべての送信開始及び終了タイミング（他機送信タイミング及び時間）を観測する構成としたが、これに限らず、例えば受信機１１０が他機送信タイミングを観測してその結果を送信機１００に伝える構成（受信機側が無線伝送路状況を検出して伝送レートを制御する構成）などとしてもよい。
【００４７】
（実施の形態２）
次に、図３を用いて、本発明の実施の形態２の無線通信システムを説明する。図３において、実施の形態２の無線通信システムの送信機３００の機能ブロック構成を示している。前述の形態と主に異なる部分として、送信機３００は、予めメモリ３０４に異なるレートの映像データ（３０１，３０２）を準備して格納しており、それらをスイッチ３０３の切り替え等により利用するものである。受信側（受信機１１０）は前述の形態と同様の構成である。
【００４８】
図３を用いて、本システムの処理動作等の全体の流れを説明する。送信機３００は、予め、メモリ３０４に、異なる符号化レートで符号化（符号化処理）された映像データ｛符号化映像データＡ３０１，Ｂ３０２｝を持っている。例えば、高い符号化レートのデータＡ３０１と、低い符号化レートのデータＢ３０２である。そして、送信機３００は、これらのデータ（３０１，３０２）のいずれかを、制御部１０７からの指示（Ａ３）に従いスイッチ３０３により切り替えて、ベースバンド部１０２及び無線送信部１０３を経由してアンテナ１０４から送信する。
【００４９】
実施の形態１同様に、制御部１０７には、無線送信部１０３からは、送信機３００（自機）の送信タイミング（Ａ１）が通知され、また、無線受信部１０６からは、アンテナ１０５で受信した他機（自機と同様周波数を用いているもの）の送信タイミング（Ａ２）が通知される。そして、制御部１０７は、無線伝送路で使用する無線周波数における時間軸上の混雑度（空き時間率（α））から、映像データ（３０１，３０２）のいずれを送信するかを選択決定し、それに対応する切り替え制御を行う。
【００５０】
本システムにおいて、例えば、送信機３００では、周辺機器からの無線干渉によりＣＳＭＡ／ＣＡによる送信機会が十分取れないときには、低い符号化レートで符号化された符号化映像データＢ３０２を、そうでないときには、高い符号化レートで符号化された符号化映像データＡ３０１を、受信機１１０へ送信することができる。そして、送信機３００から送信された映像データを受信する受信機１１０では、実施の形態１と同様の構成により、低い符号化レートの符号化映像データＢ３０２を受信したときのみ、画質改善部１１８（超解像処理部１１５）の処理をオンし、画質を改善（回復）して表示することができる。
【００５１】
（実施の形態３）
次に、図４を用いて、本発明の実施の形態３の無線通信システムを説明する。図４において、実施の形態３の無線通信システムの送信機４００の機能ブロック構成を示している。前述の形態と主に異なる部分として、送信機３００は、指示されたレートで符号化（符号化処理）を行う映像符号化部４０２を備えるものである。受信側（受信機１１０）は前述の形態と同様の構成である。
【００５２】
図４を用いて、本システムの処理動作等の全体の流れを説明する。本システムの送信機４００は、予め蓄積された映像データ（映像ソース）４０１を持ち、これを、映像符号化部４０２で符号化する。この際、映像符号化部４０２は、制御部１０７から符号化レートの指示を信号（Ａ３）により受け、その指示に従った符号化レート（解像度など）での符号化を行う。これにより符号化された映像データは、ベースバンド部１０２及び無線送信部１０３を経由してアンテナ１０４から送信される。
【００５３】
実施の形態１同様に、制御部１０７は、自機送信タイミング（Ａ１）及び他機送信タイミング（Ａ２）から無線伝送路状況（混雑度）を把握し、それに基づき、映像符号化部４０２での符号化レートを決定し、信号（Ａ３）により指示・切り替えを行う。
【００５４】
以上により、本システムの送信機４００では、前述の形態と同様に、無線伝送路状況に応じた符号化レートで映像データを伝送し、受信機１１０では、受信映像データのレートに応じて画質改善処理（超解像処理）をオンし、画質を改善（回復）して表示することができる。
【００５５】
（実施の形態４）
次に、図５，図６を用いて、本発明の実施の形態４の無線通信システムを説明する。図５において、実施の形態４の無線通信システムの受信機５１０の機能ブロック構成を示している。前述の形態と主に異なる部分として、受信機５１０は、映像復号部１１４からの信号に従い、画質改善部１１８（超解像処理部１１５）の処理を切り替えるものである。送信側（送信機１００等）は前述の形態と同様の構成である。
【００５６】
図５を用いて、本システムの処理動作等の全体の流れを説明する。本システムの受信機５１０は、送信機１００から送信された映像データ１０９を受信するものとする。受信機５１０は、アンテナ１１１から入力された無線信号（映像データ１０９）を、無線受信部１１２、ベースバンド部１１３、及び映像復号部１１４を通じて、映像信号（データ）に復元（復号）する。復元（復号）した映像（復号映像データ）は、前述の形態と同様に、必要に応じ画質改善部１１８を通して表示部１２０等へ送られる。
【００５７】
映像復号部１１４では、復号映像データから、対象映像データのレート情報を得る。ここで、映像データ１０９の形式を例えばＭＰＥＧとする。映像復号部１１４では、例えばＭＰＥＧ映像データ（ストリームデータ）におけるシーケンス・ヘッダ中の画素数情報と画像レート情報のように、復号映像データについての、画素数すなわち解像度（フレーム単位の解像度）の情報と、画像レートすなわちフレームレート（単位時間あたりのフレーム数）の情報と、を得ることができる。
【００５８】
ここで、映像復号部１１４において、復号映像データの画像（フレーム）の解像度が、予め定めた閾値以下である場合には、画質改善部１１８の超解像処理部１１５を通す（超解像処理をオンする）ことにより、映像の画像の解像度を回復する。一方、閾値より高い場合には、画質改善部１１８の超解像処理部１１５を通さない（超解像処理をオフする）。上記切り替えは、例えば、映像復号部１１４からスイッチ１１６，１１７へ超解像処理切り替え指示の信号（Ｂ１）を与えることにより行う。
【００５９】
以上により、受信機５１０では、解像度が設定よりも低い映像データを受信したときには当該解像度を回復し、そうでないときは受信したままの解像度の映像データを得て、表示することができる。なお、受信機５１０は、本処理制御のための制御部を具備してもよい。
【００６０】
図６を用いて、受信機５１０での処理制御について更に詳細に説明する。図６において、受信機５１０におけるレート情報に基づいた画質改善処理（超解像処理）の切り替え指示動作の処理フローを示している。
【００６１】
Ｓ６０１で、映像復号部１１４では、入力される映像ストリームデータから、復号映像データを得ると共に、ヘッダから、画素数（Ｐ）の情報を抽出する（その他、フレームレート情報などを抽出してもよい）。Ｓ６０２で、映像復号部１１４は、この抽出された画素数（フレーム解像度）（Ｐ）を、予め定めた閾値と比較する。抽出された画素数（Ｐ）が閾値よりも小さいときには（Ｓ６０２−Ｙ）、Ｓ６０３で、復号映像データに対して超解像処理をオンするように、信号（Ｂ１）により指示する。一方、画素数（Ｐ）が閾値以上であるときには（Ｓ６０２−Ｎ）、Ｓ６０４で、超解像処理をオフするように指示する。
【００６２】
これらの処理を、映像ストリーム受信中に繰り返すことにより、各時点での受信映像（画像）の解像度に応じて、超解像処理による画質の回復を施して表示することができる。
【００６３】
以上により、本システムの受信機５１０では、前述の形態と同様に、無線伝送路状況に応じた符号化レートで伝送された映像データを受信し、それ（特にフレーム解像度）に応じて画質改善（回復）してから映像表示することができる。
【００６４】
なお、上記構成に限らず、例えば、受信機５１０が、送信機１００から、映像ストリームデータとは別に制御情報（符号化レート情報）を受信し、受信機５１０がそのレート情報を参照して同様に画質改善処理の切り替えを行う構成なども可能である。
【００６５】
（実施の形態５）
次に、図７，図８を用いて、本発明の実施の形態５の無線通信システムを説明する。図７において、実施の形態５の無線通信システムの機能ブロック構成を示している。前述の形態と主に異なる部分として、送信機７００では、ベースバンド部７０２で制御部１０７からの指示（制御情報）の信号（Ａ３）を入力してデータとの多重化を行い、受信機７１０では、ベースバンド部７１３でデータと制御情報の分離を行い、分離した制御情報に従い画質改善処理の切り替え制御を行うものである。
【００６６】
図７を用いて、本システムの処理動作等の全体の流れを説明する。本システムの送信機７００は、入力された映像ソースに対し符号化レート変更部１０１にて符号化レート変更を施し、送信すべき映像データ量を調整した後、ベースバンド部７０２及び無線送信部１０３を通じてアンテナ１０４から無線送信する。
【００６７】
実施の形態１同様に、制御部１０７には、無線送信部１０３からの自機送信タイミングの情報（Ａ１）、及び無線受信部１０６からの他機送信タイミングの情報（Ａ２）が集まり、これにより、使用する無線周波数に係わる混雑度（空き時間率（α））を把握する。制御部１０７は、混雑度に応じた符号化レートを、信号（Ａ３）により、符号化レート変更部１０１に指示する。例えば、制御部１０７は、最新の一定時間中で、空き時間率（α）が閾値より大きかった場合には高い符号化レートを、閾値以下であった場合には低い符号化レートを、符号化レート変更部１０１へ指示する。
【００６８】
本システムでは、制御部１０７は、決定した符号化レートを、符号化レート変更部１０１に通知するのみでなく、ベースバンド部７０２にも通知する。ベースバンド部７０２では、符号化レート変更部１０１から入力される符号化された映像データ（符号化映像データ）と、制御部１０７から入力される符号化レート情報（Ａ３）とを、多重化して、無線送信部１０３に送る。
【００６９】
ここで、制御部１０７及びベースバンド部７０２において、制御情報としては、決定した符号化レートそのもの（Ａ３ａ）だけでなく、使用する無線周波数での混雑が原因で符号化レートを低く抑えたか否かを伝える情報（Ａ３ｂ）を併せて含ませるあるいは多重化する構成としてもよい。なお、上記情報（Ａ３ｂ）は、受信側（受信機７１０）の機能オン／オフの切り替え指示制御の情報と捉えることができる。
【００７０】
上記から、送信機７００では、前述の形態と同様に混雑度に応じた符号化レートの符号化映像データと、それに係わる制御情報（本例ではＡ３ａ，Ａ３ｂ）とを、多重化した信号７０９を、無線伝送する。
【００７１】
一方、本システムの受信機７１０では、アンテナ１１１から入力された無線信号（信号７０９）を、無線受信部１１２、ベースバンド部７１３、及び映像復号部１１４を通じて映像信号（映像データ）に復元（復号）する。ここで、映像データに多重化されていた制御情報（Ａ３ａ，Ａ３ｂ）のうち、送信機７００により映像符号化レートが低く変更されているか否かを表す情報（Ａ３ｂ）は、ベースバンド部７１３で符号化レート情報（Ａ３ａ）を分離すること等により得ることができる。ベースバンド部７１３は、この情報（Ａ３ａ）を、画質改善部１１８（超解像処理部１１５）のスイッチ１１６，１１７に与えることにより、超解像処理のオン／オフを制御する。
【００７２】
以上により、受信機７１０では、前述の形態と同様に、無線伝送路状況に応じた符号化レートで伝送された映像データを受信し、それに応じて画質改善（回復）してから映像表示することができる。
【００７３】
図８を用いて、受信機７１０の機能切り替え動作について更に詳細に説明する。Ｓ８０１で、ベースバンド部７１３では、送信機７００で多重化されて送信された信号７０９を受信した信号から符号化レート情報（Ａ３）を分離することにより、受信中の映像データの画像（フレーム）の画素数（Ｐ）等を把握することができる。Ｓ８０２で、ベースバンド部７１３は、符号化レート情報のうちの例えば画素数（Ｐ）を、予め定めた閾値と比較する。ベースバンド部７１３は、画素数（Ｐ）が閾値より小さいときには（Ｓ８０２−Ｙ）、Ｓ８０３で、映像復号部１１４からの復号映像データに対して画質改善処理（超解像処理）をオンするように、信号（Ｂ１）により指示する。一方、ベースバンド部７１３は、画素数（Ｐ）が閾値以上であるときには（Ｓ８０２−Ｎ）、Ｓ８０４で、画質改善処理（超解像処理）をオフするように、信号（Ｂ１）により指示する。
【００７４】
これらの処理を、映像ストリームデータの受信中に繰り返すことにより、各時点での受信映像（画像）の解像度に応じて、超解像処理による画質の回復を施して表示することができる。
【００７５】
（実施の形態６）
次に、図９を用いて、本発明の実施の形態６の無線通信システムを説明する。図９において、実施の形態６の無線通信システムの受信機９１０の機能ブロック構成を示している。前述の形態と主に異なる部分として、画質改善部９１８は、解像度変換部（超解像処理部）９１１と、フレーム数変換部（フレームレート処理部）９１２と、を備える。
【００７６】
図９を用いて、本システムの処理動作等の全体の流れを説明する。本システムの受信機９１０は、前述の形態と同様の送信機１００等から送信された映像データ１０９を受信するものとする。受信機９１０は、アンテナ１１１から入力された無線信号を、無線受信部１１２、ベースバンド部１１３、及び映像復号部１１４を通じて、映像信号（映像データ）に復元（復号）する。ここで、受信機９１０では、送信機１００により映像の符号化レートが低く変更されていた場合には、画質改善部９１８による画質回復の処理を行い、そうでない場合には、画質回復の処理を行わない。
【００７７】
本システムでは、画質改善部９１８での処理として、解像度変換部９１１による解像度変換処理（超解像処理）と、フレーム数変換部９１２によるフレームレート変換処理と、を有する。解像度変換部９１１では、映像データ（フレーム群）のうち１フレームの画素数（フレーム解像度）を増す処理（超解像処理）を行うことにより、フレーム単位の画質を回復（改善）する。また、フレーム数変換部９１２では、映像データ（フレーム群）におけるフレームを補完してフレーム数（フレームレート）を増す処理を行うことにより、動画像の画質を回復（改善）する。
【００７８】
解像度変換部９１１を経由（オン）するか否かと、フレーム数変換部９１２を経由（オン）するか否かとは、それぞれ切り替え制御することが可能である。即ち、画質改善処理の各処理のオン／オフの組み合わせとして、両方オフ、一方のみオン、両方オン、といった中から適宜選択可能である。
【００７９】
また、画質改善処理の各処理の程度（解像度やフレームレートの変化の程度や、処理パラメータ等）を適宜制御してもよい。また、上記切り替え（選択）は、送信機１００側が指示する構成としてもよいし、受信機９１０側が決定する構成としてもよい。
【００８０】
上記により、受信機９１０では、映像の符号化レートが設定よりも低い映像データを受信したときには、フレーム解像度及び／又はフレーム数の回復をオン／オフすることができ、そうでないときは、そのままの映像データを得ることができる。
【００８１】
以上により、受信機９１０では、前述の形態と同様に、無線伝送路状況に応じた符号化レートで伝送された映像データを受信し、それに応じて画質改善（回復）してから映像表示することができる。
【００８２】
（実施の形態７）
図１０，図１１を用いて、本発明の実施の形態７の無線通信システムを説明する。図１０において、実施の形態７の無線通信システムの受信機１０１０の機能ブロック構成を示している。前述の形態と主に異なる部分として、受信機１０１０は、制御部１０１１を備え、符号化レート等の情報（Ｂ１）と、表示部１０２０からの性能情報（Ｃ１）とに基づき、画質改善部１０１８の処理のオン／オフを切り替え制御するものである。
【００８３】
図１０を用いて、本システムの処理動作等の全体の流れを説明する。本システムの受信機１０１０は、前述の形態と同様の送信機１００から送信された映像データ１０９を受信するものとする。受信機１０１０は、アンテナ１１１から入力された無線信号を、無線受信部１１２、ベースバンド部１１３、及び映像復号部１１４を通じて映像信号（映像データ）に復元（復号）する。ここで、送信機１００により映像符号化レートが低く変更されていた場合には、画質回復の処理を行い、そうでない場合には、画質回復の処理を行わない。受信機１０１０は、画質改善部１０１８として、例えば前述の形態と同様に、解像度変換部９１１と、フレーム数変換部９１２と、を備える。
【００８４】
受信機１０１０で受信した映像データは、例えば受信機１０１０に接続されている表示部１０２０において映像として表示（再生）される。なお、本例では、受信機１０１０と表示部１０２０をそれぞれ設けているが、これに限らず、受信機１０１０が表示部１０２０の機能を具備する構成や、逆に表示部１０２０が受信機１０１０の機能を具備する構成なども可能である。
【００８５】
本システムで、表示部１０２０は、表示部１０２０の性能、即ち再生可能な映像データの解像度及びフレームレート等の情報（性能情報Ｃ１）を、受信機１０１０に通知する。あるいは、受信機１０１０から表示部１０２０の性能情報Ｃ１を取得する。あるいは、例えば、受信機１０１０に表示部１０２０が一旦接続されると、性能情報Ｃ１が、制御部１０１１へ得られ、また、別の表示部１０２０が接続されると、同様に、その性能情報Ｃ１が得られる。
【００８６】
受信機１０１０の制御部１０１１は、表示部１０２０の性能情報Ｃ１と、映像復号部１１４から通知される受信映像データ（復号映像データ）の解像度及びフレームレート等の情報（Ｂ１）とから、当該映像データに対して画質改善部１０１８の処理を適用するか否か（解像度変換部９１１を経由するか否か、及び／又は、フレーム数変換部９１２を経由するか否か）を選択決定し、信号を画質改善部１０１８のスイッチに与えること等により切り替えを行う。
【００８７】
上記切り替え制御の判断は、例えば以下のように実現できる。制御部１０１１は、受信映像データのフレーム解像度が、表示部１０２０により表示可能な解像度の上限よりも低い場合には、解像度変換部９１１を経由するように切り替え、そうでない場合には、解像度変換部９１１を経由しないように切り替える。また、制御部１０１１は、受信映像データのフレームレートが、表示部１０２０により表示可能なフレームレートの上限よりも低い場合には、フレーム数変換部９１２を経由するように切り替え、そうでない場合には、経由しないように切り替える。
【００８８】
図１１を用いて、本システムの受信機１０１０の処理制御（機能切り替え動作）について更に詳細に説明する。Ｓ１１０１で、制御部１０１１は、表示部１０２０から、性能情報Ｃ１として、表示部１０２０で表示可能な画素数（フレーム解像度）の上限値（最大解像度情報ｃ１）、及び同じく表示可能なフレームレートの上限値（最大フレームレートｃ２）の情報を取得する。Ｓ１１０２で、映像復号部１１４では、映像ストリームデータ（例えばヘッダ）から、画素数（Ｐ）の情報と、フレームレート（Ｑ）の情報と、を抽出する。
【００８９】
Ｓ１１１３で、制御部１０１１は、この抽出した画素数（フレーム解像度）（Ｐ）を、解像度変換部９１１で超解像処理した場合の結果の画素数（ｐ）と、表示部１０２０で表示可能な画素数の上限値（最大解像度情報ｃ１）とを比較する。超解像処理後の画素数（ｐ）が、上限値（ｃ１）よりも大きいときには（Ｓ１１０３−Ｙ）、Ｓ１１０４で、制御部１０１１から画質改善部１０１８へ、復号映像データに対して超解像処理をオフするように指示する。一方、超解像処理後の画素数（ｐ）が上限値（ｃ１）以下であるときには（Ｓ１１０３−Ｎ）、Ｓ１１０５で、制御部１０１１から画質改善部１０１８へ、超解像処理をオンするように指示する。
【００９０】
また同様に、Ｓ１１０６では、Ｓ１１０２で抽出したフレームレート（Ｑ）に対して、フレーム数変換部９１２でフレーム変換処理を施した場合の結果のフレームレート（ｑ）と、表示部１０２０で表示可能なフレームレートの上限値（最大フレームレートｃ２）とを比較する。変換後のフレームレート（ｑ）が、上限値（ｃ２）よりも大きいときには（Ｓ１１０６−Ｙ）、Ｓ１１０７で、制御部１１０１から画質改善部１１０８へ、復号映像データに対してフレームレート変換処理をオフするように指示する。一方、フレームレート変換後のフレームレート（ｑ）が、上限値（ｃ２）以下であるときには（Ｓ１１０６−Ｎ）、Ｓ１１０８で、制御部１１０１から画質改善部１１０８へ、フレームレート変換処理をオンするように指示する。
【００９１】
これらの切り替え処理を、映像ストリームデータ受信中に繰り返すことにより、各時点での受信映像のフレーム解像度とフレームレート、及び表示部１０２０で表示可能な解像度上限（ｃ１）とフレームレート上限（ｃ２）に応じて、超解像処理及び／又はフレームレート変換処理による画質の回復（改善）を、それぞれオン／オフすることができる。なお上記オン／オフの処理の順番等は一例である。
【００９２】
上記により、受信機１０１０では、受信映像データの符号化レートと、表示部１０２０の表示の性能とに応じて、映像の解像度やフレームレートの回復を適宜選択することができ、表示部１０２０で適切な画質で表示することができる。
【００９３】
（実施の形態８）
次に、図１２を用いて、本発明の実施の形態８の無線通信システムを説明する。図１２において、実施の形態８の無線通信システムの全体構成を示している。前述の形態と主に異なる部分として、送信機１２００から複数の各受信機１２１０Ａ〜Ｃへ映像データを伝送する場合である。なお前述の形態において単一の受信機ではなく複数の受信機を有するシステムの構成として捉えれば、本実施の形態と同様になる。
【００９４】
本システムにおいて、無線通信装置として、送信機１２００と、受信機１２１０（１２１０Ａ，Ｂ，Ｃ）とを有する。送信機１２００は、例えば実施の形態１（図１）の送信機１００と同様の構成である。受信機１２１０は、例えば実施の形態７（図１０）の受信機１０１０と同様の構成である。また、各受信機１２１０Ａ〜Ｃに接続される表示部１２２０として、１２２０（１２２０Ａ，Ｂ，Ｃ）を有する。表示部１２２０は、例えば実施の形態７（図１０）の表示部１０２０と同様の構成である。なお前述同様に、受信機１２１０と表示部１２２０は一体構成でもよい。本例では、１台の送信機１２００と３台の受信機１２１０を有する場合を示している。
【００９５】
送信機１２００（例えばそのうちの制御部１２０１）は、周囲環境の複数の他機（受信機１２１０）を含む無線伝送路状況の検出、及び、それに応じた無線区間の伝送レートの変更・調整などを制御する。即ち、送信機１２００は、自機と同様の無線周波数を使用する各受信機１２１０Ａ〜Ｃの状況に基づく時間軸上の混雑度（空き時間率（α））を検出（算出）し、それに応じて、通信相手機器（例えば各受信機１２１０Ａ〜Ｃ）へ送信（伝送）する映像データ等の符号化レートを変更・調整する。
【００９６】
各受信機１２１０Ａ〜Ｃは、送信機１２００から送信される映像データ等を受信する。そして、各受信機１２１０Ａ〜Ｃ（例えばそのうちの制御部１２１１）は、対応する表示部１２２０Ａ〜Ｃの性能（表示可能な映像の解像度及びフレームレート等）に応じて、受信映像データ等に対する画質改善処理のオン／オフを制御する。上記画質改善処理は、例えば各画質改善部１２１２による解像度変換処理（超解像処理）及びフレーム数変換処理等である。
【００９７】
上記により、周囲環境における他機を含む状況に応じて、無線区間のデータレートを変更することで、受信側（各受信機１２１０Ａ〜Ｃ）での映像の破綻などを防ぐことができる。尚且つ、各受信機１２１０Ａ〜Ｃに接続された各表示部１２２０Ａ〜Ｃの性能に応じて、受信映像データの画質（解像度及びフレームレート等）を変換することで、無線区間のデータレートを低くした場合でも、受信側（各受信機１２１０Ａ〜Ｃ）で画質の改善（回復）を行って適切に表示することができる。
【００９８】
送信機１２００から受信機１２１０Ａ〜Ｃへ同じレートで映像データが送信された場合、各受信機１２１０Ａ〜Ｃの表示部１２２０Ａ〜Ｃの性能が異なる場合には、それぞれに応じた画質で表示されるので、効率的である。
【００９９】
以上、本発明者によってなされた発明を実施の形態に基づき具体的に説明したが、本発明は前記実施の形態に限定されるものではなく、その要旨を逸脱しない範囲で種々変更可能であることは言うまでもない。
【産業上の利用可能性】
【０１００】
本発明は、無線通信システムに利用可能である。
【図面の簡単な説明】
【０１０１】
【図１】本発明の実施の形態１である無線通信システムの機能ブロック構成を示す図である。
【図２】本発明の実施の形態１の無線通信システムにおける送信機での切り替え制御の処理フローを示す図である。
【図３】本発明の実施の形態２である無線通信システムにおける送信機の構成を示す図である。
【図４】本発明の実施の形態３である無線通信システムにおける送信機の構成を示す図である。
【図５】本発明の実施の形態４である無線通信システムにおける受信機の構成を示す図である。
【図６】本発明の実施の形態４の無線通信システムにおける受信機での切り替え制御の処理フローを示す図である。
【図７】本発明の実施の形態５である無線通信システムの機能ブロック構成を示す図である。
【図８】本発明の実施の形態５の無線通信システムにおける受信機での切り替え制御の処理フローを示す図である。
【図９】本発明の実施の形態６である無線通信システムにおける受信機の構成を示す図である。
【図１０】本発明の実施の形態７である無線通信システムにおける受信機の構成を示す図である。
【図１１】本発明の実施の形態７の無線通信システムにおける受信機での切り替え制御の処理フローを示す図である。
【図１２】本発明の実施の形態８である無線通信システムにおける全体構成を示す図である。
【符号の説明】
【０１０２】
１００，３００，４００，７００，１２００…送信機、１０１…符号化レート変更部、１０２…ベースバンド部、１０３…無線送信部、１０４…アンテナ、１０５…アンテナ、１０６…無線受信部、１０７，１２０１…制御部、１０８…映像ソース、１０９…映像データ（伝送無線信号）、１１０，５１０，７１０，９１０，１０１０，１２１０Ａ〜Ｃ…受信機、１１１…アンテナ、１１２…無線受信部、１１３…ベースバンド部、１１４…映像復号部、１１５…超解像処理部、１１６，１１７…スイッチ、１１８，９１８，１０１８，１２１２…画質改善部、１２０，１０２０，１２２０Ａ〜Ｃ…表示部、３０１…符号化映像データＡ、３０２…符号化映像データＢ、３０３…スイッチ、３０４…メモリ、４０１…映像データ（映像ソース）、４０２…映像符号化部、７０２…ベースバンド部、７０９…信号、７１３…ベースバンド部、９１１…解像度変換部（超解像処理部）、９１２…フレーム数変換部、１０１１，１２１１…制御部。
【技術分野】
【０００１】
本発明は、無線により映像や音声等のデータ（信号）を伝送するシステム（無線通信システム）に関し、特に、映像レート制御や画像処理などに関する。
【背景技術】
【０００２】
無線ＬＡＮをはじめとした近距離無線通信システムは、インターネット接続の広がりと相俟ってオフィス等から家庭内に至るまで急速に普及が進んでいる。その用途も近年ではコンピュータ間のファイル転送に留まらず、ＡＶ機器を結んで映像や音声の配信に利用する需要が高まっている。
【０００３】
一方で、無線伝送時の伝送品質は、有線に比べ、通信環境（伝送路環境、周囲環境）による影響を大きく受けることが知られている。一般に高い伝送品質を必要とする映像や音声は、環境の影響により所望の品質での無線伝送が困難な場合がある。例えば、無線ＬＡＮなどで使われるアクセス方式であるＣＳＭＡ／ＣＡ（Carrier Sense Multiple Access / Collision Avoidance）を用いた場合、近隣で同種の機器が同じ周波数を使って動作すると、それが干渉となって働く。これにより無線伝送のスループットが大きく低下し、無線伝送後の映像や音声の品質に重大な支障をきたす。即ち、無線伝送品質（無線伝送路での干渉や混雑等）に由来して、受信映像における乱れや停止などの破綻が発生し、品質が大きく低下する。
【０００４】
こうした映像乱れ等の品質低下を抑えるための一つの方法として、以下のような技術（映像レート制御技術、第１の技術とする）が知られている。この技術では、変化する通信環境に合わせて、送信（伝送）する映像等のレート（圧縮率等）を変化させることにより、通信環境で実際に伝送するデータの量を調整する。これにより受信側での品質低下を抑制する。この技術では、特に、通信環境（無線伝送路状況）が悪い場合には（通信環境の悪化に応じて）、映像レート制御により、送信する映像データ（ストリームデータ）の圧縮率を高く（符号化レートを低く）して伝送する。これにより無線伝送路で伝送するデータ量を減少させる。また一方、通信環境が良好な場合には、当該映像データの圧縮率を低く（符号化レートを高く）して伝送する。
【０００５】
上記のような技術は、例えば、特開２００２−２０４２７８号公報（特許文献１）、特開２００４−１５３６１０号公報（特許文献２）に記載されている。
【０００６】
しかしながら、上記のような技術では、レートを低下させた映像データは、受信側（受信機）で当該映像を表示する際の品質（画質）も当然低下することとなり、視聴者の満足度を低下させることは否めない。
【０００７】
一方、低画質の画像から高画質の画像を得る技術として、超解像処理技術（第２の技術とする）が知られている。この技術は、時間軸又は空間軸上で近い条件の複数の低解像度の画像から１枚の高解像度の画像を合成して得るものである。この技術については、例えば特開平８−３３６０４６号公報（特許文献３）に記載されている。また、この技術の応用として、動画像（映像）データ中の複数のフレーム（画像）を用いて、より高画質のフレームのデータを得ることにより、動画像の高画質化を実現する方法が知られている。
【特許文献１】特開２００２−２０４２７８号公報
【特許文献２】特開２００４−１５３６１０号公報
【特許文献３】特開平８−３３６０４６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００８】
前記従来技術において、無線により映像等（映像データ等）を送信（伝送）する際、周囲環境（伝送路状況の悪化）により所望の伝送レートが得られないことがあり、この場合、受信映像等に乱れや停止等の破綻や画質劣化等が発生する。これを防ぐために上記映像等の伝送レート（符号化レート）を低く設定した場合には、受信映像等の品質が低下し、視聴者の満足度を低下させる。
【０００９】
換言すれば、前記第１の技術において、周囲環境に応じて、受信映像が破綻等しないように、送信側（送信機）で、送信（伝送）する映像等のレートを制御（低い符号化レートへの変更等）した場合には、受信側（受信機）で、表示（再生）する映像等の品質が低下することとなる。
【００１０】
本発明は以上のような問題に鑑みてなされたものであり、その主な目的は、無線通信システムに係わり、無線通信環境（無線伝送路状況）に応じた受信側での表示映像等の品質低下を抑制または改善等できる技術を提供することにある。
【課題を解決するための手段】
【００１１】
本願において開示される発明のうち、代表的なものの概要を簡単に説明すれば、次のとおりである。前記目的を達成するために、代表的な実施の形態は、送信機（送信側）と受信機（受信側）の間で無線により映像等のデータ（信号）を伝送（送受信）する無線通信システムの技術であって、以下に示す構成を有することを特徴とする。
【００１２】
本無線通信システムでは、無線通信環境（周囲環境）に応じて、送信側から受信側へ伝送（送信）する対象データ（特に映像データ）のレート（画質）を変更する処理制御（前記第１の技術（映像レート制御技術）に対応した第１の処理制御）を、例えば送信側が行う。そして、その第１の処理制御に対応して、受信側では、受信した対象データに対し、そのレートに応じて、当該データの表示（再生）等における画質の改善（回復）のための処理を施す処理制御（前記第２の技術（超解像処理技術）に対応した第２の処理制御）を行う。これらにより、無線通信環境における伝送効率（伝送データ量の調整）と共に、受信側での映像表示等の品質（画質）の低下が抑制または改善される。
【００１３】
本無線通信システムでは、例えば、送信側（送信機）には、無線伝送路（自機及び周辺の他機が使用する無線周波数）等の状況（干渉や混雑（空き）等）を検出または測定等する手段と、その検出の結果に応じて、対象データ（映像データ等）の伝送レート（符号化レート、圧縮率など）を変更する手段と、を有する。
【００１４】
また、送信側の構成と対応して、受信側（受信機）には、受信した対象データに対する画質改善処理（超解像処理等）を施す手段と、その処理を施すか否か（オン／オフ）の切り替え等を制御する手段と、を有する。
【００１５】
前記レートを変更する手段では、例えば、映像ソースまたは符号化映像データ等の切り替え（選択）、あるいは符号化処理の符号化レートの変更等を行う。
【００１６】
前記画質改善処理の手段では、例えば、受信映像データを構成する画像（フレーム）群に対し、超解像処理（フレーム単位の解像度変換処理）、フレームレート変換処理などを行う。超解像処理では、複数の低解像度の画像から１つの高解像度の画像を得る処理を施す。
【００１７】
本システムにおける処理動作（例えば送信機から受信機への映像データの伝送）及び制御は、例えば以下である。送信機では、第１の処理制御として、送信機と受信機の間の無線伝送路（使用する無線周波数チャネル（電波））の状況として混雑度を検出し、混雑度が低い（即ち状況が良好な）場合には、対象データの伝送レートを相対的に高くして（例えば元の高レートのままで）送信する。そしてその場合、受信機では、第２の処理制御として、受信対象データに対する画質改善処理（超解像処理等）をオフする。また、送信機では、第１の処理制御として、上記状況として混雑度が高い（即ち状況が悪い）場合には、対象データの伝送レートを相対的に低くして（例えば元の高レートから低レートへ変更して）送信する。そしてその場合、受信機では、第２の処理制御として、受信対象データに対する画質改善処理（超解像処理等）をオンすることにより、表示映像の画質を上げる（少なくとも伝送レート（受信映像データのレート）よりも表示時のレート（画質）を高くする）。
【００１８】
上記により、前記第１の処理制御で通信環境（その変化）に合わせて対象データの伝送レートを変化させることにより、無線伝送時の伝送効率（伝送データ量の調整）が実現され、また、受信側での受信以後には、前記第２の処理制御で画質改善することにより、元の高レートまたは画質改善後のレートでの表示映像が得られる。
【００１９】
本システムは、例えば、送信機と受信機の間で無線により映像等のデータを伝送する無線通信システムであって、前記送信機は、当該送信機と前記受信機の間の無線伝送路の状況に応じて、前記受信機へ送信する第１の映像データの符号化レートを変更し、前記受信機は、前記送信機から受信した前記第１の映像データに対しそのレートに応じて、フレーム単位で画素間を補完して解像度を上げる超解像処理を含む画質改善処理を施すものであり、前記無線伝送路の状況が良好でない場合に、前記送信機では、前記第１の映像データの符号化レートを低く変更して伝送し、それに対応して、前記受信機では、前記超解像処理を含む画質改善処理をオンすること、を特徴とする。
【発明の効果】
【００２０】
本願において開示される発明のうち、代表的なものによって得られる効果を簡単に説明すれば以下のとおりである。代表的な実施の形態によれば、無線通信システムに係わり、無線通信環境（無線伝送路状況）に応じた受信側での表示映像等の品質低下を抑制または改善等できる。
【発明を実施するための最良の形態】
【００２１】
以下、本発明の実施の形態を図面に基づいて詳細に説明する。なお、実施の形態を説明するための全図において、同一部には原則として同一符号を付し、その繰り返しの説明は省略する。
【００２２】
（実施の形態１）
図１，図２を用いて、本発明の実施の形態１の無線通信システムを説明する。図１において、実施の形態１の無線通信システムにおける機能ブロック構成を示している。なお、実施の形態１では、アクセス制御に、無線ＬＡＮで用いられるＣＳＭＡ／ＣＡを採用した無線通信システムとする。本システムは、無線通信を行う送信機１００と受信機１１０を含んで成る。送信機１００は、符号化レート変更部１０１、ベースバンド部１０２、無線送信部１０３、アンテナ（送信アンテナ）１０４、アンテナ（受信アンテナ）１０５、無線受信部１０６、制御部１０７を有する。受信機１１０は、アンテナ１１１、無線受信部１１２、ベースバンド部１１３、映像復号部１１４、超解像処理部１１５及びスイッチ１１６，１１７（画質改善部１１８）等を有する。受信機１１０には例えば表示部（ディスプレイ）１２０が接続されている。
【００２３】
図１を用いて、本システムにおける処理等の全体の流れを説明する。本処理は、送信機１００から受信機１１０への無線伝送路（無線周波数チャネル）を通じた映像データ等の伝送（送信）、及び受信機１１０での当該受信した映像データ等の表示（再生）、等である。
【００２４】
送信機１００には、映像ソース１０８が入力される。映像ソース１０８は特に限定されない。符号化レート変更部１０１では、制御部１０７からの指示（制御）に応じて、映像ソース１０８に対し、当該映像を構成する各フレーム（画像）の解像度を変換する処理（符号化レートを変更する処理）を施す。これにより、無線伝送路で伝送すべき映像データ量を調整するものである。制御部１０７から符号化レート変更部１０１へは、映像レート指示の信号（Ａ３）を入力する。制御部１０７の指示等については後述する。
【００２５】
送信機１００は、符号化レート変更部１０１の後、ベースバンド部１０２及び無線送信部１０３での処理を通じて、アンテナ１０４から当該映像データ１０９（伝送無線信号：パケットまたはそれ以外の電波等）を無線送信する。無線送信部１０３では、当該映像データ１０９（パケット等）を当該送信機１００から無線送信開始及び終了したタイミング（自機送信タイミング）を、制御部１０７に通知する。無線送信部１０３から制御部１０７へは、その自機送信タイミングの信号（Ａ１）を入力する。
【００２６】
一方、送信機１００のもう一つのアンテナ１０５では、送信機１００と受信機１１０の間の無線伝送路（無線周波数チャネル）に関係する電波を受信する。アンテナ１０５では、当該送信機１００の近隣に存在する機器（無線通信機器）における当該送信機１００が伝送に使用する無線周波数チャネルに含まれる無線周波数を用いるパケット及びそれ以外の電波を受信する。そして、アンテナ１０５から、無線受信部１０６を通じて、その受信開始及び終了タイミング（他機送信タイミング）を、制御部１０７に他機送信タイミングの信号（Ａ２）として通知する。換言すれば、送信機１００は、ＣＳＭＡ／ＣＡに基づくキャリアセンス（送信機１００が使用する無線周波数チャネル内の電波の検出）を行うことにより、他機送信タイミングの情報を得る。
【００２７】
実施の形態１では、送信機１００に送受それぞれのアンテナ１０４，１０５を備える構成としたが、これに限らず、送受兼用のアンテナを設ける構成などとしてもよい。
【００２８】
以上により、制御部１０７には、送信機１００の周囲環境の関連する電波の情報が集まることとなる。この情報は、送信機１００で受信できる範囲に位置し送信機１００の使用する無線周波数チャネルと同様の無線周波数の電波を用いて通信等を行うすべての機器についての送信開始及び終了タイミングの情報である。これにより、制御部１０７は、時間軸上で、送信機１００（自機）が送信に用いた時間（自機送信時間）及び他機が送信に用いた時間（他機送信時間）を、算出できる。この情報（時間）は、送信機１００が対象データの伝送に使用する無線周波数の混雑具合の指標（混雑度）となる。即ち、制御部１０７は、使用する無線伝送路（無線周波数）における干渉や混雑（空き）の状況を、混雑度（空き時間率）として検出及び把握することができる。
【００２９】
上記情報に基づいて、制御部１０７は、その混雑度に応じた符号化レート（伝送レート）を、信号（Ａ３）として、符号化レート変更部１０１に指示することができる。例えば、制御部１０７は、混雑度が大きい場合（空き時間率が小さい場合）は、低い符号化レートを指示し、混雑度が小さい場合（空き時間率が大きい場合）は、高い符号化レートを指示する。
【００３０】
以上により、送信機１００では、受信機１１０への映像データ１０９の伝送レートに関し、周辺機器からの無線干渉によりＣＳＭＡ／ＣＡによる送信機会が十分とれないとき（混雑度が大きい場合）には、低い符号化レートに変更して送信し、そうでないとき（混雑度が小さい場合）には、高い符号化レートのまま送信することができる。その結果、無線伝送における映像データ１０９のパケットの損失や廃棄を抑制しつつ、受信機１１０へ当該映像データ１０９を届けることができる。
【００３１】
図２を用いて、送信機１００での処理制御について更に詳細に説明する。図２において、送信機１００の制御部１０７における無線伝送路状況検出及び符号化レート指示（機能切り替え動作）の処理フローを示している（なおＳは処理ステップを表す）。
【００３２】
制御部１０７から符号化レート変更部１０１への制御及び指示は、例えば以下のように実現可能である。制御部１０７は、周囲環境において、一定観測時間中で、送信機１００（自機）を含むすべての機器について、無線送信を行わなかった時間の割合（空き時間率）を算出し、この値を予め定めた閾値と比較し、この閾値よりも大きい場合には、高い符号化レートを指示し、逆に小さい場合には、低い符号化レートを指示する。これは詳しくは以下のような処理になる。
【００３３】
Ｓ２０１では、制御部１０７は、以下のような空き時間率算出処理（混雑度算出処理）を行う。前述のように、制御部１０７には、無線伝送路の状況、即ち、送信機１００（自機）が無線送信を行っている時間、及び自機と同様の周波数を用いる周辺機器（他機）が無線送信を行っている時間の情報が集められる。ここで、時間軸上、現時点ｔ０（ｔ０＝０）から予め定めた大きさの観測時間Ｔｍだけ過去に遡った時間ｔ１（ｔ１＝−Ｔｍ）を起点として、現時点ｔ０を終点とする、Ｔｍの長さの時間内で、送信機１００（自機）が無線送信していた時間（自機送信時間Ｔｘ）と他機が無線送信していた時間（他機送信時間Ｔｙ）とを除いた時間（Ｔｍ−Ｔｘ−Ｔｙ）、即ち自機含め周辺のどの機器も無線送信していなかった時間、がＴｍ中に占める割合を算出することができる。ここでは、この割合を、空き時間率（α）と呼ぶ。算出式としては、α＝（Ｔｍ−Ｔｘ−Ｔｙ）÷Ｔｍである。この空き時間率（α）は、送信機１００が使用する無線周波数についての、時間軸上での混雑具合を示す指標（混雑度）に対応するものとして用いることができる（空き時間率（α）が大きいことは、混雑度が低いことに対応する）。
【００３４】
Ｓ２０２において、上記算出した空き時間率（α）を、予め定めた閾値と比較する。αが閾値よりも大きかった場合（Ｓ２０２−Ｙ）、送信機１００が送信する機会は十分にあると看做して、Ｓ２０３で、制御部１０７は、符号化レート変更部１０１に、信号（Ａ３）により、高い符号化レートを指示する（換言すれば高解像度設定を通知する）。具体的には例えば、制御部１０７は、映像データの各フレームの画素数（解像度）をそのまま（映像ソース１０８のレート（解像度）のまま）にして送信すること（機能オフ）を、所定値（例えば０）により指示する。
【００３５】
一方、空き時間率（α）が閾値以下であった場合には（Ｓ２０２−Ｎ）、送信機１００が送信する機会が十分無かったと看做して、制御部１０７は、符号化レート変更部１０１に対して、低い符号化レートを指示する（換言すれば低解像度設定を通知する）。具体的には例えば、制御部１０７は、映像データの各フレームの画素数（解像度）を、元（映像ソース１０８）よりも少なくなるように変換（符号化）してから送信すること（機能オン）を、所定値（例えば１）により指示する。
【００３６】
なお、上記のように機能（符号化レート変更）のオン（１）／オフ（０）の切り替えを指示する構成に限らず、符号化レートの値を直接に指示する構成などとしてもよい。
【００３７】
符号化レート変更部１０１は、対象映像データ（映像ソース１０８）に対し、上記各指示（Ｓ２０３，Ｓ２０４）に応じた符号化処理を行う。本例では特に低レートへの変更の指示（Ｓ２０４）の場合のみ当該処理を実行（機能オン）する。
【００３８】
以上のような処理を、対象映像データの画像（フレーム）群の送信中に繰り返す。これにより、時間軸上の各時点（画像と対応付けられる）における混雑度（空き時間率（α））に応じた映像レート（伝送レート）で無線送信を行うことができる。
【００３９】
一方、図１で、受信機１１０では、アンテナ１１１から入力（受信）された無線信号（映像データ１０９）を、無線受信部１１２、ベースバンド部１１３、及び映像復号部１１４を通じて、映像信号（映像データ）に復元（復号）する。復元した信号は、必要に応じ画質改善部１１８などを経由してから、表示部１２０などに送られ、表示部１２０（画面）で映像が表示（再生）される。表示部１２０は、受信機１１０に外部接続されてもよいし、受信機１１０内に具備されてもよいし、また、受信機１１０に接続されるホスト装置などに具備されてもよい。
【００４０】
ここで、受信機１１０では、送信機１００での処理制御（映像データ１０９の伝送レート）に応じて、以下のような処理制御を行う。受信機１１０は、送信機１００での処理制御により当該映像データ１０９の符号化レート（伝送レート）が低く変更されていた場合（前記Ｓ２０４）には、以下の処理制御を行う。即ち、受信機１１０では、映像復号部１１４からの信号（データ）を、スイッチ１１６，１１７の切り替え動作を通じて、画質改善処理部１１８（超解像処理部１１５）を通すようにする。即ち当該映像データに対し超解像処理をオンする。この超解像処理により、当該映像における各フレームの解像度を回復する（高める）ことによって、当該映像の表示の画質を改善する。
【００４１】
また一方、受信機１１０は、送信機１００での処理制御により当該映像データ１０９の符号化レート（伝送レート）が高くされていた場合（前記Ｓ２０３）には、映像復号部１１４からの信号（データ）を、スイッチ１１６，１１７の切り替え動作を通じて、画質改善処理部１１８（超解像処理部１１５）を通さないようにする。即ち当該映像データに対し超解像処理をオフする。
【００４２】
以上のように、受信機１１０では、送信機１００でレートが低く変更された映像データ１０９を受信したときには、画質改善（回復）して表示でき、そうでないときには、そのまま高画質の映像データ１０９を得て表示できる。いずれも、受信映像表示における低画質や破綻などを避けることができる。
【００４３】
本システムでは、送信機１００と受信機１１０の間の無線伝送路（無線区間）において、使用する無線周波数が周辺他機にも用いられること（干渉有り）により空きが少なく、送信（伝送）可能なデータレートが制限され十分に確保できないときには、当該無線区間での伝送レートを低く設定して無線伝送することで伝送データ量を減少する（混雑の緩和）。そして、それによる当該映像データの画質の低下を、受信側（受信機１１０）にて画質改善部１１８（超解像処理部１１５）を通すことで改善（回復）した後に、映像表示（再生）することができる。また、本システムで、無線区間において、使用する無線周波数における混雑が少なく、データレートが十分に確保できるときには、映像の画質をできるだけ低下させないように伝送レートを高く設定して無線伝送する。そして、受信側（受信機１１０）でも送信側（送信機１００）と同等の画質で映像表示（再生）することができる。以上のように、通信環境（無線伝送路状況等）に応じて、受信側（受信機１１０）での表示映像等の品質低下を抑制または改善等できる。
【００４４】
なお、図１の構成では特に記載していないが、受信機１１０は、送信機１００側同様に、スイッチ１１６，１１７の切り替え（超解像処理機能のオン／オフ）制御等を行う制御部を備えてもよい。また、図１の構成では、受信機１１０は、機能のオン／オフの制御を、スイッチ１１６，１１７の切り替えにより、ハードウェア、回路的に行う構成としたが、プロセッサによるプログラム処理等によりソフトウェア的に行う構成などとしてもよい。
【００４５】
また、高／低の伝送レート及び機能のオン／オフなど、２つの状態を切り替える制御の構成としたが、これに限らず、例えば複数の状態を段階的に切り替える構成などとしてもよい。
【００４６】
また、送信機１００が周囲機器すべての送信開始及び終了タイミング（他機送信タイミング及び時間）を観測する構成としたが、これに限らず、例えば受信機１１０が他機送信タイミングを観測してその結果を送信機１００に伝える構成（受信機側が無線伝送路状況を検出して伝送レートを制御する構成）などとしてもよい。
【００４７】
（実施の形態２）
次に、図３を用いて、本発明の実施の形態２の無線通信システムを説明する。図３において、実施の形態２の無線通信システムの送信機３００の機能ブロック構成を示している。前述の形態と主に異なる部分として、送信機３００は、予めメモリ３０４に異なるレートの映像データ（３０１，３０２）を準備して格納しており、それらをスイッチ３０３の切り替え等により利用するものである。受信側（受信機１１０）は前述の形態と同様の構成である。
【００４８】
図３を用いて、本システムの処理動作等の全体の流れを説明する。送信機３００は、予め、メモリ３０４に、異なる符号化レートで符号化（符号化処理）された映像データ｛符号化映像データＡ３０１，Ｂ３０２｝を持っている。例えば、高い符号化レートのデータＡ３０１と、低い符号化レートのデータＢ３０２である。そして、送信機３００は、これらのデータ（３０１，３０２）のいずれかを、制御部１０７からの指示（Ａ３）に従いスイッチ３０３により切り替えて、ベースバンド部１０２及び無線送信部１０３を経由してアンテナ１０４から送信する。
【００４９】
実施の形態１同様に、制御部１０７には、無線送信部１０３からは、送信機３００（自機）の送信タイミング（Ａ１）が通知され、また、無線受信部１０６からは、アンテナ１０５で受信した他機（自機と同様周波数を用いているもの）の送信タイミング（Ａ２）が通知される。そして、制御部１０７は、無線伝送路で使用する無線周波数における時間軸上の混雑度（空き時間率（α））から、映像データ（３０１，３０２）のいずれを送信するかを選択決定し、それに対応する切り替え制御を行う。
【００５０】
本システムにおいて、例えば、送信機３００では、周辺機器からの無線干渉によりＣＳＭＡ／ＣＡによる送信機会が十分取れないときには、低い符号化レートで符号化された符号化映像データＢ３０２を、そうでないときには、高い符号化レートで符号化された符号化映像データＡ３０１を、受信機１１０へ送信することができる。そして、送信機３００から送信された映像データを受信する受信機１１０では、実施の形態１と同様の構成により、低い符号化レートの符号化映像データＢ３０２を受信したときのみ、画質改善部１１８（超解像処理部１１５）の処理をオンし、画質を改善（回復）して表示することができる。
【００５１】
（実施の形態３）
次に、図４を用いて、本発明の実施の形態３の無線通信システムを説明する。図４において、実施の形態３の無線通信システムの送信機４００の機能ブロック構成を示している。前述の形態と主に異なる部分として、送信機３００は、指示されたレートで符号化（符号化処理）を行う映像符号化部４０２を備えるものである。受信側（受信機１１０）は前述の形態と同様の構成である。
【００５２】
図４を用いて、本システムの処理動作等の全体の流れを説明する。本システムの送信機４００は、予め蓄積された映像データ（映像ソース）４０１を持ち、これを、映像符号化部４０２で符号化する。この際、映像符号化部４０２は、制御部１０７から符号化レートの指示を信号（Ａ３）により受け、その指示に従った符号化レート（解像度など）での符号化を行う。これにより符号化された映像データは、ベースバンド部１０２及び無線送信部１０３を経由してアンテナ１０４から送信される。
【００５３】
実施の形態１同様に、制御部１０７は、自機送信タイミング（Ａ１）及び他機送信タイミング（Ａ２）から無線伝送路状況（混雑度）を把握し、それに基づき、映像符号化部４０２での符号化レートを決定し、信号（Ａ３）により指示・切り替えを行う。
【００５４】
以上により、本システムの送信機４００では、前述の形態と同様に、無線伝送路状況に応じた符号化レートで映像データを伝送し、受信機１１０では、受信映像データのレートに応じて画質改善処理（超解像処理）をオンし、画質を改善（回復）して表示することができる。
【００５５】
（実施の形態４）
次に、図５，図６を用いて、本発明の実施の形態４の無線通信システムを説明する。図５において、実施の形態４の無線通信システムの受信機５１０の機能ブロック構成を示している。前述の形態と主に異なる部分として、受信機５１０は、映像復号部１１４からの信号に従い、画質改善部１１８（超解像処理部１１５）の処理を切り替えるものである。送信側（送信機１００等）は前述の形態と同様の構成である。
【００５６】
図５を用いて、本システムの処理動作等の全体の流れを説明する。本システムの受信機５１０は、送信機１００から送信された映像データ１０９を受信するものとする。受信機５１０は、アンテナ１１１から入力された無線信号（映像データ１０９）を、無線受信部１１２、ベースバンド部１１３、及び映像復号部１１４を通じて、映像信号（データ）に復元（復号）する。復元（復号）した映像（復号映像データ）は、前述の形態と同様に、必要に応じ画質改善部１１８を通して表示部１２０等へ送られる。
【００５７】
映像復号部１１４では、復号映像データから、対象映像データのレート情報を得る。ここで、映像データ１０９の形式を例えばＭＰＥＧとする。映像復号部１１４では、例えばＭＰＥＧ映像データ（ストリームデータ）におけるシーケンス・ヘッダ中の画素数情報と画像レート情報のように、復号映像データについての、画素数すなわち解像度（フレーム単位の解像度）の情報と、画像レートすなわちフレームレート（単位時間あたりのフレーム数）の情報と、を得ることができる。
【００５８】
ここで、映像復号部１１４において、復号映像データの画像（フレーム）の解像度が、予め定めた閾値以下である場合には、画質改善部１１８の超解像処理部１１５を通す（超解像処理をオンする）ことにより、映像の画像の解像度を回復する。一方、閾値より高い場合には、画質改善部１１８の超解像処理部１１５を通さない（超解像処理をオフする）。上記切り替えは、例えば、映像復号部１１４からスイッチ１１６，１１７へ超解像処理切り替え指示の信号（Ｂ１）を与えることにより行う。
【００５９】
以上により、受信機５１０では、解像度が設定よりも低い映像データを受信したときには当該解像度を回復し、そうでないときは受信したままの解像度の映像データを得て、表示することができる。なお、受信機５１０は、本処理制御のための制御部を具備してもよい。
【００６０】
図６を用いて、受信機５１０での処理制御について更に詳細に説明する。図６において、受信機５１０におけるレート情報に基づいた画質改善処理（超解像処理）の切り替え指示動作の処理フローを示している。
【００６１】
Ｓ６０１で、映像復号部１１４では、入力される映像ストリームデータから、復号映像データを得ると共に、ヘッダから、画素数（Ｐ）の情報を抽出する（その他、フレームレート情報などを抽出してもよい）。Ｓ６０２で、映像復号部１１４は、この抽出された画素数（フレーム解像度）（Ｐ）を、予め定めた閾値と比較する。抽出された画素数（Ｐ）が閾値よりも小さいときには（Ｓ６０２−Ｙ）、Ｓ６０３で、復号映像データに対して超解像処理をオンするように、信号（Ｂ１）により指示する。一方、画素数（Ｐ）が閾値以上であるときには（Ｓ６０２−Ｎ）、Ｓ６０４で、超解像処理をオフするように指示する。
【００６２】
これらの処理を、映像ストリーム受信中に繰り返すことにより、各時点での受信映像（画像）の解像度に応じて、超解像処理による画質の回復を施して表示することができる。
【００６３】
以上により、本システムの受信機５１０では、前述の形態と同様に、無線伝送路状況に応じた符号化レートで伝送された映像データを受信し、それ（特にフレーム解像度）に応じて画質改善（回復）してから映像表示することができる。
【００６４】
なお、上記構成に限らず、例えば、受信機５１０が、送信機１００から、映像ストリームデータとは別に制御情報（符号化レート情報）を受信し、受信機５１０がそのレート情報を参照して同様に画質改善処理の切り替えを行う構成なども可能である。
【００６５】
（実施の形態５）
次に、図７，図８を用いて、本発明の実施の形態５の無線通信システムを説明する。図７において、実施の形態５の無線通信システムの機能ブロック構成を示している。前述の形態と主に異なる部分として、送信機７００では、ベースバンド部７０２で制御部１０７からの指示（制御情報）の信号（Ａ３）を入力してデータとの多重化を行い、受信機７１０では、ベースバンド部７１３でデータと制御情報の分離を行い、分離した制御情報に従い画質改善処理の切り替え制御を行うものである。
【００６６】
図７を用いて、本システムの処理動作等の全体の流れを説明する。本システムの送信機７００は、入力された映像ソースに対し符号化レート変更部１０１にて符号化レート変更を施し、送信すべき映像データ量を調整した後、ベースバンド部７０２及び無線送信部１０３を通じてアンテナ１０４から無線送信する。
【００６７】
実施の形態１同様に、制御部１０７には、無線送信部１０３からの自機送信タイミングの情報（Ａ１）、及び無線受信部１０６からの他機送信タイミングの情報（Ａ２）が集まり、これにより、使用する無線周波数に係わる混雑度（空き時間率（α））を把握する。制御部１０７は、混雑度に応じた符号化レートを、信号（Ａ３）により、符号化レート変更部１０１に指示する。例えば、制御部１０７は、最新の一定時間中で、空き時間率（α）が閾値より大きかった場合には高い符号化レートを、閾値以下であった場合には低い符号化レートを、符号化レート変更部１０１へ指示する。
【００６８】
本システムでは、制御部１０７は、決定した符号化レートを、符号化レート変更部１０１に通知するのみでなく、ベースバンド部７０２にも通知する。ベースバンド部７０２では、符号化レート変更部１０１から入力される符号化された映像データ（符号化映像データ）と、制御部１０７から入力される符号化レート情報（Ａ３）とを、多重化して、無線送信部１０３に送る。
【００６９】
ここで、制御部１０７及びベースバンド部７０２において、制御情報としては、決定した符号化レートそのもの（Ａ３ａ）だけでなく、使用する無線周波数での混雑が原因で符号化レートを低く抑えたか否かを伝える情報（Ａ３ｂ）を併せて含ませるあるいは多重化する構成としてもよい。なお、上記情報（Ａ３ｂ）は、受信側（受信機７１０）の機能オン／オフの切り替え指示制御の情報と捉えることができる。
【００７０】
上記から、送信機７００では、前述の形態と同様に混雑度に応じた符号化レートの符号化映像データと、それに係わる制御情報（本例ではＡ３ａ，Ａ３ｂ）とを、多重化した信号７０９を、無線伝送する。
【００７１】
一方、本システムの受信機７１０では、アンテナ１１１から入力された無線信号（信号７０９）を、無線受信部１１２、ベースバンド部７１３、及び映像復号部１１４を通じて映像信号（映像データ）に復元（復号）する。ここで、映像データに多重化されていた制御情報（Ａ３ａ，Ａ３ｂ）のうち、送信機７００により映像符号化レートが低く変更されているか否かを表す情報（Ａ３ｂ）は、ベースバンド部７１３で符号化レート情報（Ａ３ａ）を分離すること等により得ることができる。ベースバンド部７１３は、この情報（Ａ３ａ）を、画質改善部１１８（超解像処理部１１５）のスイッチ１１６，１１７に与えることにより、超解像処理のオン／オフを制御する。
【００７２】
以上により、受信機７１０では、前述の形態と同様に、無線伝送路状況に応じた符号化レートで伝送された映像データを受信し、それに応じて画質改善（回復）してから映像表示することができる。
【００７３】
図８を用いて、受信機７１０の機能切り替え動作について更に詳細に説明する。Ｓ８０１で、ベースバンド部７１３では、送信機７００で多重化されて送信された信号７０９を受信した信号から符号化レート情報（Ａ３）を分離することにより、受信中の映像データの画像（フレーム）の画素数（Ｐ）等を把握することができる。Ｓ８０２で、ベースバンド部７１３は、符号化レート情報のうちの例えば画素数（Ｐ）を、予め定めた閾値と比較する。ベースバンド部７１３は、画素数（Ｐ）が閾値より小さいときには（Ｓ８０２−Ｙ）、Ｓ８０３で、映像復号部１１４からの復号映像データに対して画質改善処理（超解像処理）をオンするように、信号（Ｂ１）により指示する。一方、ベースバンド部７１３は、画素数（Ｐ）が閾値以上であるときには（Ｓ８０２−Ｎ）、Ｓ８０４で、画質改善処理（超解像処理）をオフするように、信号（Ｂ１）により指示する。
【００７４】
これらの処理を、映像ストリームデータの受信中に繰り返すことにより、各時点での受信映像（画像）の解像度に応じて、超解像処理による画質の回復を施して表示することができる。
【００７５】
（実施の形態６）
次に、図９を用いて、本発明の実施の形態６の無線通信システムを説明する。図９において、実施の形態６の無線通信システムの受信機９１０の機能ブロック構成を示している。前述の形態と主に異なる部分として、画質改善部９１８は、解像度変換部（超解像処理部）９１１と、フレーム数変換部（フレームレート処理部）９１２と、を備える。
【００７６】
図９を用いて、本システムの処理動作等の全体の流れを説明する。本システムの受信機９１０は、前述の形態と同様の送信機１００等から送信された映像データ１０９を受信するものとする。受信機９１０は、アンテナ１１１から入力された無線信号を、無線受信部１１２、ベースバンド部１１３、及び映像復号部１１４を通じて、映像信号（映像データ）に復元（復号）する。ここで、受信機９１０では、送信機１００により映像の符号化レートが低く変更されていた場合には、画質改善部９１８による画質回復の処理を行い、そうでない場合には、画質回復の処理を行わない。
【００７７】
本システムでは、画質改善部９１８での処理として、解像度変換部９１１による解像度変換処理（超解像処理）と、フレーム数変換部９１２によるフレームレート変換処理と、を有する。解像度変換部９１１では、映像データ（フレーム群）のうち１フレームの画素数（フレーム解像度）を増す処理（超解像処理）を行うことにより、フレーム単位の画質を回復（改善）する。また、フレーム数変換部９１２では、映像データ（フレーム群）におけるフレームを補完してフレーム数（フレームレート）を増す処理を行うことにより、動画像の画質を回復（改善）する。
【００７８】
解像度変換部９１１を経由（オン）するか否かと、フレーム数変換部９１２を経由（オン）するか否かとは、それぞれ切り替え制御することが可能である。即ち、画質改善処理の各処理のオン／オフの組み合わせとして、両方オフ、一方のみオン、両方オン、といった中から適宜選択可能である。
【００７９】
また、画質改善処理の各処理の程度（解像度やフレームレートの変化の程度や、処理パラメータ等）を適宜制御してもよい。また、上記切り替え（選択）は、送信機１００側が指示する構成としてもよいし、受信機９１０側が決定する構成としてもよい。
【００８０】
上記により、受信機９１０では、映像の符号化レートが設定よりも低い映像データを受信したときには、フレーム解像度及び／又はフレーム数の回復をオン／オフすることができ、そうでないときは、そのままの映像データを得ることができる。
【００８１】
以上により、受信機９１０では、前述の形態と同様に、無線伝送路状況に応じた符号化レートで伝送された映像データを受信し、それに応じて画質改善（回復）してから映像表示することができる。
【００８２】
（実施の形態７）
図１０，図１１を用いて、本発明の実施の形態７の無線通信システムを説明する。図１０において、実施の形態７の無線通信システムの受信機１０１０の機能ブロック構成を示している。前述の形態と主に異なる部分として、受信機１０１０は、制御部１０１１を備え、符号化レート等の情報（Ｂ１）と、表示部１０２０からの性能情報（Ｃ１）とに基づき、画質改善部１０１８の処理のオン／オフを切り替え制御するものである。
【００８３】
図１０を用いて、本システムの処理動作等の全体の流れを説明する。本システムの受信機１０１０は、前述の形態と同様の送信機１００から送信された映像データ１０９を受信するものとする。受信機１０１０は、アンテナ１１１から入力された無線信号を、無線受信部１１２、ベースバンド部１１３、及び映像復号部１１４を通じて映像信号（映像データ）に復元（復号）する。ここで、送信機１００により映像符号化レートが低く変更されていた場合には、画質回復の処理を行い、そうでない場合には、画質回復の処理を行わない。受信機１０１０は、画質改善部１０１８として、例えば前述の形態と同様に、解像度変換部９１１と、フレーム数変換部９１２と、を備える。
【００８４】
受信機１０１０で受信した映像データは、例えば受信機１０１０に接続されている表示部１０２０において映像として表示（再生）される。なお、本例では、受信機１０１０と表示部１０２０をそれぞれ設けているが、これに限らず、受信機１０１０が表示部１０２０の機能を具備する構成や、逆に表示部１０２０が受信機１０１０の機能を具備する構成なども可能である。
【００８５】
本システムで、表示部１０２０は、表示部１０２０の性能、即ち再生可能な映像データの解像度及びフレームレート等の情報（性能情報Ｃ１）を、受信機１０１０に通知する。あるいは、受信機１０１０から表示部１０２０の性能情報Ｃ１を取得する。あるいは、例えば、受信機１０１０に表示部１０２０が一旦接続されると、性能情報Ｃ１が、制御部１０１１へ得られ、また、別の表示部１０２０が接続されると、同様に、その性能情報Ｃ１が得られる。
【００８６】
受信機１０１０の制御部１０１１は、表示部１０２０の性能情報Ｃ１と、映像復号部１１４から通知される受信映像データ（復号映像データ）の解像度及びフレームレート等の情報（Ｂ１）とから、当該映像データに対して画質改善部１０１８の処理を適用するか否か（解像度変換部９１１を経由するか否か、及び／又は、フレーム数変換部９１２を経由するか否か）を選択決定し、信号を画質改善部１０１８のスイッチに与えること等により切り替えを行う。
【００８７】
上記切り替え制御の判断は、例えば以下のように実現できる。制御部１０１１は、受信映像データのフレーム解像度が、表示部１０２０により表示可能な解像度の上限よりも低い場合には、解像度変換部９１１を経由するように切り替え、そうでない場合には、解像度変換部９１１を経由しないように切り替える。また、制御部１０１１は、受信映像データのフレームレートが、表示部１０２０により表示可能なフレームレートの上限よりも低い場合には、フレーム数変換部９１２を経由するように切り替え、そうでない場合には、経由しないように切り替える。
【００８８】
図１１を用いて、本システムの受信機１０１０の処理制御（機能切り替え動作）について更に詳細に説明する。Ｓ１１０１で、制御部１０１１は、表示部１０２０から、性能情報Ｃ１として、表示部１０２０で表示可能な画素数（フレーム解像度）の上限値（最大解像度情報ｃ１）、及び同じく表示可能なフレームレートの上限値（最大フレームレートｃ２）の情報を取得する。Ｓ１１０２で、映像復号部１１４では、映像ストリームデータ（例えばヘッダ）から、画素数（Ｐ）の情報と、フレームレート（Ｑ）の情報と、を抽出する。
【００８９】
Ｓ１１１３で、制御部１０１１は、この抽出した画素数（フレーム解像度）（Ｐ）を、解像度変換部９１１で超解像処理した場合の結果の画素数（ｐ）と、表示部１０２０で表示可能な画素数の上限値（最大解像度情報ｃ１）とを比較する。超解像処理後の画素数（ｐ）が、上限値（ｃ１）よりも大きいときには（Ｓ１１０３−Ｙ）、Ｓ１１０４で、制御部１０１１から画質改善部１０１８へ、復号映像データに対して超解像処理をオフするように指示する。一方、超解像処理後の画素数（ｐ）が上限値（ｃ１）以下であるときには（Ｓ１１０３−Ｎ）、Ｓ１１０５で、制御部１０１１から画質改善部１０１８へ、超解像処理をオンするように指示する。
【００９０】
また同様に、Ｓ１１０６では、Ｓ１１０２で抽出したフレームレート（Ｑ）に対して、フレーム数変換部９１２でフレーム変換処理を施した場合の結果のフレームレート（ｑ）と、表示部１０２０で表示可能なフレームレートの上限値（最大フレームレートｃ２）とを比較する。変換後のフレームレート（ｑ）が、上限値（ｃ２）よりも大きいときには（Ｓ１１０６−Ｙ）、Ｓ１１０７で、制御部１１０１から画質改善部１１０８へ、復号映像データに対してフレームレート変換処理をオフするように指示する。一方、フレームレート変換後のフレームレート（ｑ）が、上限値（ｃ２）以下であるときには（Ｓ１１０６−Ｎ）、Ｓ１１０８で、制御部１１０１から画質改善部１１０８へ、フレームレート変換処理をオンするように指示する。
【００９１】
これらの切り替え処理を、映像ストリームデータ受信中に繰り返すことにより、各時点での受信映像のフレーム解像度とフレームレート、及び表示部１０２０で表示可能な解像度上限（ｃ１）とフレームレート上限（ｃ２）に応じて、超解像処理及び／又はフレームレート変換処理による画質の回復（改善）を、それぞれオン／オフすることができる。なお上記オン／オフの処理の順番等は一例である。
【００９２】
上記により、受信機１０１０では、受信映像データの符号化レートと、表示部１０２０の表示の性能とに応じて、映像の解像度やフレームレートの回復を適宜選択することができ、表示部１０２０で適切な画質で表示することができる。
【００９３】
（実施の形態８）
次に、図１２を用いて、本発明の実施の形態８の無線通信システムを説明する。図１２において、実施の形態８の無線通信システムの全体構成を示している。前述の形態と主に異なる部分として、送信機１２００から複数の各受信機１２１０Ａ〜Ｃへ映像データを伝送する場合である。なお前述の形態において単一の受信機ではなく複数の受信機を有するシステムの構成として捉えれば、本実施の形態と同様になる。
【００９４】
本システムにおいて、無線通信装置として、送信機１２００と、受信機１２１０（１２１０Ａ，Ｂ，Ｃ）とを有する。送信機１２００は、例えば実施の形態１（図１）の送信機１００と同様の構成である。受信機１２１０は、例えば実施の形態７（図１０）の受信機１０１０と同様の構成である。また、各受信機１２１０Ａ〜Ｃに接続される表示部１２２０として、１２２０（１２２０Ａ，Ｂ，Ｃ）を有する。表示部１２２０は、例えば実施の形態７（図１０）の表示部１０２０と同様の構成である。なお前述同様に、受信機１２１０と表示部１２２０は一体構成でもよい。本例では、１台の送信機１２００と３台の受信機１２１０を有する場合を示している。
【００９５】
送信機１２００（例えばそのうちの制御部１２０１）は、周囲環境の複数の他機（受信機１２１０）を含む無線伝送路状況の検出、及び、それに応じた無線区間の伝送レートの変更・調整などを制御する。即ち、送信機１２００は、自機と同様の無線周波数を使用する各受信機１２１０Ａ〜Ｃの状況に基づく時間軸上の混雑度（空き時間率（α））を検出（算出）し、それに応じて、通信相手機器（例えば各受信機１２１０Ａ〜Ｃ）へ送信（伝送）する映像データ等の符号化レートを変更・調整する。
【００９６】
各受信機１２１０Ａ〜Ｃは、送信機１２００から送信される映像データ等を受信する。そして、各受信機１２１０Ａ〜Ｃ（例えばそのうちの制御部１２１１）は、対応する表示部１２２０Ａ〜Ｃの性能（表示可能な映像の解像度及びフレームレート等）に応じて、受信映像データ等に対する画質改善処理のオン／オフを制御する。上記画質改善処理は、例えば各画質改善部１２１２による解像度変換処理（超解像処理）及びフレーム数変換処理等である。
【００９７】
上記により、周囲環境における他機を含む状況に応じて、無線区間のデータレートを変更することで、受信側（各受信機１２１０Ａ〜Ｃ）での映像の破綻などを防ぐことができる。尚且つ、各受信機１２１０Ａ〜Ｃに接続された各表示部１２２０Ａ〜Ｃの性能に応じて、受信映像データの画質（解像度及びフレームレート等）を変換することで、無線区間のデータレートを低くした場合でも、受信側（各受信機１２１０Ａ〜Ｃ）で画質の改善（回復）を行って適切に表示することができる。
【００９８】
送信機１２００から受信機１２１０Ａ〜Ｃへ同じレートで映像データが送信された場合、各受信機１２１０Ａ〜Ｃの表示部１２２０Ａ〜Ｃの性能が異なる場合には、それぞれに応じた画質で表示されるので、効率的である。
【００９９】
以上、本発明者によってなされた発明を実施の形態に基づき具体的に説明したが、本発明は前記実施の形態に限定されるものではなく、その要旨を逸脱しない範囲で種々変更可能であることは言うまでもない。
【産業上の利用可能性】
【０１００】
本発明は、無線通信システムに利用可能である。
【図面の簡単な説明】
【０１０１】
【図１】本発明の実施の形態１である無線通信システムの機能ブロック構成を示す図である。
【図２】本発明の実施の形態１の無線通信システムにおける送信機での切り替え制御の処理フローを示す図である。
【図３】本発明の実施の形態２である無線通信システムにおける送信機の構成を示す図である。
【図４】本発明の実施の形態３である無線通信システムにおける送信機の構成を示す図である。
【図５】本発明の実施の形態４である無線通信システムにおける受信機の構成を示す図である。
【図６】本発明の実施の形態４の無線通信システムにおける受信機での切り替え制御の処理フローを示す図である。
【図７】本発明の実施の形態５である無線通信システムの機能ブロック構成を示す図である。
【図８】本発明の実施の形態５の無線通信システムにおける受信機での切り替え制御の処理フローを示す図である。
【図９】本発明の実施の形態６である無線通信システムにおける受信機の構成を示す図である。
【図１０】本発明の実施の形態７である無線通信システムにおける受信機の構成を示す図である。
【図１１】本発明の実施の形態７の無線通信システムにおける受信機での切り替え制御の処理フローを示す図である。
【図１２】本発明の実施の形態８である無線通信システムにおける全体構成を示す図である。
【符号の説明】
【０１０２】
１００，３００，４００，７００，１２００…送信機、１０１…符号化レート変更部、１０２…ベースバンド部、１０３…無線送信部、１０４…アンテナ、１０５…アンテナ、１０６…無線受信部、１０７，１２０１…制御部、１０８…映像ソース、１０９…映像データ（伝送無線信号）、１１０，５１０，７１０，９１０，１０１０，１２１０Ａ〜Ｃ…受信機、１１１…アンテナ、１１２…無線受信部、１１３…ベースバンド部、１１４…映像復号部、１１５…超解像処理部、１１６，１１７…スイッチ、１１８，９１８，１０１８，１２１２…画質改善部、１２０，１０２０，１２２０Ａ〜Ｃ…表示部、３０１…符号化映像データＡ、３０２…符号化映像データＢ、３０３…スイッチ、３０４…メモリ、４０１…映像データ（映像ソース）、４０２…映像符号化部、７０２…ベースバンド部、７０９…信号、７１３…ベースバンド部、９１１…解像度変換部（超解像処理部）、９１２…フレーム数変換部、１０１１，１２１１…制御部。
【特許請求の範囲】
【請求項１】
送信機と受信機を有しその間で無線により映像等のデータを伝送する無線通信システムであって、
前記送信機は、当該送信機と前記受信機の間の無線伝送路の状況に応じて、前記受信機へ送信する第１の映像データの符号化レートを変更する処理制御を行う制御部を有し、
前記受信機は、映像データに対しフレーム単位で画素間を補完して解像度を上げる超解像処理を含む画質改善処理を施す画質改善部を有し、前記送信機から受信した前記第１の映像データに対し、その符号化レートに応じて、前記画質改善処理を施す処理制御を行い、
前記無線伝送路の状況が良好でない場合に、前記送信機では、前記制御部により、前記第１の映像データの符号化レートを低く変更して伝送し、それに対応して、前記受信機では、前記画質改善部による前記画質改善処理をオンすること、を特徴とする無線通信システム。
【請求項２】
請求項１記載の無線通信システムにおいて、
前記送信機は、自機の使用する無線周波数チャネルに含まれる無線周波数を使用する他の送信機を含む環境において、自機の無線送信タイミングの情報と、キャリアセンスにより得られる前記他の送信機の無線送信タイミングの情報と、を参照することにより、前記無線伝送路の状況を時間軸上の混雑度または空き時間率として検出または測定する手段を有すること、を特徴とする無線通信システム。
【請求項３】
請求項１記載の無線通信システムにおいて、
前記送信機の制御部は、複数種類の異なる符号化レートを持つ各符号化映像データを予めメモリに用意しておき、これらの中から、前記無線伝送路の状況に応じて、前記第１の映像データとして送信するデータを選択すること、を特徴とする無線通信システム。
【請求項４】
請求項１記載の無線通信システムにおいて、
前記送信機の制御部は、前記無線伝送路の状況に応じて前記符号化レートを決定し、その符号化レートで映像データを符号化処理したデータを、前記第１の映像データとして送信すること、を特徴とする無線通信システム。
【請求項５】
請求項１記載の無線通信システムにおいて、
前記受信機は、前記受信した前記第１の映像データを復号したデータから、当該映像データの符号化レートの情報を参照して、前記画質改善処理を施すか否かを切り替え制御すること、を特徴とする無線通信システム。
【請求項６】
請求項１記載の無線通信システムにおいて、
前記送信機の制御部は、前記第１の映像データに加えて、当該第１の映像データの符号化レートの情報を、多重化して、もしくは別のデータとして、前記受信機へ送信し、
前記受信機は、前記送信機からの前記第１の映像データの前記符号化レートの情報を、分離して、もしくは別のデータとして受信して、前記画質改善処理を施すか否かを切り替え制御すること、を特徴とする無線通信システム。
【請求項７】
請求項１記載の無線通信システムにおいて、
前記受信機は、前記画質改善部による前記画質改善処理として、前記フレーム単位の超解像処理と、フレーム間を補完してフレーム数を増すことによりフレームレートを上げる処理と、の組み合わせを行うこと、を特徴とする無線通信システム。
【請求項８】
請求項７記載の無線通信システムにおいて、
前記受信機は、前記受信した前記第１の映像データを映像として表示する表示部の性能に応じて、前記画質改善処理のオン／オフまたはその程度を制御する制御部を有すること、を特徴とする無線通信システム。
【請求項９】
請求項１または８に記載の無線通信システムにおいて、
前記送信機から送信した前記第１の映像データを受信する前記受信機を複数有し、
各受信機には、前記受信した前記第１の映像データを映像として表示する表示部が接続または内蔵され、
各受信機は、前記表示部の性能に応じて、前記画質改善処理を施すか否かの切り替え制御を行うこと、を特徴とする無線通信システム。
【請求項１０】
送信機と受信機を有しその間で無線により映像等のデータを伝送する無線通信システムにおける前記送信機であって、
前記送信機は、当該送信機と前記受信機の間の無線伝送路の状況に応じて、前記受信機へ送信する第１の映像データの符号化レートを変更する処理制御を行う制御部を有し、
前記受信機は、映像データに対しフレーム単位で画素間を補完して解像度を上げる超解像処理を含む画質改善処理を施す画質改善部を有し、前記送信機から受信した前記第１の映像データに対し、その符号化レートに応じて、前記画質改善処理を施す処理制御を行い、
前記無線伝送路の状況が良好でない場合に、前記送信機では、前記制御部により、前記第１の映像データの符号化レートを低く変更して伝送し、それに対応して、前記受信機では、前記画質改善部による前記画質改善処理をオンすること、を特徴とする送信機。
【請求項１１】
送信機と受信機を有しその間で無線により映像等のデータを伝送する無線通信システムにおける前記受信機であって、
前記送信機は、当該送信機と前記受信機の間の無線伝送路の状況に応じて、前記受信機へ送信する第１の映像データの符号化レートを変更する処理制御を行う制御部を有し、
前記受信機は、映像データに対しフレーム単位で画素間を補完して解像度を上げる超解像処理を含む画質改善処理を施す画質改善部を有し、前記送信機から受信した前記第１の映像データに対し、その符号化レートに応じて、前記画質改善処理を施す処理制御を行い、
前記無線伝送路の状況が良好でない場合に、前記送信機では、前記制御部により、前記第１の映像データの符号化レートを低く変更して伝送し、それに対応して、前記受信機では、前記画質改善部による前記画質改善処理をオンすること、を特徴とする受信機。
【請求項１】
送信機と受信機を有しその間で無線により映像等のデータを伝送する無線通信システムであって、
前記送信機は、当該送信機と前記受信機の間の無線伝送路の状況に応じて、前記受信機へ送信する第１の映像データの符号化レートを変更する処理制御を行う制御部を有し、
前記受信機は、映像データに対しフレーム単位で画素間を補完して解像度を上げる超解像処理を含む画質改善処理を施す画質改善部を有し、前記送信機から受信した前記第１の映像データに対し、その符号化レートに応じて、前記画質改善処理を施す処理制御を行い、
前記無線伝送路の状況が良好でない場合に、前記送信機では、前記制御部により、前記第１の映像データの符号化レートを低く変更して伝送し、それに対応して、前記受信機では、前記画質改善部による前記画質改善処理をオンすること、を特徴とする無線通信システム。
【請求項２】
請求項１記載の無線通信システムにおいて、
前記送信機は、自機の使用する無線周波数チャネルに含まれる無線周波数を使用する他の送信機を含む環境において、自機の無線送信タイミングの情報と、キャリアセンスにより得られる前記他の送信機の無線送信タイミングの情報と、を参照することにより、前記無線伝送路の状況を時間軸上の混雑度または空き時間率として検出または測定する手段を有すること、を特徴とする無線通信システム。
【請求項３】
請求項１記載の無線通信システムにおいて、
前記送信機の制御部は、複数種類の異なる符号化レートを持つ各符号化映像データを予めメモリに用意しておき、これらの中から、前記無線伝送路の状況に応じて、前記第１の映像データとして送信するデータを選択すること、を特徴とする無線通信システム。
【請求項４】
請求項１記載の無線通信システムにおいて、
前記送信機の制御部は、前記無線伝送路の状況に応じて前記符号化レートを決定し、その符号化レートで映像データを符号化処理したデータを、前記第１の映像データとして送信すること、を特徴とする無線通信システム。
【請求項５】
請求項１記載の無線通信システムにおいて、
前記受信機は、前記受信した前記第１の映像データを復号したデータから、当該映像データの符号化レートの情報を参照して、前記画質改善処理を施すか否かを切り替え制御すること、を特徴とする無線通信システム。
【請求項６】
請求項１記載の無線通信システムにおいて、
前記送信機の制御部は、前記第１の映像データに加えて、当該第１の映像データの符号化レートの情報を、多重化して、もしくは別のデータとして、前記受信機へ送信し、
前記受信機は、前記送信機からの前記第１の映像データの前記符号化レートの情報を、分離して、もしくは別のデータとして受信して、前記画質改善処理を施すか否かを切り替え制御すること、を特徴とする無線通信システム。
【請求項７】
請求項１記載の無線通信システムにおいて、
前記受信機は、前記画質改善部による前記画質改善処理として、前記フレーム単位の超解像処理と、フレーム間を補完してフレーム数を増すことによりフレームレートを上げる処理と、の組み合わせを行うこと、を特徴とする無線通信システム。
【請求項８】
請求項７記載の無線通信システムにおいて、
前記受信機は、前記受信した前記第１の映像データを映像として表示する表示部の性能に応じて、前記画質改善処理のオン／オフまたはその程度を制御する制御部を有すること、を特徴とする無線通信システム。
【請求項９】
請求項１または８に記載の無線通信システムにおいて、
前記送信機から送信した前記第１の映像データを受信する前記受信機を複数有し、
各受信機には、前記受信した前記第１の映像データを映像として表示する表示部が接続または内蔵され、
各受信機は、前記表示部の性能に応じて、前記画質改善処理を施すか否かの切り替え制御を行うこと、を特徴とする無線通信システム。
【請求項１０】
送信機と受信機を有しその間で無線により映像等のデータを伝送する無線通信システムにおける前記送信機であって、
前記送信機は、当該送信機と前記受信機の間の無線伝送路の状況に応じて、前記受信機へ送信する第１の映像データの符号化レートを変更する処理制御を行う制御部を有し、
前記受信機は、映像データに対しフレーム単位で画素間を補完して解像度を上げる超解像処理を含む画質改善処理を施す画質改善部を有し、前記送信機から受信した前記第１の映像データに対し、その符号化レートに応じて、前記画質改善処理を施す処理制御を行い、
前記無線伝送路の状況が良好でない場合に、前記送信機では、前記制御部により、前記第１の映像データの符号化レートを低く変更して伝送し、それに対応して、前記受信機では、前記画質改善部による前記画質改善処理をオンすること、を特徴とする送信機。
【請求項１１】
送信機と受信機を有しその間で無線により映像等のデータを伝送する無線通信システムにおける前記受信機であって、
前記送信機は、当該送信機と前記受信機の間の無線伝送路の状況に応じて、前記受信機へ送信する第１の映像データの符号化レートを変更する処理制御を行う制御部を有し、
前記受信機は、映像データに対しフレーム単位で画素間を補完して解像度を上げる超解像処理を含む画質改善処理を施す画質改善部を有し、前記送信機から受信した前記第１の映像データに対し、その符号化レートに応じて、前記画質改善処理を施す処理制御を行い、
前記無線伝送路の状況が良好でない場合に、前記送信機では、前記制御部により、前記第１の映像データの符号化レートを低く変更して伝送し、それに対応して、前記受信機では、前記画質改善部による前記画質改善処理をオンすること、を特徴とする受信機。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２００９−８１７５３（Ｐ２００９−８１７５３Ａ）
【公開日】平成２１年４月１６日（２００９．４．１６）
【国際特許分類】
【出願番号】特願２００７−２５０４４６（Ｐ２００７−２５０４４６）
【出願日】平成１９年９月２７日（２００７．９．２７）
【出願人】（０００００５１０８）株式会社日立製作所 (27,607)
【Ｆターム（参考）】
【公開日】平成２１年４月１６日（２００９．４．１６）
【国際特許分類】
【出願日】平成１９年９月２７日（２００７．９．２７）
【出願人】（０００００５１０８）株式会社日立製作所 (27,607)
【Ｆターム（参考）】
[ Back to top ]