デュアルデジタルカメラセンサを備えたモバイルデバイス及び使用方法
【課題】２つのセンサから取得された画像を合成して高度なアプリケーションをサポートする。
【解決手段】モバイルデバイス１００は、第１のセンサ１０２と、第２のセンサ１０４と、センサ位置コントローラ１０６と、カメラ処理パイプライン１０８とを含む。パイプラインは、例えばモザイク除去、レンズロールオフ補正、拡大縮小、色補正、色変換、及び空間フィルタリングのような技術を実行する。センサ位置コントローラは、センサ１０２、１０４を回転、シフト、又はスライドして、２つのセンサの場所及び／又は位置を調整する。センサ１０２、１０４は、画像品質の改善、３−Ｄ画像及びビデオの視覚化、及び３６０度パノラマビデオの生成のような機能をもつ。
【解決手段】モバイルデバイス１００は、第１のセンサ１０２と、第２のセンサ１０４と、センサ位置コントローラ１０６と、カメラ処理パイプライン１０８とを含む。パイプラインは、例えばモザイク除去、レンズロールオフ補正、拡大縮小、色補正、色変換、及び空間フィルタリングのような技術を実行する。センサ位置コントローラは、センサ１０２、１０４を回転、シフト、又はスライドして、２つのセンサの場所及び／又は位置を調整する。センサ１０２、１０４は、画像品質の改善、３−Ｄ画像及びビデオの視覚化、及び３６０度パノラマビデオの生成のような機能をもつ。
【発明の詳細な説明】
【技術分野】
【０００１】
本願は、一般にモバイルデバイスに関し、特に、デュアルデジタルカメラセンサを備えたモバイルデバイスと、その使用方法とに関する。
【背景技術】
【０００２】
例えばセルラー電話のようないくつかのモバイルデバイスは、画像を取得するためのセンサを有することができる。
【発明の概要】
【０００３】
１つの局面は、第１の画像センサと、第１の画像センサに対する位置を変更するように構成された第２の画像センサと、第２の画像センサの位置を制御するように構成されたコントローラと、第１の画像センサ及び第２の画像センサによって取得された画像を処理し、合成するように構成された画像処理モジュールとを備える装置に関する。
【０００４】
別の局面は、第１の画像センサに対する第２の画像センサの位置を調整することと、第１の画像センサ及び第２の画像センサから画像を受け取ることと、第１の画像センサ及び第２の画像センサによって取得した画像を処理し、合成することとを備える方法に関する。
【０００５】
１つ又は複数の実施形態の詳細が、図面及び以下の説明に示される。
【図面の簡単な説明】
【０００６】
【図１】図１は、２つ又はそれ以上のカメラセンサを備えるモバイルデバイスを示す。
【図２】図２は、図１のデバイスを用いるビデオモード処理の方法を示す。
【図３Ａ】図３Ａは、第１のセンサによって取得した短露光時間画像の例を示す。
【図３Ｂ】図３Ｂは、第２のセンサによって取得した長露光時間画像の例を示す。
【図３Ｃ】図３Ｃは、ダイナミックレンジの改善を伴う、図３Ａ及び図３Ｂからの合成画像の例を示す。
【図４Ａ】図４Ａは、０度回転した第１のセンサによって取得した画像を示す。
【図４Ｂ】図４Ｂは、１５度回転した第１のセンサによって取得した画像を示す。
【図４Ｃ】図４Ｃは、１５度回転した第２のセンサによって取得した画像を示す。
【図４Ｄ】図４Ｄは、３０度回転した第１のセンサによって取得した画像を示す。
【図４Ｅ】図４Ｅは、３０度回転した第２のセンサによって取得した画像を示す。
【図４Ｆ】図４Ｆは、第１及び第２のセンサの合成画像から生成した立体画像を示す。
【図５Ａ】図５Ａは、近端すなわち近い方の対象物に焦点を合わせる１つのセンサの例を示す。
【図５Ｂ】図５Ｂは、遠端すなわち遠い方の対象物に焦点を合わせる１つのセンサの例を示す。
【図５Ｃ】図５Ｃは、図５Ａ及び図５Ｂからの、完全に焦点の合った立体合成画像の例を示す。
【発明を実施するための形態】
【０００７】
デュアルセンサを備えるデバイスには、例えば増加したデータ処理の計算複雑さ、電力消費、位置決め、及びこれらセンサのための解像度設定のような多くの問題がありうる。例えばカメラ電話のようなデバイスは、２つの画像センサを定位置に有することができる。つまり、２つのセンサは動かすことができない。２つのセンサは、例えば異なる解像度を有する１次センサ及び２次センサのように、異なって構成され、扱われうる。低解像度センサはビデオを取得するために用いることができ、高解像度センサは静止画像を取得するために用いることができる。２つのセンサから取得された画像は合成することができない。このデバイスは、以下で説明する高度なアプリケーションをサポートすることができないであろう。
【０００８】
（少なくとも１つのセンサが移動可能である２つのセンサを備えるデバイス）
図１は、２つ又はそれ以上のセンサ１０２、１０４を備えるモバイルデバイス１００を示す。モバイルデバイス１００は、デジタル画像及び／又はビデオシーケンスを取得、生成、処理、補正、拡大縮小、符号化、復号、送信、格納、及び表示するように構成することができる。モバイルデバイス１００は、例えば無線通信デバイス、携帯情報端末（ＰＤＡ）、ラップトップコンピュータ、デスクトップコンピュータ、デジタルカメラ、デジタル記録デバイス、ネットワーク対応のデジタルテレビ、モバイル電話、セルラー電話、衛星電話、カメラ電話、地上ベースの無線電話、（「ウォーキー・トーキー」と称されることがある）直接双方向通信デバイス等のようなデバイスを表すか、又はそのようなデバイスに実装されうる。
【０００９】
モバイルデバイス１００は、第１のセンサ１０２と、第２のセンサ１０４と、センサ位置コントローラ１０６と、カメラ処理パイプライン１０８と、ディスプレイ１１０と、ビデオ符号器１１２と、静止画像符号器１１４と、メモリ１１６と、カメラコントローラ１１８と、ユーザインタフェース１２０と、プロセッサ１２８と、トランシーバ１３０とを含むことができる。図１に示す構成要素に加えて、又はその代わりに、モバイルデバイス１００は他の構成要素を含むこともできる。図１に示すアーキテクチャは単なる例である。本明細書に示す特徴及び技術は、他の様々なアーキテクチャを用いて実現することができる。
【００１０】
センサ１０２、１０４は、デジタルカメラセンサであることができる。センサ１０２、１０４は、静止画像スナップショット及び／又はビデオシーケンスを取得することができる。各センサは、個々のセンサ又はセンサ要素の表面に配置された色フィルタアレイ（ＣＦＡ）を含むことができる。
【００１１】
メモリ１１６は、処理前後に画像又はビデオシーケンスを格納することができる。メモリ１１６は、揮発性記憶装置及び不揮発性記憶装置を含むことができる。メモリ１１６は、例えばダイナミック・ランダム・アクセス・メモリ（ＤＲＡＭ）、フラッシュメモリ、ＮＯＲ又はＮＡＮＤゲートメモリ、又はその他任意のデータ記憶技術のような任意のタイプのデータ記憶手段を備えることができる。
【００１２】
（エンジン、モジュール、処理ユニット等とも呼ばれる）カメラ処理パイプライン１０８は、モバイル電話のためのチップセットを備えることができ、チップセットは、ハードウェア、ソフトウェア、ファームウェア、及び／又は、１つ又は複数のマイクロプロセッサ、デジタル信号プロセッサ（ＤＳＰ）、特定用途向け集積回路（ＡＳＩＣ）、フィールド・プログラマブル・ゲート・アレイ（ＦＰＧＡ）、又はこれらの様々な組み合わせを含むことができる。カメラ処理パイプライン１０８は、画像及び／又はビデオシーケンスの品質を改善するために１つ又は複数の画像処理技術を実行することができる。例えばパイプライン１０８は、例えばモザイク除去、レンズロールオフ補正、拡大縮小、色補正、色変換、及び空間フィルタリングのような技術を実行することができる。パイプライン１０８は、他の技術を実行することもできる。
【００１３】
ビデオ符号器１１２は、デジタルビデオデータを符号化（すなわち圧縮）及び復号（すなわち解凍）する符号器／復号器（ＣＯＤＥＣ）を備えることができる。
【００１４】
静止画像符号器１１４は、画像データを符号化（すなわち圧縮）及び復号（すなわち解凍）する符号器／復号器（ＣＯＤＥＣ）を備えることができる。
【００１５】
トランシーバ１３０は、符号化した画像又はビデオシーケンスを別のデバイス又はネットワークと送受信することができる。トランシーバ１３０は、例えば符号分割多元接続（ＣＤＭＡ）のような無線通信規格を用いることができる。ＣＤＭＡ規格の例は、ＣＤＭＡ １ｘ Ｅｖｏｌｕｔｉｏｎ Ｄａｔａ Ｏｐｔｉｍｉｚｅｄ（ＥＶ−ＤＯ）、広帯域ＣＤＭＡ（ＷＣＤＭＡ）等を含む。
【００１６】
（センサの更なる詳細）
２つの別々のセンサ１０２、１０４を備えるモバイルデバイス１００の設計又は特徴が以下で説明される。センサ１０２、１０４は、２つの局面を有することができる。第１に、センサ位置コントローラ１０６は、例えばセンサ１０２、１０４を１つ又は複数の方向に回転、シフト、又はスライドして、２つのセンサ１０２、１０４の場所及び／又は位置を調整することができる。移動のいくつかの例は図１に示されるが、その他の２次元（２−Ｄ）又は３次元（３−Ｄ）移動も実現することができる。この移動は、ユーザ及び／又はカメラコントローラ１１８によって設定されることができる。調整可能センサ１０２、１０４は、例えば画像品質の改善、３−Ｄ画像及びビデオの視覚化、及び３６０度パノラマビデオの生成のような多くの高度な機能を可能とすることができる。
【００１７】
この移動は、ある期間固定されるか、あるいは頻繁に変えることができる。１つの構成において、デバイス１００は、直線、三角形、円形、又はその他の形状に配置された２つより多くのセンサを備える。この構成において、デバイス１００は、何れのセンサも動かさず、あるセンサをアクティブ化し、他のセンサを非アクティブ化することができる。この構成は、センサを動かすことから生じる問題を回避することができる。
【００１８】
第２に、例えば解像度のような、センサ１０２、１０４の様々な設定は、更に高度な機能及び／又は画像処理アプリケーションを可能とするために調整可能であることができる。デュアルセンサ１０２、１０４は、モバイルデバイス１００の画像処理柔軟性を高めることができる。
【００１９】
図２は、図１のデバイス１００を用いたビデオモード処理の方法を示す。ブロック２０２及び２０４で、センサ１０２、１０４が画像を取得し、ビデオフロントエンド（ＶＦＥ）内に、又はＶＦＥと組み合わせて実現されうるカメラ処理パイプライン１０８へ画素データを送る。ブロック２０６、２０８で、カメラ処理パイプライン１０８が画素データを処理する。例えばカメラ処理パイプライン１０８は、色の調整、サイズの拡大縮小、及び画像コントラストの向上によって、画像品質を改善することができる。
【００２０】
ブロック２１０で、カメラ処理パイプライン１０８は、２つのセンサ１０２、１０４から取得され、処理された画像を合成（又はスティッチ）することができる。合成された画像は、ディスプレイ１１０によって表示するために、及び／又は、静止画像符号器１１２及び／又はビデオ符号器１１４によって符号化する（ブロック２１４）ために、メモリ１１６内に保存することができる。判定ブロック２１２は、取得し、処理する画素データが更にあるかを判定する。
【００２１】
２つのセンサ１０２、１０４は、１つ又は複数の利点を提供することができる。第１に、オブザーバの視角が、センサ位置を調整することによって制御可能である。第２に、２つのセンサ１０２、１０４からの入力画像を結合して処理し、合成することができる。第３に、２つのセンサ１０２と１０４との間の水平距離が調整可能である。これら利点のうちの１つ又は複数が、柔軟性及び機能性を高め、広範囲の高度な機能をサポートする。
【００２２】
本明細書で説明される技術は、特定のアプリケーションのためのセンサ位置設定及び制御設定による。低電力消費プロファイルの場合、第２のセンサ１０４はオフにされ、カメラパイプライン駆動クロックは低減することができる。
【００２３】
（調整可能なセンサ位置）
センサ１０２、１０４において３つの位置又は場所が可能であり、それによって柔軟性を提供し、高度な機能を可能とする。
【００２４】
２つのセンサ１０２、１０４は、互いに非常に接近して位置づけることができる。２つのセンサ１０２、１０４が実質的に同じビューポートを標的とする場合、すなわちセンサ１０２と１０４との間の距離が理論上ゼロに接近する場合、取得した画像及び／又はビデオの品質は非常に向上しうる。取得した画像をシフトさせ、１つに併合するために、調整アルゴリズムを用いることができる。
【００２５】
特に微光環境にとって、ランダム画像ノイズが問題となりうる。２つのセンサ１０２、１０４を用いた受信ダイバーシチは、露光時間の制約や、時間ダイバーシチによるオーバラップした画像ブラーリングなしにセンサノイズを低減するための良好な解決策となりうる。２つのセンサ１０２、１０４は、２つのセンサ１０２、１０４の取得シーン間の差異を低減するために、互いに接近して配置することができる。センサノイズ分布は独立しており、同じ分散を有する。２つのセンサ１０２、１０４からの２つの処理画像の合成後、信号対雑音比（ＳＮＲ）が以下のように計算されうる。
【数１】
【００２６】
ここで、Ｓ１及びＳ２は、それぞれセンサ１０２及びセンサ１０４から取得された画像の信号であり、ｖａｒ（Ｎ１）及びｖａｒ（Ｎ２）は、それぞれセンサ１０２及びセンサ１０４からのセンサノイズ画像分散である。ＳＮＲは、２つのセンサの画像又はビデオの合成後、３デシベル（ｄＢ）改善されることができる。
【００２７】
（画像及びビデオダイナミックレンジエンハンスメント）
センサダイナミックレンジは、低コストのカメラセンサにとって重要な問題となりうる。画像ダイナミックレンジを増加させるために、２つのセンサ１０２、１０４の露光時間は、それぞれ強光シーンと微光シーンとを取得するように異なる値に設定することができる。２つのセンサ１０２、１０４は、２つのセンサ１０２と１０４との間の差異を低減するために接近して配置することができる。例えば、もしセンサ１０４の露光時間がセンサ１０２の露光時間の２倍であれば、合成した画像ダイナミックレンジは２倍にすることができる。
【００２８】
図３Ａ乃至３Ｃは、ダイナミックレンジの改善例を示す。図３Ａは、第１のセンサ１０２によって取得された短露光時間画像の例を示す。図３Ｂは、第２のセンサ１０４によって取得された長露光時間画像の例を示す。図３Ｃは、図３Ａ及び図３Ｂからの合成画像の例であり、ダイナミックレンジが改善された例である。
【００２９】
（短い距離を置いて配置された２つのセンサ）
デバイス１００は、立体画像及びビデオを取得及び生成することができる。センサ１０２、１０４が約６センチメートル（ｃｍ）の距離を置いて配置された場合、デバイス１００は、深度知覚を有する人間の視覚系を模擬するために、左眼の視界と右眼の視界とを取得することができる。６ｃｍは、人間の左目と右目との間の距離にほぼ等しい。取得した画像は、立体視表示のためにアナグリフ画像を生成するように構成することができるか、あるいは自動立体視表示で直接視覚化することができる。
【００３０】
（任意の角度で配置された２つのセンサ）
２つのセンサ１０２、１０４は、０乃至１８０度の範囲内の任意の角度離れることができる。従って、合成画像は、任意の方向でほぼ３６０度全体の視野（ＦＯＶ）をカバーすることができる。この設定は、図４Ｆに示すように、リアルタイム画像のスティッチ及び３６０度パノラマのビデオアプリケーションを可能とする。
【００３１】
図４Ａは、０度回転した第１のセンサ１０２によって取得された画像を示す。図４Ｂは、１５度回転した第１のセンサ１０２によって取得された画像を示す。図４Ｃは、１５度回転した第２のセンサ１０４によって取得された画像を示す。図４Ｄは、３０度回転した第１のセンサ１０２によって取得された画像を示す。図４Ｅは、３０度回転した第２のセンサ１０４によって取得された画像を示す。図４Ｆは、第１及び第２のセンサ１０２、１０４の合成画像から生成された立体画像を示す。図４Ｆに示す画像は、ワイドスクリーン画像のように見えうる。
【００３２】
（調整可能なセンサ設定）
デバイス１００は、例えばレンズ焦点設定、露光設定、及び白バランス設定のような様々なセンサ設定の組み合わせを提供することができる。例えば、合成画像が、完全に又はほぼ完全に全てのシーン対象物に焦点を合わせているようにするために、デバイス１００は、近端すなわち観察者に近い対象物に一方のセンサ１０２の焦点を合わせ（図５Ａ）、遠端すなわち観察者から遠い対象物に他方のセンサ１０４の焦点を合わせる（図５Ｂ）。あるいはその逆もありうる。図５Ｃは、完全に焦点の合った、図５Ａ及び５Ｂからの立体合成画像の例である。露光区分（例えば、より明るいか、より暗いかなど、異なる露光を有する一連の写真）は別の例である。
【００３３】
デュアルカメラセンサを備えるモバイルデバイスが本明細書で説明された。デバイスにおいて、センサの設定及び位置の両方が調整可能でありうる。インテリジェント機能アダプティブ画像合成エンジンは、例えば画像品質の改善、３−Ｄ画像及びビデオの視覚化、及び３６０度パノラマビデオの生成のような高度な機能やアプリケーションを提供することができる。
【００３４】
本明細書に開示された局面に関連して説明された実例となる様々な論理ブロック、モジュール、回路、及びアルゴリズムステップは、電子工学的ハードウェア、ソフトウェア、又はこれらの組み合わせとして実現されうる。ハードウェアとソフトウェアとの相互置換性を明確に説明するために、様々な実例となる構成要素、ブロック、モジュール、回路、及びステップが、それらの機能観点から一般的に説明された。このような機能が、ハードウェアとして実現されるかソフトウェアとして実現されるかは、システム全体に課された特定のアプリケーション及び設計制約による。当業者は、各特定のアプリケーションのために上述した機能を様々な方法で実現することができるが、このような実現の決定は、限定として解釈されてはならない。
【００３５】
本明細書に開示された局面に関連して説明された実例となる様々な論理ブロック、モジュール、及び回路は、汎用プロセッサ、ＤＳＰ、ＡＳＩＣ、ＦＰＧＡやその他のプログラマブル論理デバイス、ディスクリートゲートやトランジスタロジック、ディスクリートハードウェア部品、又は本明細書に示す機能を実行するように設計されたこれら任意の組み合わせを用いて実現又は実行されうる。汎用プロセッサとしてマイクロプロセッサを用いることが可能であるが、代わりに、従来技術によるプロセッサ、コントローラ、マイクロコントローラ、あるいは状態機器を用いることも可能である。プロセッサは、例えばＤＳＰとマイクロプロセッサとの組み合わせ、複数のマイクロプロセッサ、ＤＳＰコアに接続された１つ又は複数のプロセッサ、又はこのような任意の構成である計算デバイスの組み合わせとして実現することも可能である。
【００３６】
本明細書に開示された実施形態に関連して説明された方法又はアルゴリズムの動作は、ハードウェアによって直接的に、プロセッサによって実行されるソフトウェアモジュールによって、又はこれらの組み合わせによって具現化される。ソフトウェアモジュールは、ＲＡＭメモリ、フラッシュメモリ、ＲＯＭメモリ、ＥＰＲＯＭメモリ、ＥＥＰＲＯＭメモリ、レジスタ、ハードディスク、リムーバブルディスク、ＣＤ−ＲＯＭ、あるいはその他任意の形式の記憶媒体に収納されうる。記憶媒体は、プロセッサがそこから情報を読み取り、またそこに情報を書き込むことができるようにプロセッサに結合される。又は、記憶媒体はプロセッサに統合されうる。プロセッサと記憶媒体とはＡＳＩＣ内に存在することができる。ＡＳＩＣはユーザ端末内に存在することができる。あるいはプロセッサと記憶媒体とは、ユーザ端末内のディスクリート部品として存在することができる。
【００３７】
上記の局面への様々な変形例が当業者には明らかであり、本明細書で定義された一般原理は、本開示の精神又は範囲を逸脱することなく他の実施形態にも適用可能でありうる。従って、本開示は、本明細書に示す実施形態に限定することは意図されておらず、本明細書に開示された原理及び新規特徴と整合が取れた最も広い範囲と一致するように意図されている。
【技術分野】
【０００１】
本願は、一般にモバイルデバイスに関し、特に、デュアルデジタルカメラセンサを備えたモバイルデバイスと、その使用方法とに関する。
【背景技術】
【０００２】
例えばセルラー電話のようないくつかのモバイルデバイスは、画像を取得するためのセンサを有することができる。
【発明の概要】
【０００３】
１つの局面は、第１の画像センサと、第１の画像センサに対する位置を変更するように構成された第２の画像センサと、第２の画像センサの位置を制御するように構成されたコントローラと、第１の画像センサ及び第２の画像センサによって取得された画像を処理し、合成するように構成された画像処理モジュールとを備える装置に関する。
【０００４】
別の局面は、第１の画像センサに対する第２の画像センサの位置を調整することと、第１の画像センサ及び第２の画像センサから画像を受け取ることと、第１の画像センサ及び第２の画像センサによって取得した画像を処理し、合成することとを備える方法に関する。
【０００５】
１つ又は複数の実施形態の詳細が、図面及び以下の説明に示される。
【図面の簡単な説明】
【０００６】
【図１】図１は、２つ又はそれ以上のカメラセンサを備えるモバイルデバイスを示す。
【図２】図２は、図１のデバイスを用いるビデオモード処理の方法を示す。
【図３Ａ】図３Ａは、第１のセンサによって取得した短露光時間画像の例を示す。
【図３Ｂ】図３Ｂは、第２のセンサによって取得した長露光時間画像の例を示す。
【図３Ｃ】図３Ｃは、ダイナミックレンジの改善を伴う、図３Ａ及び図３Ｂからの合成画像の例を示す。
【図４Ａ】図４Ａは、０度回転した第１のセンサによって取得した画像を示す。
【図４Ｂ】図４Ｂは、１５度回転した第１のセンサによって取得した画像を示す。
【図４Ｃ】図４Ｃは、１５度回転した第２のセンサによって取得した画像を示す。
【図４Ｄ】図４Ｄは、３０度回転した第１のセンサによって取得した画像を示す。
【図４Ｅ】図４Ｅは、３０度回転した第２のセンサによって取得した画像を示す。
【図４Ｆ】図４Ｆは、第１及び第２のセンサの合成画像から生成した立体画像を示す。
【図５Ａ】図５Ａは、近端すなわち近い方の対象物に焦点を合わせる１つのセンサの例を示す。
【図５Ｂ】図５Ｂは、遠端すなわち遠い方の対象物に焦点を合わせる１つのセンサの例を示す。
【図５Ｃ】図５Ｃは、図５Ａ及び図５Ｂからの、完全に焦点の合った立体合成画像の例を示す。
【発明を実施するための形態】
【０００７】
デュアルセンサを備えるデバイスには、例えば増加したデータ処理の計算複雑さ、電力消費、位置決め、及びこれらセンサのための解像度設定のような多くの問題がありうる。例えばカメラ電話のようなデバイスは、２つの画像センサを定位置に有することができる。つまり、２つのセンサは動かすことができない。２つのセンサは、例えば異なる解像度を有する１次センサ及び２次センサのように、異なって構成され、扱われうる。低解像度センサはビデオを取得するために用いることができ、高解像度センサは静止画像を取得するために用いることができる。２つのセンサから取得された画像は合成することができない。このデバイスは、以下で説明する高度なアプリケーションをサポートすることができないであろう。
【０００８】
（少なくとも１つのセンサが移動可能である２つのセンサを備えるデバイス）
図１は、２つ又はそれ以上のセンサ１０２、１０４を備えるモバイルデバイス１００を示す。モバイルデバイス１００は、デジタル画像及び／又はビデオシーケンスを取得、生成、処理、補正、拡大縮小、符号化、復号、送信、格納、及び表示するように構成することができる。モバイルデバイス１００は、例えば無線通信デバイス、携帯情報端末（ＰＤＡ）、ラップトップコンピュータ、デスクトップコンピュータ、デジタルカメラ、デジタル記録デバイス、ネットワーク対応のデジタルテレビ、モバイル電話、セルラー電話、衛星電話、カメラ電話、地上ベースの無線電話、（「ウォーキー・トーキー」と称されることがある）直接双方向通信デバイス等のようなデバイスを表すか、又はそのようなデバイスに実装されうる。
【０００９】
モバイルデバイス１００は、第１のセンサ１０２と、第２のセンサ１０４と、センサ位置コントローラ１０６と、カメラ処理パイプライン１０８と、ディスプレイ１１０と、ビデオ符号器１１２と、静止画像符号器１１４と、メモリ１１６と、カメラコントローラ１１８と、ユーザインタフェース１２０と、プロセッサ１２８と、トランシーバ１３０とを含むことができる。図１に示す構成要素に加えて、又はその代わりに、モバイルデバイス１００は他の構成要素を含むこともできる。図１に示すアーキテクチャは単なる例である。本明細書に示す特徴及び技術は、他の様々なアーキテクチャを用いて実現することができる。
【００１０】
センサ１０２、１０４は、デジタルカメラセンサであることができる。センサ１０２、１０４は、静止画像スナップショット及び／又はビデオシーケンスを取得することができる。各センサは、個々のセンサ又はセンサ要素の表面に配置された色フィルタアレイ（ＣＦＡ）を含むことができる。
【００１１】
メモリ１１６は、処理前後に画像又はビデオシーケンスを格納することができる。メモリ１１６は、揮発性記憶装置及び不揮発性記憶装置を含むことができる。メモリ１１６は、例えばダイナミック・ランダム・アクセス・メモリ（ＤＲＡＭ）、フラッシュメモリ、ＮＯＲ又はＮＡＮＤゲートメモリ、又はその他任意のデータ記憶技術のような任意のタイプのデータ記憶手段を備えることができる。
【００１２】
（エンジン、モジュール、処理ユニット等とも呼ばれる）カメラ処理パイプライン１０８は、モバイル電話のためのチップセットを備えることができ、チップセットは、ハードウェア、ソフトウェア、ファームウェア、及び／又は、１つ又は複数のマイクロプロセッサ、デジタル信号プロセッサ（ＤＳＰ）、特定用途向け集積回路（ＡＳＩＣ）、フィールド・プログラマブル・ゲート・アレイ（ＦＰＧＡ）、又はこれらの様々な組み合わせを含むことができる。カメラ処理パイプライン１０８は、画像及び／又はビデオシーケンスの品質を改善するために１つ又は複数の画像処理技術を実行することができる。例えばパイプライン１０８は、例えばモザイク除去、レンズロールオフ補正、拡大縮小、色補正、色変換、及び空間フィルタリングのような技術を実行することができる。パイプライン１０８は、他の技術を実行することもできる。
【００１３】
ビデオ符号器１１２は、デジタルビデオデータを符号化（すなわち圧縮）及び復号（すなわち解凍）する符号器／復号器（ＣＯＤＥＣ）を備えることができる。
【００１４】
静止画像符号器１１４は、画像データを符号化（すなわち圧縮）及び復号（すなわち解凍）する符号器／復号器（ＣＯＤＥＣ）を備えることができる。
【００１５】
トランシーバ１３０は、符号化した画像又はビデオシーケンスを別のデバイス又はネットワークと送受信することができる。トランシーバ１３０は、例えば符号分割多元接続（ＣＤＭＡ）のような無線通信規格を用いることができる。ＣＤＭＡ規格の例は、ＣＤＭＡ １ｘ Ｅｖｏｌｕｔｉｏｎ Ｄａｔａ Ｏｐｔｉｍｉｚｅｄ（ＥＶ−ＤＯ）、広帯域ＣＤＭＡ（ＷＣＤＭＡ）等を含む。
【００１６】
（センサの更なる詳細）
２つの別々のセンサ１０２、１０４を備えるモバイルデバイス１００の設計又は特徴が以下で説明される。センサ１０２、１０４は、２つの局面を有することができる。第１に、センサ位置コントローラ１０６は、例えばセンサ１０２、１０４を１つ又は複数の方向に回転、シフト、又はスライドして、２つのセンサ１０２、１０４の場所及び／又は位置を調整することができる。移動のいくつかの例は図１に示されるが、その他の２次元（２−Ｄ）又は３次元（３−Ｄ）移動も実現することができる。この移動は、ユーザ及び／又はカメラコントローラ１１８によって設定されることができる。調整可能センサ１０２、１０４は、例えば画像品質の改善、３−Ｄ画像及びビデオの視覚化、及び３６０度パノラマビデオの生成のような多くの高度な機能を可能とすることができる。
【００１７】
この移動は、ある期間固定されるか、あるいは頻繁に変えることができる。１つの構成において、デバイス１００は、直線、三角形、円形、又はその他の形状に配置された２つより多くのセンサを備える。この構成において、デバイス１００は、何れのセンサも動かさず、あるセンサをアクティブ化し、他のセンサを非アクティブ化することができる。この構成は、センサを動かすことから生じる問題を回避することができる。
【００１８】
第２に、例えば解像度のような、センサ１０２、１０４の様々な設定は、更に高度な機能及び／又は画像処理アプリケーションを可能とするために調整可能であることができる。デュアルセンサ１０２、１０４は、モバイルデバイス１００の画像処理柔軟性を高めることができる。
【００１９】
図２は、図１のデバイス１００を用いたビデオモード処理の方法を示す。ブロック２０２及び２０４で、センサ１０２、１０４が画像を取得し、ビデオフロントエンド（ＶＦＥ）内に、又はＶＦＥと組み合わせて実現されうるカメラ処理パイプライン１０８へ画素データを送る。ブロック２０６、２０８で、カメラ処理パイプライン１０８が画素データを処理する。例えばカメラ処理パイプライン１０８は、色の調整、サイズの拡大縮小、及び画像コントラストの向上によって、画像品質を改善することができる。
【００２０】
ブロック２１０で、カメラ処理パイプライン１０８は、２つのセンサ１０２、１０４から取得され、処理された画像を合成（又はスティッチ）することができる。合成された画像は、ディスプレイ１１０によって表示するために、及び／又は、静止画像符号器１１２及び／又はビデオ符号器１１４によって符号化する（ブロック２１４）ために、メモリ１１６内に保存することができる。判定ブロック２１２は、取得し、処理する画素データが更にあるかを判定する。
【００２１】
２つのセンサ１０２、１０４は、１つ又は複数の利点を提供することができる。第１に、オブザーバの視角が、センサ位置を調整することによって制御可能である。第２に、２つのセンサ１０２、１０４からの入力画像を結合して処理し、合成することができる。第３に、２つのセンサ１０２と１０４との間の水平距離が調整可能である。これら利点のうちの１つ又は複数が、柔軟性及び機能性を高め、広範囲の高度な機能をサポートする。
【００２２】
本明細書で説明される技術は、特定のアプリケーションのためのセンサ位置設定及び制御設定による。低電力消費プロファイルの場合、第２のセンサ１０４はオフにされ、カメラパイプライン駆動クロックは低減することができる。
【００２３】
（調整可能なセンサ位置）
センサ１０２、１０４において３つの位置又は場所が可能であり、それによって柔軟性を提供し、高度な機能を可能とする。
【００２４】
２つのセンサ１０２、１０４は、互いに非常に接近して位置づけることができる。２つのセンサ１０２、１０４が実質的に同じビューポートを標的とする場合、すなわちセンサ１０２と１０４との間の距離が理論上ゼロに接近する場合、取得した画像及び／又はビデオの品質は非常に向上しうる。取得した画像をシフトさせ、１つに併合するために、調整アルゴリズムを用いることができる。
【００２５】
特に微光環境にとって、ランダム画像ノイズが問題となりうる。２つのセンサ１０２、１０４を用いた受信ダイバーシチは、露光時間の制約や、時間ダイバーシチによるオーバラップした画像ブラーリングなしにセンサノイズを低減するための良好な解決策となりうる。２つのセンサ１０２、１０４は、２つのセンサ１０２、１０４の取得シーン間の差異を低減するために、互いに接近して配置することができる。センサノイズ分布は独立しており、同じ分散を有する。２つのセンサ１０２、１０４からの２つの処理画像の合成後、信号対雑音比（ＳＮＲ）が以下のように計算されうる。
【数１】
【００２６】
ここで、Ｓ１及びＳ２は、それぞれセンサ１０２及びセンサ１０４から取得された画像の信号であり、ｖａｒ（Ｎ１）及びｖａｒ（Ｎ２）は、それぞれセンサ１０２及びセンサ１０４からのセンサノイズ画像分散である。ＳＮＲは、２つのセンサの画像又はビデオの合成後、３デシベル（ｄＢ）改善されることができる。
【００２７】
（画像及びビデオダイナミックレンジエンハンスメント）
センサダイナミックレンジは、低コストのカメラセンサにとって重要な問題となりうる。画像ダイナミックレンジを増加させるために、２つのセンサ１０２、１０４の露光時間は、それぞれ強光シーンと微光シーンとを取得するように異なる値に設定することができる。２つのセンサ１０２、１０４は、２つのセンサ１０２と１０４との間の差異を低減するために接近して配置することができる。例えば、もしセンサ１０４の露光時間がセンサ１０２の露光時間の２倍であれば、合成した画像ダイナミックレンジは２倍にすることができる。
【００２８】
図３Ａ乃至３Ｃは、ダイナミックレンジの改善例を示す。図３Ａは、第１のセンサ１０２によって取得された短露光時間画像の例を示す。図３Ｂは、第２のセンサ１０４によって取得された長露光時間画像の例を示す。図３Ｃは、図３Ａ及び図３Ｂからの合成画像の例であり、ダイナミックレンジが改善された例である。
【００２９】
（短い距離を置いて配置された２つのセンサ）
デバイス１００は、立体画像及びビデオを取得及び生成することができる。センサ１０２、１０４が約６センチメートル（ｃｍ）の距離を置いて配置された場合、デバイス１００は、深度知覚を有する人間の視覚系を模擬するために、左眼の視界と右眼の視界とを取得することができる。６ｃｍは、人間の左目と右目との間の距離にほぼ等しい。取得した画像は、立体視表示のためにアナグリフ画像を生成するように構成することができるか、あるいは自動立体視表示で直接視覚化することができる。
【００３０】
（任意の角度で配置された２つのセンサ）
２つのセンサ１０２、１０４は、０乃至１８０度の範囲内の任意の角度離れることができる。従って、合成画像は、任意の方向でほぼ３６０度全体の視野（ＦＯＶ）をカバーすることができる。この設定は、図４Ｆに示すように、リアルタイム画像のスティッチ及び３６０度パノラマのビデオアプリケーションを可能とする。
【００３１】
図４Ａは、０度回転した第１のセンサ１０２によって取得された画像を示す。図４Ｂは、１５度回転した第１のセンサ１０２によって取得された画像を示す。図４Ｃは、１５度回転した第２のセンサ１０４によって取得された画像を示す。図４Ｄは、３０度回転した第１のセンサ１０２によって取得された画像を示す。図４Ｅは、３０度回転した第２のセンサ１０４によって取得された画像を示す。図４Ｆは、第１及び第２のセンサ１０２、１０４の合成画像から生成された立体画像を示す。図４Ｆに示す画像は、ワイドスクリーン画像のように見えうる。
【００３２】
（調整可能なセンサ設定）
デバイス１００は、例えばレンズ焦点設定、露光設定、及び白バランス設定のような様々なセンサ設定の組み合わせを提供することができる。例えば、合成画像が、完全に又はほぼ完全に全てのシーン対象物に焦点を合わせているようにするために、デバイス１００は、近端すなわち観察者に近い対象物に一方のセンサ１０２の焦点を合わせ（図５Ａ）、遠端すなわち観察者から遠い対象物に他方のセンサ１０４の焦点を合わせる（図５Ｂ）。あるいはその逆もありうる。図５Ｃは、完全に焦点の合った、図５Ａ及び５Ｂからの立体合成画像の例である。露光区分（例えば、より明るいか、より暗いかなど、異なる露光を有する一連の写真）は別の例である。
【００３３】
デュアルカメラセンサを備えるモバイルデバイスが本明細書で説明された。デバイスにおいて、センサの設定及び位置の両方が調整可能でありうる。インテリジェント機能アダプティブ画像合成エンジンは、例えば画像品質の改善、３−Ｄ画像及びビデオの視覚化、及び３６０度パノラマビデオの生成のような高度な機能やアプリケーションを提供することができる。
【００３４】
本明細書に開示された局面に関連して説明された実例となる様々な論理ブロック、モジュール、回路、及びアルゴリズムステップは、電子工学的ハードウェア、ソフトウェア、又はこれらの組み合わせとして実現されうる。ハードウェアとソフトウェアとの相互置換性を明確に説明するために、様々な実例となる構成要素、ブロック、モジュール、回路、及びステップが、それらの機能観点から一般的に説明された。このような機能が、ハードウェアとして実現されるかソフトウェアとして実現されるかは、システム全体に課された特定のアプリケーション及び設計制約による。当業者は、各特定のアプリケーションのために上述した機能を様々な方法で実現することができるが、このような実現の決定は、限定として解釈されてはならない。
【００３５】
本明細書に開示された局面に関連して説明された実例となる様々な論理ブロック、モジュール、及び回路は、汎用プロセッサ、ＤＳＰ、ＡＳＩＣ、ＦＰＧＡやその他のプログラマブル論理デバイス、ディスクリートゲートやトランジスタロジック、ディスクリートハードウェア部品、又は本明細書に示す機能を実行するように設計されたこれら任意の組み合わせを用いて実現又は実行されうる。汎用プロセッサとしてマイクロプロセッサを用いることが可能であるが、代わりに、従来技術によるプロセッサ、コントローラ、マイクロコントローラ、あるいは状態機器を用いることも可能である。プロセッサは、例えばＤＳＰとマイクロプロセッサとの組み合わせ、複数のマイクロプロセッサ、ＤＳＰコアに接続された１つ又は複数のプロセッサ、又はこのような任意の構成である計算デバイスの組み合わせとして実現することも可能である。
【００３６】
本明細書に開示された実施形態に関連して説明された方法又はアルゴリズムの動作は、ハードウェアによって直接的に、プロセッサによって実行されるソフトウェアモジュールによって、又はこれらの組み合わせによって具現化される。ソフトウェアモジュールは、ＲＡＭメモリ、フラッシュメモリ、ＲＯＭメモリ、ＥＰＲＯＭメモリ、ＥＥＰＲＯＭメモリ、レジスタ、ハードディスク、リムーバブルディスク、ＣＤ−ＲＯＭ、あるいはその他任意の形式の記憶媒体に収納されうる。記憶媒体は、プロセッサがそこから情報を読み取り、またそこに情報を書き込むことができるようにプロセッサに結合される。又は、記憶媒体はプロセッサに統合されうる。プロセッサと記憶媒体とはＡＳＩＣ内に存在することができる。ＡＳＩＣはユーザ端末内に存在することができる。あるいはプロセッサと記憶媒体とは、ユーザ端末内のディスクリート部品として存在することができる。
【００３７】
上記の局面への様々な変形例が当業者には明らかであり、本明細書で定義された一般原理は、本開示の精神又は範囲を逸脱することなく他の実施形態にも適用可能でありうる。従って、本開示は、本明細書に示す実施形態に限定することは意図されておらず、本明細書に開示された原理及び新規特徴と整合が取れた最も広い範囲と一致するように意図されている。
【特許請求の範囲】
【請求項１】
第１の画像センサと、
前記第１の画像センサに対する位置を変更するように構成された第２の画像センサと、
前記第２の画像センサの位置を制御するように構成されたコントローラと、
前記第１の画像センサ及び前記第２の画像センサによって取得された画像を処理し、合成するように構成された画像処理モジュールと
を備える装置。
【請求項２】
請求項１に記載の装置において、
前記第２の画像センサは、前記第１の画像センサから離れてシフトするように構成された装置。
【請求項３】
請求項１に記載の装置において、
前記第２の画像センサは、回転するように構成された装置。
【請求項４】
請求項１に記載の装置において、
前記第１の画像センサは位置を変更するように構成され、前記コントローラは、前記第１の画像センサの位置を制御するように構成された装置。
【請求項５】
請求項１に記載の装置において、
前記画像処理モジュールは、前記第１の画像センサ及び前記第２の画像センサによって取得された画像の色の調整と、サイズの拡大縮小と、画像コントラストの向上とのうちの少なくとも１つを実行するように構成された装置。
【請求項６】
請求項１に記載の装置において、
前記第１の画像センサ及び前記第２の画像センサは、ビデオシーケンスを取得するように構成された装置。
【請求項７】
請求項１に記載の装置において、
前記第１の画像センサ及び前記第２の画像センサは、センサ設定を調整するように構成された装置。
【請求項８】
請求項７に記載の装置において、
前記第１の画像センサ及び前記第２の画像センサは、レンズ焦点設定と、露光設定と、白バランス設定とのうちの少なくとも１つを調整するように構成された装置。
【請求項９】
請求項８に記載の装置において、
前記第１の画像センサは、前記第２の画像センサよりも長い露光時間を用いるように構成可能である装置。
【請求項１０】
請求項８に記載の装置において、
前記第１の画像センサは、前記装置に近い第１の対象物に焦点を合わせるように構成可能であり、前記第２の画像センサは、前記装置から遠い第２の対象物に焦点を合わせるように構成可能である装置。
【請求項１１】
請求項１に記載の装置において、
前記第１の画像センサと前記第２の画像センサとのうちの少なくとも１つは、前記装置が低電力モードに入った場合、非アクティブ化するように構成された装置。
【請求項１２】
請求項１に記載の装置において、
前記第１の画像センサと前記第２の画像センサとが互いに比較的近く配置され、前記画像処理モジュールは、画像ノイズを低減するように構成された装置。
【請求項１３】
請求項１に記載の装置において、
前記第１の画像センサと前記第２の画像センサとが約６センチメートル離れて配置され、前記画像処理モジュールは、立体視表示するアナグリフ画像を生成するように構成された装置。
【請求項１４】
請求項１に記載の装置において、
前記第１の画像センサと前記第２の画像センサとが約６センチメートル離れて配置され、前記画像処理モジュールは、自動立体視表示で直接視覚化されるアナグリフ画像を生成するように構成された装置。
【請求項１５】
請求項１に記載の装置において、
前記第２の画像センサは、前記第１の画像センサに関して０度乃至１８０度の範囲内の角度を持って配置される装置。
【請求項１６】
請求項１に記載の装置において、
前記画像処理モジュールは、リアルタイム画像のスティッチと、３６０度パノラマのビデオアプリケーションとを実行するように構成された装置。
【請求項１７】
前記装置がモバイル電話である請求項１に記載の装置。
【請求項１８】
請求項１に記載の装置において、
無線信号を送受信するように構成されたトランシーバを更に備える装置。
【請求項１９】
第１の画像センサに対する第２の画像センサの位置を調整することと、
前記第１の画像センサ及び前記第２の画像センサからの画像を受け取ることと、
前記第１の画像センサ及び前記第２の画像センサによって取得された画像を処理し、合成することと
を備える方法。
【請求項２０】
請求項１９に記載の方法において、
調整することは、前記第２の画像センサを前記第１の画像センサから離れてシフトさせることを備える方法。
【請求項２１】
請求項１９に記載の方法において、
調整することは、前記第２の画像センサを前記第１の画像センサから離れて回転させることを備える方法。
【請求項２２】
請求項１９に記載の方法において、
前記第１の画像センサの位置を変更することを更に備える方法。
【請求項２３】
請求項１９に記載の方法において、
処理することは、前記第１の画像センサ及び前記第２の画像センサによって取得した画像の色を調整することと、サイズを拡大縮小することと、画像コントラストを向上させることとのうちの少なくとも１つを備える方法。
【請求項２４】
ビデオシーケンスを取得することを更に備える請求項１９に記載の方法。
【請求項２５】
請求項１９に記載の方法において、
前記第１の画像センサと前記第２の画像センサとのうちの少なくとも１つのセンサ設定を調整することを更に備える方法。
【請求項２６】
請求項２５に記載の方法において、
センサ設定を調整することは、レンズ焦点設定と、露光設定と、白バランス設定とのうちの少なくとも１つを調整することを備える方法。
【請求項２７】
請求項２６に記載の方法において、
センサ設定を調整することは、前記第２の画像センサより長い露光時間を用いるように前記第１の画像センサを調整することを備える方法。
【請求項２８】
請求項２６に記載の方法において、
センサ設定を調整することは、前記第１のセンサの焦点を近い対象物に合わせ、前記第２のセンサの焦点を遠い対象物に合わせることを備える方法。
【請求項２９】
請求項１９に記載の方法において、
前記第１の画像センサと前記第２の画像センサとのうちの少なくとも１つを非アクティブ化することを更に備える方法。
【請求項３０】
請求項１９に記載の方法において、
画像ノイズを低減するために、前記第１の画像センサと前記第２の画像センサとを比較的近く配置することを更に備える方法。
【請求項３１】
請求項１９に記載の方法において、
前記第１の画像センサと前記第２の画像センサとを６センチメートル離して配置することと、
立体視表示のためのアナグリフ画像を生成することと
を更に備える方法。
【請求項３２】
請求項１９に記載の方法において、
前記第１の画像センサと前記第２の画像センサとを６センチメートル離して配置することと、
自動立体視表示で自動的に視覚化されるアナグリフ画像を生成することと
を更に備える方法。
【請求項３３】
請求項１９に記載の方法において、
前記第２の画像センサを、前記第１の画像センサに関して０度乃至１８０度の範囲内の角度を持つように配置することを更に備える方法。
【請求項３４】
請求項１９に記載の方法において、
リアルタイム画像のスティッチと、３６０度パノラマのビデオアプリケーションとを実行することを更に備える方法。
【請求項３５】
無線信号を送受信することを更に備える請求項１９に記載の方法。
【請求項１】
第１の画像センサと、
前記第１の画像センサに対する位置を変更するように構成された第２の画像センサと、
前記第２の画像センサの位置を制御するように構成されたコントローラと、
前記第１の画像センサ及び前記第２の画像センサによって取得された画像を処理し、合成するように構成された画像処理モジュールと
を備える装置。
【請求項２】
請求項１に記載の装置において、
前記第２の画像センサは、前記第１の画像センサから離れてシフトするように構成された装置。
【請求項３】
請求項１に記載の装置において、
前記第２の画像センサは、回転するように構成された装置。
【請求項４】
請求項１に記載の装置において、
前記第１の画像センサは位置を変更するように構成され、前記コントローラは、前記第１の画像センサの位置を制御するように構成された装置。
【請求項５】
請求項１に記載の装置において、
前記画像処理モジュールは、前記第１の画像センサ及び前記第２の画像センサによって取得された画像の色の調整と、サイズの拡大縮小と、画像コントラストの向上とのうちの少なくとも１つを実行するように構成された装置。
【請求項６】
請求項１に記載の装置において、
前記第１の画像センサ及び前記第２の画像センサは、ビデオシーケンスを取得するように構成された装置。
【請求項７】
請求項１に記載の装置において、
前記第１の画像センサ及び前記第２の画像センサは、センサ設定を調整するように構成された装置。
【請求項８】
請求項７に記載の装置において、
前記第１の画像センサ及び前記第２の画像センサは、レンズ焦点設定と、露光設定と、白バランス設定とのうちの少なくとも１つを調整するように構成された装置。
【請求項９】
請求項８に記載の装置において、
前記第１の画像センサは、前記第２の画像センサよりも長い露光時間を用いるように構成可能である装置。
【請求項１０】
請求項８に記載の装置において、
前記第１の画像センサは、前記装置に近い第１の対象物に焦点を合わせるように構成可能であり、前記第２の画像センサは、前記装置から遠い第２の対象物に焦点を合わせるように構成可能である装置。
【請求項１１】
請求項１に記載の装置において、
前記第１の画像センサと前記第２の画像センサとのうちの少なくとも１つは、前記装置が低電力モードに入った場合、非アクティブ化するように構成された装置。
【請求項１２】
請求項１に記載の装置において、
前記第１の画像センサと前記第２の画像センサとが互いに比較的近く配置され、前記画像処理モジュールは、画像ノイズを低減するように構成された装置。
【請求項１３】
請求項１に記載の装置において、
前記第１の画像センサと前記第２の画像センサとが約６センチメートル離れて配置され、前記画像処理モジュールは、立体視表示するアナグリフ画像を生成するように構成された装置。
【請求項１４】
請求項１に記載の装置において、
前記第１の画像センサと前記第２の画像センサとが約６センチメートル離れて配置され、前記画像処理モジュールは、自動立体視表示で直接視覚化されるアナグリフ画像を生成するように構成された装置。
【請求項１５】
請求項１に記載の装置において、
前記第２の画像センサは、前記第１の画像センサに関して０度乃至１８０度の範囲内の角度を持って配置される装置。
【請求項１６】
請求項１に記載の装置において、
前記画像処理モジュールは、リアルタイム画像のスティッチと、３６０度パノラマのビデオアプリケーションとを実行するように構成された装置。
【請求項１７】
前記装置がモバイル電話である請求項１に記載の装置。
【請求項１８】
請求項１に記載の装置において、
無線信号を送受信するように構成されたトランシーバを更に備える装置。
【請求項１９】
第１の画像センサに対する第２の画像センサの位置を調整することと、
前記第１の画像センサ及び前記第２の画像センサからの画像を受け取ることと、
前記第１の画像センサ及び前記第２の画像センサによって取得された画像を処理し、合成することと
を備える方法。
【請求項２０】
請求項１９に記載の方法において、
調整することは、前記第２の画像センサを前記第１の画像センサから離れてシフトさせることを備える方法。
【請求項２１】
請求項１９に記載の方法において、
調整することは、前記第２の画像センサを前記第１の画像センサから離れて回転させることを備える方法。
【請求項２２】
請求項１９に記載の方法において、
前記第１の画像センサの位置を変更することを更に備える方法。
【請求項２３】
請求項１９に記載の方法において、
処理することは、前記第１の画像センサ及び前記第２の画像センサによって取得した画像の色を調整することと、サイズを拡大縮小することと、画像コントラストを向上させることとのうちの少なくとも１つを備える方法。
【請求項２４】
ビデオシーケンスを取得することを更に備える請求項１９に記載の方法。
【請求項２５】
請求項１９に記載の方法において、
前記第１の画像センサと前記第２の画像センサとのうちの少なくとも１つのセンサ設定を調整することを更に備える方法。
【請求項２６】
請求項２５に記載の方法において、
センサ設定を調整することは、レンズ焦点設定と、露光設定と、白バランス設定とのうちの少なくとも１つを調整することを備える方法。
【請求項２７】
請求項２６に記載の方法において、
センサ設定を調整することは、前記第２の画像センサより長い露光時間を用いるように前記第１の画像センサを調整することを備える方法。
【請求項２８】
請求項２６に記載の方法において、
センサ設定を調整することは、前記第１のセンサの焦点を近い対象物に合わせ、前記第２のセンサの焦点を遠い対象物に合わせることを備える方法。
【請求項２９】
請求項１９に記載の方法において、
前記第１の画像センサと前記第２の画像センサとのうちの少なくとも１つを非アクティブ化することを更に備える方法。
【請求項３０】
請求項１９に記載の方法において、
画像ノイズを低減するために、前記第１の画像センサと前記第２の画像センサとを比較的近く配置することを更に備える方法。
【請求項３１】
請求項１９に記載の方法において、
前記第１の画像センサと前記第２の画像センサとを６センチメートル離して配置することと、
立体視表示のためのアナグリフ画像を生成することと
を更に備える方法。
【請求項３２】
請求項１９に記載の方法において、
前記第１の画像センサと前記第２の画像センサとを６センチメートル離して配置することと、
自動立体視表示で自動的に視覚化されるアナグリフ画像を生成することと
を更に備える方法。
【請求項３３】
請求項１９に記載の方法において、
前記第２の画像センサを、前記第１の画像センサに関して０度乃至１８０度の範囲内の角度を持つように配置することを更に備える方法。
【請求項３４】
請求項１９に記載の方法において、
リアルタイム画像のスティッチと、３６０度パノラマのビデオアプリケーションとを実行することを更に備える方法。
【請求項３５】
無線信号を送受信することを更に備える請求項１９に記載の方法。
【図１】
【図２】
【図３Ａ】
【図３Ｂ】
【図３Ｃ】
【図４Ａ】
【図４Ｂ】
【図４Ｃ】
【図４Ｄ】
【図４Ｅ】
【図４Ｆ】
【図５Ａ】
【図５Ｂ】
【図５Ｃ】
【図２】
【図３Ａ】
【図３Ｂ】
【図３Ｃ】
【図４Ａ】
【図４Ｂ】
【図４Ｃ】
【図４Ｄ】
【図４Ｅ】
【図４Ｆ】
【図５Ａ】
【図５Ｂ】
【図５Ｃ】
【公開番号】特開２０１３−５９０２６（Ｐ２０１３−５９０２６Ａ）
【公開日】平成２５年３月２８日（２０１３．３．２８）
【国際特許分類】
【外国語出願】
【出願番号】特願２０１２−１９６１３３（Ｐ２０１２−１９６１３３）
【出願日】平成２４年９月６日（２０１２．９．６）
【分割の表示】特願２００９−５２１９７２（Ｐ２００９−５２１９７２）の分割
【原出願日】平成１９年７月２５日（２００７．７．２５）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＷＣＤＭＡ
【出願人】（５９５０２０６４３）クゥアルコム・インコーポレイテッド (7,166)
【氏名又は名称原語表記】ＱＵＡＬＣＯＭＭ ＩＮＣＯＲＰＯＲＡＴＥＤ
【Ｆターム（参考）】
【公開日】平成２５年３月２８日（２０１３．３．２８）
【国際特許分類】
【出願番号】特願２０１２−１９６１３３（Ｐ２０１２−１９６１３３）
【出願日】平成２４年９月６日（２０１２．９．６）
【分割の表示】特願２００９−５２１９７２（Ｐ２００９−５２１９７２）の分割
【原出願日】平成１９年７月２５日（２００７．７．２５）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＷＣＤＭＡ
【出願人】（５９５０２０６４３）クゥアルコム・インコーポレイテッド (7,166)
【氏名又は名称原語表記】ＱＵＡＬＣＯＭＭ ＩＮＣＯＲＰＯＲＡＴＥＤ
【Ｆターム（参考）】
[ Back to top ]