情報処理装置
【課題】電子カメラにおいて、動画を撮影する場合、マイク等より得られた音声から、予めメモリに記憶しておいた減算したい特定音を自動で減算することができない。
【解決手段】電子カメラにおいて、予め音の特徴情報を記憶しておく。そして、マイク等より得られた音声から特徴情報を自動で検出し、減算することにより音質が上がる。また、既に記録済みの動画においても、特徴情報を自動で検出し、減算することにより雑音の少ない動画を新規のファイルとして記録することができる。
【解決手段】電子カメラにおいて、予め音の特徴情報を記憶しておく。そして、マイク等より得られた音声から特徴情報を自動で検出し、減算することにより音質が上がる。また、既に記録済みの動画においても、特徴情報を自動で検出し、減算することにより雑音の少ない動画を新規のファイルとして記録することができる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置に関し、特に音声信号に含まれる特徴情報を減算する減算処理機能を備えるディジタルカメラ等の電子カメラに関する。
【背景技術】
【０００２】
従来、電子カメラにおいて、予めメモリに記憶しておいた音のノイズデータを読み出し、マイク等より得られた音声からノイズを減算する機能を備えたものが考えられている。
【０００３】
この種のカメラの一例が、特許文献１に開示されている。この従来の技術のカメラは、予めズームモーター音をメモリに記憶させる。そして、ズームモーターの回転を開始したならば、メモリから予め記憶しておいたズーム音データを読み出し、マイクから得られた音声からズーム音を減算することができる技術が開示されている。
【特許文献１】特開２００６−１７９９９６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１においては、予めメモリに記憶しておいた音のノイズデータを読み出し、マイク等より得られた音声からノイズを減算する技術が開示されている。しかしながら、音声からズーム音を減算するには、ズームモーターの回転を検知する必要があり、ズーム音以外のノイズを自動で減算することができない。
【課題を解決するための手段】
【０００５】
第一の発明の情報処理装置は、音の特徴情報を記憶する特徴情報記憶手段と、該特徴情報を含む音声信号を取り込む音声信号入力手段と、前記特徴情報記憶手段出力を基に前記音声信号から前記特徴情報を減算する減算処理手段を備えることを特徴とする。
【０００６】
第二の発明の情報処理装置は、音の特徴情報を記憶する特徴情報記憶手段と、該特徴情報を含む音声信号を取り込む音声信号入力手段と、被写体像を撮像素子に結像して撮像信号を順次生成する撮像手段と、前記撮像信号を基に得られた動画像信号と前記音声信号を記録する記録手段と、該記録手段により記録された前記動画像信号と前記音声信号を再生する再生手段と、前記特徴情報記憶手段出力を基に前記音声信号から前記特徴情報を減算する減算処理手段を備えることを特徴とする。
【発明の効果】
【０００７】
本発明によれば、電子カメラにおいて、予め音の特徴情報を記憶し、音声から特徴情報を減算することにより音質が上がる。
【図面の簡単な説明】
【０００８】
【図１】本発明の一実施例である電子カメラの外観を示す外観図である。
【図２】本発明の一実施例である電子カメラの構成を示すブロック図である。
【図３】本発明の一実施例であるデータ処理部７の内部構成の概略を示すブロック図である。
【図４】本発明の他の一実施例であるデータ処理部７の内部構成の概略を示すブロック図である。
【図５】本発明の一実施例である動作の一例を示すフロー図である。
【図６】本発明の他の一実施例である動作の一例を示すフロー図である。
【図７】本発明の一実施例である動作の一例を示すフロー図である。
【図８】本発明の一実施例である動画撮影モード設定メニュー表示の一例を示す図解図である。
【図９】本発明の他の一実施例である動作の一例を示すフロー図である。
【図１０】本発明の他の一実施例である動画再生モード設定メニュー表示の一例を示す図解図である。
【図１１】本発明の一実施例である音声波形パターンの一例を示す図である。
【図１２】本発明の一実施例である音声波形パターンの一例を示す図である。
【発明を実施するための形態】
【０００９】
以下の実施例を、情報処理装置の１つの例として、電子カメラ１０の形態を図面を参照しながら説明する。
【００１０】
電子カメラ１０の外観図を図１に示す。図１の電子カメラ１０は、少なくとも図示しない撮像部、操作部２、表示部４、マイク部６、およびスピーカ部８を備える。撮像部では撮像動作が行われる。操作部２を構成する２ａ〜２ｈを詳しく説明すると、２ａは撮像動作を指示するシャッタボタン、２ｂは画像を拡大させるＴＥＬＥボタン、２ｃは画像を縮小させるＷＩＤＥボタンである。画像を拡大、縮小させるズーム処理は、図２のＣＰＵ３６の制御に基づいてドライバ２５及び撮像レンズ２２によって実現される。
【００１１】
この場合、ユーザがＴＥＬＥボタン２ｂに圧力を付与することによってＴＥＬＥボタン２ｂを押し下げればズーム倍率の可変範囲内においてズーム倍率は増大し、ユーザがＷＩＤＥボタン２ｃに圧力を付与することによってＷＩＤＥボタン２ｃを押し下げればズーム倍率の可変範囲内においてズーム倍率は減少する。ズーム倍率の増大量又は減少量は、ＴＥＬＥボタン２ｂ又はＷＩＤＥボタン２ｃを押し下げている時間の長さに比例する。即ち、ＴＥＬＥボタン２ｂを押し下げている時間の長さが増加するに伴ってズーム倍率の増大量は増加し、ＷＩＤＥボタン２ｃを押し下げている時間の長さが増加するに伴ってズーム倍率の減少量は増加する。
【００１２】
２ｄは再生モードボタンであり、押下されると電子カメラは再生モードに移行する。同様に、２ｆは静止画撮像モードボタン、２ｅは動画撮像モードボタンであり、押下されると電子カメラはそれぞれのモードに移行する。２ｇは４方向に操作されることにより表示部４内に表示される項目等を選択指示するカーソルキーであり、４方向の中心部が押下されることにより、項目等を決定することができる。そして、２ｈは表示部４に、選択可能な項目等を表示させるメニューボタンである。
【００１３】
さらに図１で示した電子カメラ１０内部のブロック図である図２を用いて電子カメラ１０を更に詳細に説明する。電子カメラ１０は、操作部２、表示部４、マイク部６、スピーカ部８、撮像レンズ２２、絞り機構２４、ドライバ２５、ＣＣＤイメージャ２６、撮像処理部２８、ＳＤＲＡＭ３０、ビデオエンコーダ３２、メニュー切替スイッチ３４、ＣＰＵ３６、ＡＦ処理部３８、圧縮・伸張処理部４０、スピーカアンプ４２、カード制御部４４、音声処理部４８、画像用Ｄ／Ａ変換回路５０、データ処理部７、フラッシュメモリ５６および音声用Ｄ／Ａ変換回路５８を備えて構成されている。
【００１４】
撮像レンズ２２は、被写体の光学像を撮像デバイスであるＣＣＤイメージャ２６の撮像面上に結像させる。また、撮像レンズ２２はＣＣＤイメージャ２６の出力信号に基づいて光軸方向の移動が調節される。絞り機構２４は、制御されることにより撮像レンズ２２よりＣＣＤイメージャ２６に入る光を調節する。更に、撮像レンズ２２は画像を拡大、縮小させるズーム機構を備えている。これらの撮像レンズ２２、および絞り機構２４の調節はドライバ２５で行われる。
【００１５】
ＣＣＤイメージャ２６から出力されたアナログ撮像信号は、撮像処理部２８によって色分離、白バランス調整、ＹＵＶ変換等の所定の処理が行われ、輝度信号であるＹ信号および色差信号であるＵ、Ｖ信号に変換される。
【００１６】
ＣＰＵ３６は、操作部２、ドライバ２５、撮像処理部２８、ＳＤＲＡＭ３０、メニュー切替スイッチ３４、ＡＦ処理部３８、圧縮・伸張処理部４０、スピーカアンプ４２、カード制御部４４、音声処理部４８、画像用Ｄ／Ａ変換回路５０、データ処理部７、フラッシュメモリ５６および音声用Ｄ／Ａ変換回路５８に接続される。ＣＰＵ３６は、フラッシュメモリ５６に格納されているプログラムに従って、撮像処理部２８、ＳＤＲＡＭ３０、圧縮・伸張処理部４０、スピーカアンプ４２、カード制御部４４、音声処理部４８、画像用Ｄ／Ａ変換回路５０、データ処理部７、および音声用Ｄ／Ａ変換回路５８の制御を行う。
【００１７】
次に、操作部２が操作されることによる電子カメラ１０の動作の説明をする。
【００１８】
上述したように、操作部２は、各種ボタンまたはキー２ａ〜２ｈで構成される。ＣＰＵ３６は静止画撮像モードボタン２ｆが押下されることによって静止画撮像モード状態にあるとき、シャッタボタン２ａが押下されることによって静止画撮像操作がなされる。そして、１フレーム分の被写体の光学像が撮像レンズ２２、絞り機構２４、ＣＣＤイメージャ２６、撮像処理部２８によって所定の処理がなされ、撮像処理部２８によって得られたＹ、Ｕ、Ｖ信号であるディジタル画像データがＳＤＲＡＭ３０に一旦格納される。
【００１９】
その後、一旦格納された１フレーム分のディジタル画像データは、圧縮・信号処理部４０、ここではＪＰＥＧコーデックによって、ＪＰＥＧ形式で圧縮される。圧縮された圧縮ディジタル画像データは再びＳＤＲＡＭ３０に格納される。
【００２０】
また、データ処理部７にて、一旦格納された１フレーム分のディジタル画像データから縮小処理によりサムネイルデータが生成され、ＳＤＲＡＭ３０に格納され、圧縮・伸張処理部４０にて、ＪＰＥＧコーデックによってＪＰＥＧ圧縮される。圧縮された圧縮サムネイルデータは、再びＳＤＲＡＭ３０に格納される。
【００２１】
そして、圧縮ディジタル画像データおよび圧縮サムネイルデータは、ＣＰＵ３６が１つの静止画像ファイルとしてカード制御部４４を制御することによって外部メモリカード４６に記録される。
【００２２】
ＡＦ処理部３８では、撮像処理部２８で生成されたＹデータの高域周波数成分を１フレーム毎に積分する。積分結果つまりフォーカス評価値はＣＰＵ３６によって取り込まれ、ＣＰＵ３６は取り込んだフォーカス評価値に基づいてドライバ２５を制御する。この結果、フォーカス評価値が最大になるように、光学レンズ２２の光軸方向の位置が調整される。このとき、主要被写体が撮影画面の中央付近にある場合が多いため、評価エリアは中央部に重点がおかれる。
【００２３】
また、ＣＰＵ３６は動画撮像モードボタン２ｅが押下されることによって動画撮像モード状態にあるとき、シャッタボタン２ａが押下されることによって動画撮像操作がなされる。シャッタボタン２ａが再び押下され動画撮像が終了するまで、動画像処理が実行される。この動画像処理は例えば１秒間に３０フレーム分の静止画撮像処理を連続的に行うことと同様の処理であり、Ｙ、Ｕ、Ｖ信号であるディジタル画像データが動画撮像時間分だけＳＤＲＡＭ３０に一旦格納するまでの処理が行われる。
【００２４】
そして、動画像撮像終了の操作がなされると、ＳＤＲＡＭ３０に格納されている連続した複数のディジタル画像データが画像圧縮・伸張処理部３４にて、ここではＭｏｔｉｏｎＪＰＥＧコーデックによって動画圧縮され、再びＳＤＲＡＭ３０に格納される。
【００２５】
更に、動画撮影モードにあるとき、ＣＰＵ３６は操作部２のシャッタボタン２ａが押下されることによって音声記録操作を行う。つまり、マイク部６から音声信号を取り込み、音声処理部４８によって音声信号を増幅しディジタル音声データに変換する。ディジタル音声データは圧縮・伸張処理部４０にて圧縮され、ＳＤＲＡＭ３０に格納される。動画像撮影修了の操作がなされるまで、圧縮された音声データがＳＤＲＡＭ３０に格納される。
【００２６】
次に、圧縮された連続した複数の圧縮画像データおよび圧縮された音声データは、１つの動画ファイルとしてカード制御部４４が制御されることによって外部メモリカード４６に記録される。
【００２７】
再生モードボタン２ｄが押下されると、外部メモリカード４６に記録された最新の静止画像ファイルまたは動画像ファイルが再生される。
【００２８】
具体的には、静止画像ファイルが再生される場合、ＣＰＵ３６は、カード制御部４４を制御して、外部メモリカード４６に記録されている静止画像ファイルの圧縮画像データをＳＤＲＡＭ３０に一旦格納させる。ＳＤＲＡＭ３０に格納された圧縮画像データは、圧縮・伸張処理部４０にて、ＪＰＥＧコーデックにより伸張処理される。伸張処理されたディジタル画像データは、ＳＤＲＡＭ３０に一旦格納され、画像用Ｄ／Ａ変換回路５０によりアナログ画像信号に変換される。ビデオエンコーダ３２は、画像用Ｄ／Ａ変換回路５０からのアナログ画像データを基に映像信号に変換し、表示部４において変換された映像信号を表示する。
【００２９】
動画像ファイルを再生する場合は、ＣＰＵ３６は、カード制御部４４を制御して、外部メモリカード４６に記録されている動画像ファイルの複数の圧縮画像データをＳＤＲＡＭ３０に一旦格納させる。ＳＤＲＡＭ３０に格納された複数の圧縮画像データは、画像圧縮・伸張処理部４０にて、ＭｏｔｉｏｎＪＰＥＧコーデックにより伸張処理される。伸張処理された複数のディジタル画像データは、ＳＤＲＡＭ３０に一旦格納され、時系列に画像用Ｄ／Ａ変換回路５０によりアナログ画像信号に変換される。ビデオエンコーダ３２は、画像用Ｄ／Ａ変換回路５０からのアナログ画像データを基に映像信号に変換し、表示部４において変換された映像信号を表示する。
【００３０】
更に、外部メモリカード４６に記録された動画ファイルの中の音声データは、圧縮・伸張処理部４０で伸張処理される。伸張処理されたディジタル音声データはＳＤＲＡＭ３０に格納される。その後、ＳＤＲＡＭ３０に格納された音声データはＤ／Ａ変換回路５８によりアナログ音声信号に変換される。アナログ音声信号はスピーカアンプ４２にてアンプ処理され、映像信号の表示と同期をとりながらスピーカ部８に出力される。
【００３１】
次に、この情報処理装置の音の特徴情報検出、減算処理について説明する。本実施例に係る情報処理装置は、特徴情報検出部７ａを備え、入力された音声信号から特定の音声波形パターンを検出することができる。更に、減算処理部７ｂを備え、入力された音声信号から特定の音声波形パターンを減算することができる。ここでは、水中独特の気泡音「ブクブク」を検出する場合を例として、特徴情報検出部７ａと減算処理部７ｂの構成及び動作について以下に説明する。
【００３２】
図３は、特徴情報検出部７ａと減算処理部７ｂの構成の概略を示すブロック図である。特徴情報検出部７ａは、音声処理部４８によって得られた音声信号から、フラッシュメモリ５６に記憶された特徴情報Ｄの例えば水中独特の気泡音「ブクブク」の音声波形パターンＤ１を検出する。「ブクブク」の音声波形パターンＤ１の例として図１１に示す。そして、減算処理部７ｂにおいて音声信号から「ブクブク」の音声波形パターンＤ１を減算する処理を行う。つまり、音声波形パターンＤ１を逆位相処理部７ｂｂによって逆位相処理を行い、音声信号に加算し、フラッシュメモリ５６に記憶する。なお、逆位相処理後の音声波形パターンＤ１ａの例として図１２に示す。また、音声信号をディレー部７ｂａによって遅延させることにより、減算処理の時間的なタイミングを合わす。
【００３３】
なお、減算する特徴情報Ｄとして「ガサガサ」、「キーン」など任意の音声波形パターンを選んでもよい。なお、特徴情報Ｄは外部メモリカード４６に記憶しておくようにしてもよい。
【００３４】
更に、予めマイク部６から音声信号として音の特徴情報Ｄを取り込み、音声処理部４８によってディジタル音声データに変換して、フラッシュメモリ５６に記憶しておいてもよい。また、外部メモリカード４６から音の特徴情報Ｄを取り込み、フラッシュメモリ５６に記憶しておいてもよい。
【００３５】
そして、図４は、外部メモリカード４６に記憶された動画を再生する場合の特徴情報検出部７ａと減算処理部７ｂの構成の概略を示すブロック図である。なお、図４は、図３との相違点として音声処理部４８によって得られた音声信号を用いるのではなく、外部メモリカード４６に記憶された動画の音声を圧縮・伸張処理部４０において伸張した音声信号を用いる点である。
【００３６】
次にＣＰＵ３６が行う処理を図３乃至図１０を用いて詳述する。
【００３７】
まず、図７を参照して、動画撮影モード設定処理を説明する。
【００３８】
メニューボタン２ｈが押下され、カーソルキー２gの操作と決定操作つまりカーソルキー２gの中央部が押下されることに基づいて、動画撮影モードが設定されると、ステップＳ３０２へ進み、図８に示すようなモード設定メニューが表示部４に表示される。
【００３９】
ステップＳ３０４において、図８に示すようなモード設定メニューから、カーソルキー２gの操作と決定操作つまりカーソルキー２gの中央部が押下されることに基づいて、通常動画または特定音減算動画が設定される。そして、動画撮影モード設定処理を終了する。
【００４０】
次に、図５を参照して、特定音減算動画撮影処理を説明する。なお、通常動画撮影処理に関しては、前述の通常の動画像処理のため省略する。
【００４１】
ＣＰＵ３６はステップＳ１０２において、シャッタボタン２ａが押下されたか否かを判断する。ステップＳ１０２にてＮＯと判断した場合、ステップＳ１０２へ戻る。また、ステップＳ１０２にてＹＥＳと判断した場合、ステップＳ１０４へ進み、動画撮影処理を開始させる。
【００４２】
そして、ステップＳ１０６へ進み、音の特徴情報の音声波形パターンＤ１が検出されたか否かを判断する。ステップＳ１０６にてＮＯと判断した場合、ステップＳ１０８へ進む。
【００４３】
また、ステップＳ１０６において、ＹＥＳと判断した場合、ステップＳ１１４へ進み、前述の図３のように音の特徴情報の音声波形パターンＤ１の減算処理が行われ、ステップＳ１０８へ進む。
【００４４】
ステップＳ１０８において、動画撮影開始と停止を兼用しているシャッタボタン２ａが押下されたか否か、つまり動画撮影が停止されたか否かを判断する。
【００４５】
ステップＳ１０８にてＮＯと判断した場合、ステップＳ１０６へ戻る。ステップＳ１０８にてＹＥＳと判断した場合、ステップＳ１１０へ進み、動画撮影処理および音声記録が停止される。その後、ステップＳ１１２へ進み、ＳＤＲＡＭ３０に格納されている圧縮された複数の圧縮画像データおよび音声データは、１つの動画ファイルとしてカード制御部４４を制御することによって外部メモリカード４６に記録される。そして、特定音減算動画撮影処理が終了される。
【００４６】
次に、図９を参照して、動画再生モード設定処理を説明する。
【００４７】
メニューボタン２ｈが押下され、カーソルキー２gの操作と決定操作つまりカーソルキー２gの中央部が押下されることに基づいて、動画再生モードが設定されると、ステップＳ４０２へ進み、図１０に示すようなモード設定メニューが表示部４に表示される。
【００４８】
ステップＳ４０４において、図１０に示すようなモード設定メニューから、カーソルキー２gの操作と決定操作つまりカーソルキー２gの中央部が押下されることに基づいて、通常再生または特定音減算再生が設定される。そして、動画再生モード設定処理を終了する。
【００４９】
次に、図６を参照して、特定音減算動画再生処理を説明する。なお、通常動画再生処理に関しては、前述の通常の動画像再生処理のため省略する。
【００５０】
ＣＰＵ３６はステップＳ２０２において、動画を再生するファイルが選択されたか否かを判断する。ステップＳ２０２にてＮＯと判断した場合、ステップＳ２０２へ戻る。また、ステップＳ２０２にてＹＥＳと判断した場合、ステップＳ２０４へ進み、動画ファイルを圧縮・伸張処理部４０において伸張処理を行う。
【００５１】
そして、ステップＳ２０６へ進み、動画再生が開始させる。
【００５２】
次に、ステップＳ２０８へ進み、音の特徴情報の音声波形パターンＤ１が検出されたか否かを判断する。ステップＳ２０８にてＮＯと判断した場合、ステップＳ２１０へ進む。
【００５３】
また、ステップＳ２０８において、ＹＥＳと判断した場合、ステップＳ２１８へ進み、前述の図４のように音の特徴情報の音声波形パターンＤ１の減算処理が行われ、ステップＳ２１０へ進む。
【００５４】
ステップＳ２１０において、動画再生の停止ボタンと兼用のカーソルキー２gの中央部が押下されたか否か、つまり動画再生が停止されたか否かを判断する。
【００５５】
ステップＳ２１０にてＮＯと判断した場合、ステップＳ２０８へ戻る。ステップＳ２１０にてＹＥＳと判断した場合、ステップＳ２１２へ進み、動画再生処理および音声再生が停止される。
【００５６】
次に、ステップＳ２１４へ進み、特定音減算を行った動画を新規の動画ファイルとして外部メモリカード４６に記録するか否かを判断する。ステップＳ２１４にてＮＯと判断した場合は特定音減算動画再生処理が終了される。
【００５７】
また、ステップＳ２１４にてＹＥＳと判断した場合、ステップＳ２１６へ進み、ＳＤＲＡＭ３０に格納されている圧縮された複数の圧縮画像データおよび特定音減算を行った音声データは、新規の動画ファイルとしてカード制御部４４を制御することによって外部メモリカード４６に記録される。そして、特定音減算動画再生処理が終了される。
【００５８】
以上のように、電子カメラにおいて、「特定音減算動画モード」での動画撮影では、例えば水中独特の気泡音「ブクブク」などの減算したい音を自動的に検出し減算することにより、「ブクブク」などの雑音の少ない動画を記録することができる。
【００５９】
また、既に記録済みの動画においても、水中独特の気泡音「ブクブク」などの減算したい音を自動的に検出し減算することにより、「ブクブク」などの雑音の少ない動画を新規のファイルとして記録することができる。
【００６０】
なお、上述した実施例では、撮像素子としてＣＣＤイメージャを用いて説明したが、こ
れに限定されるものではなく、例えばＣＭＯＳセンサーなど他の撮像素子でも同様の構成
が可能である。
【００６１】
また、上述した実施例では、動画像の圧縮・伸張コーデックとして、ＭｏｔｉｏｎＪＰ
ＥＧコーデックを用いて説明したが、これに限定されるものではなく、例えばＭＰＥＧコ
ーデックなど他のコーデックでも同様の構成が可能である。更に、上述した実施例では、
記録媒体として外部メモリカードを記載したが、例えば、内蔵のハードディスクなど他の
記録媒体であっても良い。
【符号の説明】
【００６２】
２ …操作部
４ …表示部
７ …データ処理部
１０ …電子カメラ
３０ …ＳＤＲＡＭ
３２ …ビデオエンコーダ
３６ …ＣＰＵ
４０ …圧縮・伸張処理部
４４ …カード制御部
４６ …外部カードメモリ
５０ …画像用Ｄ／Ａ変換回路
５６ …フラッシュメモリ
５８ …音声用Ｄ／Ａ変換回路
【技術分野】
【０００１】
本発明は、情報処理装置に関し、特に音声信号に含まれる特徴情報を減算する減算処理機能を備えるディジタルカメラ等の電子カメラに関する。
【背景技術】
【０００２】
従来、電子カメラにおいて、予めメモリに記憶しておいた音のノイズデータを読み出し、マイク等より得られた音声からノイズを減算する機能を備えたものが考えられている。
【０００３】
この種のカメラの一例が、特許文献１に開示されている。この従来の技術のカメラは、予めズームモーター音をメモリに記憶させる。そして、ズームモーターの回転を開始したならば、メモリから予め記憶しておいたズーム音データを読み出し、マイクから得られた音声からズーム音を減算することができる技術が開示されている。
【特許文献１】特開２００６−１７９９９６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１においては、予めメモリに記憶しておいた音のノイズデータを読み出し、マイク等より得られた音声からノイズを減算する技術が開示されている。しかしながら、音声からズーム音を減算するには、ズームモーターの回転を検知する必要があり、ズーム音以外のノイズを自動で減算することができない。
【課題を解決するための手段】
【０００５】
第一の発明の情報処理装置は、音の特徴情報を記憶する特徴情報記憶手段と、該特徴情報を含む音声信号を取り込む音声信号入力手段と、前記特徴情報記憶手段出力を基に前記音声信号から前記特徴情報を減算する減算処理手段を備えることを特徴とする。
【０００６】
第二の発明の情報処理装置は、音の特徴情報を記憶する特徴情報記憶手段と、該特徴情報を含む音声信号を取り込む音声信号入力手段と、被写体像を撮像素子に結像して撮像信号を順次生成する撮像手段と、前記撮像信号を基に得られた動画像信号と前記音声信号を記録する記録手段と、該記録手段により記録された前記動画像信号と前記音声信号を再生する再生手段と、前記特徴情報記憶手段出力を基に前記音声信号から前記特徴情報を減算する減算処理手段を備えることを特徴とする。
【発明の効果】
【０００７】
本発明によれば、電子カメラにおいて、予め音の特徴情報を記憶し、音声から特徴情報を減算することにより音質が上がる。
【図面の簡単な説明】
【０００８】
【図１】本発明の一実施例である電子カメラの外観を示す外観図である。
【図２】本発明の一実施例である電子カメラの構成を示すブロック図である。
【図３】本発明の一実施例であるデータ処理部７の内部構成の概略を示すブロック図である。
【図４】本発明の他の一実施例であるデータ処理部７の内部構成の概略を示すブロック図である。
【図５】本発明の一実施例である動作の一例を示すフロー図である。
【図６】本発明の他の一実施例である動作の一例を示すフロー図である。
【図７】本発明の一実施例である動作の一例を示すフロー図である。
【図８】本発明の一実施例である動画撮影モード設定メニュー表示の一例を示す図解図である。
【図９】本発明の他の一実施例である動作の一例を示すフロー図である。
【図１０】本発明の他の一実施例である動画再生モード設定メニュー表示の一例を示す図解図である。
【図１１】本発明の一実施例である音声波形パターンの一例を示す図である。
【図１２】本発明の一実施例である音声波形パターンの一例を示す図である。
【発明を実施するための形態】
【０００９】
以下の実施例を、情報処理装置の１つの例として、電子カメラ１０の形態を図面を参照しながら説明する。
【００１０】
電子カメラ１０の外観図を図１に示す。図１の電子カメラ１０は、少なくとも図示しない撮像部、操作部２、表示部４、マイク部６、およびスピーカ部８を備える。撮像部では撮像動作が行われる。操作部２を構成する２ａ〜２ｈを詳しく説明すると、２ａは撮像動作を指示するシャッタボタン、２ｂは画像を拡大させるＴＥＬＥボタン、２ｃは画像を縮小させるＷＩＤＥボタンである。画像を拡大、縮小させるズーム処理は、図２のＣＰＵ３６の制御に基づいてドライバ２５及び撮像レンズ２２によって実現される。
【００１１】
この場合、ユーザがＴＥＬＥボタン２ｂに圧力を付与することによってＴＥＬＥボタン２ｂを押し下げればズーム倍率の可変範囲内においてズーム倍率は増大し、ユーザがＷＩＤＥボタン２ｃに圧力を付与することによってＷＩＤＥボタン２ｃを押し下げればズーム倍率の可変範囲内においてズーム倍率は減少する。ズーム倍率の増大量又は減少量は、ＴＥＬＥボタン２ｂ又はＷＩＤＥボタン２ｃを押し下げている時間の長さに比例する。即ち、ＴＥＬＥボタン２ｂを押し下げている時間の長さが増加するに伴ってズーム倍率の増大量は増加し、ＷＩＤＥボタン２ｃを押し下げている時間の長さが増加するに伴ってズーム倍率の減少量は増加する。
【００１２】
２ｄは再生モードボタンであり、押下されると電子カメラは再生モードに移行する。同様に、２ｆは静止画撮像モードボタン、２ｅは動画撮像モードボタンであり、押下されると電子カメラはそれぞれのモードに移行する。２ｇは４方向に操作されることにより表示部４内に表示される項目等を選択指示するカーソルキーであり、４方向の中心部が押下されることにより、項目等を決定することができる。そして、２ｈは表示部４に、選択可能な項目等を表示させるメニューボタンである。
【００１３】
さらに図１で示した電子カメラ１０内部のブロック図である図２を用いて電子カメラ１０を更に詳細に説明する。電子カメラ１０は、操作部２、表示部４、マイク部６、スピーカ部８、撮像レンズ２２、絞り機構２４、ドライバ２５、ＣＣＤイメージャ２６、撮像処理部２８、ＳＤＲＡＭ３０、ビデオエンコーダ３２、メニュー切替スイッチ３４、ＣＰＵ３６、ＡＦ処理部３８、圧縮・伸張処理部４０、スピーカアンプ４２、カード制御部４４、音声処理部４８、画像用Ｄ／Ａ変換回路５０、データ処理部７、フラッシュメモリ５６および音声用Ｄ／Ａ変換回路５８を備えて構成されている。
【００１４】
撮像レンズ２２は、被写体の光学像を撮像デバイスであるＣＣＤイメージャ２６の撮像面上に結像させる。また、撮像レンズ２２はＣＣＤイメージャ２６の出力信号に基づいて光軸方向の移動が調節される。絞り機構２４は、制御されることにより撮像レンズ２２よりＣＣＤイメージャ２６に入る光を調節する。更に、撮像レンズ２２は画像を拡大、縮小させるズーム機構を備えている。これらの撮像レンズ２２、および絞り機構２４の調節はドライバ２５で行われる。
【００１５】
ＣＣＤイメージャ２６から出力されたアナログ撮像信号は、撮像処理部２８によって色分離、白バランス調整、ＹＵＶ変換等の所定の処理が行われ、輝度信号であるＹ信号および色差信号であるＵ、Ｖ信号に変換される。
【００１６】
ＣＰＵ３６は、操作部２、ドライバ２５、撮像処理部２８、ＳＤＲＡＭ３０、メニュー切替スイッチ３４、ＡＦ処理部３８、圧縮・伸張処理部４０、スピーカアンプ４２、カード制御部４４、音声処理部４８、画像用Ｄ／Ａ変換回路５０、データ処理部７、フラッシュメモリ５６および音声用Ｄ／Ａ変換回路５８に接続される。ＣＰＵ３６は、フラッシュメモリ５６に格納されているプログラムに従って、撮像処理部２８、ＳＤＲＡＭ３０、圧縮・伸張処理部４０、スピーカアンプ４２、カード制御部４４、音声処理部４８、画像用Ｄ／Ａ変換回路５０、データ処理部７、および音声用Ｄ／Ａ変換回路５８の制御を行う。
【００１７】
次に、操作部２が操作されることによる電子カメラ１０の動作の説明をする。
【００１８】
上述したように、操作部２は、各種ボタンまたはキー２ａ〜２ｈで構成される。ＣＰＵ３６は静止画撮像モードボタン２ｆが押下されることによって静止画撮像モード状態にあるとき、シャッタボタン２ａが押下されることによって静止画撮像操作がなされる。そして、１フレーム分の被写体の光学像が撮像レンズ２２、絞り機構２４、ＣＣＤイメージャ２６、撮像処理部２８によって所定の処理がなされ、撮像処理部２８によって得られたＹ、Ｕ、Ｖ信号であるディジタル画像データがＳＤＲＡＭ３０に一旦格納される。
【００１９】
その後、一旦格納された１フレーム分のディジタル画像データは、圧縮・信号処理部４０、ここではＪＰＥＧコーデックによって、ＪＰＥＧ形式で圧縮される。圧縮された圧縮ディジタル画像データは再びＳＤＲＡＭ３０に格納される。
【００２０】
また、データ処理部７にて、一旦格納された１フレーム分のディジタル画像データから縮小処理によりサムネイルデータが生成され、ＳＤＲＡＭ３０に格納され、圧縮・伸張処理部４０にて、ＪＰＥＧコーデックによってＪＰＥＧ圧縮される。圧縮された圧縮サムネイルデータは、再びＳＤＲＡＭ３０に格納される。
【００２１】
そして、圧縮ディジタル画像データおよび圧縮サムネイルデータは、ＣＰＵ３６が１つの静止画像ファイルとしてカード制御部４４を制御することによって外部メモリカード４６に記録される。
【００２２】
ＡＦ処理部３８では、撮像処理部２８で生成されたＹデータの高域周波数成分を１フレーム毎に積分する。積分結果つまりフォーカス評価値はＣＰＵ３６によって取り込まれ、ＣＰＵ３６は取り込んだフォーカス評価値に基づいてドライバ２５を制御する。この結果、フォーカス評価値が最大になるように、光学レンズ２２の光軸方向の位置が調整される。このとき、主要被写体が撮影画面の中央付近にある場合が多いため、評価エリアは中央部に重点がおかれる。
【００２３】
また、ＣＰＵ３６は動画撮像モードボタン２ｅが押下されることによって動画撮像モード状態にあるとき、シャッタボタン２ａが押下されることによって動画撮像操作がなされる。シャッタボタン２ａが再び押下され動画撮像が終了するまで、動画像処理が実行される。この動画像処理は例えば１秒間に３０フレーム分の静止画撮像処理を連続的に行うことと同様の処理であり、Ｙ、Ｕ、Ｖ信号であるディジタル画像データが動画撮像時間分だけＳＤＲＡＭ３０に一旦格納するまでの処理が行われる。
【００２４】
そして、動画像撮像終了の操作がなされると、ＳＤＲＡＭ３０に格納されている連続した複数のディジタル画像データが画像圧縮・伸張処理部３４にて、ここではＭｏｔｉｏｎＪＰＥＧコーデックによって動画圧縮され、再びＳＤＲＡＭ３０に格納される。
【００２５】
更に、動画撮影モードにあるとき、ＣＰＵ３６は操作部２のシャッタボタン２ａが押下されることによって音声記録操作を行う。つまり、マイク部６から音声信号を取り込み、音声処理部４８によって音声信号を増幅しディジタル音声データに変換する。ディジタル音声データは圧縮・伸張処理部４０にて圧縮され、ＳＤＲＡＭ３０に格納される。動画像撮影修了の操作がなされるまで、圧縮された音声データがＳＤＲＡＭ３０に格納される。
【００２６】
次に、圧縮された連続した複数の圧縮画像データおよび圧縮された音声データは、１つの動画ファイルとしてカード制御部４４が制御されることによって外部メモリカード４６に記録される。
【００２７】
再生モードボタン２ｄが押下されると、外部メモリカード４６に記録された最新の静止画像ファイルまたは動画像ファイルが再生される。
【００２８】
具体的には、静止画像ファイルが再生される場合、ＣＰＵ３６は、カード制御部４４を制御して、外部メモリカード４６に記録されている静止画像ファイルの圧縮画像データをＳＤＲＡＭ３０に一旦格納させる。ＳＤＲＡＭ３０に格納された圧縮画像データは、圧縮・伸張処理部４０にて、ＪＰＥＧコーデックにより伸張処理される。伸張処理されたディジタル画像データは、ＳＤＲＡＭ３０に一旦格納され、画像用Ｄ／Ａ変換回路５０によりアナログ画像信号に変換される。ビデオエンコーダ３２は、画像用Ｄ／Ａ変換回路５０からのアナログ画像データを基に映像信号に変換し、表示部４において変換された映像信号を表示する。
【００２９】
動画像ファイルを再生する場合は、ＣＰＵ３６は、カード制御部４４を制御して、外部メモリカード４６に記録されている動画像ファイルの複数の圧縮画像データをＳＤＲＡＭ３０に一旦格納させる。ＳＤＲＡＭ３０に格納された複数の圧縮画像データは、画像圧縮・伸張処理部４０にて、ＭｏｔｉｏｎＪＰＥＧコーデックにより伸張処理される。伸張処理された複数のディジタル画像データは、ＳＤＲＡＭ３０に一旦格納され、時系列に画像用Ｄ／Ａ変換回路５０によりアナログ画像信号に変換される。ビデオエンコーダ３２は、画像用Ｄ／Ａ変換回路５０からのアナログ画像データを基に映像信号に変換し、表示部４において変換された映像信号を表示する。
【００３０】
更に、外部メモリカード４６に記録された動画ファイルの中の音声データは、圧縮・伸張処理部４０で伸張処理される。伸張処理されたディジタル音声データはＳＤＲＡＭ３０に格納される。その後、ＳＤＲＡＭ３０に格納された音声データはＤ／Ａ変換回路５８によりアナログ音声信号に変換される。アナログ音声信号はスピーカアンプ４２にてアンプ処理され、映像信号の表示と同期をとりながらスピーカ部８に出力される。
【００３１】
次に、この情報処理装置の音の特徴情報検出、減算処理について説明する。本実施例に係る情報処理装置は、特徴情報検出部７ａを備え、入力された音声信号から特定の音声波形パターンを検出することができる。更に、減算処理部７ｂを備え、入力された音声信号から特定の音声波形パターンを減算することができる。ここでは、水中独特の気泡音「ブクブク」を検出する場合を例として、特徴情報検出部７ａと減算処理部７ｂの構成及び動作について以下に説明する。
【００３２】
図３は、特徴情報検出部７ａと減算処理部７ｂの構成の概略を示すブロック図である。特徴情報検出部７ａは、音声処理部４８によって得られた音声信号から、フラッシュメモリ５６に記憶された特徴情報Ｄの例えば水中独特の気泡音「ブクブク」の音声波形パターンＤ１を検出する。「ブクブク」の音声波形パターンＤ１の例として図１１に示す。そして、減算処理部７ｂにおいて音声信号から「ブクブク」の音声波形パターンＤ１を減算する処理を行う。つまり、音声波形パターンＤ１を逆位相処理部７ｂｂによって逆位相処理を行い、音声信号に加算し、フラッシュメモリ５６に記憶する。なお、逆位相処理後の音声波形パターンＤ１ａの例として図１２に示す。また、音声信号をディレー部７ｂａによって遅延させることにより、減算処理の時間的なタイミングを合わす。
【００３３】
なお、減算する特徴情報Ｄとして「ガサガサ」、「キーン」など任意の音声波形パターンを選んでもよい。なお、特徴情報Ｄは外部メモリカード４６に記憶しておくようにしてもよい。
【００３４】
更に、予めマイク部６から音声信号として音の特徴情報Ｄを取り込み、音声処理部４８によってディジタル音声データに変換して、フラッシュメモリ５６に記憶しておいてもよい。また、外部メモリカード４６から音の特徴情報Ｄを取り込み、フラッシュメモリ５６に記憶しておいてもよい。
【００３５】
そして、図４は、外部メモリカード４６に記憶された動画を再生する場合の特徴情報検出部７ａと減算処理部７ｂの構成の概略を示すブロック図である。なお、図４は、図３との相違点として音声処理部４８によって得られた音声信号を用いるのではなく、外部メモリカード４６に記憶された動画の音声を圧縮・伸張処理部４０において伸張した音声信号を用いる点である。
【００３６】
次にＣＰＵ３６が行う処理を図３乃至図１０を用いて詳述する。
【００３７】
まず、図７を参照して、動画撮影モード設定処理を説明する。
【００３８】
メニューボタン２ｈが押下され、カーソルキー２gの操作と決定操作つまりカーソルキー２gの中央部が押下されることに基づいて、動画撮影モードが設定されると、ステップＳ３０２へ進み、図８に示すようなモード設定メニューが表示部４に表示される。
【００３９】
ステップＳ３０４において、図８に示すようなモード設定メニューから、カーソルキー２gの操作と決定操作つまりカーソルキー２gの中央部が押下されることに基づいて、通常動画または特定音減算動画が設定される。そして、動画撮影モード設定処理を終了する。
【００４０】
次に、図５を参照して、特定音減算動画撮影処理を説明する。なお、通常動画撮影処理に関しては、前述の通常の動画像処理のため省略する。
【００４１】
ＣＰＵ３６はステップＳ１０２において、シャッタボタン２ａが押下されたか否かを判断する。ステップＳ１０２にてＮＯと判断した場合、ステップＳ１０２へ戻る。また、ステップＳ１０２にてＹＥＳと判断した場合、ステップＳ１０４へ進み、動画撮影処理を開始させる。
【００４２】
そして、ステップＳ１０６へ進み、音の特徴情報の音声波形パターンＤ１が検出されたか否かを判断する。ステップＳ１０６にてＮＯと判断した場合、ステップＳ１０８へ進む。
【００４３】
また、ステップＳ１０６において、ＹＥＳと判断した場合、ステップＳ１１４へ進み、前述の図３のように音の特徴情報の音声波形パターンＤ１の減算処理が行われ、ステップＳ１０８へ進む。
【００４４】
ステップＳ１０８において、動画撮影開始と停止を兼用しているシャッタボタン２ａが押下されたか否か、つまり動画撮影が停止されたか否かを判断する。
【００４５】
ステップＳ１０８にてＮＯと判断した場合、ステップＳ１０６へ戻る。ステップＳ１０８にてＹＥＳと判断した場合、ステップＳ１１０へ進み、動画撮影処理および音声記録が停止される。その後、ステップＳ１１２へ進み、ＳＤＲＡＭ３０に格納されている圧縮された複数の圧縮画像データおよび音声データは、１つの動画ファイルとしてカード制御部４４を制御することによって外部メモリカード４６に記録される。そして、特定音減算動画撮影処理が終了される。
【００４６】
次に、図９を参照して、動画再生モード設定処理を説明する。
【００４７】
メニューボタン２ｈが押下され、カーソルキー２gの操作と決定操作つまりカーソルキー２gの中央部が押下されることに基づいて、動画再生モードが設定されると、ステップＳ４０２へ進み、図１０に示すようなモード設定メニューが表示部４に表示される。
【００４８】
ステップＳ４０４において、図１０に示すようなモード設定メニューから、カーソルキー２gの操作と決定操作つまりカーソルキー２gの中央部が押下されることに基づいて、通常再生または特定音減算再生が設定される。そして、動画再生モード設定処理を終了する。
【００４９】
次に、図６を参照して、特定音減算動画再生処理を説明する。なお、通常動画再生処理に関しては、前述の通常の動画像再生処理のため省略する。
【００５０】
ＣＰＵ３６はステップＳ２０２において、動画を再生するファイルが選択されたか否かを判断する。ステップＳ２０２にてＮＯと判断した場合、ステップＳ２０２へ戻る。また、ステップＳ２０２にてＹＥＳと判断した場合、ステップＳ２０４へ進み、動画ファイルを圧縮・伸張処理部４０において伸張処理を行う。
【００５１】
そして、ステップＳ２０６へ進み、動画再生が開始させる。
【００５２】
次に、ステップＳ２０８へ進み、音の特徴情報の音声波形パターンＤ１が検出されたか否かを判断する。ステップＳ２０８にてＮＯと判断した場合、ステップＳ２１０へ進む。
【００５３】
また、ステップＳ２０８において、ＹＥＳと判断した場合、ステップＳ２１８へ進み、前述の図４のように音の特徴情報の音声波形パターンＤ１の減算処理が行われ、ステップＳ２１０へ進む。
【００５４】
ステップＳ２１０において、動画再生の停止ボタンと兼用のカーソルキー２gの中央部が押下されたか否か、つまり動画再生が停止されたか否かを判断する。
【００５５】
ステップＳ２１０にてＮＯと判断した場合、ステップＳ２０８へ戻る。ステップＳ２１０にてＹＥＳと判断した場合、ステップＳ２１２へ進み、動画再生処理および音声再生が停止される。
【００５６】
次に、ステップＳ２１４へ進み、特定音減算を行った動画を新規の動画ファイルとして外部メモリカード４６に記録するか否かを判断する。ステップＳ２１４にてＮＯと判断した場合は特定音減算動画再生処理が終了される。
【００５７】
また、ステップＳ２１４にてＹＥＳと判断した場合、ステップＳ２１６へ進み、ＳＤＲＡＭ３０に格納されている圧縮された複数の圧縮画像データおよび特定音減算を行った音声データは、新規の動画ファイルとしてカード制御部４４を制御することによって外部メモリカード４６に記録される。そして、特定音減算動画再生処理が終了される。
【００５８】
以上のように、電子カメラにおいて、「特定音減算動画モード」での動画撮影では、例えば水中独特の気泡音「ブクブク」などの減算したい音を自動的に検出し減算することにより、「ブクブク」などの雑音の少ない動画を記録することができる。
【００５９】
また、既に記録済みの動画においても、水中独特の気泡音「ブクブク」などの減算したい音を自動的に検出し減算することにより、「ブクブク」などの雑音の少ない動画を新規のファイルとして記録することができる。
【００６０】
なお、上述した実施例では、撮像素子としてＣＣＤイメージャを用いて説明したが、こ
れに限定されるものではなく、例えばＣＭＯＳセンサーなど他の撮像素子でも同様の構成
が可能である。
【００６１】
また、上述した実施例では、動画像の圧縮・伸張コーデックとして、ＭｏｔｉｏｎＪＰ
ＥＧコーデックを用いて説明したが、これに限定されるものではなく、例えばＭＰＥＧコ
ーデックなど他のコーデックでも同様の構成が可能である。更に、上述した実施例では、
記録媒体として外部メモリカードを記載したが、例えば、内蔵のハードディスクなど他の
記録媒体であっても良い。
【符号の説明】
【００６２】
２ …操作部
４ …表示部
７ …データ処理部
１０ …電子カメラ
３０ …ＳＤＲＡＭ
３２ …ビデオエンコーダ
３６ …ＣＰＵ
４０ …圧縮・伸張処理部
４４ …カード制御部
４６ …外部カードメモリ
５０ …画像用Ｄ／Ａ変換回路
５６ …フラッシュメモリ
５８ …音声用Ｄ／Ａ変換回路
【特許請求の範囲】
【請求項１】
音の特徴情報を記憶する特徴情報記憶手段と、
該特徴情報を含む音声信号を取り込む音声信号入力手段と、
前記特徴情報記憶手段出力を基に前記音声信号から前記特徴情報を減算する減算処理手段を備えることを特徴とする情報処理装置。
【請求項２】
音の特徴情報を記憶する特徴情報記憶手段と、
該特徴情報を含む音声信号を取り込む音声信号入力手段と、
被写体像を撮像素子に結像して撮像信号を順次生成する撮像手段と、
前記撮像信号を基に得られた動画像信号と前記音声信号を記録する記録手段と、
該記録手段により記録された前記動画像信号と前記音声信号を再生する再生手段と、
前記特徴情報記憶手段出力を基に前記音声信号から前記特徴情報を減算する減算処理手段を備えることを特徴とする情報処理装置。
【請求項１】
音の特徴情報を記憶する特徴情報記憶手段と、
該特徴情報を含む音声信号を取り込む音声信号入力手段と、
前記特徴情報記憶手段出力を基に前記音声信号から前記特徴情報を減算する減算処理手段を備えることを特徴とする情報処理装置。
【請求項２】
音の特徴情報を記憶する特徴情報記憶手段と、
該特徴情報を含む音声信号を取り込む音声信号入力手段と、
被写体像を撮像素子に結像して撮像信号を順次生成する撮像手段と、
前記撮像信号を基に得られた動画像信号と前記音声信号を記録する記録手段と、
該記録手段により記録された前記動画像信号と前記音声信号を再生する再生手段と、
前記特徴情報記憶手段出力を基に前記音声信号から前記特徴情報を減算する減算処理手段を備えることを特徴とする情報処理装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２０１３−７０１５１（Ｐ２０１３−７０１５１Ａ）
【公開日】平成２５年４月１８日（２０１３．４．１８）
【国際特許分類】
【出願番号】特願２０１１−２０５９２８（Ｐ２０１１−２０５９２８）
【出願日】平成２３年９月２１日（２０１１．９．２１）
【出願人】（０００００１８８９）三洋電機株式会社 (18,308)
【Ｆターム（参考）】
【公開日】平成２５年４月１８日（２０１３．４．１８）
【国際特許分類】
【出願日】平成２３年９月２１日（２０１１．９．２１）
【出願人】（０００００１８８９）三洋電機株式会社 (18,308)
【Ｆターム（参考）】
[ Back to top ]