対象画像の位置検出装置および方法ならびに対象画像の位置検出装置を制御するプログラム
【目的】 比較的正確に顔画像領域を決定する。
【構成】 被写体を連続して撮像することにより，（Ｎ−１）駒目の被写体像α１とＮ駒目の被写体像α２とが得られる。それぞれの駒の被写体像α１およびα２において顔画像検出処理が行われ，顔画像領域Ｃ１，Ｃ２およびＣ３が検出される。顔画像領域Ｃ２は，対応する顔画像領域Ｃ１が存在し，リンク付けがあるとされる。顔画像領域Ｃ３は，対応する顔画像領域が存在しないため，リンク付けがあるとされる。Ｎ駒目の被写体像α２は，リンク付けのある顔画像領域Ｃ２が顔画像領域として決定される。比較的正確に顔画像領域を決定できる。
【構成】 被写体を連続して撮像することにより，（Ｎ−１）駒目の被写体像α１とＮ駒目の被写体像α２とが得られる。それぞれの駒の被写体像α１およびα２において顔画像検出処理が行われ，顔画像領域Ｃ１，Ｃ２およびＣ３が検出される。顔画像領域Ｃ２は，対応する顔画像領域Ｃ１が存在し，リンク付けがあるとされる。顔画像領域Ｃ３は，対応する顔画像領域が存在しないため，リンク付けがあるとされる。Ｎ駒目の被写体像α２は，リンク付けのある顔画像領域Ｃ２が顔画像領域として決定される。比較的正確に顔画像領域を決定できる。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は，対象画像の位置検出装置および方法ならびに対象画像の位置検出装置を制御するプログラムに関する。
【背景技術】
【０００２】
被写体が人物などの場合，その被写体の顔の画像部分がきれいに撮像されることが好ましいことが多い。このために，被写体像の中から顔の画像部分を検出することがある。顔検出の精度を向上させるために同一画像について複数の顔検出を行うことがある（特許文献１）。
【特許文献１】特開2003-216935号公報
【０００３】
また，連続する被写体像が与えられる場合には，前回の駒の被写体像において検出された顔の画像部分の近傍領域を，今回の駒の被写体像における顔の画像部分を検出する領域と規定するものもある（特許文献２）。
【特許文献２】特開平11−15979号公報
【０００４】
しかしながら，前回の駒の被写体像において誤った検出がされてしまうとその後の駒の被写体像における検出に影響を及ぼしてしまうことがある。検出精度が低くなることがある。
【発明の開示】
【０００５】
この発明は，顔などの対象物の検出精度を向上させることを目的とする。
【０００６】
この発明による対象画像の位置検出装置は，ほぼ同一と見なせる被写体を同時にまたは連続して撮像することにより得られた複数駒の被写体像のうちの第１の被写体像から対象画像が存在する第１の位置を検出する第１の検出手段，上記複数駒の被写体像のうち第２の被写体像から上記対象画像が存在する第２の位置を検出する第２の検出手段，ならびに上記第１の検出手段によって検出された第１の位置と上記第２の検出手段によって検出された第２の位置とにもとづいて，上記第１の被写体像および上記第２の被写体像の少なくとも一方の被写体像において上記対象画像が存在する位置を決定する決定手段を備えていることを特徴とする。
【０００７】
この発明は，上記対象画像の位置検出装置に適した方法も提供している。すなわち，この方法は，ほぼ同一と見なせる被写体を同時にまたは連続して撮像することにより得られた複数駒の被写体像のうちの第１の被写体像から対象画像が存在する第１の位置を検出し，上記複数駒の被写体像のうち第２の被写体像から上記対象画像が存在する第２の位置を検出し，検出された第１の位置と検出された第２の位置とにもとづいて，上記第１の被写体像および上記第２の被写体像の少なくとも一方の被写体像において上記対象画像が存在する位置を決定するものである。
【０００８】
この発明は，上記対象画像の位置検出方法を実現するためのプログラムも提供している。さらに，そのプログラムを格納した記録媒体も提供している。
【０００９】
この発明によると，ほぼ同一と見なせる被写体が同時または連続して撮像されることにより得られた複数駒の被写体像（連続して得られる被写体像とは，たとえば，プレ撮像，動画の撮像，連写，ブラケット撮像など一度の撮像シーケンスで得られる被写体像）のうちの第１の被写体像から対象画像が存在する第１の位置が検出される。また，それらの複数駒の被写体像のうちの第２の被写体像から対象画像が存在する第２の位置も検出される。
【００１０】
検出された第１の位置と第２の位置とにもとづいて，第１の被写体像および第２の被写体像の少なくとも一方の被写体像において対象画像が存在する位置が決定される。第１の位置と第２の位置とを比較して，対象画像が存在する位置が決定されるので，第１の被写体像において検出された第１の位置または第２の被写体像において検出された第２の位置のいずれか一方の位置にのみにもとづいて対象画像の位置を検出する場合に比べて，検出精度が向上する。比較的精度の高い検出処理を実現できる。
【００１１】
ほぼ同一と見なせる被写体を同時または連続して撮像して複数駒の被写体像を表す画像データを出力する撮像装置をさらに備えてもよい。この場合，上記第１の検出手段は，上記撮像装置から出力された画像データによって表される複数駒の被写体像のうちの第１の被写体像から対象画像が存在する位置を検出するものとなり，上記第２の検出手段は，上記撮像装置から出力された画像データによって表される複数駒の被写体像のうちの第２の被写体像から対象画像が存在する位置を検出するものとなろう。
【００１２】
上記第１の検出手段と上記第２の検出手段とは共通のものでもよい。
【００１３】
上記第１の被写体像の大きさと上記第２の被写体像の大きさとが異なるものであり，上記第１の被写体像の大きさと上記第２の被写体像の大きさとが同じである場合における位置となるように，上記第１の検出手段によって検出された第１の位置および上記第２の検出手段によって検出された第２の位置の少なくとも一方の位置を変換する位置変換手段をさらに備えてもよい。この場合，上記決定手段は，上記位置変換手段によって変換された上記第１の位置と上記第２の位置とにもとづいて，上記対象画像が存在する位置を決定するものとなろう。
【００１４】
第１の被写体像の大きさと第２の被写体像の大きさとが異なるものであっても，第１の位置と第２の位置とにもとづいて，対象画像が存在する位置を決定できる。
【００１５】
被写体を撮像して被写体像を表す画像データを出力する撮像装置，プレ撮像指令に応じて，被写体を撮像して上記第１の被写体像を表す第１の画像データを出力するように上記撮像装置を制御する第１の撮像制御手段，および本撮像指令に応じて，被写体を撮像して上記第２の被写体像を表す第２の画像データを出力するように上記撮像装置を制御する第２の撮像制御手段をさらに備えてもよい。この場合，上記第１の検出手段は，上記第１の撮像制御手段の制御のもとに上記第１の撮像装置から出力された第１の画像データによって表される第１の被写体像の中から上記対象画像が存在する位置を検出するものとなり，上記第２の検出手段は，上記第２の撮像制御手段の制御のもとに上記第２の撮像装置から出力された第２の画像データによって表される第２の被写体像の中から上記対象画像が存在する位置を検出するものとなろう。
【００１６】
シャッタ・レリーズ・ボタンのオンに応じて本撮像が行われ，その本撮像により得られた画像データがメモリ・カードなどの記録媒体に記録されるようなディジタル・カメラなどの場合に，本撮像前の撮像（プレ撮像）により得られた第１の被写体像から得られる第１の位置と本撮像により得られた第２の被写体像から得られる第２の位置とから対象画像が存在する位置を検出することができる。
【００１７】
上記本撮像指令に応じた撮像がストロボ発光に同期して行われるかどうかを判定する判定手段，および上記判定手段によりストロボ発光に同期して行われると判定されたことに応じて，上記決定手段における決定処理を停止して上記第２の検出手段によって検出された第２の位置を，上記対象画像が存在する位置と決定するように上記決定手段を制御する決定制御手段をさらに備えることが好ましい。
【００１８】
本撮像がストロボ発光に同期して行われる場合には，プレ撮像により得られた第１の被写体像は暗い場合がある。これに対して，ストロボ発光に同期して撮像されることにより得られた第２の被写体像は，比較的適正な明るさをもつものであるために，比較的正確に対象画像が検出されることが多い。ところが，第１の被写体像は暗いために対象画像が検出されないことがある。第１の被写体像から得られる第１の位置と第２の被写体像から得られる第２の位置とを比較しても対象画像が存在する位置を決定できない場合があるので，決定処理が停止される。ストロボ発光に同期して得られる第２の被写体像から得られる第２の位置が，対象画像が存在する位置と決定されるようになる。誤検出を未然に防止できる。
【００１９】
上記第１の撮像制御手段における制御にもとづいて上記撮像装置から出力される第１の画像データにもとづいて上記撮像装置の露出量を調整する露出量調整手段をさらに備えてもよい。この場合，上記第２の撮像制御手段における制御は，上記露出量調整手段によって調整された露出量にもとづいて本撮像指令に応じて上記撮像装置から上記第２の画像データを出力させるものとなろう。そして，上記第１の撮像制御手段によって制御される上記撮像装置の露出量がしきい値以下かどうかを判定する判定手段，および上記判定手段によって，しきい値以下と判定されたことに応じて，上記決定手段における決定処理を停止して上記第２の検出手段によって検出された第２の位置を，上記対象画像が存在する位置と決定するように上記決定手段を制御する決定制御手段をさらに備える。
【００２０】
露出量がしきい値以下と判定された場合も上記ストロボ発光についての処理と同様に，第１の位置についての信頼性が少ない。このために，第２の位置が，対象画像が存在する位置と決定される。
【００２１】
上記決定手段は，たとえば，上記第１の検出手段によって検出された第１の位置と上記第２の検出手段によって検出された第２の位置との変動量が所定のしきい値以上の場合に，上記第１の被写体像および上記第２の被写体像の少なくとも一方の被写体像において上記対象画像が存在しないと決定するものである。変動量がしきい値以上の場合には，異なる対象画像または誤検出であると考えられるので，対象画像が存在しないと決定される。
【００２２】
上記第１の検出手段は，ほぼ同一と見なせる被写体を時間的に連続して複数回撮像することにより得られた複数駒の被写体像のうちの第１番目の撮像により得られた第１の被写体像から対象画像が存在する第１の位置を検出するものでもよい。この場合，上記第２の検出手段は，上記複数駒の被写体像のうちの第２番目の撮像により得られた第２の被写体像から対象画像が存在する第２の位置を検出するものとなる。そして，上記複数駒の被写体像のうちの第３番目の撮像により得られた第３の被写体像から対象画像が存在する第３の位置を検出する第３の検出手段をさらに備える。さらに，上記決定手段は，上記第１の検出手段によって検出された第１の位置，上記第２の検出手段によって検出された第２の位置および上記第３の検出手段によって検出された第３の位置にもとづいて上記第１の被写体像，上記第２の被写体像および上記第３の被写体像のうち少なくとも一つの被写体像において上記対象画像が存在する位置を決定するものとなろう。
【００２３】
第１の被写体像，第２の被写体像および第３の被写体像のうち，何らかの理由により第２の被写体像において対象画像が検出できなかった場合に，第１の被写体像，第２の被写体像および第３の被写体像の３駒の被写体像を用いて，対象画像を検出することができるようになる。対象画像が存在するにもかかわらず，その対象画像が見つけられない場合を回避できる。
【００２４】
上記決定手段は，上記第３の検出手段によって検出された第３の位置のうち，上記第２の検出手段によって検出された第２の位置に対応するものが存在しない第３の位置と，上記第１の検出手段によって検出された第１の位置のうち，上記第２の検出手段によって検出された第２の位置と上記第３の検出手段によって検出された第３の位置との両方に対応するものが存在しない第１の位置とにもとづいて，上記第３の被写体像において上記対象画像が存在する位置を決定するものでもよい。
【００２５】
被写体を撮像することにより上記第１の被写体像を表す第１の画像データを出力する第１の撮像装置，および被写体を撮像することにより上記第２の被写体像を表す第２の画像データを出力する第２の撮像装置をさらに備えてもよい。この場合，上記第１の検出手段は，上記第１の撮像装置から出力された第１の画像データによって表される第１の被写体像から対象画像が存在する位置を検出するものとなろう。また，上記第２の検出手段は，上記第２の撮像装置から出力された第２の画像データによって表される第２の被写体像から対象画像が存在する位置を検出するものとなろう。
【００２６】
第１の撮像装置と第２の撮像装置とは同じ筐体に内蔵されていてもよいし，異なる筐体に内蔵されていてもよい。
【００２７】
上記第１の撮像装置と上記第２の撮像装置とは同じまたは異なる撮像範囲をもつものでもよい。
【００２８】
上記第１の検出手段は，たとえば，上記第１の被写体像から対象画像らしさの値にもとづいて対象画像が存在する第１の位置を検出するものである。また，上記第２の検出手段も，たとえば，上記第２の被写体像から対象画像らしさの値にもとづいて対象画像が存在する第２の位置を検出するものである。この場合，上記決定手段は，上記第１の検出手段において検出された対象画像の対象画像らしさの値と上記第２の検出手段において検出された対象画像の対象画像らしさの値とにもとづいて，対象画像の存在する位置を決定するものとなろう。
【００２９】
受光面上に複数色の色フィルタが規則的に設けられており，被写体を撮像することによりカラーの被写体像を表す複数色のカラー画像データを出力する単板の固体電子撮像装置をさらに備えてもよい。この場合，上記第１の被写体像は，上記単板の固体電子撮像装置から出力された上記複数色のカラー画像データのうち一色のカラー画像データによって表され，上記第２の被写体像は，上記複数色のカラー画像データのうち上記一色のカラー画像データとは異なる色のカラー画像データによって表される。
【００３０】
受光面上に異なる色の色フィルタが設けられている複数の固体電子撮像素子を含み，被写体を撮像することにより異なる色の種類のカラー画像データを出力する固体電子撮像装置をさらに備えてもよい。この場合，上記第１の被写体像は，上記固体電子撮像装置から出力された上記カラー画像データのうちの一種類のカラー画像データによって表され，上記第２の被写体像は，上記カラー画像データのうち上記一種類のカラー画像データとは異なる種類のカラー画像データによって表されるものとなろう。
【００３１】
被写体を撮像することにより上記第１の被写体像を可視光像として表す可視光画像データを出力する可視光センサ，および被写体を撮像することにより上記第２の被写体像を赤外光像として表す赤外光画像データを出力する赤外光センサをさらに備えてもよい。この場合，上記第１の検出手段は，上記可視光センサから出力された可視光画像データによって表される第１の被写体像から上記対象画像が存在する位置を検出するものであり，上記第２の検出手段は，上記赤外光センサから出力された赤外光画像データによって表される複数駒の被写体像のうちの第２の被写体像から上記対象画像が存在する位置を検出するものとなろう。
【００３２】
受光面上に可視光フィルタ（可視光を透過する特性をもつフィルタ）と赤外光フィルタ（赤外線を透過する特性をもつフィルタ）とが含まれており，被写体像を撮像することにより第１の被写体像を可視光像として表す可視光画像データを出力し，かつ第２の被写体像を赤外光像として表す赤外光像画像データを出力する可視光／赤外光固体電子撮像装置をさらに備えてもよい。この場合，上記第１の検出手段は，上記可視光／赤外光固体電子撮像装置から出力された可視光画像データによって表される第１の被写体像から対象画像が存在する位置を検出するものであり，上記第２の検出手段は，上記可視光／赤外光固体電子撮像装置から出力された赤外光画像データによって表される第２の被写体像から対象画像が存在する位置を検出するものとなろう。
【００３３】
一定周期で被写体を撮像して，第１フィールドの被写体像を表す第１の画像データと第２フィールドの被写体像を表す第２の画像データとを交互に出力する撮像装置をさらに備えてもよい。この場合，上記第１の検出手段は，上記撮像装置から出力された第１フィールドの画像データによって表される第１のフィールドの被写体像から上記対象画像が存在する位置を検出するものであり，上記第２の検出手段は，上記撮像装置から出力された第２フィールドの画像データによって表される第２の被写体像から上記対象画像が存在する位置を検出するものとなろう。
【００３４】
上記撮像装置は，たとえば，ほぼ同一と見なせる被写体を，撮像条件を変更して同時または連続して撮像して複数駒の被写体像を表す画像データを出力するものである。
【００３５】
上記撮像条件の変更は，たとえば，露出量，絞り値，シャッタ速度，フォーカス量，ズーム量，感度およびフラッシュ変更の少なくとも一つである。
【００３６】
被写体を撮像して一駒の被写体像を表す画像データに異なる信号処理を行う信号処理手段をさらに備えてもよい。この場合，上記第１の検出手段は，上記信号処理手段によって行われた信号処理のうち一の信号処理が行われた画像データによって表される第１の被写体像から上記対象画像が存在する位置を検出するものでもよい。この場合，上記第２の検出手段は，上記信号処理手段によって行われた信号処理のうち一の信号処理とは異なる他の信号処理が行われた画像データによって表される第２の被写体像から上記対象画像が存在する位置を検出するものとなろう。異なる信号処理が行われたことにより得られる第１の被写体像と第２の被写体像とから第１の位置と第２の位置とを検出できる。
【００３７】
上記決定手段は，上記第１の検出手段によって検出された第１の位置のうち，上記第２の検出手段によって検出された第２の位置に対応するものが存在する第１の位置近傍の位置を上記被写体像において上記対象画像が存在する位置と決定するものでもよい。
【００３８】
上記決定手段によって決定された上記対象画像の存在位置にもとづいて，ハードウエア制御を行うハードウエア制御手段をさらに備えてもよい。
【００３９】
上記ハードウエア制御は，たとえば，自動露出制御，自動合焦制御，フラッシュ制御，省電力制御およびズーム量制御の少なくとも一つである。
【００４０】
上記決定手段において決定された上記対象画像の存在位置にもとづいて，信号処理を行う信号処理手段をさらに備えてもよい。検出された位置に存在する対象画像を対象として所定の信号処理を行うことができる。
【００４１】
上記信号処理手段は，たとえば，ゲイン調整，白バランス調整，色補正，輪郭強調，ノイズ低減および階調補正の少なくとも一つの信号処理を行うものである。
【００４２】
上記対象画像は，たとえば，顔または目の画像である。
【実施例】
【００４３】
図1は，この発明の実施例を示すもので，ディジタル・スチル・カメラの電気的構成を示すブロック図である。
【００４４】
ディジタル・スチル・カメラの全体の動作は，制御回路２によって統括される。制御回路２には，ＣＰＵ３，後述する動作が行われる動作プログラム等が格納されているＲＯＭ４，データ等が一時的に記憶されるＲＡＭ５が含まれている。ディジタル・スチル・カメラに通信機能を設け，送信された動作プログラムを受信することにより，後述する動作を行わせるようにすることもできる。もちろん，メモリ・カードに動作プログラムが格納できれば，そのメモリ・カードから動作プログラムを読み取り，ディジタル・スチル・カメラに動作プログラムをインストールすることもできる。
【００４５】
ディジタル・スチル・カメラには，シャッタ・レリーズ・ボタン，モード設定スイッチなどの操作ボタン１が含まれている。この操作ボタン１から出力される操作信号は，制御回路２に入力する。また，ディジタル・スチル・カメラには，ストロボ制御回路６によって制御されるストロボ発光装置７が設けられている。
【００４６】
モード設定スイッチにより撮像モードが設定されると，レンズ駆動回路11によって制御される撮像レンズ８により光線束が集光され，絞り駆動回路12によって制御される絞り９を介して撮像素子10の受光面上に入射する。撮像素子10の受光面に被写体像が結像する。撮像素子10が撮像素子制御回路13によって制御され，一定の撮像周期（プレ撮像）で被写体像を表す映像信号(いわゆるスルー画を示すスルー画像信号)がアナログ信号処理回路14に入力する。アナログ信号処理回路14において，相関二重サンプリングなどの所定のアナログ信号処理が行われる。アナログ信号処理回路14から出力された映像信号は，アナログ/ディジタル信号処理回路においてディジタル画像データに変換されてディジタル信号処理回路16に入力する。ディジタル信号処理回路16において，ガンマ補正，白バランス調整などの所定の信号処理が行われる。ディジタル信号処理回路16から出力された画像データはメモリ18を介して表示装置19に与えられる。表示装置19の表示画面に，撮像された被写体像が表示される。
【００４７】
シャッタ・レリーズ・ボタンが押されると，上述のようにしてディジタル信号処理回路16から出力された画像データはメモリ18に与えられ，一時的に記憶される。画像データがメモリ18から出力されてメモリ・カード20に記録される。
【００４８】
この実施例によるディジタル・スチル・カメラにおいては，被写体像の中から顔画像の領域を検出することができる。このために，ディジタル・スチル・カメラには，顔検出処理回路17が設けられている。上述のようにしてディジタル信号処理回路16から出力された画像データは，この顔検出処理回路17にも入力する。顔検出処理回路17において後述のようにして顔画像の部分を示す領域が検出される。
【００４９】
この実施例においては，少なくとも二駒の被写体像が利用される。それぞれの駒の被写体像において顔画像部分の検出処理が行われる。それぞれの駒の被写体像において検出された顔画像部分の領域にもとづいて，顔画像部分の領域が決定される。
【００５０】
図２は，この実施例による顔画像領域の検出処理を説明するためのもので，被写体像の一例である。
【００５１】
上述のように，撮像モードが設定されると一定周期で被写体が繰返して撮像され，（Ｎ−１）駒目の被写体像α１とＮ駒目の被写体像α２が得られる。これらの二駒の被写体像α１およびα２のそれぞれにおいて顔画像を検出する処理が行われる。たとえば，（Ｎ−１）駒目の被写体像α１には人物像Ｓ１が含まれており,顔画像検出処理が行われることにより，顔画像の領域Ｃ１が検出される。Ｎ駒目の被写体像α２には，人物像Ｓ２が含まれており，顔画像領域Ｃ２が検出される。この顔画像領域Ｃ２は，（Ｎ−１）駒目の被写体像α１において検出された顔画像領域Ｃ１に対応する位置にあると考えられるもので，この実施例においては，領域Ｃ２は，領域Ｃ１にリンク付けがされたものと規定される。また，Ｎ駒目の被写体像α２においては，顔検出処理において顔画像領域Ｃ３も検出される。この顔画像領域Ｃ３は，（Ｎ−１）駒目の被写体像α１においては対応する領域が検出されなかったもので，リンク付けがされていないとされる。
【００５２】
この実施例においては，（Ｎ−１）駒目の被写体像α１における顔画像の検出結果とＮ駒目の被写体像α２における顔画像の検出結果との照合処理が行われる。そして，Ｎ駒目の被写体像α２における顔画像の検出領域は，リンク付けのある領域とされる。したがって，Ｎ駒目の被写体像α２においては，リンク付けの無い領域Ｃ３は顔画像領域とはされず，リンク付けのある領域Ｃ２が顔画像の領域として決定される。
【００５３】
また，この実施例においては，顔画像領域は，上下についても検出される。図２においては,検出された顔画像の領域Ｃ１〜Ｃ３において，顔画像の上の部分が他の部分よりも太く示されている。
【００５４】
図３は（Ｎ−１）駒目の被写体像α１の顔検出結果を，図４はＮ駒目の被写体像α２の顔検出結果をそれぞれ示している。
【００５５】
顔検出処理においては，検出された顔の画像領域の個数，検出された顔画像の領域のナンバを示す顔ナンバ，顔画像領域の位置，顔画像領域の大きさ，顔画像領域の面内回転角，顔画像領域の面外回転角およびスコアが検出される。これらの顔の画像領域の個数等が顔検出結果として，被写体像に対応して格納される。顔検出結果として得られる面内回転角とは，顔が正面を向いている場合における顔の傾き角である。面外回転角とは，顔が正面を向いている場合を基準として，その顔が横を向く場合の角度である。
【００５６】
図５は，照合結果を示している。
【００５７】
上述のように，（Ｎ−１）駒目の被写体像α１の顔画像の検出結果とＮ駒目の被写体像α２の顔画像の検出結果とが照合される。照合された結果，上述のようにリンク付けのある領域に対応する顔ナンバ，位置および大きさが照合結果テーブルに格納される。
【００５８】
図６は，顔画像領域の決定処理手順を示すフローチャートである。
【００５９】
上述のように撮像モードが設定されると一定周期で被写体が撮像され，特定の一駒の被写体像が得られる（ステップ31）。得られた一駒の被写体像において顔検出処理が行われ（ステップ32），その顔検出結果が登録される（ステップ33）。
【００６０】
前回（前駒）の顔検出結果が登録されていなければ（ステップ34でＮＯ），ステップ31からの処理が繰返される。
【００６１】
前回の顔検出結果が登録されていれば（ステップ34でＹＥＳ），上述のように，前回の顔検出結果と今回の顔検出結果との照合処理が行われる（ステップ35）。照合処理の結果にもとづいて，上述のようにリンク付けされる顔画像検出領域を表す照合結果が登録される（ステップ36）。照合結果に登録された情報により特定される顔画像領域が今回の被写体像の顔画像領域として決定される。
【００６２】
ユーザからの終了指令があるまでステップ31からの処理が繰返される（ステップ37）。
【００６３】
今回の顔画像検出処理において検出された顔画像領域に対応する顔画像領域が，前回の顔画像検出処理において検出されていた場合に，今回の被写体像における顔画像領域として決定しているので，今回と前回とも検出されなければ顔画像領域とは決定されない。誤って今回の被写体像から顔画像領域が検出されてしまったような領域は，顔画像領域からは排除されるので，顔画像領域の検出精度が向上する。もちろん，前回の顔画像検出処理において検出された顔画像領域に対応する顔画像領域が今回の顔画像検出処理においても検出された場合に，その顔画像検出領域を前回の被写体像における顔画像検出領域として決定してもよいのはいうまでもない。
【００６４】
図７および図８は，他の実施例を示すものである。
【００６５】
この実施例においては，いわゆるスルー画像（プレ撮像時の画像）と本撮像画像（シャッタ・レリーズ・ボタンが全押しされた後に撮像された画像）との検出結果の照合処理が行われる。また，本撮像画像は高解像度であり，そのサイズ（データ量，画像の大きさ）が大きいのに対して，スルー画像は，比較的低解像度であり，そのサイズは小さい。このために，この実施例においては，座標変換が行われスルー画像のサイズと本撮像画像のサイズとが同じとなるように座標変換処理が行われる。サイズが同じとなったスルー画像と本撮像画像とが検出結果の照合処理が行われる。
【００６６】
図７を参照して，スルー画像α４が得られる。このスルー画像α４には，人物像Ｓ４が含まれており，顔画像検出処理が行われることにより，顔画像領域Ｃ４が検出される。また，本撮像が行われて，本撮像画像α６が得られる。スルー画像α４の大きさと本撮像画像α６の大きさとは異なるから，スルー画像α４の大きさが本撮像画像α６の大きさと同じ大きさとなるように，スルー画像α４が座標変換される。スルー画像α４が座標変換されることにより,本撮像画像α６の大きさと同じ大きさをもつスルー画像α５が得られる。
【００６７】
座標変換されたスルー画像α５にも人物像Ｓ５が含まれており，顔画像検出処理が行われることにより顔画像領域Ｃ５が検出される。また，本撮像画像α６にも人物像Ｓ６が含まれており，顔画像検出処理が行われることにより，顔画像領域Ｃ６が検出される。また，顔画像領域Ｃ６以外の顔画像領域Ｃ７も検出されたものとする。座標変換されたスルー画像α５における検出結果と本撮像画像α６における検出結果とが照合されることにより，本撮像画像α６における顔画像領域が領域Ｃ６に決定されることは理解できよう。
【００６８】
上述の例では，スルー画像α４の大きさを本撮像画像α６の大きさに合わせているが，本撮像画像α６の大きさをスルー画像α４の大きさに合わせてもよいのはいうまでもない。
【００６９】
図８は，スルー画像と本撮像画像とから顔画像領域を決定する処理手順を示すフローチャートである。
【００７０】
撮像モードが設定されてプレ撮像によりスルー画像が得られると，そのスルー画像の顔検出処理が行われる（ステップ41）。スルー画像は，一定周期で得られるから，その一定周期で得られたスルー画像ごとに顔検出処理が行われる。顔検出処理において得られた顔検出結果が更新されながら登録される（ステップ42）。シャッタ・レリーズ・ボタンが全押しされるまで（ステップ43），ステップ41および42の処理が繰り返される。
【００７１】
シャッタ・レリーズ・ボタンが全押しされると（ステップ43でＹＥＳ），本撮像が行われ本撮像画像が得られる。得られた本撮像画像の顔検出処理が行われる（ステップ44）。
【００７２】
本撮像画像とスルー画像（シャッタ・レリーズ・ボタンが全押しされる直前のスルー画像）とが得られると，それらの画像の大きさが同じとなるように座標変換が行われる（ステップ45）。この座標変換は，スルー画像の大きさに合うように行ってもよいし，本撮像画像の大きさに合うように行ってもよいし，他の画像の大きさに合うように行ってもよい。座標変換が行われると，スルー画像の顔検出結果と本撮像画像の顔検出結果とが照合される（ステップ46）。照合結果が登録されて顔画像領域が決定する（ステップ47）。
【００７３】
図９は，図８の変形例を示すもので，顔画像領域決定処理の処理手順を示すフローチャートである。この図において図８に示す処理と同じ処理については同じ符号を付して説明を省略する。
【００７４】
図９に示す処理においては，得られたスルー画像の露光量が少ないか，または本撮像においてストロボ発光されたかどうかが確認される（ステップ51）。本撮像においてストロボ発光された場合には，得られたスルー画像の露光量が少ない。スルー画像の露光量が少ない場合には，スルー画像が暗いために顔検出処理が行われても顔画像領域を検出することができないことがある。顔画像領域を検出できないために，上述したように，スルー画像において検出された顔画像領域と本撮像領域において検出された顔画像領域との照合をしてもリンク付けされる顔画像領域が無いことがある。このために，顔画像領域を決定できないことがある。このために，この変形例においては，スルー画像の露光量が少ないか，または本撮像においてストロボ発光した場合には（ステップ51でＹＥＳ），スルー画像と本撮像画像との上述した検出結果の照合処理が行われずに本撮像画像における顔検出結果が登録され顔検出領域として決定される（ステップ52）。
【００７５】
図10（Ａ）〜（Ｄ）および図11は，上述したリンク付けを決定する処理を説明するためのものである。
【００７６】
図10（Ａ）〜（Ｄ）は，前回の被写体像において検出された顔画像領域と今回の被写体像において検出された顔画像領域との変動を示している。
【００７７】
（Ａ）は，位置変動を示すものである。前回の被写体像における顔検出処理において顔画像領域Ｃ８が検出され，今回の被写体像における顔検出処理において顔画像領域Ｃ９が検出されたことを示している。
【００７８】
（Ｂ）は，大きさ変動を示すものである。前回の被写体像における顔検出処理において顔画像領域Ｃ10が検出され，今回の被写体像における顔検出処理において顔画像領域Ｃ11が検出されたことを示している。顔画像領域Ｃ10の大きさよりも顔画像領域Ｃ11の大きさの方が大きくなっている。
【００７９】
（Ｃ）は，面内回転変動を示すものである。前回の被写体像における顔検出処理において顔画像領域Ｃ12が検出され，今回の被写体像における顔検出処理において顔画像領域Ｃ13が検出されたことを示している。上述したように，顔の上部分に対応する領域は，太く示されている。したがって，前回の被写体像において検出された顔の画像から今回の被写体像において検出された顔の画像は，被写体像の平面内において90度回転していることが分かる。
【００８０】
（Ｄ）は，面外回転変動を示すものである。前回の被写体像における顔検出処理において顔画像領域Ｃ14が検出され，今回の被写体像における顔検出処理において顔画像領域Ｃ15が検出されたことを示している。前回の被写体像における顔検出処理において検出された顔画像領域Ｃ14は正方形であり，今回の被写体像における顔検出処理において検出された顔画像領域Ｃ15は五角形である。前回の被写体像においては，顔画像は，正面を向いており，今回の被写体像において，顔画像は横を向いていることが分かる。
【００８１】
このような変動があった場合に，次に述べるように変動の程度が一定の範囲内であればリンク付けが行われる。また，リンク付けが行われた場合に，検出された顔画像領域近傍の領域等を顔画像領域として決定することもできる。たとえば，（Ａ）に示すように顔画像領域Ｃ８およびＣ９を囲む領域Ｃを顔画像領域として決定してもよいし，顔画像領域Ｃ８およびＣ９を顔画像領域として決定してもよい。
【００８２】
図11は，リンク付けを決定する処理手順を示すフローチャートである。上述した変動が一定範囲内の場合に，前回の被写体像における顔検出処理において検出された顔画像領域と今回の被写体像における顔検出処理において検出された顔画像領域とが対応するものとしてリンク付けされる。
【００８３】
今回の被写体像において検出された顔画像領域の顔ナンバを変数ｊ，前回の被写体像において検出された顔画像領域の顔ナンバを変数ｉとする。
【００８４】
今回の被写体像において検出された顔画像領域のすべてを初期化する（ステップ61〜64）。このために，今回の顔画像領域の変数ｊがリセットされ（ステップ61），すべての顔画像領域についてのリンクが初期化されるまで変数ｊがインクレメントされながらリンクの初期化処理が繰り返される（ステップ62でＹＥＳ，63，64）。
【００８５】
今回の被写体像において検出された顔画像領域のすべてが初期化されると（ステップ62でＮＯ），再び変数ｊがリセットされ（ステップ65），今回の被写体像において検出された顔画像領域の一つ一つと前回の被写体像において検出された顔画像領域の一つ一つとのそれぞれにおいてリンク付けが判断される。今回の被写体像において検出された顔画像領域のすべてについてリンク付けが終了したかどうかが確認される（ステップ66）。
【００８６】
終了していなければ（ステップ66でＹＥＳ），上述した位置変動の距離にダミーの初期値がセットされる（ステップ67）。
【００８７】
前回の被写体像において検出された顔画像領域の変数ｉがリセットされる（ステップ68）。すべての顔画像領域についてリンク付けが行われるため，すべての顔画像領域についてリンク付けが終了したかどうかが判定される（ステップ69）。
【００８８】
すべての顔画像領域についてリンク付けが終了していなければ（ステップ69でＹＥＳ），面外回転変動，面内回転変動および大きさ変動が所定の範囲内かどうかが確認される（ステップ70〜72）。これらの変動のすべてが所定の範囲内であれば（ステップ70〜72においてＹＥＳ），変動量が少ないと考えられる。変数ｄが位置変動での中心間距離に設定されて（ステップ73），その中心間距離がダミー値よりも小さいかどうかが確認される（ステップ74）。小さければ（ステップ74でＹＥＳ），中心間距離の最小値が位置変動での中心間距離に設定される（ステップ75）。設定された中心間距離が所定の範囲内であれば（ステップ76でＹＥＳ），判定対象として今回の被写体像の中の顔画像領域ｊは，前回の被写体像の中の顔画像領域ｉとリンクしているとして上述の照合結果として登録される（図５参照）。変数ｉがインクレメントされ（ステップ79），前回の被写体像のうち次の顔画像領域についてリンク付けされるかどうかが判定される。
【００８９】
図12は，他の実施例を示すもので，被写体像の一例である。
【００９０】
この実施例においては，連続する三駒の被写体像が用いられる。連続する三駒の被写体像のうち，第三番目の被写体像において検出された顔画像領域に対応する顔画像領域が第二番目の被写体像に無かった場合でも第一番目の被写体像に存在する場合にはリンク付けされ，第三番目の被写体像における顔画像領域として決定される。
【００９１】
たとえば，第（Ｎ−２）駒目の被写体像α７，第（Ｎ−１）駒目の被写体像α８および第Ｎ駒目の被写体像α９が得られる。第（Ｎ−２）駒目の被写体像α７には，人物像Ｓ７およびＳ８が含まれており，顔画像検出処理により，顔画像領域Ｃ16およびＣ17が検出される。第（Ｎ−１）駒目の被写体像α８には，人物像Ｓ９およびＳ10が含まれている。顔画像検出処理により，人物像Ｓ９から顔画像領域Ｃ18が検出されたが，人物像Ｓ10からは顔画像領域が検出されなかったものとする。第Ｎ駒目の被写体像α９には，人物像Ｓ11およびＳ12が含まれており，顔画像検出処理により，顔画像領域Ｃ20およびＣ21が検出される。
【００９２】
第Ｎ駒目の被写体像α９において検出された顔画像領域Ｃ20およびＣ21と，第（Ｎ−１）駒の被写体像α８において検出された顔画像領域Ｃ18との検出結果の照合処理（第１回検出結果照合）が行われる。第（Ｎ−１）駒目の被写体像α８においては，第Ｎ駒目の被写体像α９において検出された顔画像領域Ｃ20に対応する顔画像領域Ｃ18が存在するが，第Ｎ駒目の被写体像α９において検出された顔画像領域Ｃ21に対応する顔画像領域は検出されていない。このために，上述の実施例においてはＮ駒目の被写体像α９において顔画像領域Ｃ20は，顔画像領域として決定されるが，顔画像領域Ｃ21は，顔画像領域としては決定されない。この実施例においては，第Ｎ番目の被写体像α９において検出された顔画像領域のうち，リンク付けされない顔画像領域Ｃ21について，第（Ｎ−２）駒目の被写体像α７の顔画像領域にリンク付けされるようなものがあるかどうかが確認される（第２回検出結果照合）。第（Ｎ−２）駒目の被写体像α７の顔画像領域Ｃ17にリンク付けされるような顔画像領域Ｃ21が第Ｎ駒目の被写体像α９にある場合には，その顔画像領域Ｃ21は第Ｎ駒目の被写体像α９における顔画像領域として決定される。上述の実施例においては，検出できなかったような顔画像領域Ｃ21を検出できるようになる。
【００９３】
第（Ｎ−１）駒目の被写体像α８においては，第Ｎ駒目の被写体像α７において検出された顔画像領域Ｃ16およびＣ17との検出結果照合処理が行われることにより，顔画像領域Ｃ18が顔画像領域として決定されることは理解されよう。
【００９４】
図13および図14は，上述した図12の処理手順を示すフローチャートである。
【００９５】
今回（第Ｎ駒目）の被写体像が読み取られ（ステップ31），顔検出処理が行われる（ステップ32）。今回の顔検出処理の結果が登録される（ステップ33）。前回（第（Ｎ−１）駒目）の顔検出結果が登録されていると（ステップ34でＹＥＳ），上述したように，前回と今回の顔検出結果の照合処理（第１回検出結果照合）が行われる（ステップ52）。
【００９６】
第１回検出結果照合において，今回の被写体像において検出された顔画像領域のうちリンク無しのものがあるかどうかが確認される（ステップ53）。リンク無しのものがあると，前々回（第（Ｎ−２）駒目）の検出結果が登録されているかどうかが確認される（ステップ54）。前々回の検出結果が登録されていると（ステップ54でＹＥＳ），『今回の検出結果のうち前回の検出結果とのリンク付けがないもの』と『前々回の検出結果のうち「今回，前回，前々回」のリンクが無いもの』との間で検出結果の照合処理が行われる（第２回検出結果照合）（ステップ55）。
【００９７】
第１回検出結果照合と第２回検出結果照合とが組み合わせられて（ステップ56），その組み合わせの照合結果が反映されて最終的な今回の検出結果とし登録され，今回の被写体像における顔画像領域が決定される（ステップ36）。終了指令があるまでステップ31からの処理が繰返される。
【００９８】
今回の検出結果でリンク無しのものがないか（ステップ53でＮＯ），前々回の検出結果が登録されていなければ（ステップ54でＮＯ），前回と今回の検出結果の照合処理にもとづいて今回の被写体像における顔画像領域が決定されることとなる（ステップ36）。
【００９９】
図15は，他の実施例を示すもので，被写体150を撮像する様子を示している。
【０１００】
この実施例においては，撮像範囲がほぼ同じである２つのディジタル・スチル・カメラ151および152が用いられる。２つのディジタル・スチル・カメラ151および152を用いて被写体150が同時または連続して撮像されることにより２駒の被写体像が得られる。第１のディジタル・スチル・カメラ151および152は，コンピュータ装置153に接続されている。コンピュータ装置153に，ディジタル・スチル・カメラ151および153によって撮像された被写体像を表す画像データが与えられる。コンピュータ装置153において，得られた２駒の被写体像を用いて顔画像領域が決定される。図15においては，２つのディジタル・スチル・カメラ151および152が図示されているが，２つの撮像装置（素子）があればよく，２台の撮像装置が１つのカメラに内蔵されているものでもよい。
【０１０１】
図16は，図15に示すディジタル・スチル・カメラ151および152を用いて撮像された被写体像等の一例である。
【０１０２】
ディジタル・スチル・カメラ151および152は，同じ撮像範囲をもち，同時に被写体を撮像することにより，第１の被写体像α11および第２の被写体像α12が得られる。第１の被写体像α11には，人物像Ｓ13が含まれている。第１の被写体像α11に顔検出処理が行われることにより，人物像Ｓ13から顔画像領域Ｃ22が検出される。また，第１の被写体像α11においては顔画像領域Ｃ23も検出される。第２の被写体像α12には，人物像Ｓ14が含まれている。第２の被写体像α12に顔検出処理が行われることにより，人物像Ｓ14から顔画像領域Ｃ24が検出される。また，第２の被写体像α12においては顔画像領域Ｃ25も検出される。
【０１０３】
第１の被写体像α11において検出された顔画像領域と第２の被写体像α12において検出された顔画像領域との検出結果の照合処理が行われることにより，顔画像領域Ｃ22とＣ24とがリング付けされることとなる。したがって，第１の被写体像α11（第２の被写体像α12でもよい）における顔画像領域は，人物像Ｓ13の顔画像領域Ｃ22に決定される。
【０１０４】
図17は，第１の被写体像α11および第２の被写体像α12を用いて顔画像領域を決定する処理手順を示すフローチャートである。
【０１０５】
上述のように，第１のディジタル・スチル・カメラ151および第２のディジタル・スチル・カメラ152によって被写体が同時に撮像されることにより，第１の被写体像および第２の被写体像が得られる。これらの第１の被写体像および第２の被写体像が読み取られる（ステップ61，63）。読み取られた第１の被写体像における顔画像の検出処理（ステップ62）および第２の被写体像における顔画像の検出処理（ステップ64）が並行して行われる。
【０１０６】
第１の被写体像における顔画像の検出処理の結果と第２の被写体像における顔画像の検出処理の結果との照合処理が行われる（ステップ65）。照合結果が反映されて検出結果として登録される（ステップ66）。
【０１０７】
図18は，図17の処理手順の変形例を示すフローチャートである。この図において図17に示す処理と同一の処理については同一符号を付している。
【０１０８】
第１の被写体像と第２の被写体像が得られる（ステップ61，63）。図17に示す処理においては，第１の被写体像における顔画像の検出処理と第２の被写体像における顔画像の検出処理とが並行して行われていたが，この変形例においては，最初に第１の被写体像における顔画像の検出処理が行われ（ステップ62），続いて第２の被写体像における顔画像の検出処理が行われる（ステップ64）。その後，検出結果の照合処理（ステップ65），検出結果が登録される（ステップ66）。
【０１０９】
図19（Ａ），（Ｂ）から図22（Ａ），（Ｂ）は，他の変形例を示すもので被写体像の一例である。
【０１１０】
図19（Ａ）および（Ｂ）は，互いの撮像範囲が一部一致するが完全には一致しない第１のディジタル・スチル・カメラ151および第２のディジタル・スチル・カメラ152を用いて同時に被写体を撮像して得られた被写体像を示している。
【０１１１】
（Ａ）に示す被写体像α13には，人物像Ｓ15およびＳ16が含まれている。顔検出処理により人物像Ｓ15の顔の部分のスコアは８であり，人物像Ｓ16の顔の部分のスコアは４である。（Ｂ）に示す被写体像α14には，人物像Ｓ17およびＳ18が含まれている。顔検出処理により人物像Ｓ17の顔の部分のスコアは４であり，人物像Ｓ18の顔の部分のスコアは６である。人物像Ｓ16と人物像Ｓ17とは同一の人物を撮像したものである。
【０１１２】
図20（Ａ）〜（Ｃ）は，図19（Ａ）および（Ｂ）において上記のようにスコアが得られた場合に顔画像領域の決定を行うやり方を示している。
【０１１３】
このやり方では，被写体像α13およびα14のそれぞれにおいて検出されるスコアを個別に判断して顔画像領域の判定が行われる。（Ａ）および（Ｂ）を参照して，スコア８をもつ人物像Ｓ15の顔画像部分およびスコア６をもつ人物像Ｓ18の顔画像部分は，それぞれスコアが高いので（たとえば，顔画像と判定されるスコアのしきい値はスコア５）顔画像領域Ｃ25およびＣ26と判定される。スコア４をもつ人物像Ｓ16，Ｓ17はスコアが低いので顔画像領域とは認められない。
【０１１４】
このようにして，顔画像領域が検出された被写体像α13およびα14の同一部分が重ね合わせられて（座標変換），（Ｃ）に示す合成被写体像α17が得られる。座標変換を行うためにコンピュータ装置153にはディジタル・スチル・カメラ151と152との位置関係がセットされているのはいうまでもない。
【０１１５】
図21（Ａ）および（Ｂ）は，被写体像α13およびα14を，同一部分が重ね合わせられた合成被写体像α18およびα19である。
【０１１６】
（Ａ）を参照して，人物像Ｓ25の顔画像部分のスコアは８であり，人物像Ｓ16の顔画像部分のスコアは，図20（Ａ）および（Ｂ）に示すように被写体像α13における人物像Ｓ16のスコア４および被写体像α14における人物像Ｓ17のスコア４を加算したスコア８とされている。
【０１１７】
人物像Ｓ16の顔画像の部分は，スコア８となるので，（Ｂ）に示すように顔画像領域Ｃ28と決定される。
【０１１８】
図22は，被写体像α13およびα14を，同一部分が重ね合わせられた合成被写体像α20およびα21である。
【０１１９】
重み付け係数を用いて重み付けが行われた後に顔画像領域の判定が行われる。顔検出により得られたスコアが仮スコアとされ，その仮スコアに重み付け係数が乗じられたものがスコアとされる。人物像Ｓ15の顔画像部分の重み付け係数は１であり，その仮スコアは８であり，スコアは８となる。人物像Ｓ16の顔画像部分のスコアは，図20（Ａ）および（Ｂ）に示すように被写体像α13における人物像Ｓ16の仮スコア４に重み付け係数１が乗じられた値と被写体像α14における人物像Ｓ17の仮スコア４に重み付け係数２が常時螺よれた値とを加算したスコア12とされている。人物像Ｓ18の顔画像部分の重み付け係数は２であり，その仮スコアは８であり，スコアは16となる。
【０１２０】
顔画像領域と判定されるスコアのしきい値がスコア7.5とすると，すべてのスコアがそのスコア以上となるので，図21（Ｂ）に示すように人物像Ｓ15，Ｓ16およびＳ18のそれぞれの顔画像部分が顔画像領域Ｃ25，Ｃ28およびＣ26と決定される。
【０１２１】
図23は，単板撮像素子の受光面の一例である。
【０１２２】
単板撮像素子の受光面上には，赤色の光成分を透過するＲフィルタ（Ｒで示す），緑色の光成分を透過するＧフィルタ（Ｇで示す）および青色の光成分を透過するＢフィルタ（Ｂで示す）が一定周期で規則的に配列されている。
【０１２３】
Ｒフィルタを透過した光成分が光電変換されることにより，赤色の信号成分が得られる。得られた赤色の信号成分によって，図24（Ａ）に示すように赤色成分の被写体像が得られる。同様に，Ｇフィルタを透過した光成分が光電変換されることにより，緑色の信号成分が得られる。得られた緑色の信号成分によって，図24（Ｂ）に示すように緑色成分の被写体像が得られる。Ｂフィルタを透過した光成分が光電変換されることにより，青色信号成分が得られる。得られた青色の信号成分によって，図24（Ｃ）に示すように青色成分の被写体像が得られる。
【０１２４】
このようにして得られた赤色信号成分の被写体像，緑色信号成分の被写体像および青色信号成分の被写体像のうちの２つの被写体像を用いて図16に示すように顔画像検出処理が行われることにより，顔画像領域を決定することができる。
【０１２５】
図25（Ａ），（Ｂ）および（Ｃ）は，補間処理された赤色信号成分の被写体像，緑色信号成分の被写体像および青色信号成分の被写体像を表している。これらのように，補間処理された３つの被写体像のうちの２つの被写体像を用いて図16に示すように顔画像検出処理が行われることにより，顔画像領域を決定するようにしてもよい。
【０１２６】
図26（Ａ），（Ｂ）および（Ｃ）は，３板の固体電子撮像素子の受光面を示している。３板の固体電子撮像素子からは，それぞれの固体電子撮像素子から（Ａ）に示す赤色信号成分の被写体像，（Ｂ）に示す緑色信号成分の被写体像，（Ｃ）に示す青色信号成分の被写体像がそれぞれ得られる。得られた３つの被写体像のうちの２つの被写体像を用いて図16に示すように顔画像検出処理が行われることにより，顔画像領域を決定できる。
【０１２７】
図27（Ａ）は，可視光センサ（撮像素子）の受光面を示し，（Ｂ）は，赤外センサの受光面を示している。
【０１２８】
（Ａ）を参考にして，可視光センサには，図23に示す単板の撮像素子と同様に，Ｒフィルタ，ＧフィルタおよびＢフィルタが一定周期で規則的に配列されている。（Ｂ）を参考にして赤外センサには，赤外線領域の光成分を透過するＩＲフィルタが設けられている。（Ａ）に示す受光面をもつ可視光センサから出力された映像信号によって表される可視光像と，（Ｂ）に示す受光面をもつ可視光センサから出力された映像信号によって表される赤外光像との２つの被写体像を用いて図16に示すように顔画像検出処理が行われることにより，顔画像領域を決定することもできる。
【０１２９】
図28は，可視光／赤外センサの受光面を示している。
【０１３０】
可視光／赤外センサの受光面には，Ｒフィルタ，Ｇフィルタ，ＢフィルタおよびＩＲフィルタが一定周期で規則的に配列されている。可視光／赤外センサから，赤色成分の映像信号によって表される被写体像，緑色成分の映像信号によって表される被写体像，青色成分の映像信号によって表される被写体像および赤外光成分の映像信号によって表される被写体像が得られる。これらの４つの被写体像の中から２つの被写体像を用いて図16に示すように顔画像検出処理が行われることにより，顔画像領域を決定することもできる。
【０１３１】
異なる撮像装置（撮像素子，センサ）を用いて被写体を撮像することにより，上述したように，第１の被写体像と第２の被写体像を得て顔画像領域を検出する場合には，第１の被写体像において行われた顔画像検出処理において得られた顔画像らしさの第１のスコアと第２の被写体像において行われた顔画像検出処理において得られた顔画像らしさの第２のスコアとの和にもとづいて顔画像領域を決定してもよいし，第１のスコアと第２のスコアとの和に重み付けをつけて顔画像領域を決定してもよいし，第１のスコアと第２のスコアとに重み付けを付けて，重み付けが付けられたスコアの和にもとづいて顔画像領域を決定してもよい。もちろん，これらの顔画像領域の決定処理を組み合わせて顔画像領域を決定するものでもよい。
【０１３２】
図29から図31は，顔画像検出処理における処理タイミングを示すタイム・チャートである。固体電子撮像素子がインターレース走査されることにより，第１フィールドの被写体像と第２フィールドの被写体像とが交互に得られる。いずれも時刻ｔ１〜ｔ２の間に露光が行われることにより，被写体が撮像されている。そして，時刻ｔ２〜ｔ３の間に第１フィールドの被写体像を表す映像信号の読み出しが行われている。
【０１３３】
得られた第１フィールドの被写体像と第２フィールドの被写体像とを用いて図16に示すように顔画像検出処理が行われることにより，顔画像領域を決定することができる。
【０１３４】
図29は，読み出しが完了したフィールドの被写体像から順に顔画像の検出処理が行われるものである。
【０１３５】
時刻ｔ２から第２フィールドの映像信号の読み出しが開始されるとともに第１フィールドの被写体像の顔画像検出処理が行われる。第２フィールドの映像信号の読み出しが時刻ｔ４において終了し，第１の被写体像の顔画像検出処理が時刻ｔ５において終了する。第２フィールドの映像信号の読み出し終了後の時刻ｔ５から第２の被写体像の顔画像検出処理が終了する。２つの被写体像の顔画像検出処理の終了までの時間が短縮される。
【０１３６】
図30は，すべてのフィールドの被写体像の映像信号の読み出しが完了後に順に顔画像の検出処理が行われるものである。
【０１３７】
時刻ｔ３に第１フィールドの映像信号の読み出しが終了すると，第２フィールドの映像信号読み出しが開始され，時刻ｔ４に終了する。第１フィールドの映像信号と第２フィールドの映像信号の読み出しの両方ともが完了した時刻ｔ４から第１の被写体像の顔画像検出処理が開始され，時刻ｔ５において終了する。時刻ｔ５から第２の被写体像の顔画像検出処理が開始され，時刻ｔ６において終了する。読み出し処理と顔画像検出処理か異なる時間帯において行われるので，処理する装置の負担が軽くなる。
【０１３８】
図31は，すべてのフィールドの被写体像の映像信号の読み出しが完了後に２つの被写体像の顔画像検出が同時に行われるものである。
【０１３９】
時刻ｔ４までに第１フィールドの映像信号の読み出しおよび第２フィールドの映像信号の読み出しが順に終了する。時刻ｔ５からｔ６の間に第１の被写体像の顔画像検出および第２の被写体像の顔画像検出が並行して行われる。
【０１４０】
図32は，第１フィールドの被写体像と第２フィールドの被写体像とから顔画像検出処理の処理手順を示すフローチャートである。
【０１４１】
第１フィールドの被写体像および第２フィールドの被写体像が取得され（ステップ71，72），第１フィールドの被写体像の顔画像検出処理（ステップ73），第２フィールドの被写体像の顔画像検出処理（ステップ74）が行われる。
【０１４２】
顔画像検出処理により得られた検出結果の照合が行われ（ステップ75），照合結果が反映された検出結果が登録される（ステップ76）。
【０１４３】
図33は，他の実施例を示すもので，いわゆるブラケット撮像により得られた被写体像等を示している。
【０１４４】
露出量が比較的少ないＥ１に設定されて被写体が撮像されることにより，少し暗めの第１の被写体像α21が得られる（暗さがハッチングにより表されている）。第１の被写体像α21には，人物像Ｓ30が含まれている。第１の被写体像α21において顔画像検出処理が行われることにより，人物像Ｓ30の顔画像部分が顔画像領域Ｃ33として検出される。また，顔画像領域Ｃ34も検出される。
【０１４５】
つづいて，同じ被写体が，露出量が比較的高いＥ２に設定されて被写体が撮像されることにより，明るめの第１の被写体像α22が得られる。第２の被写体像α22にも，大１の被写体像α21の人物像Ｓ30に対応する人物像Ｓ35が含まれている。第２の被写体像α22において画像検出処理が行われることにより，人物像Ｓ35の顔画像部分が顔画像領域Ｓ35として検出される。また，顔画像領域Ｃ36も検出される。
【０１４６】
第１の被写体像α21の顔画像領域の検出結果と第２の被写体像α22の顔画像領域の検出結果との照合処理が行われることにより，第２の被写体像α22の顔画像領域Ｃ35が顔画像領域として決定される。第１の被写体像α21において検出された顔画像領域Ｃ34および第２の被写体像α22において検出された顔画像領域Ｃ36は顔画像領域とは扱われないのは理解されよう。
【０１４７】
図34は，被写体に暗い部分が含まれている場合においていわゆるブラケット撮像により得られた被写体像等を示している。
【０１４８】
露出量が比較的少ないＥ１に設定されて被写体が撮像されることにより，上述のように少し暗めの第１の被写体像α23が得られる。第１の被写体像α23には，人物像Ｓ32および木陰に存在する人物像Ｓ33が含まれている。第１の被写体像α23に顔画像検出処理が行われることにより，人物像Ｓ32の顔画像部分が顔画像領域Ｓ32として検出されるが，人物像Ｓ33は木陰にあるために人物像Ｓ33の顔画像部分は顔画像領域としては検出されない。
【０１４９】
露出量が比較的高いＥ２に設定されて同じ被写体が撮像されることにより，明るめの第２の被写体像α24が得られる。第２の被写体像α24には，第１の被写体像α23に含まれている人物像Ｓ32とS33に対応する人物像Ｓ34とＳ35とが含まれている。人物像Ｓ35が存在する部分はあまり暗くないので，第２の被写体像α24に顔画像検出処理が行われることにより，人物像Ｓ34の顔画像部分および人物像Ｓ35の顔画像部分のそれぞれが顔画像領域Ｃ38およびＣ39として検出される。
【０１５０】
上述した検出結果の照合処理を停止して，検出されたすべての顔画像領域Ｃ37，Ｃ38およびＣ39を加算することにより，第１の被写体像α23において検出されなかった顔画像領域が顔画像領域Ｃ39として検出できる。
【０１５１】
図35は，信号処理を変えることにより得られる被写体像等を示している。
【０１５２】
第１の被写体像α25は，輪郭強調処理を大きくしてノイズが多く含まれているものである。第１の被写体像α25には，人物像Ｓ36が含まれており，顔画像検出処理が行われることにより，顔画像部分が顔画像領域Ｃ40として検出される。また，顔画像領域Ｃ41も検出される。
【０１５３】
第２の被写体像α26は，輪郭強調処理を少なくしてノイズが少ないものである。第２の被写体像α26にも，第１の被写体像α25に含まれている人物像Ｓ36に対応する人物像Ｓ37が含まれている。第２の被写体像α26に顔画像検出処理が行われることにより，人物像Ｓ37の顔画像部分が顔画像領域Ｃ42として検出される。また，顔画像領域Ｃ43も検出される。
【０１５４】
これらの第１の被写体像α25の顔画像の検出結果と第２の被写体像α26の検出結果とが照合されることにより，顔画像領域Ｃ42が顔画像領域として決定される。
【０１５５】
図36は，異なる信号処理により得られた２つの被写体像について顔画像検出処理が行われる場合の処理手順を示すフローチャートである。
【０１５６】
被写体が撮像され（ステップ81），撮像により得られた被写体像に第１の信号処理が行われることにより第１の被写体像が得られ（ステップ82），その被写体像に第２の信号処理が行われることにより第２の被写体像が得られる（ステップ83）。第１の被写体像の顔画像検出処理が行われ（ステップ84），第２の被写体像の顔画像検出処理が行われる（ステップ85）。
【０１５７】
第１の被写体像の顔画像検出結果と第２の被写体像の顔画像検出結果との照合処理が行われ（ステップ86），照合の結果得られる検出結果が登録される（ステップ87）。
【０１５８】
図37から図44は，検出された顔画像を利用する処理手順を示すフローチャートである。
【０１５９】
図37および図38は，検出された顔画像領域を用いて自動露出調整を行う処理手順を示すフローチャートである。
【０１６０】
図37を参照して，顔画像の検出結果が読み取られ（ステップ91），顔画像領域の有無が判定される（ステップ92）。
【０１６１】
顔画像領域があれば（ステップ92でＹＥＳ），検出された顔画像領域内の画像の明るさがそれぞれ算出される（ステップ93）。顔画像領域が複数あれば（ステップ94でＹＥＳ），もっとも明るい顔画像領域が選択される（ステップ95）。選択された顔画像領域内の画像にもとづいて測光値が算出される顔重点マルチパターン測光が行われる（ステップ96）。顔画像領域が１つだけであれば，その顔画像領域内の画像にもとづいて顔重点マルチパターン測光が行われる（ステップ96）。
【０１６２】
顔画像領域が無ければ（ステップ92でＮＯ），中央部分にもとづいて測光値が算出される中央重点マルチパターン測光が行われる（ステップ97）。
【０１６３】
図38は，自動露出調整の他の処理手順を示している。図38において図37に示す処理については同じ符号を付して説明を省略する。
【０１６４】
図38に示す処理においては，顔画像領域が複数あった場合には（ステップ101でＹＥＳ），もっとも顔画像領域の大きいものが選択される（ステップ102）。選択された顔画像領域内の画像にもとづいて測光が行われる（ステップ96）。
【０１６５】
図39および図40は，検出された顔画像領域を利用して自動合焦制御を行う処理手順を示すフローチャートである。
【０１６６】
図39を参照して，顔画像検出結果が読み取られ（ステップ111），顔画像領域があれば（ステップ112でＹＥＳ），顔画像領域が複数かどうかが確認される（ステップ113でＹＥＳ）。顔画像領域が複数あると（ステップ113でＹＥＳ）。もっとも大きい顔画像領域が選択されて（ステップ114），その選択された顔画像領域内の画像が合焦領域として設定される（ステップ115）。また，顔画像領域が一つしかなければ（ステップ113でＮＯ），その一つの顔画像領域が合焦領域として設定される（ステップ115）。設定された領域が合焦するように自動合焦処理が行われる（ステップ117）。
【０１６７】
顔画像領域がなければ（ステップ112でＮＯ），被写体像の中央部分が合焦するように自動合焦処理が行われる（ステップ116）。
【０１６８】
図40は，自動合焦制御の他の例を示している。図40において図39と同じ処理については同じ符号を付して説明を省略する。
【０１６９】
顔画像領域が複数ある場合には（ステップ113でＹＥＳ），被写体像のうちもっとも中央に近い部分の顔画像領域が選択される（ステップ118）。
【０１７０】
図41および図42は，階調補正処理を示すフローチャートである。
【０１７１】
図41を参照して，顔画像領域の検出結果が読み取られ（ステップ121でＹＥＳ），顔画像領域があれば（ステップ122でＹＥＳ），各顔画像領域における画像の明るさが算出される（ステップ123）。顔画像領域が複数あれば（ステップ124でＹＥＳ），もっとも明るい顔画像領域が選択される（ステップ125）。顔画像領域が一つだけであれば（ステップ124でＮＯ），その顔画像領域が設定される。選択または設定された顔画像領域内の画像にもとづいて階調補正処理が行われる（ステップ127）。顔画像領域がなければ（ステップ122でＮＯ），所定の階調補正処理が行われる（ステップ126）。
【０１７２】
図42は，階調補正処理の他の処理を示している。図42において図41に示す処理と同じ処理については同じ符号を付して説明を省略する。
【０１７３】
顔画像領域が複数あれば（ステップ124でＹＥＳ），もっとも大きな顔画像領域が選択される（ステップ128）。選択された顔画像領域内の画像を用いて階調補正が行われる（ステップ129）。
【０１７４】
図43および図44は，色補正処理を示すフローチャートである。
【０１７５】
図43を参照して，顔画像領域が読み取られ（ステップ131），顔画像領域があるかどうかが確認される（ステップ132）。顔画像領域があり（ステップ132でＹＥＳ），顔画像領域が複数ある場合には（ステップ133でＹＥＳ），もっとも大きな顔画像領域が選択される（ステップ144）。顔画像領域が一つしか存在しない場合には（ステップ133でＮＯ），その顔画像領域が設定される。選択または設定された顔画像領域内の画像から色情報が取得されて（ステップ145），所望の色の画像となるように色補正が行われる（ステップ147）。顔画像領域が存在しない場合には（ステップ132でＮＯ），所定の色補正が行われる（ステップ146）。
【０１７６】
図44は，色補正処理の他の例を示している。図44において図43に示す処理と同じ処理については同じ符号を付して説明を省略する。
【０１７７】
顔画像領域がある場合には（ステップ132でＹＥＳ），その顔画像領域の色情報が取得される（ステップ148）。顔画像領域が複数ある場合には，所望の色にもっとも近い色の顔画像領域が選択される（ステップ149）。顔画像領域が一つしか存在しない場合には（ステップ133でＮＯ），その顔画像領域が設定される。選択された顔画像領域または選択された顔画像領域内の画像が所望の色となるように色補正が行われる（ステップ147）。
【０１７８】
上述の実施例においては，顔画像を検出するものであったが顔画像以外の画像，例えば，目の画像などを同様にして決定するようにしてもよい。
【０１７９】
上述したように決定された顔画像領域にもとづいて，自動露出制御等が行われるほかに，決定された顔画像領域にもとづいて，フラッシュ（ストロボ）制御，省電力制御，ズーム量制御，ゲイン調整，白バランス調整，輪郭強調，ノイズ低減などを行うようにしてもよい。
【図面の簡単な説明】
【０１８０】
【図１】ディジタル・スチル・カメラの電気的構成を示すブロック図である。
【図２】被写体像等の一例である。
【図３】（Ｎ−１）駒目の被写体像の顔検出結果を示している。
【図４】Ｎ駒目の被写体像顔検出結果を示している。
【図５】照合結果の一例である。
【図６】顔画像検出処理手順を示すフローチャートである。
【図７】スルー画像，本撮像画像等を示している。
【図８】顔画像検出処理手順を示すフローチャートである。
【図９】顔画像検出処理手順を示すフローチャートである。
【図１０】（Ａ）〜（Ｄ）は，顔画像領域の変動の一例である。
【図１１】リンク付けの処理手順を示すフローチャートである。
【図１２】被写体像等の一例である。
【図１３】顔画像検出処理手順を示すフローチャートである。
【図１４】顔画像検出処理手順を示すフローチャートである。
【図１５】被写体と撮像装置との関係を示している。
【図１６】被写体像等の一例である。
【図１７】顔画像検出処理手順を示すフローチャートである。
【図１８】顔画像検出処理手順を示すフローチャートである。
【図１９】（Ａ）および（Ｂ）は，被写体像の一例である。
【図２０】（Ａ）〜（Ｃ）は，被写体像の一例である。
【図２１】（Ａ）および（Ｂ）は，合成画像の一例である。
【図２２】合成画像の一例である。
【図２３】単板の撮像素子の受光面の一例である。
【図２４】（Ａ）〜（Ｃ）は，単色の被写体像の一例である。
【図２５】（Ａ）〜（Ｃ）は，補間された単色の被写体像の一例である。
【図２６】（Ａ）〜（Ｃ）は，三板の固体電子撮像素子の受光面を示している。
【図２７】（Ａ）は，可視光センサの受光面を，（Ｂ）は，赤外センサの受光面を示している。
【図２８】可視光／赤外センサの受光面を示している。
【図２９】フィールド画像の読み出しおよび顔画像検出処理手順を示すタイム・チャートである。
【図３０】フィールド画像の読み出しおよび顔画像検出処理手順を示すタイム・チャートである。
【図３１】フィールド画像の読み出しおよび顔画像検出処理手順を示すタイム・チャートである。
【図３２】顔画像領域の検出処理手順を示すフローチャートである。
【図３３】被写体像の一例である。
【図３４】被写体像の一例である。
【図３５】被写体像の一例である。
【図３６】顔画像領域検出処理手順を示すフローチャートである。
【図３７】自動露出制御処理を示すフローチャートである。
【図３８】自動露出制御処理を示すフローチャートである。
【図３９】自動合焦制御処理を示すフローチャートである。
【図４０】自動合焦制御処理を示すフローチャートである。
【図４１】階調補正処理を示すフローチャートである。
【図４２】階調補正処理を示すフローチャートである。
【図４３】色補正処理手順を示すフローチャートである。
【図４４】色補正処理手順を示すフローチャートである。
【符号の説明】
【０１８１】
２ 制御回路
３ ＣＰＵ
６ ストロボ制御回路
７ ストロボ発光装置
10 撮像素子
17 顔検出処理回路
【技術分野】
【０００１】
この発明は，対象画像の位置検出装置および方法ならびに対象画像の位置検出装置を制御するプログラムに関する。
【背景技術】
【０００２】
被写体が人物などの場合，その被写体の顔の画像部分がきれいに撮像されることが好ましいことが多い。このために，被写体像の中から顔の画像部分を検出することがある。顔検出の精度を向上させるために同一画像について複数の顔検出を行うことがある（特許文献１）。
【特許文献１】特開2003-216935号公報
【０００３】
また，連続する被写体像が与えられる場合には，前回の駒の被写体像において検出された顔の画像部分の近傍領域を，今回の駒の被写体像における顔の画像部分を検出する領域と規定するものもある（特許文献２）。
【特許文献２】特開平11−15979号公報
【０００４】
しかしながら，前回の駒の被写体像において誤った検出がされてしまうとその後の駒の被写体像における検出に影響を及ぼしてしまうことがある。検出精度が低くなることがある。
【発明の開示】
【０００５】
この発明は，顔などの対象物の検出精度を向上させることを目的とする。
【０００６】
この発明による対象画像の位置検出装置は，ほぼ同一と見なせる被写体を同時にまたは連続して撮像することにより得られた複数駒の被写体像のうちの第１の被写体像から対象画像が存在する第１の位置を検出する第１の検出手段，上記複数駒の被写体像のうち第２の被写体像から上記対象画像が存在する第２の位置を検出する第２の検出手段，ならびに上記第１の検出手段によって検出された第１の位置と上記第２の検出手段によって検出された第２の位置とにもとづいて，上記第１の被写体像および上記第２の被写体像の少なくとも一方の被写体像において上記対象画像が存在する位置を決定する決定手段を備えていることを特徴とする。
【０００７】
この発明は，上記対象画像の位置検出装置に適した方法も提供している。すなわち，この方法は，ほぼ同一と見なせる被写体を同時にまたは連続して撮像することにより得られた複数駒の被写体像のうちの第１の被写体像から対象画像が存在する第１の位置を検出し，上記複数駒の被写体像のうち第２の被写体像から上記対象画像が存在する第２の位置を検出し，検出された第１の位置と検出された第２の位置とにもとづいて，上記第１の被写体像および上記第２の被写体像の少なくとも一方の被写体像において上記対象画像が存在する位置を決定するものである。
【０００８】
この発明は，上記対象画像の位置検出方法を実現するためのプログラムも提供している。さらに，そのプログラムを格納した記録媒体も提供している。
【０００９】
この発明によると，ほぼ同一と見なせる被写体が同時または連続して撮像されることにより得られた複数駒の被写体像（連続して得られる被写体像とは，たとえば，プレ撮像，動画の撮像，連写，ブラケット撮像など一度の撮像シーケンスで得られる被写体像）のうちの第１の被写体像から対象画像が存在する第１の位置が検出される。また，それらの複数駒の被写体像のうちの第２の被写体像から対象画像が存在する第２の位置も検出される。
【００１０】
検出された第１の位置と第２の位置とにもとづいて，第１の被写体像および第２の被写体像の少なくとも一方の被写体像において対象画像が存在する位置が決定される。第１の位置と第２の位置とを比較して，対象画像が存在する位置が決定されるので，第１の被写体像において検出された第１の位置または第２の被写体像において検出された第２の位置のいずれか一方の位置にのみにもとづいて対象画像の位置を検出する場合に比べて，検出精度が向上する。比較的精度の高い検出処理を実現できる。
【００１１】
ほぼ同一と見なせる被写体を同時または連続して撮像して複数駒の被写体像を表す画像データを出力する撮像装置をさらに備えてもよい。この場合，上記第１の検出手段は，上記撮像装置から出力された画像データによって表される複数駒の被写体像のうちの第１の被写体像から対象画像が存在する位置を検出するものとなり，上記第２の検出手段は，上記撮像装置から出力された画像データによって表される複数駒の被写体像のうちの第２の被写体像から対象画像が存在する位置を検出するものとなろう。
【００１２】
上記第１の検出手段と上記第２の検出手段とは共通のものでもよい。
【００１３】
上記第１の被写体像の大きさと上記第２の被写体像の大きさとが異なるものであり，上記第１の被写体像の大きさと上記第２の被写体像の大きさとが同じである場合における位置となるように，上記第１の検出手段によって検出された第１の位置および上記第２の検出手段によって検出された第２の位置の少なくとも一方の位置を変換する位置変換手段をさらに備えてもよい。この場合，上記決定手段は，上記位置変換手段によって変換された上記第１の位置と上記第２の位置とにもとづいて，上記対象画像が存在する位置を決定するものとなろう。
【００１４】
第１の被写体像の大きさと第２の被写体像の大きさとが異なるものであっても，第１の位置と第２の位置とにもとづいて，対象画像が存在する位置を決定できる。
【００１５】
被写体を撮像して被写体像を表す画像データを出力する撮像装置，プレ撮像指令に応じて，被写体を撮像して上記第１の被写体像を表す第１の画像データを出力するように上記撮像装置を制御する第１の撮像制御手段，および本撮像指令に応じて，被写体を撮像して上記第２の被写体像を表す第２の画像データを出力するように上記撮像装置を制御する第２の撮像制御手段をさらに備えてもよい。この場合，上記第１の検出手段は，上記第１の撮像制御手段の制御のもとに上記第１の撮像装置から出力された第１の画像データによって表される第１の被写体像の中から上記対象画像が存在する位置を検出するものとなり，上記第２の検出手段は，上記第２の撮像制御手段の制御のもとに上記第２の撮像装置から出力された第２の画像データによって表される第２の被写体像の中から上記対象画像が存在する位置を検出するものとなろう。
【００１６】
シャッタ・レリーズ・ボタンのオンに応じて本撮像が行われ，その本撮像により得られた画像データがメモリ・カードなどの記録媒体に記録されるようなディジタル・カメラなどの場合に，本撮像前の撮像（プレ撮像）により得られた第１の被写体像から得られる第１の位置と本撮像により得られた第２の被写体像から得られる第２の位置とから対象画像が存在する位置を検出することができる。
【００１７】
上記本撮像指令に応じた撮像がストロボ発光に同期して行われるかどうかを判定する判定手段，および上記判定手段によりストロボ発光に同期して行われると判定されたことに応じて，上記決定手段における決定処理を停止して上記第２の検出手段によって検出された第２の位置を，上記対象画像が存在する位置と決定するように上記決定手段を制御する決定制御手段をさらに備えることが好ましい。
【００１８】
本撮像がストロボ発光に同期して行われる場合には，プレ撮像により得られた第１の被写体像は暗い場合がある。これに対して，ストロボ発光に同期して撮像されることにより得られた第２の被写体像は，比較的適正な明るさをもつものであるために，比較的正確に対象画像が検出されることが多い。ところが，第１の被写体像は暗いために対象画像が検出されないことがある。第１の被写体像から得られる第１の位置と第２の被写体像から得られる第２の位置とを比較しても対象画像が存在する位置を決定できない場合があるので，決定処理が停止される。ストロボ発光に同期して得られる第２の被写体像から得られる第２の位置が，対象画像が存在する位置と決定されるようになる。誤検出を未然に防止できる。
【００１９】
上記第１の撮像制御手段における制御にもとづいて上記撮像装置から出力される第１の画像データにもとづいて上記撮像装置の露出量を調整する露出量調整手段をさらに備えてもよい。この場合，上記第２の撮像制御手段における制御は，上記露出量調整手段によって調整された露出量にもとづいて本撮像指令に応じて上記撮像装置から上記第２の画像データを出力させるものとなろう。そして，上記第１の撮像制御手段によって制御される上記撮像装置の露出量がしきい値以下かどうかを判定する判定手段，および上記判定手段によって，しきい値以下と判定されたことに応じて，上記決定手段における決定処理を停止して上記第２の検出手段によって検出された第２の位置を，上記対象画像が存在する位置と決定するように上記決定手段を制御する決定制御手段をさらに備える。
【００２０】
露出量がしきい値以下と判定された場合も上記ストロボ発光についての処理と同様に，第１の位置についての信頼性が少ない。このために，第２の位置が，対象画像が存在する位置と決定される。
【００２１】
上記決定手段は，たとえば，上記第１の検出手段によって検出された第１の位置と上記第２の検出手段によって検出された第２の位置との変動量が所定のしきい値以上の場合に，上記第１の被写体像および上記第２の被写体像の少なくとも一方の被写体像において上記対象画像が存在しないと決定するものである。変動量がしきい値以上の場合には，異なる対象画像または誤検出であると考えられるので，対象画像が存在しないと決定される。
【００２２】
上記第１の検出手段は，ほぼ同一と見なせる被写体を時間的に連続して複数回撮像することにより得られた複数駒の被写体像のうちの第１番目の撮像により得られた第１の被写体像から対象画像が存在する第１の位置を検出するものでもよい。この場合，上記第２の検出手段は，上記複数駒の被写体像のうちの第２番目の撮像により得られた第２の被写体像から対象画像が存在する第２の位置を検出するものとなる。そして，上記複数駒の被写体像のうちの第３番目の撮像により得られた第３の被写体像から対象画像が存在する第３の位置を検出する第３の検出手段をさらに備える。さらに，上記決定手段は，上記第１の検出手段によって検出された第１の位置，上記第２の検出手段によって検出された第２の位置および上記第３の検出手段によって検出された第３の位置にもとづいて上記第１の被写体像，上記第２の被写体像および上記第３の被写体像のうち少なくとも一つの被写体像において上記対象画像が存在する位置を決定するものとなろう。
【００２３】
第１の被写体像，第２の被写体像および第３の被写体像のうち，何らかの理由により第２の被写体像において対象画像が検出できなかった場合に，第１の被写体像，第２の被写体像および第３の被写体像の３駒の被写体像を用いて，対象画像を検出することができるようになる。対象画像が存在するにもかかわらず，その対象画像が見つけられない場合を回避できる。
【００２４】
上記決定手段は，上記第３の検出手段によって検出された第３の位置のうち，上記第２の検出手段によって検出された第２の位置に対応するものが存在しない第３の位置と，上記第１の検出手段によって検出された第１の位置のうち，上記第２の検出手段によって検出された第２の位置と上記第３の検出手段によって検出された第３の位置との両方に対応するものが存在しない第１の位置とにもとづいて，上記第３の被写体像において上記対象画像が存在する位置を決定するものでもよい。
【００２５】
被写体を撮像することにより上記第１の被写体像を表す第１の画像データを出力する第１の撮像装置，および被写体を撮像することにより上記第２の被写体像を表す第２の画像データを出力する第２の撮像装置をさらに備えてもよい。この場合，上記第１の検出手段は，上記第１の撮像装置から出力された第１の画像データによって表される第１の被写体像から対象画像が存在する位置を検出するものとなろう。また，上記第２の検出手段は，上記第２の撮像装置から出力された第２の画像データによって表される第２の被写体像から対象画像が存在する位置を検出するものとなろう。
【００２６】
第１の撮像装置と第２の撮像装置とは同じ筐体に内蔵されていてもよいし，異なる筐体に内蔵されていてもよい。
【００２７】
上記第１の撮像装置と上記第２の撮像装置とは同じまたは異なる撮像範囲をもつものでもよい。
【００２８】
上記第１の検出手段は，たとえば，上記第１の被写体像から対象画像らしさの値にもとづいて対象画像が存在する第１の位置を検出するものである。また，上記第２の検出手段も，たとえば，上記第２の被写体像から対象画像らしさの値にもとづいて対象画像が存在する第２の位置を検出するものである。この場合，上記決定手段は，上記第１の検出手段において検出された対象画像の対象画像らしさの値と上記第２の検出手段において検出された対象画像の対象画像らしさの値とにもとづいて，対象画像の存在する位置を決定するものとなろう。
【００２９】
受光面上に複数色の色フィルタが規則的に設けられており，被写体を撮像することによりカラーの被写体像を表す複数色のカラー画像データを出力する単板の固体電子撮像装置をさらに備えてもよい。この場合，上記第１の被写体像は，上記単板の固体電子撮像装置から出力された上記複数色のカラー画像データのうち一色のカラー画像データによって表され，上記第２の被写体像は，上記複数色のカラー画像データのうち上記一色のカラー画像データとは異なる色のカラー画像データによって表される。
【００３０】
受光面上に異なる色の色フィルタが設けられている複数の固体電子撮像素子を含み，被写体を撮像することにより異なる色の種類のカラー画像データを出力する固体電子撮像装置をさらに備えてもよい。この場合，上記第１の被写体像は，上記固体電子撮像装置から出力された上記カラー画像データのうちの一種類のカラー画像データによって表され，上記第２の被写体像は，上記カラー画像データのうち上記一種類のカラー画像データとは異なる種類のカラー画像データによって表されるものとなろう。
【００３１】
被写体を撮像することにより上記第１の被写体像を可視光像として表す可視光画像データを出力する可視光センサ，および被写体を撮像することにより上記第２の被写体像を赤外光像として表す赤外光画像データを出力する赤外光センサをさらに備えてもよい。この場合，上記第１の検出手段は，上記可視光センサから出力された可視光画像データによって表される第１の被写体像から上記対象画像が存在する位置を検出するものであり，上記第２の検出手段は，上記赤外光センサから出力された赤外光画像データによって表される複数駒の被写体像のうちの第２の被写体像から上記対象画像が存在する位置を検出するものとなろう。
【００３２】
受光面上に可視光フィルタ（可視光を透過する特性をもつフィルタ）と赤外光フィルタ（赤外線を透過する特性をもつフィルタ）とが含まれており，被写体像を撮像することにより第１の被写体像を可視光像として表す可視光画像データを出力し，かつ第２の被写体像を赤外光像として表す赤外光像画像データを出力する可視光／赤外光固体電子撮像装置をさらに備えてもよい。この場合，上記第１の検出手段は，上記可視光／赤外光固体電子撮像装置から出力された可視光画像データによって表される第１の被写体像から対象画像が存在する位置を検出するものであり，上記第２の検出手段は，上記可視光／赤外光固体電子撮像装置から出力された赤外光画像データによって表される第２の被写体像から対象画像が存在する位置を検出するものとなろう。
【００３３】
一定周期で被写体を撮像して，第１フィールドの被写体像を表す第１の画像データと第２フィールドの被写体像を表す第２の画像データとを交互に出力する撮像装置をさらに備えてもよい。この場合，上記第１の検出手段は，上記撮像装置から出力された第１フィールドの画像データによって表される第１のフィールドの被写体像から上記対象画像が存在する位置を検出するものであり，上記第２の検出手段は，上記撮像装置から出力された第２フィールドの画像データによって表される第２の被写体像から上記対象画像が存在する位置を検出するものとなろう。
【００３４】
上記撮像装置は，たとえば，ほぼ同一と見なせる被写体を，撮像条件を変更して同時または連続して撮像して複数駒の被写体像を表す画像データを出力するものである。
【００３５】
上記撮像条件の変更は，たとえば，露出量，絞り値，シャッタ速度，フォーカス量，ズーム量，感度およびフラッシュ変更の少なくとも一つである。
【００３６】
被写体を撮像して一駒の被写体像を表す画像データに異なる信号処理を行う信号処理手段をさらに備えてもよい。この場合，上記第１の検出手段は，上記信号処理手段によって行われた信号処理のうち一の信号処理が行われた画像データによって表される第１の被写体像から上記対象画像が存在する位置を検出するものでもよい。この場合，上記第２の検出手段は，上記信号処理手段によって行われた信号処理のうち一の信号処理とは異なる他の信号処理が行われた画像データによって表される第２の被写体像から上記対象画像が存在する位置を検出するものとなろう。異なる信号処理が行われたことにより得られる第１の被写体像と第２の被写体像とから第１の位置と第２の位置とを検出できる。
【００３７】
上記決定手段は，上記第１の検出手段によって検出された第１の位置のうち，上記第２の検出手段によって検出された第２の位置に対応するものが存在する第１の位置近傍の位置を上記被写体像において上記対象画像が存在する位置と決定するものでもよい。
【００３８】
上記決定手段によって決定された上記対象画像の存在位置にもとづいて，ハードウエア制御を行うハードウエア制御手段をさらに備えてもよい。
【００３９】
上記ハードウエア制御は，たとえば，自動露出制御，自動合焦制御，フラッシュ制御，省電力制御およびズーム量制御の少なくとも一つである。
【００４０】
上記決定手段において決定された上記対象画像の存在位置にもとづいて，信号処理を行う信号処理手段をさらに備えてもよい。検出された位置に存在する対象画像を対象として所定の信号処理を行うことができる。
【００４１】
上記信号処理手段は，たとえば，ゲイン調整，白バランス調整，色補正，輪郭強調，ノイズ低減および階調補正の少なくとも一つの信号処理を行うものである。
【００４２】
上記対象画像は，たとえば，顔または目の画像である。
【実施例】
【００４３】
図1は，この発明の実施例を示すもので，ディジタル・スチル・カメラの電気的構成を示すブロック図である。
【００４４】
ディジタル・スチル・カメラの全体の動作は，制御回路２によって統括される。制御回路２には，ＣＰＵ３，後述する動作が行われる動作プログラム等が格納されているＲＯＭ４，データ等が一時的に記憶されるＲＡＭ５が含まれている。ディジタル・スチル・カメラに通信機能を設け，送信された動作プログラムを受信することにより，後述する動作を行わせるようにすることもできる。もちろん，メモリ・カードに動作プログラムが格納できれば，そのメモリ・カードから動作プログラムを読み取り，ディジタル・スチル・カメラに動作プログラムをインストールすることもできる。
【００４５】
ディジタル・スチル・カメラには，シャッタ・レリーズ・ボタン，モード設定スイッチなどの操作ボタン１が含まれている。この操作ボタン１から出力される操作信号は，制御回路２に入力する。また，ディジタル・スチル・カメラには，ストロボ制御回路６によって制御されるストロボ発光装置７が設けられている。
【００４６】
モード設定スイッチにより撮像モードが設定されると，レンズ駆動回路11によって制御される撮像レンズ８により光線束が集光され，絞り駆動回路12によって制御される絞り９を介して撮像素子10の受光面上に入射する。撮像素子10の受光面に被写体像が結像する。撮像素子10が撮像素子制御回路13によって制御され，一定の撮像周期（プレ撮像）で被写体像を表す映像信号(いわゆるスルー画を示すスルー画像信号)がアナログ信号処理回路14に入力する。アナログ信号処理回路14において，相関二重サンプリングなどの所定のアナログ信号処理が行われる。アナログ信号処理回路14から出力された映像信号は，アナログ/ディジタル信号処理回路においてディジタル画像データに変換されてディジタル信号処理回路16に入力する。ディジタル信号処理回路16において，ガンマ補正，白バランス調整などの所定の信号処理が行われる。ディジタル信号処理回路16から出力された画像データはメモリ18を介して表示装置19に与えられる。表示装置19の表示画面に，撮像された被写体像が表示される。
【００４７】
シャッタ・レリーズ・ボタンが押されると，上述のようにしてディジタル信号処理回路16から出力された画像データはメモリ18に与えられ，一時的に記憶される。画像データがメモリ18から出力されてメモリ・カード20に記録される。
【００４８】
この実施例によるディジタル・スチル・カメラにおいては，被写体像の中から顔画像の領域を検出することができる。このために，ディジタル・スチル・カメラには，顔検出処理回路17が設けられている。上述のようにしてディジタル信号処理回路16から出力された画像データは，この顔検出処理回路17にも入力する。顔検出処理回路17において後述のようにして顔画像の部分を示す領域が検出される。
【００４９】
この実施例においては，少なくとも二駒の被写体像が利用される。それぞれの駒の被写体像において顔画像部分の検出処理が行われる。それぞれの駒の被写体像において検出された顔画像部分の領域にもとづいて，顔画像部分の領域が決定される。
【００５０】
図２は，この実施例による顔画像領域の検出処理を説明するためのもので，被写体像の一例である。
【００５１】
上述のように，撮像モードが設定されると一定周期で被写体が繰返して撮像され，（Ｎ−１）駒目の被写体像α１とＮ駒目の被写体像α２が得られる。これらの二駒の被写体像α１およびα２のそれぞれにおいて顔画像を検出する処理が行われる。たとえば，（Ｎ−１）駒目の被写体像α１には人物像Ｓ１が含まれており,顔画像検出処理が行われることにより，顔画像の領域Ｃ１が検出される。Ｎ駒目の被写体像α２には，人物像Ｓ２が含まれており，顔画像領域Ｃ２が検出される。この顔画像領域Ｃ２は，（Ｎ−１）駒目の被写体像α１において検出された顔画像領域Ｃ１に対応する位置にあると考えられるもので，この実施例においては，領域Ｃ２は，領域Ｃ１にリンク付けがされたものと規定される。また，Ｎ駒目の被写体像α２においては，顔検出処理において顔画像領域Ｃ３も検出される。この顔画像領域Ｃ３は，（Ｎ−１）駒目の被写体像α１においては対応する領域が検出されなかったもので，リンク付けがされていないとされる。
【００５２】
この実施例においては，（Ｎ−１）駒目の被写体像α１における顔画像の検出結果とＮ駒目の被写体像α２における顔画像の検出結果との照合処理が行われる。そして，Ｎ駒目の被写体像α２における顔画像の検出領域は，リンク付けのある領域とされる。したがって，Ｎ駒目の被写体像α２においては，リンク付けの無い領域Ｃ３は顔画像領域とはされず，リンク付けのある領域Ｃ２が顔画像の領域として決定される。
【００５３】
また，この実施例においては，顔画像領域は，上下についても検出される。図２においては,検出された顔画像の領域Ｃ１〜Ｃ３において，顔画像の上の部分が他の部分よりも太く示されている。
【００５４】
図３は（Ｎ−１）駒目の被写体像α１の顔検出結果を，図４はＮ駒目の被写体像α２の顔検出結果をそれぞれ示している。
【００５５】
顔検出処理においては，検出された顔の画像領域の個数，検出された顔画像の領域のナンバを示す顔ナンバ，顔画像領域の位置，顔画像領域の大きさ，顔画像領域の面内回転角，顔画像領域の面外回転角およびスコアが検出される。これらの顔の画像領域の個数等が顔検出結果として，被写体像に対応して格納される。顔検出結果として得られる面内回転角とは，顔が正面を向いている場合における顔の傾き角である。面外回転角とは，顔が正面を向いている場合を基準として，その顔が横を向く場合の角度である。
【００５６】
図５は，照合結果を示している。
【００５７】
上述のように，（Ｎ−１）駒目の被写体像α１の顔画像の検出結果とＮ駒目の被写体像α２の顔画像の検出結果とが照合される。照合された結果，上述のようにリンク付けのある領域に対応する顔ナンバ，位置および大きさが照合結果テーブルに格納される。
【００５８】
図６は，顔画像領域の決定処理手順を示すフローチャートである。
【００５９】
上述のように撮像モードが設定されると一定周期で被写体が撮像され，特定の一駒の被写体像が得られる（ステップ31）。得られた一駒の被写体像において顔検出処理が行われ（ステップ32），その顔検出結果が登録される（ステップ33）。
【００６０】
前回（前駒）の顔検出結果が登録されていなければ（ステップ34でＮＯ），ステップ31からの処理が繰返される。
【００６１】
前回の顔検出結果が登録されていれば（ステップ34でＹＥＳ），上述のように，前回の顔検出結果と今回の顔検出結果との照合処理が行われる（ステップ35）。照合処理の結果にもとづいて，上述のようにリンク付けされる顔画像検出領域を表す照合結果が登録される（ステップ36）。照合結果に登録された情報により特定される顔画像領域が今回の被写体像の顔画像領域として決定される。
【００６２】
ユーザからの終了指令があるまでステップ31からの処理が繰返される（ステップ37）。
【００６３】
今回の顔画像検出処理において検出された顔画像領域に対応する顔画像領域が，前回の顔画像検出処理において検出されていた場合に，今回の被写体像における顔画像領域として決定しているので，今回と前回とも検出されなければ顔画像領域とは決定されない。誤って今回の被写体像から顔画像領域が検出されてしまったような領域は，顔画像領域からは排除されるので，顔画像領域の検出精度が向上する。もちろん，前回の顔画像検出処理において検出された顔画像領域に対応する顔画像領域が今回の顔画像検出処理においても検出された場合に，その顔画像検出領域を前回の被写体像における顔画像検出領域として決定してもよいのはいうまでもない。
【００６４】
図７および図８は，他の実施例を示すものである。
【００６５】
この実施例においては，いわゆるスルー画像（プレ撮像時の画像）と本撮像画像（シャッタ・レリーズ・ボタンが全押しされた後に撮像された画像）との検出結果の照合処理が行われる。また，本撮像画像は高解像度であり，そのサイズ（データ量，画像の大きさ）が大きいのに対して，スルー画像は，比較的低解像度であり，そのサイズは小さい。このために，この実施例においては，座標変換が行われスルー画像のサイズと本撮像画像のサイズとが同じとなるように座標変換処理が行われる。サイズが同じとなったスルー画像と本撮像画像とが検出結果の照合処理が行われる。
【００６６】
図７を参照して，スルー画像α４が得られる。このスルー画像α４には，人物像Ｓ４が含まれており，顔画像検出処理が行われることにより，顔画像領域Ｃ４が検出される。また，本撮像が行われて，本撮像画像α６が得られる。スルー画像α４の大きさと本撮像画像α６の大きさとは異なるから，スルー画像α４の大きさが本撮像画像α６の大きさと同じ大きさとなるように，スルー画像α４が座標変換される。スルー画像α４が座標変換されることにより,本撮像画像α６の大きさと同じ大きさをもつスルー画像α５が得られる。
【００６７】
座標変換されたスルー画像α５にも人物像Ｓ５が含まれており，顔画像検出処理が行われることにより顔画像領域Ｃ５が検出される。また，本撮像画像α６にも人物像Ｓ６が含まれており，顔画像検出処理が行われることにより，顔画像領域Ｃ６が検出される。また，顔画像領域Ｃ６以外の顔画像領域Ｃ７も検出されたものとする。座標変換されたスルー画像α５における検出結果と本撮像画像α６における検出結果とが照合されることにより，本撮像画像α６における顔画像領域が領域Ｃ６に決定されることは理解できよう。
【００６８】
上述の例では，スルー画像α４の大きさを本撮像画像α６の大きさに合わせているが，本撮像画像α６の大きさをスルー画像α４の大きさに合わせてもよいのはいうまでもない。
【００６９】
図８は，スルー画像と本撮像画像とから顔画像領域を決定する処理手順を示すフローチャートである。
【００７０】
撮像モードが設定されてプレ撮像によりスルー画像が得られると，そのスルー画像の顔検出処理が行われる（ステップ41）。スルー画像は，一定周期で得られるから，その一定周期で得られたスルー画像ごとに顔検出処理が行われる。顔検出処理において得られた顔検出結果が更新されながら登録される（ステップ42）。シャッタ・レリーズ・ボタンが全押しされるまで（ステップ43），ステップ41および42の処理が繰り返される。
【００７１】
シャッタ・レリーズ・ボタンが全押しされると（ステップ43でＹＥＳ），本撮像が行われ本撮像画像が得られる。得られた本撮像画像の顔検出処理が行われる（ステップ44）。
【００７２】
本撮像画像とスルー画像（シャッタ・レリーズ・ボタンが全押しされる直前のスルー画像）とが得られると，それらの画像の大きさが同じとなるように座標変換が行われる（ステップ45）。この座標変換は，スルー画像の大きさに合うように行ってもよいし，本撮像画像の大きさに合うように行ってもよいし，他の画像の大きさに合うように行ってもよい。座標変換が行われると，スルー画像の顔検出結果と本撮像画像の顔検出結果とが照合される（ステップ46）。照合結果が登録されて顔画像領域が決定する（ステップ47）。
【００７３】
図９は，図８の変形例を示すもので，顔画像領域決定処理の処理手順を示すフローチャートである。この図において図８に示す処理と同じ処理については同じ符号を付して説明を省略する。
【００７４】
図９に示す処理においては，得られたスルー画像の露光量が少ないか，または本撮像においてストロボ発光されたかどうかが確認される（ステップ51）。本撮像においてストロボ発光された場合には，得られたスルー画像の露光量が少ない。スルー画像の露光量が少ない場合には，スルー画像が暗いために顔検出処理が行われても顔画像領域を検出することができないことがある。顔画像領域を検出できないために，上述したように，スルー画像において検出された顔画像領域と本撮像領域において検出された顔画像領域との照合をしてもリンク付けされる顔画像領域が無いことがある。このために，顔画像領域を決定できないことがある。このために，この変形例においては，スルー画像の露光量が少ないか，または本撮像においてストロボ発光した場合には（ステップ51でＹＥＳ），スルー画像と本撮像画像との上述した検出結果の照合処理が行われずに本撮像画像における顔検出結果が登録され顔検出領域として決定される（ステップ52）。
【００７５】
図10（Ａ）〜（Ｄ）および図11は，上述したリンク付けを決定する処理を説明するためのものである。
【００７６】
図10（Ａ）〜（Ｄ）は，前回の被写体像において検出された顔画像領域と今回の被写体像において検出された顔画像領域との変動を示している。
【００７７】
（Ａ）は，位置変動を示すものである。前回の被写体像における顔検出処理において顔画像領域Ｃ８が検出され，今回の被写体像における顔検出処理において顔画像領域Ｃ９が検出されたことを示している。
【００７８】
（Ｂ）は，大きさ変動を示すものである。前回の被写体像における顔検出処理において顔画像領域Ｃ10が検出され，今回の被写体像における顔検出処理において顔画像領域Ｃ11が検出されたことを示している。顔画像領域Ｃ10の大きさよりも顔画像領域Ｃ11の大きさの方が大きくなっている。
【００７９】
（Ｃ）は，面内回転変動を示すものである。前回の被写体像における顔検出処理において顔画像領域Ｃ12が検出され，今回の被写体像における顔検出処理において顔画像領域Ｃ13が検出されたことを示している。上述したように，顔の上部分に対応する領域は，太く示されている。したがって，前回の被写体像において検出された顔の画像から今回の被写体像において検出された顔の画像は，被写体像の平面内において90度回転していることが分かる。
【００８０】
（Ｄ）は，面外回転変動を示すものである。前回の被写体像における顔検出処理において顔画像領域Ｃ14が検出され，今回の被写体像における顔検出処理において顔画像領域Ｃ15が検出されたことを示している。前回の被写体像における顔検出処理において検出された顔画像領域Ｃ14は正方形であり，今回の被写体像における顔検出処理において検出された顔画像領域Ｃ15は五角形である。前回の被写体像においては，顔画像は，正面を向いており，今回の被写体像において，顔画像は横を向いていることが分かる。
【００８１】
このような変動があった場合に，次に述べるように変動の程度が一定の範囲内であればリンク付けが行われる。また，リンク付けが行われた場合に，検出された顔画像領域近傍の領域等を顔画像領域として決定することもできる。たとえば，（Ａ）に示すように顔画像領域Ｃ８およびＣ９を囲む領域Ｃを顔画像領域として決定してもよいし，顔画像領域Ｃ８およびＣ９を顔画像領域として決定してもよい。
【００８２】
図11は，リンク付けを決定する処理手順を示すフローチャートである。上述した変動が一定範囲内の場合に，前回の被写体像における顔検出処理において検出された顔画像領域と今回の被写体像における顔検出処理において検出された顔画像領域とが対応するものとしてリンク付けされる。
【００８３】
今回の被写体像において検出された顔画像領域の顔ナンバを変数ｊ，前回の被写体像において検出された顔画像領域の顔ナンバを変数ｉとする。
【００８４】
今回の被写体像において検出された顔画像領域のすべてを初期化する（ステップ61〜64）。このために，今回の顔画像領域の変数ｊがリセットされ（ステップ61），すべての顔画像領域についてのリンクが初期化されるまで変数ｊがインクレメントされながらリンクの初期化処理が繰り返される（ステップ62でＹＥＳ，63，64）。
【００８５】
今回の被写体像において検出された顔画像領域のすべてが初期化されると（ステップ62でＮＯ），再び変数ｊがリセットされ（ステップ65），今回の被写体像において検出された顔画像領域の一つ一つと前回の被写体像において検出された顔画像領域の一つ一つとのそれぞれにおいてリンク付けが判断される。今回の被写体像において検出された顔画像領域のすべてについてリンク付けが終了したかどうかが確認される（ステップ66）。
【００８６】
終了していなければ（ステップ66でＹＥＳ），上述した位置変動の距離にダミーの初期値がセットされる（ステップ67）。
【００８７】
前回の被写体像において検出された顔画像領域の変数ｉがリセットされる（ステップ68）。すべての顔画像領域についてリンク付けが行われるため，すべての顔画像領域についてリンク付けが終了したかどうかが判定される（ステップ69）。
【００８８】
すべての顔画像領域についてリンク付けが終了していなければ（ステップ69でＹＥＳ），面外回転変動，面内回転変動および大きさ変動が所定の範囲内かどうかが確認される（ステップ70〜72）。これらの変動のすべてが所定の範囲内であれば（ステップ70〜72においてＹＥＳ），変動量が少ないと考えられる。変数ｄが位置変動での中心間距離に設定されて（ステップ73），その中心間距離がダミー値よりも小さいかどうかが確認される（ステップ74）。小さければ（ステップ74でＹＥＳ），中心間距離の最小値が位置変動での中心間距離に設定される（ステップ75）。設定された中心間距離が所定の範囲内であれば（ステップ76でＹＥＳ），判定対象として今回の被写体像の中の顔画像領域ｊは，前回の被写体像の中の顔画像領域ｉとリンクしているとして上述の照合結果として登録される（図５参照）。変数ｉがインクレメントされ（ステップ79），前回の被写体像のうち次の顔画像領域についてリンク付けされるかどうかが判定される。
【００８９】
図12は，他の実施例を示すもので，被写体像の一例である。
【００９０】
この実施例においては，連続する三駒の被写体像が用いられる。連続する三駒の被写体像のうち，第三番目の被写体像において検出された顔画像領域に対応する顔画像領域が第二番目の被写体像に無かった場合でも第一番目の被写体像に存在する場合にはリンク付けされ，第三番目の被写体像における顔画像領域として決定される。
【００９１】
たとえば，第（Ｎ−２）駒目の被写体像α７，第（Ｎ−１）駒目の被写体像α８および第Ｎ駒目の被写体像α９が得られる。第（Ｎ−２）駒目の被写体像α７には，人物像Ｓ７およびＳ８が含まれており，顔画像検出処理により，顔画像領域Ｃ16およびＣ17が検出される。第（Ｎ−１）駒目の被写体像α８には，人物像Ｓ９およびＳ10が含まれている。顔画像検出処理により，人物像Ｓ９から顔画像領域Ｃ18が検出されたが，人物像Ｓ10からは顔画像領域が検出されなかったものとする。第Ｎ駒目の被写体像α９には，人物像Ｓ11およびＳ12が含まれており，顔画像検出処理により，顔画像領域Ｃ20およびＣ21が検出される。
【００９２】
第Ｎ駒目の被写体像α９において検出された顔画像領域Ｃ20およびＣ21と，第（Ｎ−１）駒の被写体像α８において検出された顔画像領域Ｃ18との検出結果の照合処理（第１回検出結果照合）が行われる。第（Ｎ−１）駒目の被写体像α８においては，第Ｎ駒目の被写体像α９において検出された顔画像領域Ｃ20に対応する顔画像領域Ｃ18が存在するが，第Ｎ駒目の被写体像α９において検出された顔画像領域Ｃ21に対応する顔画像領域は検出されていない。このために，上述の実施例においてはＮ駒目の被写体像α９において顔画像領域Ｃ20は，顔画像領域として決定されるが，顔画像領域Ｃ21は，顔画像領域としては決定されない。この実施例においては，第Ｎ番目の被写体像α９において検出された顔画像領域のうち，リンク付けされない顔画像領域Ｃ21について，第（Ｎ−２）駒目の被写体像α７の顔画像領域にリンク付けされるようなものがあるかどうかが確認される（第２回検出結果照合）。第（Ｎ−２）駒目の被写体像α７の顔画像領域Ｃ17にリンク付けされるような顔画像領域Ｃ21が第Ｎ駒目の被写体像α９にある場合には，その顔画像領域Ｃ21は第Ｎ駒目の被写体像α９における顔画像領域として決定される。上述の実施例においては，検出できなかったような顔画像領域Ｃ21を検出できるようになる。
【００９３】
第（Ｎ−１）駒目の被写体像α８においては，第Ｎ駒目の被写体像α７において検出された顔画像領域Ｃ16およびＣ17との検出結果照合処理が行われることにより，顔画像領域Ｃ18が顔画像領域として決定されることは理解されよう。
【００９４】
図13および図14は，上述した図12の処理手順を示すフローチャートである。
【００９５】
今回（第Ｎ駒目）の被写体像が読み取られ（ステップ31），顔検出処理が行われる（ステップ32）。今回の顔検出処理の結果が登録される（ステップ33）。前回（第（Ｎ−１）駒目）の顔検出結果が登録されていると（ステップ34でＹＥＳ），上述したように，前回と今回の顔検出結果の照合処理（第１回検出結果照合）が行われる（ステップ52）。
【００９６】
第１回検出結果照合において，今回の被写体像において検出された顔画像領域のうちリンク無しのものがあるかどうかが確認される（ステップ53）。リンク無しのものがあると，前々回（第（Ｎ−２）駒目）の検出結果が登録されているかどうかが確認される（ステップ54）。前々回の検出結果が登録されていると（ステップ54でＹＥＳ），『今回の検出結果のうち前回の検出結果とのリンク付けがないもの』と『前々回の検出結果のうち「今回，前回，前々回」のリンクが無いもの』との間で検出結果の照合処理が行われる（第２回検出結果照合）（ステップ55）。
【００９７】
第１回検出結果照合と第２回検出結果照合とが組み合わせられて（ステップ56），その組み合わせの照合結果が反映されて最終的な今回の検出結果とし登録され，今回の被写体像における顔画像領域が決定される（ステップ36）。終了指令があるまでステップ31からの処理が繰返される。
【００９８】
今回の検出結果でリンク無しのものがないか（ステップ53でＮＯ），前々回の検出結果が登録されていなければ（ステップ54でＮＯ），前回と今回の検出結果の照合処理にもとづいて今回の被写体像における顔画像領域が決定されることとなる（ステップ36）。
【００９９】
図15は，他の実施例を示すもので，被写体150を撮像する様子を示している。
【０１００】
この実施例においては，撮像範囲がほぼ同じである２つのディジタル・スチル・カメラ151および152が用いられる。２つのディジタル・スチル・カメラ151および152を用いて被写体150が同時または連続して撮像されることにより２駒の被写体像が得られる。第１のディジタル・スチル・カメラ151および152は，コンピュータ装置153に接続されている。コンピュータ装置153に，ディジタル・スチル・カメラ151および153によって撮像された被写体像を表す画像データが与えられる。コンピュータ装置153において，得られた２駒の被写体像を用いて顔画像領域が決定される。図15においては，２つのディジタル・スチル・カメラ151および152が図示されているが，２つの撮像装置（素子）があればよく，２台の撮像装置が１つのカメラに内蔵されているものでもよい。
【０１０１】
図16は，図15に示すディジタル・スチル・カメラ151および152を用いて撮像された被写体像等の一例である。
【０１０２】
ディジタル・スチル・カメラ151および152は，同じ撮像範囲をもち，同時に被写体を撮像することにより，第１の被写体像α11および第２の被写体像α12が得られる。第１の被写体像α11には，人物像Ｓ13が含まれている。第１の被写体像α11に顔検出処理が行われることにより，人物像Ｓ13から顔画像領域Ｃ22が検出される。また，第１の被写体像α11においては顔画像領域Ｃ23も検出される。第２の被写体像α12には，人物像Ｓ14が含まれている。第２の被写体像α12に顔検出処理が行われることにより，人物像Ｓ14から顔画像領域Ｃ24が検出される。また，第２の被写体像α12においては顔画像領域Ｃ25も検出される。
【０１０３】
第１の被写体像α11において検出された顔画像領域と第２の被写体像α12において検出された顔画像領域との検出結果の照合処理が行われることにより，顔画像領域Ｃ22とＣ24とがリング付けされることとなる。したがって，第１の被写体像α11（第２の被写体像α12でもよい）における顔画像領域は，人物像Ｓ13の顔画像領域Ｃ22に決定される。
【０１０４】
図17は，第１の被写体像α11および第２の被写体像α12を用いて顔画像領域を決定する処理手順を示すフローチャートである。
【０１０５】
上述のように，第１のディジタル・スチル・カメラ151および第２のディジタル・スチル・カメラ152によって被写体が同時に撮像されることにより，第１の被写体像および第２の被写体像が得られる。これらの第１の被写体像および第２の被写体像が読み取られる（ステップ61，63）。読み取られた第１の被写体像における顔画像の検出処理（ステップ62）および第２の被写体像における顔画像の検出処理（ステップ64）が並行して行われる。
【０１０６】
第１の被写体像における顔画像の検出処理の結果と第２の被写体像における顔画像の検出処理の結果との照合処理が行われる（ステップ65）。照合結果が反映されて検出結果として登録される（ステップ66）。
【０１０７】
図18は，図17の処理手順の変形例を示すフローチャートである。この図において図17に示す処理と同一の処理については同一符号を付している。
【０１０８】
第１の被写体像と第２の被写体像が得られる（ステップ61，63）。図17に示す処理においては，第１の被写体像における顔画像の検出処理と第２の被写体像における顔画像の検出処理とが並行して行われていたが，この変形例においては，最初に第１の被写体像における顔画像の検出処理が行われ（ステップ62），続いて第２の被写体像における顔画像の検出処理が行われる（ステップ64）。その後，検出結果の照合処理（ステップ65），検出結果が登録される（ステップ66）。
【０１０９】
図19（Ａ），（Ｂ）から図22（Ａ），（Ｂ）は，他の変形例を示すもので被写体像の一例である。
【０１１０】
図19（Ａ）および（Ｂ）は，互いの撮像範囲が一部一致するが完全には一致しない第１のディジタル・スチル・カメラ151および第２のディジタル・スチル・カメラ152を用いて同時に被写体を撮像して得られた被写体像を示している。
【０１１１】
（Ａ）に示す被写体像α13には，人物像Ｓ15およびＳ16が含まれている。顔検出処理により人物像Ｓ15の顔の部分のスコアは８であり，人物像Ｓ16の顔の部分のスコアは４である。（Ｂ）に示す被写体像α14には，人物像Ｓ17およびＳ18が含まれている。顔検出処理により人物像Ｓ17の顔の部分のスコアは４であり，人物像Ｓ18の顔の部分のスコアは６である。人物像Ｓ16と人物像Ｓ17とは同一の人物を撮像したものである。
【０１１２】
図20（Ａ）〜（Ｃ）は，図19（Ａ）および（Ｂ）において上記のようにスコアが得られた場合に顔画像領域の決定を行うやり方を示している。
【０１１３】
このやり方では，被写体像α13およびα14のそれぞれにおいて検出されるスコアを個別に判断して顔画像領域の判定が行われる。（Ａ）および（Ｂ）を参照して，スコア８をもつ人物像Ｓ15の顔画像部分およびスコア６をもつ人物像Ｓ18の顔画像部分は，それぞれスコアが高いので（たとえば，顔画像と判定されるスコアのしきい値はスコア５）顔画像領域Ｃ25およびＣ26と判定される。スコア４をもつ人物像Ｓ16，Ｓ17はスコアが低いので顔画像領域とは認められない。
【０１１４】
このようにして，顔画像領域が検出された被写体像α13およびα14の同一部分が重ね合わせられて（座標変換），（Ｃ）に示す合成被写体像α17が得られる。座標変換を行うためにコンピュータ装置153にはディジタル・スチル・カメラ151と152との位置関係がセットされているのはいうまでもない。
【０１１５】
図21（Ａ）および（Ｂ）は，被写体像α13およびα14を，同一部分が重ね合わせられた合成被写体像α18およびα19である。
【０１１６】
（Ａ）を参照して，人物像Ｓ25の顔画像部分のスコアは８であり，人物像Ｓ16の顔画像部分のスコアは，図20（Ａ）および（Ｂ）に示すように被写体像α13における人物像Ｓ16のスコア４および被写体像α14における人物像Ｓ17のスコア４を加算したスコア８とされている。
【０１１７】
人物像Ｓ16の顔画像の部分は，スコア８となるので，（Ｂ）に示すように顔画像領域Ｃ28と決定される。
【０１１８】
図22は，被写体像α13およびα14を，同一部分が重ね合わせられた合成被写体像α20およびα21である。
【０１１９】
重み付け係数を用いて重み付けが行われた後に顔画像領域の判定が行われる。顔検出により得られたスコアが仮スコアとされ，その仮スコアに重み付け係数が乗じられたものがスコアとされる。人物像Ｓ15の顔画像部分の重み付け係数は１であり，その仮スコアは８であり，スコアは８となる。人物像Ｓ16の顔画像部分のスコアは，図20（Ａ）および（Ｂ）に示すように被写体像α13における人物像Ｓ16の仮スコア４に重み付け係数１が乗じられた値と被写体像α14における人物像Ｓ17の仮スコア４に重み付け係数２が常時螺よれた値とを加算したスコア12とされている。人物像Ｓ18の顔画像部分の重み付け係数は２であり，その仮スコアは８であり，スコアは16となる。
【０１２０】
顔画像領域と判定されるスコアのしきい値がスコア7.5とすると，すべてのスコアがそのスコア以上となるので，図21（Ｂ）に示すように人物像Ｓ15，Ｓ16およびＳ18のそれぞれの顔画像部分が顔画像領域Ｃ25，Ｃ28およびＣ26と決定される。
【０１２１】
図23は，単板撮像素子の受光面の一例である。
【０１２２】
単板撮像素子の受光面上には，赤色の光成分を透過するＲフィルタ（Ｒで示す），緑色の光成分を透過するＧフィルタ（Ｇで示す）および青色の光成分を透過するＢフィルタ（Ｂで示す）が一定周期で規則的に配列されている。
【０１２３】
Ｒフィルタを透過した光成分が光電変換されることにより，赤色の信号成分が得られる。得られた赤色の信号成分によって，図24（Ａ）に示すように赤色成分の被写体像が得られる。同様に，Ｇフィルタを透過した光成分が光電変換されることにより，緑色の信号成分が得られる。得られた緑色の信号成分によって，図24（Ｂ）に示すように緑色成分の被写体像が得られる。Ｂフィルタを透過した光成分が光電変換されることにより，青色信号成分が得られる。得られた青色の信号成分によって，図24（Ｃ）に示すように青色成分の被写体像が得られる。
【０１２４】
このようにして得られた赤色信号成分の被写体像，緑色信号成分の被写体像および青色信号成分の被写体像のうちの２つの被写体像を用いて図16に示すように顔画像検出処理が行われることにより，顔画像領域を決定することができる。
【０１２５】
図25（Ａ），（Ｂ）および（Ｃ）は，補間処理された赤色信号成分の被写体像，緑色信号成分の被写体像および青色信号成分の被写体像を表している。これらのように，補間処理された３つの被写体像のうちの２つの被写体像を用いて図16に示すように顔画像検出処理が行われることにより，顔画像領域を決定するようにしてもよい。
【０１２６】
図26（Ａ），（Ｂ）および（Ｃ）は，３板の固体電子撮像素子の受光面を示している。３板の固体電子撮像素子からは，それぞれの固体電子撮像素子から（Ａ）に示す赤色信号成分の被写体像，（Ｂ）に示す緑色信号成分の被写体像，（Ｃ）に示す青色信号成分の被写体像がそれぞれ得られる。得られた３つの被写体像のうちの２つの被写体像を用いて図16に示すように顔画像検出処理が行われることにより，顔画像領域を決定できる。
【０１２７】
図27（Ａ）は，可視光センサ（撮像素子）の受光面を示し，（Ｂ）は，赤外センサの受光面を示している。
【０１２８】
（Ａ）を参考にして，可視光センサには，図23に示す単板の撮像素子と同様に，Ｒフィルタ，ＧフィルタおよびＢフィルタが一定周期で規則的に配列されている。（Ｂ）を参考にして赤外センサには，赤外線領域の光成分を透過するＩＲフィルタが設けられている。（Ａ）に示す受光面をもつ可視光センサから出力された映像信号によって表される可視光像と，（Ｂ）に示す受光面をもつ可視光センサから出力された映像信号によって表される赤外光像との２つの被写体像を用いて図16に示すように顔画像検出処理が行われることにより，顔画像領域を決定することもできる。
【０１２９】
図28は，可視光／赤外センサの受光面を示している。
【０１３０】
可視光／赤外センサの受光面には，Ｒフィルタ，Ｇフィルタ，ＢフィルタおよびＩＲフィルタが一定周期で規則的に配列されている。可視光／赤外センサから，赤色成分の映像信号によって表される被写体像，緑色成分の映像信号によって表される被写体像，青色成分の映像信号によって表される被写体像および赤外光成分の映像信号によって表される被写体像が得られる。これらの４つの被写体像の中から２つの被写体像を用いて図16に示すように顔画像検出処理が行われることにより，顔画像領域を決定することもできる。
【０１３１】
異なる撮像装置（撮像素子，センサ）を用いて被写体を撮像することにより，上述したように，第１の被写体像と第２の被写体像を得て顔画像領域を検出する場合には，第１の被写体像において行われた顔画像検出処理において得られた顔画像らしさの第１のスコアと第２の被写体像において行われた顔画像検出処理において得られた顔画像らしさの第２のスコアとの和にもとづいて顔画像領域を決定してもよいし，第１のスコアと第２のスコアとの和に重み付けをつけて顔画像領域を決定してもよいし，第１のスコアと第２のスコアとに重み付けを付けて，重み付けが付けられたスコアの和にもとづいて顔画像領域を決定してもよい。もちろん，これらの顔画像領域の決定処理を組み合わせて顔画像領域を決定するものでもよい。
【０１３２】
図29から図31は，顔画像検出処理における処理タイミングを示すタイム・チャートである。固体電子撮像素子がインターレース走査されることにより，第１フィールドの被写体像と第２フィールドの被写体像とが交互に得られる。いずれも時刻ｔ１〜ｔ２の間に露光が行われることにより，被写体が撮像されている。そして，時刻ｔ２〜ｔ３の間に第１フィールドの被写体像を表す映像信号の読み出しが行われている。
【０１３３】
得られた第１フィールドの被写体像と第２フィールドの被写体像とを用いて図16に示すように顔画像検出処理が行われることにより，顔画像領域を決定することができる。
【０１３４】
図29は，読み出しが完了したフィールドの被写体像から順に顔画像の検出処理が行われるものである。
【０１３５】
時刻ｔ２から第２フィールドの映像信号の読み出しが開始されるとともに第１フィールドの被写体像の顔画像検出処理が行われる。第２フィールドの映像信号の読み出しが時刻ｔ４において終了し，第１の被写体像の顔画像検出処理が時刻ｔ５において終了する。第２フィールドの映像信号の読み出し終了後の時刻ｔ５から第２の被写体像の顔画像検出処理が終了する。２つの被写体像の顔画像検出処理の終了までの時間が短縮される。
【０１３６】
図30は，すべてのフィールドの被写体像の映像信号の読み出しが完了後に順に顔画像の検出処理が行われるものである。
【０１３７】
時刻ｔ３に第１フィールドの映像信号の読み出しが終了すると，第２フィールドの映像信号読み出しが開始され，時刻ｔ４に終了する。第１フィールドの映像信号と第２フィールドの映像信号の読み出しの両方ともが完了した時刻ｔ４から第１の被写体像の顔画像検出処理が開始され，時刻ｔ５において終了する。時刻ｔ５から第２の被写体像の顔画像検出処理が開始され，時刻ｔ６において終了する。読み出し処理と顔画像検出処理か異なる時間帯において行われるので，処理する装置の負担が軽くなる。
【０１３８】
図31は，すべてのフィールドの被写体像の映像信号の読み出しが完了後に２つの被写体像の顔画像検出が同時に行われるものである。
【０１３９】
時刻ｔ４までに第１フィールドの映像信号の読み出しおよび第２フィールドの映像信号の読み出しが順に終了する。時刻ｔ５からｔ６の間に第１の被写体像の顔画像検出および第２の被写体像の顔画像検出が並行して行われる。
【０１４０】
図32は，第１フィールドの被写体像と第２フィールドの被写体像とから顔画像検出処理の処理手順を示すフローチャートである。
【０１４１】
第１フィールドの被写体像および第２フィールドの被写体像が取得され（ステップ71，72），第１フィールドの被写体像の顔画像検出処理（ステップ73），第２フィールドの被写体像の顔画像検出処理（ステップ74）が行われる。
【０１４２】
顔画像検出処理により得られた検出結果の照合が行われ（ステップ75），照合結果が反映された検出結果が登録される（ステップ76）。
【０１４３】
図33は，他の実施例を示すもので，いわゆるブラケット撮像により得られた被写体像等を示している。
【０１４４】
露出量が比較的少ないＥ１に設定されて被写体が撮像されることにより，少し暗めの第１の被写体像α21が得られる（暗さがハッチングにより表されている）。第１の被写体像α21には，人物像Ｓ30が含まれている。第１の被写体像α21において顔画像検出処理が行われることにより，人物像Ｓ30の顔画像部分が顔画像領域Ｃ33として検出される。また，顔画像領域Ｃ34も検出される。
【０１４５】
つづいて，同じ被写体が，露出量が比較的高いＥ２に設定されて被写体が撮像されることにより，明るめの第１の被写体像α22が得られる。第２の被写体像α22にも，大１の被写体像α21の人物像Ｓ30に対応する人物像Ｓ35が含まれている。第２の被写体像α22において画像検出処理が行われることにより，人物像Ｓ35の顔画像部分が顔画像領域Ｓ35として検出される。また，顔画像領域Ｃ36も検出される。
【０１４６】
第１の被写体像α21の顔画像領域の検出結果と第２の被写体像α22の顔画像領域の検出結果との照合処理が行われることにより，第２の被写体像α22の顔画像領域Ｃ35が顔画像領域として決定される。第１の被写体像α21において検出された顔画像領域Ｃ34および第２の被写体像α22において検出された顔画像領域Ｃ36は顔画像領域とは扱われないのは理解されよう。
【０１４７】
図34は，被写体に暗い部分が含まれている場合においていわゆるブラケット撮像により得られた被写体像等を示している。
【０１４８】
露出量が比較的少ないＥ１に設定されて被写体が撮像されることにより，上述のように少し暗めの第１の被写体像α23が得られる。第１の被写体像α23には，人物像Ｓ32および木陰に存在する人物像Ｓ33が含まれている。第１の被写体像α23に顔画像検出処理が行われることにより，人物像Ｓ32の顔画像部分が顔画像領域Ｓ32として検出されるが，人物像Ｓ33は木陰にあるために人物像Ｓ33の顔画像部分は顔画像領域としては検出されない。
【０１４９】
露出量が比較的高いＥ２に設定されて同じ被写体が撮像されることにより，明るめの第２の被写体像α24が得られる。第２の被写体像α24には，第１の被写体像α23に含まれている人物像Ｓ32とS33に対応する人物像Ｓ34とＳ35とが含まれている。人物像Ｓ35が存在する部分はあまり暗くないので，第２の被写体像α24に顔画像検出処理が行われることにより，人物像Ｓ34の顔画像部分および人物像Ｓ35の顔画像部分のそれぞれが顔画像領域Ｃ38およびＣ39として検出される。
【０１５０】
上述した検出結果の照合処理を停止して，検出されたすべての顔画像領域Ｃ37，Ｃ38およびＣ39を加算することにより，第１の被写体像α23において検出されなかった顔画像領域が顔画像領域Ｃ39として検出できる。
【０１５１】
図35は，信号処理を変えることにより得られる被写体像等を示している。
【０１５２】
第１の被写体像α25は，輪郭強調処理を大きくしてノイズが多く含まれているものである。第１の被写体像α25には，人物像Ｓ36が含まれており，顔画像検出処理が行われることにより，顔画像部分が顔画像領域Ｃ40として検出される。また，顔画像領域Ｃ41も検出される。
【０１５３】
第２の被写体像α26は，輪郭強調処理を少なくしてノイズが少ないものである。第２の被写体像α26にも，第１の被写体像α25に含まれている人物像Ｓ36に対応する人物像Ｓ37が含まれている。第２の被写体像α26に顔画像検出処理が行われることにより，人物像Ｓ37の顔画像部分が顔画像領域Ｃ42として検出される。また，顔画像領域Ｃ43も検出される。
【０１５４】
これらの第１の被写体像α25の顔画像の検出結果と第２の被写体像α26の検出結果とが照合されることにより，顔画像領域Ｃ42が顔画像領域として決定される。
【０１５５】
図36は，異なる信号処理により得られた２つの被写体像について顔画像検出処理が行われる場合の処理手順を示すフローチャートである。
【０１５６】
被写体が撮像され（ステップ81），撮像により得られた被写体像に第１の信号処理が行われることにより第１の被写体像が得られ（ステップ82），その被写体像に第２の信号処理が行われることにより第２の被写体像が得られる（ステップ83）。第１の被写体像の顔画像検出処理が行われ（ステップ84），第２の被写体像の顔画像検出処理が行われる（ステップ85）。
【０１５７】
第１の被写体像の顔画像検出結果と第２の被写体像の顔画像検出結果との照合処理が行われ（ステップ86），照合の結果得られる検出結果が登録される（ステップ87）。
【０１５８】
図37から図44は，検出された顔画像を利用する処理手順を示すフローチャートである。
【０１５９】
図37および図38は，検出された顔画像領域を用いて自動露出調整を行う処理手順を示すフローチャートである。
【０１６０】
図37を参照して，顔画像の検出結果が読み取られ（ステップ91），顔画像領域の有無が判定される（ステップ92）。
【０１６１】
顔画像領域があれば（ステップ92でＹＥＳ），検出された顔画像領域内の画像の明るさがそれぞれ算出される（ステップ93）。顔画像領域が複数あれば（ステップ94でＹＥＳ），もっとも明るい顔画像領域が選択される（ステップ95）。選択された顔画像領域内の画像にもとづいて測光値が算出される顔重点マルチパターン測光が行われる（ステップ96）。顔画像領域が１つだけであれば，その顔画像領域内の画像にもとづいて顔重点マルチパターン測光が行われる（ステップ96）。
【０１６２】
顔画像領域が無ければ（ステップ92でＮＯ），中央部分にもとづいて測光値が算出される中央重点マルチパターン測光が行われる（ステップ97）。
【０１６３】
図38は，自動露出調整の他の処理手順を示している。図38において図37に示す処理については同じ符号を付して説明を省略する。
【０１６４】
図38に示す処理においては，顔画像領域が複数あった場合には（ステップ101でＹＥＳ），もっとも顔画像領域の大きいものが選択される（ステップ102）。選択された顔画像領域内の画像にもとづいて測光が行われる（ステップ96）。
【０１６５】
図39および図40は，検出された顔画像領域を利用して自動合焦制御を行う処理手順を示すフローチャートである。
【０１６６】
図39を参照して，顔画像検出結果が読み取られ（ステップ111），顔画像領域があれば（ステップ112でＹＥＳ），顔画像領域が複数かどうかが確認される（ステップ113でＹＥＳ）。顔画像領域が複数あると（ステップ113でＹＥＳ）。もっとも大きい顔画像領域が選択されて（ステップ114），その選択された顔画像領域内の画像が合焦領域として設定される（ステップ115）。また，顔画像領域が一つしかなければ（ステップ113でＮＯ），その一つの顔画像領域が合焦領域として設定される（ステップ115）。設定された領域が合焦するように自動合焦処理が行われる（ステップ117）。
【０１６７】
顔画像領域がなければ（ステップ112でＮＯ），被写体像の中央部分が合焦するように自動合焦処理が行われる（ステップ116）。
【０１６８】
図40は，自動合焦制御の他の例を示している。図40において図39と同じ処理については同じ符号を付して説明を省略する。
【０１６９】
顔画像領域が複数ある場合には（ステップ113でＹＥＳ），被写体像のうちもっとも中央に近い部分の顔画像領域が選択される（ステップ118）。
【０１７０】
図41および図42は，階調補正処理を示すフローチャートである。
【０１７１】
図41を参照して，顔画像領域の検出結果が読み取られ（ステップ121でＹＥＳ），顔画像領域があれば（ステップ122でＹＥＳ），各顔画像領域における画像の明るさが算出される（ステップ123）。顔画像領域が複数あれば（ステップ124でＹＥＳ），もっとも明るい顔画像領域が選択される（ステップ125）。顔画像領域が一つだけであれば（ステップ124でＮＯ），その顔画像領域が設定される。選択または設定された顔画像領域内の画像にもとづいて階調補正処理が行われる（ステップ127）。顔画像領域がなければ（ステップ122でＮＯ），所定の階調補正処理が行われる（ステップ126）。
【０１７２】
図42は，階調補正処理の他の処理を示している。図42において図41に示す処理と同じ処理については同じ符号を付して説明を省略する。
【０１７３】
顔画像領域が複数あれば（ステップ124でＹＥＳ），もっとも大きな顔画像領域が選択される（ステップ128）。選択された顔画像領域内の画像を用いて階調補正が行われる（ステップ129）。
【０１７４】
図43および図44は，色補正処理を示すフローチャートである。
【０１７５】
図43を参照して，顔画像領域が読み取られ（ステップ131），顔画像領域があるかどうかが確認される（ステップ132）。顔画像領域があり（ステップ132でＹＥＳ），顔画像領域が複数ある場合には（ステップ133でＹＥＳ），もっとも大きな顔画像領域が選択される（ステップ144）。顔画像領域が一つしか存在しない場合には（ステップ133でＮＯ），その顔画像領域が設定される。選択または設定された顔画像領域内の画像から色情報が取得されて（ステップ145），所望の色の画像となるように色補正が行われる（ステップ147）。顔画像領域が存在しない場合には（ステップ132でＮＯ），所定の色補正が行われる（ステップ146）。
【０１７６】
図44は，色補正処理の他の例を示している。図44において図43に示す処理と同じ処理については同じ符号を付して説明を省略する。
【０１７７】
顔画像領域がある場合には（ステップ132でＹＥＳ），その顔画像領域の色情報が取得される（ステップ148）。顔画像領域が複数ある場合には，所望の色にもっとも近い色の顔画像領域が選択される（ステップ149）。顔画像領域が一つしか存在しない場合には（ステップ133でＮＯ），その顔画像領域が設定される。選択された顔画像領域または選択された顔画像領域内の画像が所望の色となるように色補正が行われる（ステップ147）。
【０１７８】
上述の実施例においては，顔画像を検出するものであったが顔画像以外の画像，例えば，目の画像などを同様にして決定するようにしてもよい。
【０１７９】
上述したように決定された顔画像領域にもとづいて，自動露出制御等が行われるほかに，決定された顔画像領域にもとづいて，フラッシュ（ストロボ）制御，省電力制御，ズーム量制御，ゲイン調整，白バランス調整，輪郭強調，ノイズ低減などを行うようにしてもよい。
【図面の簡単な説明】
【０１８０】
【図１】ディジタル・スチル・カメラの電気的構成を示すブロック図である。
【図２】被写体像等の一例である。
【図３】（Ｎ−１）駒目の被写体像の顔検出結果を示している。
【図４】Ｎ駒目の被写体像顔検出結果を示している。
【図５】照合結果の一例である。
【図６】顔画像検出処理手順を示すフローチャートである。
【図７】スルー画像，本撮像画像等を示している。
【図８】顔画像検出処理手順を示すフローチャートである。
【図９】顔画像検出処理手順を示すフローチャートである。
【図１０】（Ａ）〜（Ｄ）は，顔画像領域の変動の一例である。
【図１１】リンク付けの処理手順を示すフローチャートである。
【図１２】被写体像等の一例である。
【図１３】顔画像検出処理手順を示すフローチャートである。
【図１４】顔画像検出処理手順を示すフローチャートである。
【図１５】被写体と撮像装置との関係を示している。
【図１６】被写体像等の一例である。
【図１７】顔画像検出処理手順を示すフローチャートである。
【図１８】顔画像検出処理手順を示すフローチャートである。
【図１９】（Ａ）および（Ｂ）は，被写体像の一例である。
【図２０】（Ａ）〜（Ｃ）は，被写体像の一例である。
【図２１】（Ａ）および（Ｂ）は，合成画像の一例である。
【図２２】合成画像の一例である。
【図２３】単板の撮像素子の受光面の一例である。
【図２４】（Ａ）〜（Ｃ）は，単色の被写体像の一例である。
【図２５】（Ａ）〜（Ｃ）は，補間された単色の被写体像の一例である。
【図２６】（Ａ）〜（Ｃ）は，三板の固体電子撮像素子の受光面を示している。
【図２７】（Ａ）は，可視光センサの受光面を，（Ｂ）は，赤外センサの受光面を示している。
【図２８】可視光／赤外センサの受光面を示している。
【図２９】フィールド画像の読み出しおよび顔画像検出処理手順を示すタイム・チャートである。
【図３０】フィールド画像の読み出しおよび顔画像検出処理手順を示すタイム・チャートである。
【図３１】フィールド画像の読み出しおよび顔画像検出処理手順を示すタイム・チャートである。
【図３２】顔画像領域の検出処理手順を示すフローチャートである。
【図３３】被写体像の一例である。
【図３４】被写体像の一例である。
【図３５】被写体像の一例である。
【図３６】顔画像領域検出処理手順を示すフローチャートである。
【図３７】自動露出制御処理を示すフローチャートである。
【図３８】自動露出制御処理を示すフローチャートである。
【図３９】自動合焦制御処理を示すフローチャートである。
【図４０】自動合焦制御処理を示すフローチャートである。
【図４１】階調補正処理を示すフローチャートである。
【図４２】階調補正処理を示すフローチャートである。
【図４３】色補正処理手順を示すフローチャートである。
【図４４】色補正処理手順を示すフローチャートである。
【符号の説明】
【０１８１】
２ 制御回路
３ ＣＰＵ
６ ストロボ制御回路
７ ストロボ発光装置
10 撮像素子
17 顔検出処理回路
【特許請求の範囲】
【請求項１】
ほぼ同一と見なせる被写体を同時にまたは連続して撮像することにより得られた複数駒の被写体像のうちの第１の被写体像から対象画像が存在する第１の位置を検出する第１の検出手段，
上記複数駒の被写体像のうち第２の被写体像から上記対象画像が存在する第２の位置を検出する第２の検出手段，ならびに
上記第１の検出手段によって検出された第１の位置と上記第２の検出手段によって検出された第２の位置とにもとづいて，上記第１の被写体像および上記第２の被写体像の少なくとも一方の被写体像において上記対象画像が存在する位置を決定する決定手段，
を備えた対象画像の位置検出装置。
【請求項２】
ほぼ同一と見なせる被写体を同時または連続して撮像して複数駒の被写体像を表す画像データを出力する撮像装置をさらに備え，
上記第１の検出手段は，上記撮像装置から出力された画像データによって表される複数駒の被写体像のうちの第１の被写体像から対象画像が存在する位置を検出するものであり，
上記第２の検出手段は，上記撮像装置から出力された画像データによって表される複数駒の被写体像のうちの第２の被写体像から対象画像が存在する位置を検出するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項３】
上記第１の検出手段と上記第２の検出手段とが共通のものである，請求項１に記載の対象画像の位置検出装置。
【請求項４】
上記第１の被写体像の大きさと上記第２の被写体像の大きさとが異なるものであり，上記第１の被写体像の大きさと上記第２の被写体像の大きさとが同じである場合における位置となるように，上記第１の検出手段によって検出された第１の位置および上記第２の検出手段によって検出された第２の位置の少なくとも一方の位置を変換する位置変換手段をさらに備え，
上記決定手段は，上記位置変換手段によって変換された上記第１の位置と上記第２の位置とにもとづいて，上記対象画像が存在する位置を決定するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項５】
被写体を撮像して被写体像を表す画像データを出力する撮像装置，
プレ撮像指令に応じて，被写体を撮像して上記第１の被写体像を表す第１の画像データを出力するように上記撮像装置を制御する第１の撮像制御手段，および
本撮像指令に応じて，被写体を撮像して上記第２の被写体像を表す第２の画像データを出力するように上記撮像装置を制御する第２の撮像制御手段をさらに備え，
上記第１の検出手段は，上記第１の撮像制御手段の制御のもとに上記第１の撮像装置から出力された第１の画像データによって表される第１の被写体像の中から上記対象画像が存在する位置を検出するものであり，
上記第２の検出手段は，上記第２の撮像制御手段の制御のもとに上記第２の撮像装置から出力された第２の画像データによって表される第２の被写体像の中から上記対象画像が存在する位置を検出するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項６】
上記本撮像指令に応じた撮像がストロボ発光に同期して行われるかどうかを判定する判定手段，および
上記判定手段によりストロボ発光に同期して行われると判定されたことに応じて，上記決定手段における決定処理を停止して上記第２の検出手段によって検出された第２の位置を，上記対象画像が存在する位置と決定するように上記決定手段を制御する決定制御手段，
をさらに備えた請求項５に記載の対象画像の位置検出装置。
【請求項７】
上記第１の撮像制御手段における制御にもとづいて上記撮像装置から出力される第１の画像データにもとづいて上記撮像装置の露出量を調整する露出量調整手段をさらに備え，
上記第２の撮像制御手段における制御は，上記露出量調整手段によって調整された露出量にもとづいて本撮像指令に応じて上記撮像装置から上記第２の画像データを出力させるものであり，
上記第１の撮像制御手段によって制御される上記撮像装置の露出量がしきい値以下かどうかを判定する判定手段，および
上記判定手段によって，しきい値以下と判定されたことに応じて，上記決定手段における決定処理を停止して上記第２の検出手段によって検出された第２の位置を，上記対象画像が存在する位置と決定するように上記決定手段を制御する決定制御手段，
をさらに備えた請求項５に記載の対象画像の位置検出装置。
【請求項８】
上記決定手段が，上記第１の検出手段によって検出された第１の位置と上記第２の検出手段によって検出された第２の位置との変動量が所定のしきい値以上の場合に，上記第１の被写体像および上記第２の被写体像の少なくとも一方の被写体像において上記対象画像が存在しないと決定するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項９】
上記第１の検出手段は，ほぼ同一と見なせる被写体を時間的に連続して複数回撮像することにより得られた複数駒の被写体像のうちの第１番目の撮像により得られた第１の被写体像から対象画像が存在する第１の位置を検出するものであり，
上記第２の検出手段は，上記複数駒の被写体像のうちの第２番目の撮像により得られた第２の被写体像から対象画像が存在する第２の位置を検出するものであり，
上記複数駒の被写体像のうちの第３番目の撮像により得られた第３の被写体像から対象画像が存在する第３の位置を検出する第３の検出手段をさらに備え，
上記決定手段は，上記第１の検出手段によって検出された第１の位置，上記第２の検出手段によって検出された第２の位置および上記第３の検出手段によって検出された第３の位置にもとづいて上記第１の被写体像，上記第２の被写体像および上記第３の被写体像のうち少なくとも一つの被写体像において上記対象画像が存在する位置を決定するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項１０】
上記決定手段は，上記第３の検出手段によって検出された第３の位置のうち，上記第２の検出手段によって検出された第２の位置に対応するものが存在しない第３の位置と，上記第１の検出手段によって検出された第１の位置のうち，上記第２の検出手段によって検出された第２の位置と上記第３の検出手段によって検出された第３の位置との両方に対応するものが存在しない第１の位置とにもとづいて，上記第３の被写体像において上記対象画像が存在する位置を決定するものである，
請求項９に記載の対象画像の位置検出装置。
【請求項１１】
被写体を撮像することにより上記第１の被写体像を表す第１の画像データを出力する第１の撮像装置，および
被写体を撮像することにより上記第２の被写体像を表す第２の画像データを出力する第２の撮像装置をさらに備え，
上記第１の検出手段は，上記第１の撮像装置から出力された第１の画像データによって表される第１の被写体像から対象画像が存在する位置を検出するものであり，
上記第２の検出手段は，上記第２の撮像装置から出力された第２の画像データによって表される第２の被写体像から対象画像が存在する位置を検出するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項１２】
上記第１の撮像装置と上記第２の撮像装置とは同じまたは異なる撮像範囲をもつものである，請求項11に記載の対象画像の位置検出装置。
【請求項１３】
上記第１の検出手段は，上記第１の被写体像から対象画像らしさの値にもとづいて対象画像が存在する第１の位置を検出するものであり，
上記第２の検出手段は，上記第２の被写体像から対象画像らしさの値にもとづいて対象画像が存在する第２の位置を検出するものであり，
上記決定手段は，上記第１の検出手段において検出された対象画像の対象画像らしさの値と上記第２の検出手段において検出された対象画像の対象画像らしさの値とにもとづいて，対象画像の存在する位置を決定するものである，
請求項12に記載の対象画像の位置検出装置。
【請求項１４】
受光面上に複数色の色フィルタが規則的に設けられており，被写体を撮像することによりカラーの被写体像を表す複数色のカラー画像データを出力する単板の固体電子撮像装置をさらに備え，
上記第１の被写体像は，上記単板の固体電子撮像装置から出力された上記複数色のカラー画像データのうち一色のカラー画像データによって表され，上記第２の被写体像は，上記複数色のカラー画像データのうち上記一色のカラー画像データとは異なる色のカラー画像データによって表されるものである，
請求項１に記載の対象画像の位置検出装置。
【請求項１５】
受光面上に異なる色の色フィルタが設けられている複数の固体電子撮像素子を含み，被写体を撮像することにより異なる色の種類のカラー画像データを出力する固体電子撮像装置をさらに備え，
上記第１の被写体像は，上記固体電子撮像装置から出力された上記カラー画像データのうちの一種類のカラー画像データによって表され，上記第２の被写体像は，上記カラー画像データのうち上記一種類のカラー画像データとは異なる種類のカラー画像データによって表されるものである，
請求項１に記載の対象画像の位置検出装置。
【請求項１６】
被写体を撮像することにより上記第１の被写体像を可視光像として表す可視光画像データを出力する可視光センサ，および
被写体を撮像することにより上記第２の被写体像を赤外光像として表す赤外光画像データを出力する赤外光センサをさらに備え，
上記第１の検出手段は，上記可視光センサから出力された可視光画像データによって表される第１の被写体像から上記対象画像が存在する位置を検出するものであり，
上記第２の検出手段は，上記赤外光センサから出力された赤外光画像データによって表される複数駒の被写体像のうちの第２の被写体像から上記対象画像が存在する位置を検出するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項１７】
受光面上に可視光フィルタと赤外光フィルタとが含まれており，被写体像を撮像することにより第１の被写体像を可視光像として表す可視光画像データを出力し，かつ第２の被写体像を赤外光像として表す赤外光像画像データを出力する可視光／赤外光固体電子撮像装置をさらに備え，
上記第１の検出手段は，上記可視光／赤外光固体電子撮像装置から出力された可視光画像データによって表される第１の被写体像から対象画像が存在する位置を検出するものであり，
上記第２の検出手段は，上記可視光／赤外光固体電子撮像装置から出力された赤外光画像データによって表される第２の被写体像から対象画像が存在する位置を検出するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項１８】
一定周期で被写体を撮像して，第１フィールドの被写体像を表す第１の画像データと第２フィールドの被写体像を表す第２の画像データとを交互に出力する撮像装置をさらに備え，
上記第１の検出手段は，上記撮像装置から出力された第１フィールドの画像データによって表される第１のフィールドの被写体像から上記対象画像が存在する位置を検出するものであり，
上記第２の検出手段は，上記撮像装置から出力された第２フィールドの画像データによって表される第２の被写体像から上記対象画像が存在する位置を検出するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項１９】
上記撮像装置が，ほぼ同一と見なせる被写体を，撮像条件を変更して同時または連続して撮像して複数駒の被写体像を表す画像データを出力するものである，
請求項２に記載の対象画像の位置検出装置。
【請求項２０】
上記撮像条件の変更が，露出量，絞り値，シャッタ速度，フォーカス量，ズーム量，感度およびフラッシュ変更の少なくとも一つである，請求項19に記載の対象画像の位置検出装置。
【請求項２１】
被写体を撮像して一駒の被写体像を表す画像データに異なる信号処理を行う信号処理手段をさらに備え，
上記第１の検出手段は，上記信号処理手段によって行われた信号処理のうち一の信号処理が行われた画像データによって表される第１の被写体像から上記対象画像が存在する位置を検出するものであり，
上記第２の検出手段は，上記信号処理手段によって行われた信号処理のうち一の信号処理とは異なる他の信号処理が行われた画像データによって表される第２の被写体像から上記対象画像が存在する位置を検出するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項２２】
上記決定手段は，上記第１の検出手段によって検出された第１の位置のうち，上記第２の検出手段によって検出された第２の位置に対応するものが存在する第１の位置近傍の位置を上記被写体像において上記対象画像が存在する位置と決定するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項２３】
上記決定手段によって決定された上記対象画像の存在位置にもとづいて，ハードウエア制御を行うハードウエア制御手段をさらに備えた請求項１に記載の対象画像の位置検出装置。
【請求項２４】
上記ハードウエア制御が自動露出制御，自動合焦制御，フラッシュ制御，省電力制御およびズーム量制御の少なくとも一つである，請求項１に記載の対象画像の位置検出装置。
【請求項２５】
上記決定手段において決定された上記対象画像の存在位置にもとづいて，信号処理を行う信号処理手段をさらに備えた請求項１に記載の対象画像の位置検出装置。
【請求項２６】
上記信号処理手段が，ゲイン調整，白バランス調整，色補正，輪郭強調，ノイズ低減および階調補正の少なくとも一つの信号処理を行うものである，請求項25に記載の対象画像の位置検出装置。
【請求項２７】
上記対象画像が顔または目の画像である，請求項１に記載の対象画像の位置検出装置。
【請求項２８】
ほぼ同一と見なせる被写体を同時にまたは連続して撮像することにより得られた複数駒の被写体像のうちの第１の被写体像から対象画像が存在する第１の位置を検出し，
上記複数駒の被写体像のうち第２の被写体像から上記対象画像が存在する第２の位置を検出し，
検出された第１の位置と検出された第２の位置とにもとづいて，上記第１の被写体像および上記第２の被写体像の少なくとも一方の被写体像において上記対象画像が存在する位置を決定する，
対象画像の位置検出方法。
【請求項２９】
ほぼ同一と見なせる被写体を同時にまたは連続して撮像することにより得られた複数駒の被写体像のうちの第１の被写体像から対象画像が存在する第１の位置を検出させ，
上記複数駒の被写体像のうち第２の被写体像から上記対象画像が存在する第２の位置を検出させ，
検出された第１の位置と検出された第２の位置とにもとづいて，上記第１の被写体像および上記第２の被写体像の少なくとも一方の被写体像において上記対象画像が存在する位置を決定させるように対象画像の位置検出装置を制御するプログラム。
【請求項３０】
請求項29に記載のプログラムを格納した記録媒体。
【請求項１】
ほぼ同一と見なせる被写体を同時にまたは連続して撮像することにより得られた複数駒の被写体像のうちの第１の被写体像から対象画像が存在する第１の位置を検出する第１の検出手段，
上記複数駒の被写体像のうち第２の被写体像から上記対象画像が存在する第２の位置を検出する第２の検出手段，ならびに
上記第１の検出手段によって検出された第１の位置と上記第２の検出手段によって検出された第２の位置とにもとづいて，上記第１の被写体像および上記第２の被写体像の少なくとも一方の被写体像において上記対象画像が存在する位置を決定する決定手段，
を備えた対象画像の位置検出装置。
【請求項２】
ほぼ同一と見なせる被写体を同時または連続して撮像して複数駒の被写体像を表す画像データを出力する撮像装置をさらに備え，
上記第１の検出手段は，上記撮像装置から出力された画像データによって表される複数駒の被写体像のうちの第１の被写体像から対象画像が存在する位置を検出するものであり，
上記第２の検出手段は，上記撮像装置から出力された画像データによって表される複数駒の被写体像のうちの第２の被写体像から対象画像が存在する位置を検出するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項３】
上記第１の検出手段と上記第２の検出手段とが共通のものである，請求項１に記載の対象画像の位置検出装置。
【請求項４】
上記第１の被写体像の大きさと上記第２の被写体像の大きさとが異なるものであり，上記第１の被写体像の大きさと上記第２の被写体像の大きさとが同じである場合における位置となるように，上記第１の検出手段によって検出された第１の位置および上記第２の検出手段によって検出された第２の位置の少なくとも一方の位置を変換する位置変換手段をさらに備え，
上記決定手段は，上記位置変換手段によって変換された上記第１の位置と上記第２の位置とにもとづいて，上記対象画像が存在する位置を決定するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項５】
被写体を撮像して被写体像を表す画像データを出力する撮像装置，
プレ撮像指令に応じて，被写体を撮像して上記第１の被写体像を表す第１の画像データを出力するように上記撮像装置を制御する第１の撮像制御手段，および
本撮像指令に応じて，被写体を撮像して上記第２の被写体像を表す第２の画像データを出力するように上記撮像装置を制御する第２の撮像制御手段をさらに備え，
上記第１の検出手段は，上記第１の撮像制御手段の制御のもとに上記第１の撮像装置から出力された第１の画像データによって表される第１の被写体像の中から上記対象画像が存在する位置を検出するものであり，
上記第２の検出手段は，上記第２の撮像制御手段の制御のもとに上記第２の撮像装置から出力された第２の画像データによって表される第２の被写体像の中から上記対象画像が存在する位置を検出するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項６】
上記本撮像指令に応じた撮像がストロボ発光に同期して行われるかどうかを判定する判定手段，および
上記判定手段によりストロボ発光に同期して行われると判定されたことに応じて，上記決定手段における決定処理を停止して上記第２の検出手段によって検出された第２の位置を，上記対象画像が存在する位置と決定するように上記決定手段を制御する決定制御手段，
をさらに備えた請求項５に記載の対象画像の位置検出装置。
【請求項７】
上記第１の撮像制御手段における制御にもとづいて上記撮像装置から出力される第１の画像データにもとづいて上記撮像装置の露出量を調整する露出量調整手段をさらに備え，
上記第２の撮像制御手段における制御は，上記露出量調整手段によって調整された露出量にもとづいて本撮像指令に応じて上記撮像装置から上記第２の画像データを出力させるものであり，
上記第１の撮像制御手段によって制御される上記撮像装置の露出量がしきい値以下かどうかを判定する判定手段，および
上記判定手段によって，しきい値以下と判定されたことに応じて，上記決定手段における決定処理を停止して上記第２の検出手段によって検出された第２の位置を，上記対象画像が存在する位置と決定するように上記決定手段を制御する決定制御手段，
をさらに備えた請求項５に記載の対象画像の位置検出装置。
【請求項８】
上記決定手段が，上記第１の検出手段によって検出された第１の位置と上記第２の検出手段によって検出された第２の位置との変動量が所定のしきい値以上の場合に，上記第１の被写体像および上記第２の被写体像の少なくとも一方の被写体像において上記対象画像が存在しないと決定するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項９】
上記第１の検出手段は，ほぼ同一と見なせる被写体を時間的に連続して複数回撮像することにより得られた複数駒の被写体像のうちの第１番目の撮像により得られた第１の被写体像から対象画像が存在する第１の位置を検出するものであり，
上記第２の検出手段は，上記複数駒の被写体像のうちの第２番目の撮像により得られた第２の被写体像から対象画像が存在する第２の位置を検出するものであり，
上記複数駒の被写体像のうちの第３番目の撮像により得られた第３の被写体像から対象画像が存在する第３の位置を検出する第３の検出手段をさらに備え，
上記決定手段は，上記第１の検出手段によって検出された第１の位置，上記第２の検出手段によって検出された第２の位置および上記第３の検出手段によって検出された第３の位置にもとづいて上記第１の被写体像，上記第２の被写体像および上記第３の被写体像のうち少なくとも一つの被写体像において上記対象画像が存在する位置を決定するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項１０】
上記決定手段は，上記第３の検出手段によって検出された第３の位置のうち，上記第２の検出手段によって検出された第２の位置に対応するものが存在しない第３の位置と，上記第１の検出手段によって検出された第１の位置のうち，上記第２の検出手段によって検出された第２の位置と上記第３の検出手段によって検出された第３の位置との両方に対応するものが存在しない第１の位置とにもとづいて，上記第３の被写体像において上記対象画像が存在する位置を決定するものである，
請求項９に記載の対象画像の位置検出装置。
【請求項１１】
被写体を撮像することにより上記第１の被写体像を表す第１の画像データを出力する第１の撮像装置，および
被写体を撮像することにより上記第２の被写体像を表す第２の画像データを出力する第２の撮像装置をさらに備え，
上記第１の検出手段は，上記第１の撮像装置から出力された第１の画像データによって表される第１の被写体像から対象画像が存在する位置を検出するものであり，
上記第２の検出手段は，上記第２の撮像装置から出力された第２の画像データによって表される第２の被写体像から対象画像が存在する位置を検出するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項１２】
上記第１の撮像装置と上記第２の撮像装置とは同じまたは異なる撮像範囲をもつものである，請求項11に記載の対象画像の位置検出装置。
【請求項１３】
上記第１の検出手段は，上記第１の被写体像から対象画像らしさの値にもとづいて対象画像が存在する第１の位置を検出するものであり，
上記第２の検出手段は，上記第２の被写体像から対象画像らしさの値にもとづいて対象画像が存在する第２の位置を検出するものであり，
上記決定手段は，上記第１の検出手段において検出された対象画像の対象画像らしさの値と上記第２の検出手段において検出された対象画像の対象画像らしさの値とにもとづいて，対象画像の存在する位置を決定するものである，
請求項12に記載の対象画像の位置検出装置。
【請求項１４】
受光面上に複数色の色フィルタが規則的に設けられており，被写体を撮像することによりカラーの被写体像を表す複数色のカラー画像データを出力する単板の固体電子撮像装置をさらに備え，
上記第１の被写体像は，上記単板の固体電子撮像装置から出力された上記複数色のカラー画像データのうち一色のカラー画像データによって表され，上記第２の被写体像は，上記複数色のカラー画像データのうち上記一色のカラー画像データとは異なる色のカラー画像データによって表されるものである，
請求項１に記載の対象画像の位置検出装置。
【請求項１５】
受光面上に異なる色の色フィルタが設けられている複数の固体電子撮像素子を含み，被写体を撮像することにより異なる色の種類のカラー画像データを出力する固体電子撮像装置をさらに備え，
上記第１の被写体像は，上記固体電子撮像装置から出力された上記カラー画像データのうちの一種類のカラー画像データによって表され，上記第２の被写体像は，上記カラー画像データのうち上記一種類のカラー画像データとは異なる種類のカラー画像データによって表されるものである，
請求項１に記載の対象画像の位置検出装置。
【請求項１６】
被写体を撮像することにより上記第１の被写体像を可視光像として表す可視光画像データを出力する可視光センサ，および
被写体を撮像することにより上記第２の被写体像を赤外光像として表す赤外光画像データを出力する赤外光センサをさらに備え，
上記第１の検出手段は，上記可視光センサから出力された可視光画像データによって表される第１の被写体像から上記対象画像が存在する位置を検出するものであり，
上記第２の検出手段は，上記赤外光センサから出力された赤外光画像データによって表される複数駒の被写体像のうちの第２の被写体像から上記対象画像が存在する位置を検出するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項１７】
受光面上に可視光フィルタと赤外光フィルタとが含まれており，被写体像を撮像することにより第１の被写体像を可視光像として表す可視光画像データを出力し，かつ第２の被写体像を赤外光像として表す赤外光像画像データを出力する可視光／赤外光固体電子撮像装置をさらに備え，
上記第１の検出手段は，上記可視光／赤外光固体電子撮像装置から出力された可視光画像データによって表される第１の被写体像から対象画像が存在する位置を検出するものであり，
上記第２の検出手段は，上記可視光／赤外光固体電子撮像装置から出力された赤外光画像データによって表される第２の被写体像から対象画像が存在する位置を検出するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項１８】
一定周期で被写体を撮像して，第１フィールドの被写体像を表す第１の画像データと第２フィールドの被写体像を表す第２の画像データとを交互に出力する撮像装置をさらに備え，
上記第１の検出手段は，上記撮像装置から出力された第１フィールドの画像データによって表される第１のフィールドの被写体像から上記対象画像が存在する位置を検出するものであり，
上記第２の検出手段は，上記撮像装置から出力された第２フィールドの画像データによって表される第２の被写体像から上記対象画像が存在する位置を検出するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項１９】
上記撮像装置が，ほぼ同一と見なせる被写体を，撮像条件を変更して同時または連続して撮像して複数駒の被写体像を表す画像データを出力するものである，
請求項２に記載の対象画像の位置検出装置。
【請求項２０】
上記撮像条件の変更が，露出量，絞り値，シャッタ速度，フォーカス量，ズーム量，感度およびフラッシュ変更の少なくとも一つである，請求項19に記載の対象画像の位置検出装置。
【請求項２１】
被写体を撮像して一駒の被写体像を表す画像データに異なる信号処理を行う信号処理手段をさらに備え，
上記第１の検出手段は，上記信号処理手段によって行われた信号処理のうち一の信号処理が行われた画像データによって表される第１の被写体像から上記対象画像が存在する位置を検出するものであり，
上記第２の検出手段は，上記信号処理手段によって行われた信号処理のうち一の信号処理とは異なる他の信号処理が行われた画像データによって表される第２の被写体像から上記対象画像が存在する位置を検出するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項２２】
上記決定手段は，上記第１の検出手段によって検出された第１の位置のうち，上記第２の検出手段によって検出された第２の位置に対応するものが存在する第１の位置近傍の位置を上記被写体像において上記対象画像が存在する位置と決定するものである，
請求項１に記載の対象画像の位置検出装置。
【請求項２３】
上記決定手段によって決定された上記対象画像の存在位置にもとづいて，ハードウエア制御を行うハードウエア制御手段をさらに備えた請求項１に記載の対象画像の位置検出装置。
【請求項２４】
上記ハードウエア制御が自動露出制御，自動合焦制御，フラッシュ制御，省電力制御およびズーム量制御の少なくとも一つである，請求項１に記載の対象画像の位置検出装置。
【請求項２５】
上記決定手段において決定された上記対象画像の存在位置にもとづいて，信号処理を行う信号処理手段をさらに備えた請求項１に記載の対象画像の位置検出装置。
【請求項２６】
上記信号処理手段が，ゲイン調整，白バランス調整，色補正，輪郭強調，ノイズ低減および階調補正の少なくとも一つの信号処理を行うものである，請求項25に記載の対象画像の位置検出装置。
【請求項２７】
上記対象画像が顔または目の画像である，請求項１に記載の対象画像の位置検出装置。
【請求項２８】
ほぼ同一と見なせる被写体を同時にまたは連続して撮像することにより得られた複数駒の被写体像のうちの第１の被写体像から対象画像が存在する第１の位置を検出し，
上記複数駒の被写体像のうち第２の被写体像から上記対象画像が存在する第２の位置を検出し，
検出された第１の位置と検出された第２の位置とにもとづいて，上記第１の被写体像および上記第２の被写体像の少なくとも一方の被写体像において上記対象画像が存在する位置を決定する，
対象画像の位置検出方法。
【請求項２９】
ほぼ同一と見なせる被写体を同時にまたは連続して撮像することにより得られた複数駒の被写体像のうちの第１の被写体像から対象画像が存在する第１の位置を検出させ，
上記複数駒の被写体像のうち第２の被写体像から上記対象画像が存在する第２の位置を検出させ，
検出された第１の位置と検出された第２の位置とにもとづいて，上記第１の被写体像および上記第２の被写体像の少なくとも一方の被写体像において上記対象画像が存在する位置を決定させるように対象画像の位置検出装置を制御するプログラム。
【請求項３０】
請求項29に記載のプログラムを格納した記録媒体。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２９】
【図３０】
【図３１】
【図３２】
【図３３】
【図３４】
【図３５】
【図３６】
【図３７】
【図３８】
【図３９】
【図４０】
【図４１】
【図４２】
【図４３】
【図４４】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２９】
【図３０】
【図３１】
【図３２】
【図３３】
【図３４】
【図３５】
【図３６】
【図３７】
【図３８】
【図３９】
【図４０】
【図４１】
【図４２】
【図４３】
【図４４】
【公開番号】特開２００７−８２０２６（Ｐ２００７−８２０２６Ａ）
【公開日】平成１９年３月２９日（２００７．３．２９）
【国際特許分類】
【出願番号】特願２００５−２６９３８７（Ｐ２００５−２６９３８７）
【出願日】平成１７年９月１６日（２００５．９．１６）
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
【公開日】平成１９年３月２９日（２００７．３．２９）
【国際特許分類】
【出願日】平成１７年９月１６日（２００５．９．１６）
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
[ Back to top ]