バーチャルスライド装置
【課題】サンプルが含まれていない領域の画像をより短時間に取得することができる。
【解決手段】撮影制御部１１２は、第１の像に基づいた全体画像信号を第２の撮像部１０９に出力させ、全体画像信号に基づいて第１の領域のうちサンプル１０１が含まれない領域の位置情報を取得し、当該位置情報に基づいて第２の領域とサンプル１０１が含まれない領域とが重なるようにステージ１０２と光学系の相対位置を変化させ、第２の像に基づいた第１の部分画像信号を第１の撮像部１０８に出力させ、第３の平面に導かれた光に基づいたスペクトル情報をカラーセンサ１１１に取得させ、第１の領域のうちサンプル１０１が含まれる領域の少なくとも一部を第２の領域が走査するようにステージ１０２と光学系との相対位置を変化させながら第２の像に基づいた複数の第２の部分画像信号を第１の撮像部１０８に出力させる。
【解決手段】撮影制御部１１２は、第１の像に基づいた全体画像信号を第２の撮像部１０９に出力させ、全体画像信号に基づいて第１の領域のうちサンプル１０１が含まれない領域の位置情報を取得し、当該位置情報に基づいて第２の領域とサンプル１０１が含まれない領域とが重なるようにステージ１０２と光学系の相対位置を変化させ、第２の像に基づいた第１の部分画像信号を第１の撮像部１０８に出力させ、第３の平面に導かれた光に基づいたスペクトル情報をカラーセンサ１１１に取得させ、第１の領域のうちサンプル１０１が含まれる領域の少なくとも一部を第２の領域が走査するようにステージ１０２と光学系との相対位置を変化させながら第２の像に基づいた複数の第２の部分画像信号を第１の撮像部１０８に出力させる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、バーチャルスライド装置に関する。
【背景技術】
【０００２】
病理標本のスライド画像をデジタル撮影するバーチャルスライド装置において、色再現性を向上させる技術が特許文献１および特許文献２に記載されている。初めに、特許文献１に記載のバーチャルスライド装置について説明する。
【０００３】
図５は、従来知られているバーチャルスライド装置１０００の構成を示した概略図である。図示する例では、光源１００１の光は、ステージ１００５の上に配置されたサンプル１００２を透過して、第１の対物レンズ１００３を透過して、ハーフミラー１００９で分岐し、一方は視野範囲選択手段１０１１を通してカラーセンサ１０１０に入射する。また、ハーフミラー１００９で分岐したもう一方の光は、デジタル撮影装置１００４に入射する。
【０００４】
撮影制御手段１００６は、サンプル１００２の部分画像撮影のために、ステージ１００５と、デジタル撮影装置１００４、カラーセンサ１０１０を制御する。具体的には、撮影制御手段１００６は、ステージ１００５を移動させながらデジタル撮影装置１００４が画像を撮影し、同時にカラーセンサ１０１０がスペクトル情報を取得するように制御する。なお、撮影制御手段１００６は、タイリング間ののりしろができるようにステージ１００５（サンプル１００２）を移動しながらデジタル撮影装置１００４が画像を撮像するように制御する。
【０００５】
画像の貼り合わせ情報生成手段１００７は、デジタル撮影装置１００４から入力される部分画像の画像処理を行ってのりしろ部を認識し、画像の貼り合わせ情報を生成する。画像ファイル生成手段１００８は、カラーセンサ１０１０の出力値に基づいて、デジタル撮影装置１００４が撮影した画像の色を補正する。また、画像ファイル生成手段１００８は、画像の貼り合わせ情報生成手段１００７が生成した画像の貼り合わせ情報に基づいてサンプル１００２の画像ファイルを生成する。
【０００６】
次に、特許文献２に記載のバーチャルスライド装置における画像の色補正方法について説明する。特許文献２に記載されているバーチャルスライド装置における画像の色補正方法は、サンプルをステージから取り除いた状態で、背景光の画像として光源が発した照明光のみの画像を観察画像と同様の撮影手順によって取得し、この画像を色補正に用いることで色再現性の向上を実現する方法である。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００９−２５６３１２号公報
【特許文献２】特開２００９−１４３５４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、従来知られているバーチャルスライド装置では、サンプルがない領域の画像を取得するには、サンプルがないスライドガラスの上にカバーガラスが置かれた空のスライドを置いて撮影するか、もしくは、サンプルがあるスライドガラスにおいて、撮影者がサンプルの位置を確認しながらサンプルがない位置で画像を撮像する必要があるため、撮影時間が増大するという問題がある。
【０００９】
本発明は上記の問題を解決するためになされたものであり、サンプルが含まれていない領域の画像をより短時間に取得することができるバーチャルスライド装置を提供することを目的とする。
【課題を解決するための手段】
【００１０】
本発明は、サンプルを設置するステージと、前記サンプル全体を含む第１の領域の像を第１の平面に結像し、前記第１の領域に含まれる第２の領域の像を第２の平面に結像させ、前記第２の領域の少なくとも一部からの光を第３の平面に導く光学系と、第１の平面に結像された第１の像および第２の平面に結像された第２の像を各々撮像して画像信号を出力する撮像部と、前記第３の平面に導かれた光のスペクトル情報を取得するカラーセンサと、前記第１の像に基づいた全体画像信号を前記撮像部に出力させ、前記全体画像信号に基づいて前記第１の領域のうちサンプルが含まれない領域の位置情報を取得し、当該位置情報に基づいて前記第２の領域と前記サンプルが含まれない領域とが重なるように前記ステージと前記光学系の相対位置を変化させ、前記第２の像に基づいた第１の部分画像信号を前記撮像部に出力させ、前記第３の平面に導かれた光に基づいたスペクトル情報を前記カラーセンサに取得させ、前記第１の領域のうち前記サンプルが含まれる領域の少なくとも一部を前記第２の領域が走査するように前記ステージと前記光学系との相対位置を変化させながら前記第２の像に基づいた複数の第２の部分画像信号を前記撮像部に出力させる制御部と、前記スペクトル情報と前記第１の部分画像信号とに基づいて前記第２の部分画像信号を補正し、当該第２の部分画像信号を用いて前記サンプルを含む画像を生成する画像処理部と、を備えることを特徴とするバーチャルスライド装置である。
【００１１】
また、本発明のバーチャルスライド装置において、前記撮像部は、前記第１の領域に含まれる、前記サンプルに関連する情報を示す記号を撮像し、前記画像処理部は、前記撮像部が撮像した前記記号から前記サンプルに関連する情報を取得し、当該情報に基づいて前記第２の部分画像信号を補正することを特徴とする。
【００１２】
また、本発明のバーチャルスライド装置において、前記制御部は、前記第１の領域のうち、前記全体画像信号の値が所定の閾値よりも大きい領域を前記サンプルが含まれない領域と特定することを特徴とする。
【００１３】
また、本発明のバーチャルスライド装置において、前記制御部は、前記第１の領域のうち、前記全体画像信号の値が所定の閾値よりも小さい領域から所定の距離だけ離れた領域を前記サンプルが含まれない領域と特定することを特徴とする。
【発明の効果】
【００１４】
本発明によれば、光学系はサンプル全体を含む第１の領域の像を第１の平面に結像し、第１の領域に含まれる第２の領域の像を第２の平面に結像させ、第２の領域の少なくとも一部からの光を第３の平面に導く。また、撮像部は、第１の平面に結像された第１の像および第２の平面に結像された第２の像を各々撮像して画像信号を出力する。また、カラーセンサは、第３の平面に導かれた光のスペクトル情報を取得する。また、制御部は、第１の像に基づいた全体画像信号を撮像部に出力させ、全体画像信号に基づいて第１の領域のうちサンプルが含まれない領域の位置情報を取得し、当該位置情報に基づいて第２の領域とサンプルが含まれない領域とが重なるようにステージと光学系の相対位置を変化させ、第２の像に基づいた第１の部分画像信号を撮像部に出力させ、第３の平面に導かれた光に基づいたスペクトル情報をカラーセンサに取得させ、第１の領域のうちサンプルが含まれる領域の少なくとも一部を第２の領域が走査するようにステージと光学系との相対位置を変化させながら第２の像に基づいた複数の第２の部分画像信号を撮像部に出力させる。また、画像処理部は、スペクトル情報と第１の部分画像信号とに基づいて第２の部分画像信号を補正し、当該第２の部分画像信号を用いてサンプルを含む画像を生成する。これにより、サンプルが含まれていない領域を特定することができるため、サンプルが含まれていない領域の画像をより短時間に取得することができる。
【図面の簡単な説明】
【００１５】
【図１】本発明の一実施形態におけるバーチャルスライド装置の構成を示した概略図である。
【図２】本実施形態において、第１の撮像部が部分画像を撮像する部分画像領域と、第２の撮像部が全体画像を撮像する全体画像領域と、画像ファイル生成部が生成するサンプル画像とを示した概略図である。
【図３】本実施形態におけるバーチャルスライド装置の動作手順を示したフローチャートである。
【図４】本実施形態におけるバーコードが付されたスライドガラスの概略図である。
【図５】従来知られているバーチャルスライド装置の構成を示した概略図である。
【発明を実施するための形態】
【００１６】
以下、本発明の一実施形態について図面を参照して説明する。図１は、本実施形態におけるバーチャルスライド装置１の構成を示した概略図である。図示する例では、バーチャルスライド装置１は、ステージ１０２と、ステージ駆動部１０３と、光源１０４と、第１の対物レンズ１０５と、第２の対物レンズ１０６と、ハーフミラー１０７と、撮像素子を備えた第１の撮像部１０８（撮像部）と、撮像素子を備えた第２の撮像部１０９（撮像部）と、視野領域変更部１１０と、カラーセンサ１１１と、撮像制御部１１２（制御部）と、画像ファイル生成部１１３（画像処理部）と、サンプル位置検出部１１４と、貼り合わせ情報生成部１１５を備える。なお、例えば、第１の対物レンズ１０５と、第２の対物レンズ１０６と、ハーフミラー１０７とが、請求項に係る光学系に相当する。
【００１７】
ステージ１０２は、スライドガラス上にサンプル１０１を載置した試料を載置するための台である。ステージ駆動部１０３は、撮像制御部１１２の制御に基づいて、ステージ１０２を、第１の撮像部１０８が備える撮像素子および第２の撮像部１０９が備える撮像素子の撮像面と水平な方向及び垂直な方向（三次元方向）に駆動させる。光源１０４は、サンプル１０１を照射する光を発生する。
【００１８】
第１の対物レンズ１０５は、サンプル１０１の部分領域（第２の領域）の画像（部分画像）を拡大して撮像するために用いる対物レンズであり、第２の対物レンズ１０６よりも拡大率が高い対物レンズである。第２の対物レンズ１０６は、サンプル１０１全体を含む領域（第１の領域）の画像（全体画像）を撮像するために用いる対物レンズであり、第１の対物レンズ１０５よりも拡大率が低い対物レンズである。また、一時点において、第１の対物レンズ１０５と第２の対物レンズ１０６とのどちらか一方を、サンプル１０１に対向するように配置することができる構成となっている。サンプル１０１に対向するように配置された場合、第１の対物レンズ１０５および第２の対物レンズ１０６は、サンプル１０１の所定領域からの光束を集光させ、集光させた光をハーフミラー１０７に対して照射する。ハーフミラー１０７は、第１の対物レンズ１０５または第２の対物レンズ１０６からの光の一部を視野領域変更部１１０の方向に反射し、一部を透過する。
【００１９】
第１の撮像部１０８は、第２の撮像部１０９が備える撮像素子よりも画素数の多い撮像素子を備えており、受光した光の強度に応じた電気信号に光電変換することで高解像度の画像を撮像する。第２の撮像部１０９は、第１の撮像部１０８が備える撮像素子よりも画素数の少ない撮像素子を備えており、受光した光の強度に応じた電気信号に光電変換することで低解像度の画像を撮像する。また、一時点において、第１の撮像部１０８と第２の撮像部１０９とのどちらか一方を、ハーフミラー１０７が透過した光を受光する位置に配置することができる構成となっている。本実施形態では、第１の対物レンズ１０５がサンプル１０１に対向するように配置された場合、第１の撮像部１０８は、ハーフミラー１０７が透過した光を受光する位置に配置される。また、第２の対物レンズ１０６がサンプル１０１に対向するように配置された場合、第２の撮像部１０９は、ハーフミラー１０７が透過した光を受光する位置に配置される。これにより、第１の撮像部１０８は、サンプル１０１の部分画像を高解像度で撮像することができ、第２の撮像部１０９は、サンプル１０１全体を含む領域の画像を低解像度で撮像することができる。
【００２０】
視野領域変更部１１０は、ハーフミラー１０７とカラーセンサ１１１との間に配置されており、ハーフミラー１０７からの光のうち、一部の領域の光を遮り、一部の領域の光を透過する。視野領域変更部１１０を透過した光は、カラーセンサ１１１に入射する。また、視野領域変更部１１０は、ハーフミラー１０７からの光のうち、光を遮る領域を変更することができる。すなわち、視野領域変更部１１０は、カラーセンサ１１１の視野範囲（第３の領域）を変更することができる。
【００２１】
カラーセンサ１１１は、サンプル１０１からの光のうち、視野領域変更部１１０を透過した光のスペクトル情報を検出する。撮像制御部１１２は、ステージ駆動部１０３と、第１の対物レンズ１０５と、第２の対物レンズ１０６と、第１の撮像部１０８と、第２の撮像部１０９と、カラーセンサ１１１との制御を行い、サンプル１０１の画像およびスペクトル情報を取得する。
【００２２】
貼り合わせ情報生成部１１５は、第１の撮像部１０８が撮像した複数枚の部分画像それぞれに対して隣接する部分画像を認識し、さらに、隣接する部分画像同士ののりしろ部を認識し、認識した結果に基づいて全ての部分画像を貼り合わせて一枚の全体画像を生成するために用いる貼り合わせ情報を生成する。
【００２３】
画像ファイル生成部１１３は、貼り合わせ情報生成部１１５が生成した貼り合わせ情報に基づいて、全ての部分画像を貼り合わせて一枚のサンプル画像を生成する。また、画像ファイル生成部１１３は、カラーセンサ１１１が取得したスペクトル情報と、第１の撮像部１０８が撮像したサンプル１０１が含まれていない部分画像とに基づいて、生成したサンプル画像の色補正を行う。サンプル１０１が保持されているスライドガラスは、それぞれ色や透過率が異なる。そのため、色補正の方法としては、例えば、サンプル１０１が含まれていない部分画像の画像情報（スペクトル情報）を、サンプル１０１が含まれている部分画像の画像情報（スペクトル情報）で除算する。これにより、スライドガラスの特性を補正し、純粋なサンプル１０１の画像情報（スペクトル情報）を取得することができる。また、上述したスライドガラスの特性を補正したサンプル１０１の画像情報（スペクトル情報）を、例えば前もって取得していた標準の画像の画像情報（スペクトル情報）に合わせるように補正することで、よりサンプル１０１の色の再現性を良くすることができる。なお、画像ファイル生成部１１３は、カラーセンサ１１１が取得したスペクトル情報と、第１の撮像部１０８が撮像したサンプル１０１が含まれていない部分画像とに基づいて部分画像それぞれの色補正を行った後、色補正後の部分画像を貼り合わせてサンプル画像を生成するようにしてもよい。
【００２４】
次に、第１の撮像部１０８が部分画像を撮像する部分画像領域と、第２の撮像部１０９が全体画像を撮像する全体画像領域と、画像ファイル生成部１１３が生成するサンプル画像とについて説明する。図２は、本実施形態において、第１の撮像部１０８が部分画像を撮像する部分画像領域と、第２の撮像部１０９が全体画像を撮像する全体画像領域と、画像ファイル生成部１１３が生成するサンプル画像とを示した概略図である。図示する例では、サンプル１０１が含まれていない部分画像を撮像する領域である部分画像領域２０１が示されている。また、サンプル画像の生成に用いる部分画像を撮像する領域である５６個の部分画像領域２０２が示されている。また、全体画像を撮像する領域である全体画像領域３０１が示されている。また、画像ファイル生成部１１３が生成するサンプル画像４０１が示されている。
【００２５】
この場合、第１の撮像部１０８は、部分画像領域２０１の部分画像を撮像することで、色補正を行うための部分画像（第１の部分画像信号）を取得することができる。また、第１の撮像部１０８は、５６個の部分画像領域２０２の撮像を行うことで、サンプル画像４０１を生成するために必要な全ての部分画像領域２０２の部分画像（第２の部分画像信号）を取得することができる。また、第２の撮像部１０９は１回の撮像でサンプル１０１全体を含む全体画像領域３０１の全体画像を撮像することができる。また、５６個の部分画像領域２０１の部分画像を合わせると、サンプル画像４０１となる
【００２６】
なお、図２に示す例ではのりしろ部が示されていないが、第１の撮像部１０８が撮像する部分画像にはのりしろ部が含まれる。例えば、第１の撮像部１０８が部分画像領域２０２の部分画像を撮像する場合、図示する部分画像領域２０１の周囲の領域の画像を含む部分画像を撮像する。
【００２７】
次に、サンプル１０１が含まれていない部分画像領域２０１の判定方法について説明する。サンプル位置検出部１１４は、例えば、第２の撮像部１０９が撮像した１枚の全体画像の画素値を用いて部分画像領域毎に画素値の平均値を算出し、算出した平均値が所定の閾値よりも高い部分画像領域にはサンプル１０１が含まれていないと判定する。なお、サンプル１０１が含まれていない部分画像領域の決定方法はこの方法に限らず、どのような方法を用いてもよい。例えば、サンプル位置検出部１１４は、第２の撮像部１０９が撮像した１枚の全体画像の画素値を用いて部分画像領域毎に画素値の平均値を算出し、算出した平均値が所定の閾値よりも低い部分画像領域にはサンプル１０１が含まれていると判定する。そして、サンプル位置検出部１１４は、サンプル１０１が含まれていると判定した部分画像領域よりも所定の距離以上離れた部分画像領域にはサンプル１０１が含まれていないと判定するようにしてもよい。
【００２８】
このように、バーチャルスライド装置１は、サンプル１０１が含まれていない部分画像領域２０１を判定することができるため、画像の色補正に用いる、第１の撮像部１０８が撮像したサンプル１０１が含まれていない部分画像をより短時間に取得することができる。
【００２９】
次に、バーチャルスライド装置１によるサンプル１０１の撮像手順について説明する。図３は、本実施形態におけるバーチャルスライド装置１の動作手順を示したフローチャートである。
（ステップＳ１０１）撮像制御部１１２は、第２の対物レンズ１０６をサンプル１０１に対向する位置に配置し、第２の撮像部１０９をハーフミラー１０７が透過した光を受光する位置に配置し、第２の対物レンズ１０６と第２の撮像部１０９とを用いて、サンプル１０１を含む全体画像を撮像する。その後、ステップＳ１０２の処理に進む。
【００３０】
（ステップＳ１０２）サンプル位置検出部１１４は、ステップＳ１０１の処理で第２の撮像部１０９が撮像した全体画像を用いて、サンプル１０１が含まれていない部分画像領域２０１を判定し、サンプル１０１が含まれていない部分画像領域２０１の位置情報を特定する。その後、ステップＳ１０３の処理に進む。なお、サンプル１０１が含まれていない部分画像領域２０１が複数存在する場合、サンプル位置検出部１１４は、いずれか１つの部分画像領域２０１の位置情報を特定する。例えば、サンプル位置検出部１１４は、サンプル１０１が含まれていない部分画像領域２０１のうち、現在のステージ１０２（サンプル１０１）の位置から一番距離が近い部分画像領域２０１の位置情報を特定する。
【００３１】
（ステップＳ１０３）撮像制御部１１２は、第１の対物レンズ１０５をサンプル１０１に対向する位置に配置し、第１の撮像部１０８をハーフミラー１０７が透過した光を受光する位置に配置する。その後、ステップＳ１０４の処理に進む。
（ステップＳ１０４）撮像制御部１１２は、第１の撮像部１０８が、サンプル１０１が含まれていない部分画像領域２０１の部分画像を撮像できるように、ステージ駆動部１０３を制御してステージ１０２（サンプル１０１）を水平方向に移動させる。なお、撮像制御部１１２は、ステップＳ１０２の処理でサンプル位置検出部１１４が特定した位置情報に基づいて、ステージ１０２（サンプル１０１）の移動方向および移動量を決定する。その後、ステップＳ１０５の処理に進む。
【００３２】
（ステップＳ１０５）撮像制御部１１２は、第１の撮像部１０８に部分画像領域２０１の部分画像を撮像させ、カラーセンサ１１１にスペクトル情報を取得させる。第１の撮像部１０８は部分画像を撮像し、撮像した部分画像を画像ファイル生成部１１３に対して出力する。また、カラーセンサ１１１は、スペクトル情報を取得し、取得したスペクトル情報を画像ファイル生成部１１３に対して出力する。なお、このときにカラーセンサ１１１がスペクトル情報を取得する領域は、例えば、部分画像領域２０１の中央部分の領域である。画像ファイル生成部１１３は、このときに第１の撮像部１０８が出力する部分画像を、画像の色補正に用いる部分画像として記憶する。また、画像ファイル生成部１１３は、カラーセンサ１１１が出力するスペクトル情報を記憶する。その後、ステップＳ１０６の処理に進む。
【００３３】
（ステップＳ１０６）撮像制御部１１２は、第１の撮像部１０８がサンプル１０１の全ての部分画像領域２０１の部分画像を撮像したか否かを判定する。第１の撮像部１０８はサンプル１０１の全ての部分画像領域２０１の部分画像を撮像したと撮像制御部１１２が判定した場合にはステップＳ１０９の処理に進み、それ以外の場合にはステップＳ１０７の処理に進む。
【００３４】
（ステップＳ１０７）撮像制御部１１２は、第１の撮像部１０８が、まだ撮像していない部分画像領域２０２の部分画像を撮像できるように、ステージ駆動部１０３を制御してステージ１０２（サンプル１０１）を水平方向に移動させる。その後、ステップＳ１０８の処理に進む。
【００３５】
（ステップＳ１０８）撮像制御部１１２は、第１の撮像部１０８に部分画像領域２０２の部分画像を撮像させ、カラーセンサ１１１にスペクトル情報を取得させる。第１の撮像部１０８は部分画像を撮像し、撮像した部分画像を画像ファイル生成部１１３と貼り合わせ情報生成部１１５とに対して出力する。また、カラーセンサ１１１は、スペクトル情報を取得し、取得したスペクトル情報を画像ファイル生成部１１３に対して出力する。なお、このときにカラーセンサ１１１がスペクトル情報を取得する領域は、例えば、部分画像領域２０１の中央部分の領域である。画像ファイル生成部１１３は、第１の撮像部１０８が出力する部分画像と、カラーセンサ１１１が出力するスペクトル情報とを記憶する。その後、ステップＳ１０６の処理に戻る。
【００３６】
（ステップＳ１０９）貼り合わせ情報生成部１１５は、第１の撮像部１０８が撮像した複数枚の部分画像それぞれに対して隣接する部分画像を認識し、さらに、隣接する部分画像同士ののりしろ部を認識し、認識した結果に基づいて全ての部分画像を貼り合わせて一枚のサンプル画像４０１を生成するために用いる貼り合わせ情報を生成する。その後、ステップＳ１１０の処理に進む。
【００３７】
（ステップＳ１１０）画像ファイル生成部１１３は、ステップＳ１０９の処理で貼り合わせ情報生成部１１５が生成した貼り合わせ情報に基づいて、ステップＳ１０６の処理で記憶した部分画像を貼り合わせて一枚のサンプル画像４０１を生成する。また、画像ファイル生成部１１３は、ステップＳ１０５の処理で記憶した色補正に用いる部分画像と、ステップＳ１０５およびステップＳＳ１０８の処理で記憶したスペクトル情報とを用いて、生成したサンプル画像４０１の色補正を行う。その後、処理を終了する。なお、画像ファイル生成部１１３は、色補正に用いる部分画像と各部分画像領域２０２で取得したスペクトル情報を用いて部分画像それぞれの色補正を行った後、色補正後の部分画像を貼り合わせてサンプル画像４０１を生成するようにしてもよい。
【００３８】
上述した通り、本実施形態によれば、バーチャルスライド装置１は、サンプル１０１が含まれていない部分画像領域２０１を判定し、サンプル１０１が含まれていない部分画像領域２０１の位置を特定することができるため、サンプル１０１が含まれていない部分画像をより短時間に取得することができる。サンプル１０１が含まれていない部分画像は、画像の色補正に用いる部分画像である。また、バーチャルスライド装置１は、サンプル１０１が含まれていない部分画像を用いて画像の色補正を行うため、画像の色補正をより精度良く行うことができる。
【００３９】
なお、サンプル１０１を保持するスライドガラスに、サンプル１０１に関連する情報を含んだバーコード（記号）を付し、バーチャルスライド装置１がバーコードを読み取り、サンプル１０１の情報を取得することができるようにしても良い。図４は、本実施形態におけるバーコードが付されたスライドガラスの概略図である。図示する例では、スライドガラス２１２の上にサンプル１０１が載置されている。また、サンプル１０１はカバーガラス２１４で覆われている。また、スライドガラス２１２の左上部に、バーコード２１３が付されている。バーコード２１３は、スライドガラス２１２の上に載置されているサンプル１０１に関連する情報を含んでいる。例えば、サンプル１０１に関連する情報としては、サンプル１０１の部位情報である。また、図示する例では、第２の撮像部１０９が１回の撮像で画像を撮影する領域である全体画像領域３０１（第１の領域）が示されている。
【００４０】
バーチャルスライド装置１がスライドガラス２１２に付されたバーコード２１３を読み取る方法としては以下の方法がある。例えば、第２の撮像部１０９は、１回の撮像でスライドガラス２１２全体を含む全体画像領域３０１の画像を撮影する。その後、画像ファイル生成部１１３は、第２の撮像部１０９が撮像した画像に含まれるバーコード２１３を読み取り、バーコード２１３に含まれているサンプル１０１に関連する情報を取得する。
【００４１】
また、サンプル１０１に関連する情報を用いて、サンプル１０１を撮像した部分画像の色補正を行う方法としては以下の方法がある。例えば、サンプル１０１が病理サンプルである場合、病理サンプルの部位によって色が異なる。そのため、画像ファイル生成部１１３は、病理サンプルの色に合わせた色補正を行うことができるように、病理サンプルの特性に合わせて補正係数を決定して色補正を行う。
【００４２】
以上、この発明の一実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。
【００４３】
例えば、上述した実施形態では、第１の撮像部１０８と第２の撮像部１０９とを別々に備え、第１の撮像部１０８が部分画像を撮像し、第２の撮像部１０９が全体画像を撮像しているがこれに限らない。例えば、第１の撮像部１０８が、全体画像と部分画像の両方を撮像するようにしてもよい。
【符号の説明】
【００４４】
１・・・バーチャルスライド装置、１０１・・・サンプル、１０２・・・ステージ、１０３・・・ステージ駆動部、１０４・・・光源、１０５・・・第１の対物レンズ、１０６・・・第２の対物レンズ、１０７・・・ハーフミラー、１０８・・・第１の撮像部、１０９・・・第２の撮像部、１１０・・・視野領域変更部、１１１・・・カラーセンサ、１１２・・・撮像制御部、１１３・・・画像ファイル生成部、１１４・・・サンプル位置検出部、１１５・・・貼り合わせ情報生成部、２０１，２０２・・・部分画像領域、２１２・・・スライドガラス、２１３・・・バーコード、２１４・・・カバーガラス、３０１・・・全体画像領域、４０１・・・サンプル画像
【技術分野】
【０００１】
本発明は、バーチャルスライド装置に関する。
【背景技術】
【０００２】
病理標本のスライド画像をデジタル撮影するバーチャルスライド装置において、色再現性を向上させる技術が特許文献１および特許文献２に記載されている。初めに、特許文献１に記載のバーチャルスライド装置について説明する。
【０００３】
図５は、従来知られているバーチャルスライド装置１０００の構成を示した概略図である。図示する例では、光源１００１の光は、ステージ１００５の上に配置されたサンプル１００２を透過して、第１の対物レンズ１００３を透過して、ハーフミラー１００９で分岐し、一方は視野範囲選択手段１０１１を通してカラーセンサ１０１０に入射する。また、ハーフミラー１００９で分岐したもう一方の光は、デジタル撮影装置１００４に入射する。
【０００４】
撮影制御手段１００６は、サンプル１００２の部分画像撮影のために、ステージ１００５と、デジタル撮影装置１００４、カラーセンサ１０１０を制御する。具体的には、撮影制御手段１００６は、ステージ１００５を移動させながらデジタル撮影装置１００４が画像を撮影し、同時にカラーセンサ１０１０がスペクトル情報を取得するように制御する。なお、撮影制御手段１００６は、タイリング間ののりしろができるようにステージ１００５（サンプル１００２）を移動しながらデジタル撮影装置１００４が画像を撮像するように制御する。
【０００５】
画像の貼り合わせ情報生成手段１００７は、デジタル撮影装置１００４から入力される部分画像の画像処理を行ってのりしろ部を認識し、画像の貼り合わせ情報を生成する。画像ファイル生成手段１００８は、カラーセンサ１０１０の出力値に基づいて、デジタル撮影装置１００４が撮影した画像の色を補正する。また、画像ファイル生成手段１００８は、画像の貼り合わせ情報生成手段１００７が生成した画像の貼り合わせ情報に基づいてサンプル１００２の画像ファイルを生成する。
【０００６】
次に、特許文献２に記載のバーチャルスライド装置における画像の色補正方法について説明する。特許文献２に記載されているバーチャルスライド装置における画像の色補正方法は、サンプルをステージから取り除いた状態で、背景光の画像として光源が発した照明光のみの画像を観察画像と同様の撮影手順によって取得し、この画像を色補正に用いることで色再現性の向上を実現する方法である。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００９−２５６３１２号公報
【特許文献２】特開２００９−１４３５４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、従来知られているバーチャルスライド装置では、サンプルがない領域の画像を取得するには、サンプルがないスライドガラスの上にカバーガラスが置かれた空のスライドを置いて撮影するか、もしくは、サンプルがあるスライドガラスにおいて、撮影者がサンプルの位置を確認しながらサンプルがない位置で画像を撮像する必要があるため、撮影時間が増大するという問題がある。
【０００９】
本発明は上記の問題を解決するためになされたものであり、サンプルが含まれていない領域の画像をより短時間に取得することができるバーチャルスライド装置を提供することを目的とする。
【課題を解決するための手段】
【００１０】
本発明は、サンプルを設置するステージと、前記サンプル全体を含む第１の領域の像を第１の平面に結像し、前記第１の領域に含まれる第２の領域の像を第２の平面に結像させ、前記第２の領域の少なくとも一部からの光を第３の平面に導く光学系と、第１の平面に結像された第１の像および第２の平面に結像された第２の像を各々撮像して画像信号を出力する撮像部と、前記第３の平面に導かれた光のスペクトル情報を取得するカラーセンサと、前記第１の像に基づいた全体画像信号を前記撮像部に出力させ、前記全体画像信号に基づいて前記第１の領域のうちサンプルが含まれない領域の位置情報を取得し、当該位置情報に基づいて前記第２の領域と前記サンプルが含まれない領域とが重なるように前記ステージと前記光学系の相対位置を変化させ、前記第２の像に基づいた第１の部分画像信号を前記撮像部に出力させ、前記第３の平面に導かれた光に基づいたスペクトル情報を前記カラーセンサに取得させ、前記第１の領域のうち前記サンプルが含まれる領域の少なくとも一部を前記第２の領域が走査するように前記ステージと前記光学系との相対位置を変化させながら前記第２の像に基づいた複数の第２の部分画像信号を前記撮像部に出力させる制御部と、前記スペクトル情報と前記第１の部分画像信号とに基づいて前記第２の部分画像信号を補正し、当該第２の部分画像信号を用いて前記サンプルを含む画像を生成する画像処理部と、を備えることを特徴とするバーチャルスライド装置である。
【００１１】
また、本発明のバーチャルスライド装置において、前記撮像部は、前記第１の領域に含まれる、前記サンプルに関連する情報を示す記号を撮像し、前記画像処理部は、前記撮像部が撮像した前記記号から前記サンプルに関連する情報を取得し、当該情報に基づいて前記第２の部分画像信号を補正することを特徴とする。
【００１２】
また、本発明のバーチャルスライド装置において、前記制御部は、前記第１の領域のうち、前記全体画像信号の値が所定の閾値よりも大きい領域を前記サンプルが含まれない領域と特定することを特徴とする。
【００１３】
また、本発明のバーチャルスライド装置において、前記制御部は、前記第１の領域のうち、前記全体画像信号の値が所定の閾値よりも小さい領域から所定の距離だけ離れた領域を前記サンプルが含まれない領域と特定することを特徴とする。
【発明の効果】
【００１４】
本発明によれば、光学系はサンプル全体を含む第１の領域の像を第１の平面に結像し、第１の領域に含まれる第２の領域の像を第２の平面に結像させ、第２の領域の少なくとも一部からの光を第３の平面に導く。また、撮像部は、第１の平面に結像された第１の像および第２の平面に結像された第２の像を各々撮像して画像信号を出力する。また、カラーセンサは、第３の平面に導かれた光のスペクトル情報を取得する。また、制御部は、第１の像に基づいた全体画像信号を撮像部に出力させ、全体画像信号に基づいて第１の領域のうちサンプルが含まれない領域の位置情報を取得し、当該位置情報に基づいて第２の領域とサンプルが含まれない領域とが重なるようにステージと光学系の相対位置を変化させ、第２の像に基づいた第１の部分画像信号を撮像部に出力させ、第３の平面に導かれた光に基づいたスペクトル情報をカラーセンサに取得させ、第１の領域のうちサンプルが含まれる領域の少なくとも一部を第２の領域が走査するようにステージと光学系との相対位置を変化させながら第２の像に基づいた複数の第２の部分画像信号を撮像部に出力させる。また、画像処理部は、スペクトル情報と第１の部分画像信号とに基づいて第２の部分画像信号を補正し、当該第２の部分画像信号を用いてサンプルを含む画像を生成する。これにより、サンプルが含まれていない領域を特定することができるため、サンプルが含まれていない領域の画像をより短時間に取得することができる。
【図面の簡単な説明】
【００１５】
【図１】本発明の一実施形態におけるバーチャルスライド装置の構成を示した概略図である。
【図２】本実施形態において、第１の撮像部が部分画像を撮像する部分画像領域と、第２の撮像部が全体画像を撮像する全体画像領域と、画像ファイル生成部が生成するサンプル画像とを示した概略図である。
【図３】本実施形態におけるバーチャルスライド装置の動作手順を示したフローチャートである。
【図４】本実施形態におけるバーコードが付されたスライドガラスの概略図である。
【図５】従来知られているバーチャルスライド装置の構成を示した概略図である。
【発明を実施するための形態】
【００１６】
以下、本発明の一実施形態について図面を参照して説明する。図１は、本実施形態におけるバーチャルスライド装置１の構成を示した概略図である。図示する例では、バーチャルスライド装置１は、ステージ１０２と、ステージ駆動部１０３と、光源１０４と、第１の対物レンズ１０５と、第２の対物レンズ１０６と、ハーフミラー１０７と、撮像素子を備えた第１の撮像部１０８（撮像部）と、撮像素子を備えた第２の撮像部１０９（撮像部）と、視野領域変更部１１０と、カラーセンサ１１１と、撮像制御部１１２（制御部）と、画像ファイル生成部１１３（画像処理部）と、サンプル位置検出部１１４と、貼り合わせ情報生成部１１５を備える。なお、例えば、第１の対物レンズ１０５と、第２の対物レンズ１０６と、ハーフミラー１０７とが、請求項に係る光学系に相当する。
【００１７】
ステージ１０２は、スライドガラス上にサンプル１０１を載置した試料を載置するための台である。ステージ駆動部１０３は、撮像制御部１１２の制御に基づいて、ステージ１０２を、第１の撮像部１０８が備える撮像素子および第２の撮像部１０９が備える撮像素子の撮像面と水平な方向及び垂直な方向（三次元方向）に駆動させる。光源１０４は、サンプル１０１を照射する光を発生する。
【００１８】
第１の対物レンズ１０５は、サンプル１０１の部分領域（第２の領域）の画像（部分画像）を拡大して撮像するために用いる対物レンズであり、第２の対物レンズ１０６よりも拡大率が高い対物レンズである。第２の対物レンズ１０６は、サンプル１０１全体を含む領域（第１の領域）の画像（全体画像）を撮像するために用いる対物レンズであり、第１の対物レンズ１０５よりも拡大率が低い対物レンズである。また、一時点において、第１の対物レンズ１０５と第２の対物レンズ１０６とのどちらか一方を、サンプル１０１に対向するように配置することができる構成となっている。サンプル１０１に対向するように配置された場合、第１の対物レンズ１０５および第２の対物レンズ１０６は、サンプル１０１の所定領域からの光束を集光させ、集光させた光をハーフミラー１０７に対して照射する。ハーフミラー１０７は、第１の対物レンズ１０５または第２の対物レンズ１０６からの光の一部を視野領域変更部１１０の方向に反射し、一部を透過する。
【００１９】
第１の撮像部１０８は、第２の撮像部１０９が備える撮像素子よりも画素数の多い撮像素子を備えており、受光した光の強度に応じた電気信号に光電変換することで高解像度の画像を撮像する。第２の撮像部１０９は、第１の撮像部１０８が備える撮像素子よりも画素数の少ない撮像素子を備えており、受光した光の強度に応じた電気信号に光電変換することで低解像度の画像を撮像する。また、一時点において、第１の撮像部１０８と第２の撮像部１０９とのどちらか一方を、ハーフミラー１０７が透過した光を受光する位置に配置することができる構成となっている。本実施形態では、第１の対物レンズ１０５がサンプル１０１に対向するように配置された場合、第１の撮像部１０８は、ハーフミラー１０７が透過した光を受光する位置に配置される。また、第２の対物レンズ１０６がサンプル１０１に対向するように配置された場合、第２の撮像部１０９は、ハーフミラー１０７が透過した光を受光する位置に配置される。これにより、第１の撮像部１０８は、サンプル１０１の部分画像を高解像度で撮像することができ、第２の撮像部１０９は、サンプル１０１全体を含む領域の画像を低解像度で撮像することができる。
【００２０】
視野領域変更部１１０は、ハーフミラー１０７とカラーセンサ１１１との間に配置されており、ハーフミラー１０７からの光のうち、一部の領域の光を遮り、一部の領域の光を透過する。視野領域変更部１１０を透過した光は、カラーセンサ１１１に入射する。また、視野領域変更部１１０は、ハーフミラー１０７からの光のうち、光を遮る領域を変更することができる。すなわち、視野領域変更部１１０は、カラーセンサ１１１の視野範囲（第３の領域）を変更することができる。
【００２１】
カラーセンサ１１１は、サンプル１０１からの光のうち、視野領域変更部１１０を透過した光のスペクトル情報を検出する。撮像制御部１１２は、ステージ駆動部１０３と、第１の対物レンズ１０５と、第２の対物レンズ１０６と、第１の撮像部１０８と、第２の撮像部１０９と、カラーセンサ１１１との制御を行い、サンプル１０１の画像およびスペクトル情報を取得する。
【００２２】
貼り合わせ情報生成部１１５は、第１の撮像部１０８が撮像した複数枚の部分画像それぞれに対して隣接する部分画像を認識し、さらに、隣接する部分画像同士ののりしろ部を認識し、認識した結果に基づいて全ての部分画像を貼り合わせて一枚の全体画像を生成するために用いる貼り合わせ情報を生成する。
【００２３】
画像ファイル生成部１１３は、貼り合わせ情報生成部１１５が生成した貼り合わせ情報に基づいて、全ての部分画像を貼り合わせて一枚のサンプル画像を生成する。また、画像ファイル生成部１１３は、カラーセンサ１１１が取得したスペクトル情報と、第１の撮像部１０８が撮像したサンプル１０１が含まれていない部分画像とに基づいて、生成したサンプル画像の色補正を行う。サンプル１０１が保持されているスライドガラスは、それぞれ色や透過率が異なる。そのため、色補正の方法としては、例えば、サンプル１０１が含まれていない部分画像の画像情報（スペクトル情報）を、サンプル１０１が含まれている部分画像の画像情報（スペクトル情報）で除算する。これにより、スライドガラスの特性を補正し、純粋なサンプル１０１の画像情報（スペクトル情報）を取得することができる。また、上述したスライドガラスの特性を補正したサンプル１０１の画像情報（スペクトル情報）を、例えば前もって取得していた標準の画像の画像情報（スペクトル情報）に合わせるように補正することで、よりサンプル１０１の色の再現性を良くすることができる。なお、画像ファイル生成部１１３は、カラーセンサ１１１が取得したスペクトル情報と、第１の撮像部１０８が撮像したサンプル１０１が含まれていない部分画像とに基づいて部分画像それぞれの色補正を行った後、色補正後の部分画像を貼り合わせてサンプル画像を生成するようにしてもよい。
【００２４】
次に、第１の撮像部１０８が部分画像を撮像する部分画像領域と、第２の撮像部１０９が全体画像を撮像する全体画像領域と、画像ファイル生成部１１３が生成するサンプル画像とについて説明する。図２は、本実施形態において、第１の撮像部１０８が部分画像を撮像する部分画像領域と、第２の撮像部１０９が全体画像を撮像する全体画像領域と、画像ファイル生成部１１３が生成するサンプル画像とを示した概略図である。図示する例では、サンプル１０１が含まれていない部分画像を撮像する領域である部分画像領域２０１が示されている。また、サンプル画像の生成に用いる部分画像を撮像する領域である５６個の部分画像領域２０２が示されている。また、全体画像を撮像する領域である全体画像領域３０１が示されている。また、画像ファイル生成部１１３が生成するサンプル画像４０１が示されている。
【００２５】
この場合、第１の撮像部１０８は、部分画像領域２０１の部分画像を撮像することで、色補正を行うための部分画像（第１の部分画像信号）を取得することができる。また、第１の撮像部１０８は、５６個の部分画像領域２０２の撮像を行うことで、サンプル画像４０１を生成するために必要な全ての部分画像領域２０２の部分画像（第２の部分画像信号）を取得することができる。また、第２の撮像部１０９は１回の撮像でサンプル１０１全体を含む全体画像領域３０１の全体画像を撮像することができる。また、５６個の部分画像領域２０１の部分画像を合わせると、サンプル画像４０１となる
【００２６】
なお、図２に示す例ではのりしろ部が示されていないが、第１の撮像部１０８が撮像する部分画像にはのりしろ部が含まれる。例えば、第１の撮像部１０８が部分画像領域２０２の部分画像を撮像する場合、図示する部分画像領域２０１の周囲の領域の画像を含む部分画像を撮像する。
【００２７】
次に、サンプル１０１が含まれていない部分画像領域２０１の判定方法について説明する。サンプル位置検出部１１４は、例えば、第２の撮像部１０９が撮像した１枚の全体画像の画素値を用いて部分画像領域毎に画素値の平均値を算出し、算出した平均値が所定の閾値よりも高い部分画像領域にはサンプル１０１が含まれていないと判定する。なお、サンプル１０１が含まれていない部分画像領域の決定方法はこの方法に限らず、どのような方法を用いてもよい。例えば、サンプル位置検出部１１４は、第２の撮像部１０９が撮像した１枚の全体画像の画素値を用いて部分画像領域毎に画素値の平均値を算出し、算出した平均値が所定の閾値よりも低い部分画像領域にはサンプル１０１が含まれていると判定する。そして、サンプル位置検出部１１４は、サンプル１０１が含まれていると判定した部分画像領域よりも所定の距離以上離れた部分画像領域にはサンプル１０１が含まれていないと判定するようにしてもよい。
【００２８】
このように、バーチャルスライド装置１は、サンプル１０１が含まれていない部分画像領域２０１を判定することができるため、画像の色補正に用いる、第１の撮像部１０８が撮像したサンプル１０１が含まれていない部分画像をより短時間に取得することができる。
【００２９】
次に、バーチャルスライド装置１によるサンプル１０１の撮像手順について説明する。図３は、本実施形態におけるバーチャルスライド装置１の動作手順を示したフローチャートである。
（ステップＳ１０１）撮像制御部１１２は、第２の対物レンズ１０６をサンプル１０１に対向する位置に配置し、第２の撮像部１０９をハーフミラー１０７が透過した光を受光する位置に配置し、第２の対物レンズ１０６と第２の撮像部１０９とを用いて、サンプル１０１を含む全体画像を撮像する。その後、ステップＳ１０２の処理に進む。
【００３０】
（ステップＳ１０２）サンプル位置検出部１１４は、ステップＳ１０１の処理で第２の撮像部１０９が撮像した全体画像を用いて、サンプル１０１が含まれていない部分画像領域２０１を判定し、サンプル１０１が含まれていない部分画像領域２０１の位置情報を特定する。その後、ステップＳ１０３の処理に進む。なお、サンプル１０１が含まれていない部分画像領域２０１が複数存在する場合、サンプル位置検出部１１４は、いずれか１つの部分画像領域２０１の位置情報を特定する。例えば、サンプル位置検出部１１４は、サンプル１０１が含まれていない部分画像領域２０１のうち、現在のステージ１０２（サンプル１０１）の位置から一番距離が近い部分画像領域２０１の位置情報を特定する。
【００３１】
（ステップＳ１０３）撮像制御部１１２は、第１の対物レンズ１０５をサンプル１０１に対向する位置に配置し、第１の撮像部１０８をハーフミラー１０７が透過した光を受光する位置に配置する。その後、ステップＳ１０４の処理に進む。
（ステップＳ１０４）撮像制御部１１２は、第１の撮像部１０８が、サンプル１０１が含まれていない部分画像領域２０１の部分画像を撮像できるように、ステージ駆動部１０３を制御してステージ１０２（サンプル１０１）を水平方向に移動させる。なお、撮像制御部１１２は、ステップＳ１０２の処理でサンプル位置検出部１１４が特定した位置情報に基づいて、ステージ１０２（サンプル１０１）の移動方向および移動量を決定する。その後、ステップＳ１０５の処理に進む。
【００３２】
（ステップＳ１０５）撮像制御部１１２は、第１の撮像部１０８に部分画像領域２０１の部分画像を撮像させ、カラーセンサ１１１にスペクトル情報を取得させる。第１の撮像部１０８は部分画像を撮像し、撮像した部分画像を画像ファイル生成部１１３に対して出力する。また、カラーセンサ１１１は、スペクトル情報を取得し、取得したスペクトル情報を画像ファイル生成部１１３に対して出力する。なお、このときにカラーセンサ１１１がスペクトル情報を取得する領域は、例えば、部分画像領域２０１の中央部分の領域である。画像ファイル生成部１１３は、このときに第１の撮像部１０８が出力する部分画像を、画像の色補正に用いる部分画像として記憶する。また、画像ファイル生成部１１３は、カラーセンサ１１１が出力するスペクトル情報を記憶する。その後、ステップＳ１０６の処理に進む。
【００３３】
（ステップＳ１０６）撮像制御部１１２は、第１の撮像部１０８がサンプル１０１の全ての部分画像領域２０１の部分画像を撮像したか否かを判定する。第１の撮像部１０８はサンプル１０１の全ての部分画像領域２０１の部分画像を撮像したと撮像制御部１１２が判定した場合にはステップＳ１０９の処理に進み、それ以外の場合にはステップＳ１０７の処理に進む。
【００３４】
（ステップＳ１０７）撮像制御部１１２は、第１の撮像部１０８が、まだ撮像していない部分画像領域２０２の部分画像を撮像できるように、ステージ駆動部１０３を制御してステージ１０２（サンプル１０１）を水平方向に移動させる。その後、ステップＳ１０８の処理に進む。
【００３５】
（ステップＳ１０８）撮像制御部１１２は、第１の撮像部１０８に部分画像領域２０２の部分画像を撮像させ、カラーセンサ１１１にスペクトル情報を取得させる。第１の撮像部１０８は部分画像を撮像し、撮像した部分画像を画像ファイル生成部１１３と貼り合わせ情報生成部１１５とに対して出力する。また、カラーセンサ１１１は、スペクトル情報を取得し、取得したスペクトル情報を画像ファイル生成部１１３に対して出力する。なお、このときにカラーセンサ１１１がスペクトル情報を取得する領域は、例えば、部分画像領域２０１の中央部分の領域である。画像ファイル生成部１１３は、第１の撮像部１０８が出力する部分画像と、カラーセンサ１１１が出力するスペクトル情報とを記憶する。その後、ステップＳ１０６の処理に戻る。
【００３６】
（ステップＳ１０９）貼り合わせ情報生成部１１５は、第１の撮像部１０８が撮像した複数枚の部分画像それぞれに対して隣接する部分画像を認識し、さらに、隣接する部分画像同士ののりしろ部を認識し、認識した結果に基づいて全ての部分画像を貼り合わせて一枚のサンプル画像４０１を生成するために用いる貼り合わせ情報を生成する。その後、ステップＳ１１０の処理に進む。
【００３７】
（ステップＳ１１０）画像ファイル生成部１１３は、ステップＳ１０９の処理で貼り合わせ情報生成部１１５が生成した貼り合わせ情報に基づいて、ステップＳ１０６の処理で記憶した部分画像を貼り合わせて一枚のサンプル画像４０１を生成する。また、画像ファイル生成部１１３は、ステップＳ１０５の処理で記憶した色補正に用いる部分画像と、ステップＳ１０５およびステップＳＳ１０８の処理で記憶したスペクトル情報とを用いて、生成したサンプル画像４０１の色補正を行う。その後、処理を終了する。なお、画像ファイル生成部１１３は、色補正に用いる部分画像と各部分画像領域２０２で取得したスペクトル情報を用いて部分画像それぞれの色補正を行った後、色補正後の部分画像を貼り合わせてサンプル画像４０１を生成するようにしてもよい。
【００３８】
上述した通り、本実施形態によれば、バーチャルスライド装置１は、サンプル１０１が含まれていない部分画像領域２０１を判定し、サンプル１０１が含まれていない部分画像領域２０１の位置を特定することができるため、サンプル１０１が含まれていない部分画像をより短時間に取得することができる。サンプル１０１が含まれていない部分画像は、画像の色補正に用いる部分画像である。また、バーチャルスライド装置１は、サンプル１０１が含まれていない部分画像を用いて画像の色補正を行うため、画像の色補正をより精度良く行うことができる。
【００３９】
なお、サンプル１０１を保持するスライドガラスに、サンプル１０１に関連する情報を含んだバーコード（記号）を付し、バーチャルスライド装置１がバーコードを読み取り、サンプル１０１の情報を取得することができるようにしても良い。図４は、本実施形態におけるバーコードが付されたスライドガラスの概略図である。図示する例では、スライドガラス２１２の上にサンプル１０１が載置されている。また、サンプル１０１はカバーガラス２１４で覆われている。また、スライドガラス２１２の左上部に、バーコード２１３が付されている。バーコード２１３は、スライドガラス２１２の上に載置されているサンプル１０１に関連する情報を含んでいる。例えば、サンプル１０１に関連する情報としては、サンプル１０１の部位情報である。また、図示する例では、第２の撮像部１０９が１回の撮像で画像を撮影する領域である全体画像領域３０１（第１の領域）が示されている。
【００４０】
バーチャルスライド装置１がスライドガラス２１２に付されたバーコード２１３を読み取る方法としては以下の方法がある。例えば、第２の撮像部１０９は、１回の撮像でスライドガラス２１２全体を含む全体画像領域３０１の画像を撮影する。その後、画像ファイル生成部１１３は、第２の撮像部１０９が撮像した画像に含まれるバーコード２１３を読み取り、バーコード２１３に含まれているサンプル１０１に関連する情報を取得する。
【００４１】
また、サンプル１０１に関連する情報を用いて、サンプル１０１を撮像した部分画像の色補正を行う方法としては以下の方法がある。例えば、サンプル１０１が病理サンプルである場合、病理サンプルの部位によって色が異なる。そのため、画像ファイル生成部１１３は、病理サンプルの色に合わせた色補正を行うことができるように、病理サンプルの特性に合わせて補正係数を決定して色補正を行う。
【００４２】
以上、この発明の一実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。
【００４３】
例えば、上述した実施形態では、第１の撮像部１０８と第２の撮像部１０９とを別々に備え、第１の撮像部１０８が部分画像を撮像し、第２の撮像部１０９が全体画像を撮像しているがこれに限らない。例えば、第１の撮像部１０８が、全体画像と部分画像の両方を撮像するようにしてもよい。
【符号の説明】
【００４４】
１・・・バーチャルスライド装置、１０１・・・サンプル、１０２・・・ステージ、１０３・・・ステージ駆動部、１０４・・・光源、１０５・・・第１の対物レンズ、１０６・・・第２の対物レンズ、１０７・・・ハーフミラー、１０８・・・第１の撮像部、１０９・・・第２の撮像部、１１０・・・視野領域変更部、１１１・・・カラーセンサ、１１２・・・撮像制御部、１１３・・・画像ファイル生成部、１１４・・・サンプル位置検出部、１１５・・・貼り合わせ情報生成部、２０１，２０２・・・部分画像領域、２１２・・・スライドガラス、２１３・・・バーコード、２１４・・・カバーガラス、３０１・・・全体画像領域、４０１・・・サンプル画像
【特許請求の範囲】
【請求項１】
サンプルを設置するステージと、
前記サンプル全体を含む第１の領域の像を第１の平面に結像し、前記第１の領域に含まれる第２の領域の像を第２の平面に結像させ、前記第２の領域の少なくとも一部からの光を第３の平面に導く光学系と、
第１の平面に結像された第１の像および第２の平面に結像された第２の像を各々撮像して画像信号を出力する撮像部と、
前記第３の平面に導かれた光のスペクトル情報を取得するカラーセンサと、
前記第１の像に基づいた全体画像信号を前記撮像部に出力させ、前記全体画像信号に基づいて前記第１の領域のうちサンプルが含まれない領域の位置情報を取得し、当該位置情報に基づいて前記第２の領域と前記サンプルが含まれない領域とが重なるように前記ステージと前記光学系の相対位置を変化させ、前記第２の像に基づいた第１の部分画像信号を前記撮像部に出力させ、前記第３の平面に導かれた光に基づいたスペクトル情報を前記カラーセンサに取得させ、前記第１の領域のうち前記サンプルが含まれる領域の少なくとも一部を前記第２の領域が走査するように前記ステージと前記光学系との相対位置を変化させながら前記第２の像に基づいた複数の第２の部分画像信号を前記撮像部に出力させる制御部と、
前記スペクトル情報と前記第１の部分画像信号とに基づいて前記第２の部分画像信号を補正し、当該第２の部分画像信号を用いて前記サンプルを含む画像を生成する画像処理部と、
を備えることを特徴とするバーチャルスライド装置。
【請求項２】
前記撮像部は、前記第１の領域に含まれる、前記サンプルに関連する情報を示す記号を撮像し、
前記画像処理部は、前記撮像部が撮像した前記記号から前記サンプルに関連する情報を取得し、当該情報に基づいて前記第２の部分画像信号を補正する
ことを特徴とする請求項１に記載のバーチャルスライド装置。
【請求項３】
前記制御部は、前記第１の領域のうち、前記全体画像信号の値が所定の閾値よりも大きい領域を前記サンプルが含まれない領域と特定する
ことを特徴とする請求項１に記載のバーチャルスライド装置。
【請求項４】
前記制御部は、前記第１の領域のうち、前記全体画像信号の値が所定の閾値よりも小さい領域から所定の距離だけ離れた領域を前記サンプルが含まれない領域と特定する
ことを特徴とする請求項１に記載のバーチャルスライド装置。
【請求項１】
サンプルを設置するステージと、
前記サンプル全体を含む第１の領域の像を第１の平面に結像し、前記第１の領域に含まれる第２の領域の像を第２の平面に結像させ、前記第２の領域の少なくとも一部からの光を第３の平面に導く光学系と、
第１の平面に結像された第１の像および第２の平面に結像された第２の像を各々撮像して画像信号を出力する撮像部と、
前記第３の平面に導かれた光のスペクトル情報を取得するカラーセンサと、
前記第１の像に基づいた全体画像信号を前記撮像部に出力させ、前記全体画像信号に基づいて前記第１の領域のうちサンプルが含まれない領域の位置情報を取得し、当該位置情報に基づいて前記第２の領域と前記サンプルが含まれない領域とが重なるように前記ステージと前記光学系の相対位置を変化させ、前記第２の像に基づいた第１の部分画像信号を前記撮像部に出力させ、前記第３の平面に導かれた光に基づいたスペクトル情報を前記カラーセンサに取得させ、前記第１の領域のうち前記サンプルが含まれる領域の少なくとも一部を前記第２の領域が走査するように前記ステージと前記光学系との相対位置を変化させながら前記第２の像に基づいた複数の第２の部分画像信号を前記撮像部に出力させる制御部と、
前記スペクトル情報と前記第１の部分画像信号とに基づいて前記第２の部分画像信号を補正し、当該第２の部分画像信号を用いて前記サンプルを含む画像を生成する画像処理部と、
を備えることを特徴とするバーチャルスライド装置。
【請求項２】
前記撮像部は、前記第１の領域に含まれる、前記サンプルに関連する情報を示す記号を撮像し、
前記画像処理部は、前記撮像部が撮像した前記記号から前記サンプルに関連する情報を取得し、当該情報に基づいて前記第２の部分画像信号を補正する
ことを特徴とする請求項１に記載のバーチャルスライド装置。
【請求項３】
前記制御部は、前記第１の領域のうち、前記全体画像信号の値が所定の閾値よりも大きい領域を前記サンプルが含まれない領域と特定する
ことを特徴とする請求項１に記載のバーチャルスライド装置。
【請求項４】
前記制御部は、前記第１の領域のうち、前記全体画像信号の値が所定の閾値よりも小さい領域から所定の距離だけ離れた領域を前記サンプルが含まれない領域と特定する
ことを特徴とする請求項１に記載のバーチャルスライド装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図２】
【図３】
【図４】
【図５】
【公開番号】特開２０１３−１０９０６４（Ｐ２０１３−１０９０６４Ａ）
【公開日】平成２５年６月６日（２０１３．６．６）
【国際特許分類】
【出願番号】特願２０１１−２５２４６２（Ｐ２０１１−２５２４６２）
【出願日】平成２３年１１月１８日（２０１１．１１．１８）
【出願人】（００００００３７６）オリンパス株式会社 (11,466)
【Ｆターム（参考）】
【公開日】平成２５年６月６日（２０１３．６．６）
【国際特許分類】
【出願日】平成２３年１１月１８日（２０１１．１１．１８）
【出願人】（００００００３７６）オリンパス株式会社 (11,466)
【Ｆターム（参考）】
[ Back to top ]