時間遅延積分(TDI)は、デジタルイメージングよりも前から存在するイメージング技術ですが、今日の最先端のイメージングにおいても依然として大きな利点を提供します。TDIカメラが真価を発揮する状況は2つあり、どちらも被写体が動いている場合です。
1 – 撮像対象は、ウェブ検査(動いている紙、プラスチック、布のシートをスキャンして欠陥や損傷を検出するなど)、組立ライン、マイクロ流体工学、流体の流れなど、本質的に一定の速度で動いています。
2 – カメラを移動させて撮影できる静止画像対象。被写体またはカメラのいずれかを移動させることで、カメラが対象物を撮影できる。例としては、顕微鏡スライドのスキャン、材料検査、フラットパネル検査などがある。
もしこれらの状況のいずれかがあなたの画像処理に当てはまる場合、このウェブページは、従来の2次元「エリアスキャン」カメラからラインスキャンTDIカメラに切り替えることで、画像処理性能が向上するかどうかを検討するのに役立ちます。
エリアスキャンと移動ターゲットの問題点
● モーションブラー
流体の流れやウェブ検査など、撮影対象が必然的に動いている場合もあります。スライドスキャンや材料検査などの用途では、撮影対象を動かし続ける方が、画像ごとに動きを止めるよりもはるかに高速かつ効率的です。しかし、エリアスキャンカメラの場合、撮影対象がカメラに対して動いていると、問題が生じる可能性があります。
動いている乗り物の画像を歪ませるモーションブラー
照明が限られている状況や、高画質が求められる状況では、カメラの露光時間を長くしたい場合があります。しかし、被写体の動きによって、露光中に光が複数のカメラピクセルに分散され、「モーションブラー」が発生します。これは、露光時間を非常に短くすることで最小限に抑えることができます。つまり、被写体上の点がカメラピクセルを横切る時間よりも短くします。これが、un通常、その代償として、暗く、ノイズが多く、しばしば使い物にならない画像になってしまう。
●ステッチング
さらに、通常、エリアスキャンカメラで大型または連続的な被写体を撮影するには、複数の画像を取得し、それらを合成する必要があります。この合成処理では、隣接する画像間でピクセルが重なるため、効率が低下し、データストレージと処理要件が増加します。
●照明が不均一
さらに、照明が均一であれば、合成画像の境界部分で問題やアーティファクトが発生する可能性が高くなります。また、エリアスキャンカメラで十分な強度で広い範囲を照らすには、高出力で高価な直流光源が必要となる場合が多いのです。
マウス脳の複数画像取得における、画像合成時の照明ムラ。 画像はWatson et al. 2017より引用:http://dx.doi.org/10.1371/journal.pone.0180486
TDIカメラとは何ですか?また、どのような点で役立ちますか?
従来の2次元エリアスキャンカメラでは、画像取得にはピクセルリセット、露光、読み出しの3つの段階があります。露光中、被写体からの光子が検出され、光電子が生成されます。この光電子は、露光終了までカメラのピクセルに蓄積されます。その後、各ピクセルの値が読み出され、2次元画像が形成されます。最後に、ピクセルがリセットされ、すべての電荷が消去されて、次の露光が開始されます。
しかし、前述のように、被写体がカメラに対して動いている場合、露光中に被写体からの光が複数のピクセルに拡散し、モーションブラーが発生します。TDIカメラは、革新的な技術を用いてこの制限を克服しています。これは[アニメーション1]で示されています。
●TDIカメラの仕組み
TDIカメラは、エリアスキャンカメラとは根本的に異なる動作原理に基づいています。露光中に被写体がカメラ上を移動すると、取得される画像を構成する電荷も同期して移動します。露光中、TDIカメラは、被写体の動きに合わせて、カメラに沿ってピクセルの行ごとに取得した電荷を移動させることができます。被写体がカメラ上を移動すると、各行(「TDIステージ」と呼ばれる)で被写体を露光し、信号を蓄積する新たな機会が得られます。
取得された電荷の列がカメラの終端に到達すると、その値が読み出され、画像の1次元スライスとして保存されます。2次元画像は、カメラが読み取った各スライスを連続的につなぎ合わせることによって形成されます。結果として得られる画像の各ピクセル列は、撮像対象の同じ「スライス」を追跡して撮影するため、動きがあってもブレが生じません。
●256倍長時間露光
TDIカメラでは、画像の有効露光時間は、被写体上の点がピクセルの全行を通過するのにかかる時間の合計で決まります。一部のTDIカメラでは最大256段まで設定可能です。つまり、利用可能な露光時間は、エリアスキャンカメラで実現できる露光時間の256倍にもなります。
これにより、2つの改善点のいずれか、または両方のバランスが実現できます。まず、画像処理速度が大幅に向上します。エリアスキャンカメラと比較して、カメラのラインレートが十分速ければ、同じ量の信号をキャプチャしながら、被写体を最大256倍速く動かすことができます。
一方、より高い感度が必要な場合は、露光時間を長くすることで、より高品質な画像、より低い照明強度、あるいはその両方を実現できる可能性がある。
●ステッチングなしで大容量のデータスループットを実現
TDIカメラは連続する1次元スライスから2次元画像を生成するため、得られる画像は必要なだけ大きくすることができます。水平方向のピクセル数はカメラの幅(例えば9072ピクセル)によって決まりますが、垂直方向のサイズは無制限で、カメラの稼働時間によって決まります。最大510kHzのラインレートにより、膨大なデータスループットを実現できます。
これに加えて、TDIカメラは非常に広い視野角を実現できます。例えば、5µmピクセルの9072ピクセルカメラは、高解像度で水平視野角45mmを提供します。同じ撮像幅を5µmピクセルのエリアスキャンカメラで実現するには、最大3台の4Kカメラを横に並べる必要があります。
●ラインスキャンカメラからの改良点
TDIカメラは、エリアスキャンカメラに比べて優れているだけでなく、他にも利点があります。ピクセルの1列だけをキャプチャするラインスキャンカメラも、エリアスキャンカメラと同様に、照明強度や露光時間の短さといった多くの問題を抱えています。
TDIカメラと同様に、ラインスキャンカメラはより均一な照明とシンプルなセットアップを実現し、画像合成も不要ですが、高品質な画像を得るには、非常に強い照明や被写体の低速な動きが必要となる場合が多くあります。TDIカメラは長時間露光と高速な被写体移動を可能にするため、低照度で低コストの照明を使用しながら、画像撮影効率を向上させることができます。例えば、生産ラインでは、高コストで消費電力も大きいDC電源を必要とするハロゲンライトから、LED照明へと移行できる可能性があります。
TDIカメラはどのように動作するのですか?
カメラセンサー上でTDIイメージングを実現する方法には、一般的に3つの規格が存在する。
● CCD TDICCDカメラは、デジタルカメラの中で最も古いタイプのカメラです。電子回路設計のため、CCD上でTDI動作を実現することは比較的容易であり、多くのカメラセンサーは本来的にこの動作に対応しています。そのため、TDI対応CCDは数十年にわたり使用されてきました。
しかし、CCD技術には限界がある。CCD TDIカメラで一般的に利用可能な最小ピクセルサイズは約12µm×12µmであり、ピクセル数が少ないため、カメラの微細なディテールを解像する能力が制限される。さらに、取得速度は他の技術よりも遅く、低照度イメージングにおける主要な制限要因である読み出しノイズは高い。消費電力も高く、これは一部のアプリケーションでは大きな問題となる。こうしたことから、CMOSアーキテクチャに基づいたTDIカメラの開発が望まれた。
●初期のCMOS TDI:電圧ドメインとデジタル加算
CMOSカメラは、CCDカメラのノイズや速度に関する多くの制約を克服し、消費電力も少なく、画素サイズも小さくなっています。しかし、画素設計上の理由から、CMOSカメラでTDI動作を実現するのははるかに困難でした。CCDは光電子を画素間で物理的に移動させてセンサーを制御するのに対し、CMOSカメラは読み出し前に各画素で光電子の信号を電圧に変換します。
CMOSセンサーにおけるTDIの動作は2001年から研究されてきましたが、露光が1行から次の行へと進むにつれて信号の「蓄積」をどのように処理するかという課題は大きなものでした。現在でも市販のカメラで使用されているCMOS TDIの初期の2つの方法は、電圧ドメイン蓄積とデジタル加算TDI CMOSです。電圧ドメイン蓄積カメラでは、撮像対象が通過するにつれて信号の各行が取得され、取得された電圧がその画像部分の合計取得値に電子的に加算されます。このように電圧を蓄積すると、追加されるTDIステージごとにノイズが増加するため、追加ステージの利点が制限されます。直線性の問題も、これらのカメラを精密な用途で使用する際の課題となっています。
2つ目の方法は、デジタル加算TDIです。この方法では、CMOSカメラは、被写体が1行のピクセルを横切るのにかかる時間に合わせた非常に短い露光時間で、実質的にエリアスキャンモードで動作します。しかし、連続する各フレームの行は、TDI効果が得られるようにデジタル的に加算されます。結果として得られる画像の各行のピクセルについてカメラ全体を読み出す必要があるため、このデジタル加算によって各行の読み出しノイズも加算され、取得速度が制限されます。
●現代の標準規格:電荷ドメインTDI CMOS、またはCCD-on-CMOS TDI
上記のCMOS TDIの限界は、電荷ドメイン蓄積TDI CMOS(CCD-on-CMOS TDIとも呼ばれる)の導入により、近年克服されました。これらのセンサーの動作は[アニメーション1]で示されています。名前が示すように、これらのセンサーは、電荷が1つのピクセルから次のピクセルへとCCDのように移動し、個々の電荷レベルで光電子を追加することによって各TDIステージで信号を蓄積します。これは実質的にノイズフリーです。しかし、CMOS読み出しアーキテクチャを使用することでCCD TDIの限界は克服され、CMOSカメラに共通する高速性、低ノイズ、低消費電力が実現されます。
TDIの仕様:重要なポイントとは?
●テクノロジー:最も重要な要素は、前述のように、どのようなセンサー技術が使用されているかです。電荷ドメインCMOS TDIが最高の性能を発揮します。
●TDIステージ:これは、信号を蓄積できるセンサーの行数です。カメラのTDIステージ数が多いほど、実効露光時間を長くすることができます。あるいは、カメラのラインレートが十分であれば、被写体の高速移動にも対応できます。
●回線料金:カメラが1秒間に読み取れる行数。これは、カメラが追従できる最大移動速度を決定します。
●量子効率これは、入射光子が検出されて光電子を生成する確率によって表される、カメラの異なる波長の光に対する感度を示します。量子効率が高いほど、同じ信号レベルを維持しながら、より低い照度強度、またはより高速な動作を実現できます。
さらに、カメラによって良好な感度が得られる波長範囲が異なり、中には波長約200nmの紫外線(UV)領域まで感度を提供するカメラもある。
●ノイズを読む:読み出しノイズは、カメラの感度を左右するもう一つの重要な要素であり、カメラのノイズフロアを超えて検出できる最小信号量を決定します。読み出しノイズが高いと、暗い部分を検出できなくなり、ダイナミックレンジが著しく低下するため、より明るい照明を使用するか、より長い露光時間とより遅い動きの速度を使用する必要があります。
TDIの仕様:重要なポイントとは?
現在、TDIカメラはウェブ検査、電子機器および製造検査、その他のマシンビジョン用途に使用されています。これらに加えて、蛍光イメージングやスライドスキャンといった、低照度環境下での撮影など、高度な技術を要する用途にも使用されています。
しかし、高速・低ノイズ・高感度のTDI CMOSカメラの登場により、従来はエリアスキャンカメラしか使用されていなかった新たなアプリケーションにおいて、速度と効率の向上という大きな可能性が開かれました。記事の冒頭で述べたように、TDIカメラは、常に動いている被写体を撮影する場合、あるいは静止した被写体をカメラでスキャンする場合のいずれにおいても、高速かつ高画質を実現する最適な選択肢となる可能性があります。
例えば、顕微鏡アプリケーションでは、5 µm ピクセルの 9K 画素、256 段の TDI カメラと、5 µm ピクセルの 12MP カメラエリアスキャンカメラの理論的な取得速度を比較することができます。ステージを移動させて 20 倍の倍率で 10 x 10 mm の領域を取得する場合について調べてみましょう。
1. エリアスキャンカメラに20倍対物レンズを使用すると、1.02 x 0.77 mmの撮像視野が得られます。
2. TDIカメラでは、10倍対物レンズに2倍の追加倍率を加えることで、顕微鏡の視野の制限を克服し、2.3mmの水平撮像視野を実現できます。
3. 画像間のピクセル重なりを2%とし、ステージを所定の位置に移動するのに0.5秒、露光時間を10msと仮定すると、エリアスキャンカメラの所要時間を計算できます。同様に、ステージをY方向に常に動かし、1ラインあたりの露光時間を同じにした場合のTDIカメラの所要時間も計算できます。
4. この場合、エリアスキャンカメラでは140枚の画像を取得する必要があり、ステージの移動に63秒かかります。一方、TDIカメラでは5枚の長時間の画像を取得するだけで済み、ステージを次の列に移動するのにかかる時間はわずか2秒です。
5. 10 x 10 mmの領域を取得するのにかかる合計時間はエリアスキャンカメラの場合は64.4秒、そしてちょうどTDIカメラの場合は9.9秒。
TDIカメラがお客様の用途に適合し、ニーズを満たすかどうかをご確認されたい場合は、今すぐお問い合わせください。
2022/07/13