科学画像処理におけるシャッター技術

多くの場所でのシャッター操作CMOSカメラ一部の画像処理ワークフローでは、実際的な問題が発生する可能性があります。これには、動きによるアーチファクト、タイミングや光量の非効率的な利用、フレーム間でハードウェアや照明状態が変化した際の画像の重なりなどが含まれます。このような問題は、タイミングの分離が重要なマルチチャンネル取得において、より顕著になることがよくあります。

これらの問題を軽減するために、ローリングシャッターカメラの中には、光源をハードウェアトリガーで制御できる場合、擬似的なグローバルシャッター方式で使用できるものがあります。これにより、露光サイクルのより時間的に一貫性のある部分で有用な画像データを収集することができ、適切なワークフローにおいては、カメラがグローバルシャッターシステムのように動作するのに役立ちます。

この記事では、擬似グローバルシャッターとは何か、その仕組み、グローバルリセット動作との関連性、そして実際の科学画像処理システムにおいてどのような場合に役立つのかを説明します。

擬似グローバルシャッターとは何ですか？

擬似グローバルシャッターとは、ハードウェアトリガーによって照明を制御することで、ローリングシャッターカメラをグローバルシャッターシステムのように動作させる方法です。センサー自体はローリングシャッター方式で動作しますが、有効な光は露光サイクルの特定の制御された部分に限定され、その部分でフレーム全体をより時間的に安定した状態で撮影することができます。

つまり、擬似グローバルシャッターは独立したセンサータイプではなく、真のグローバルシャッターの別名でもありません。むしろ、システムレベルの画像取得戦略です。カメラ、トリガータイミング、照明光源が連携して、フレームサイクルの最も適切な時間帯にのみ、意味のある光がセンサーに到達するようにします。

この手法は、タイミングが重要なワークフローにおいて特に有効です。通常のローリングシャッター方式では、アーティファクトが発生したり、効率が低下したり、チャンネル分離が不鮮明になったりする可能性があります。擬似グローバルシャッターは、センサーアーキテクチャ自体を変更するのではなく、意味のある露光が発生したときに動作を変更します。

擬似グローバルシャッターはどのように機能するのか？

擬似グローバルシャッターも、ローリングシャッター方式から開始されます。新しいフレームが始まると、露光開始位置はセンサー上を1行ずつ移動し、すべての行が露光されるまで続きます。つまり、カメラが突然真のグローバルシャッター装置になるわけではありません。重要な違いは、擬似グローバルシャッター方式では、最初のローリングフェーズ中に有効な光がセンサーに到達しないようにシステムが設計されている点です。言い換えれば、露光は電子的に開始されているかもしれませんが、照明がオフになっているため、意味のある画像信号はまだ収集されていません。

すべての行が露光されると、センサーはサイクルの中で最も重要な部分、つまり共有露光ウィンドウに到達します。この時点で、センサー全体で行間のタイミング遅延なしに、フレーム全体が光を受け取る準備が整います。擬似グローバルイメージングが実際に行われるのはまさにこの部分です。光源がこの共有ウィンドウの間だけ点灯すると、センサーは依然としてローリングシャッター方式で動作しているにもかかわらず、結果として得られる画像は、全体的に露光されたフレームと非常によく似た挙動を示します。そのため、擬似グローバルシャッターは、異なるセンサーアーキテクチャというよりも、タイミング戦略として理解するのが最適です。

図1：擬似グローバルシャッター動作のタイミング。

トリガー制御式の光源を使用すると、有効な照明はすべての行が露光されている共有露光ウィンドウ内に限定され、センサーの一部のみがアクティブになる期間を回避できます。

露光終了がフレーム内を流れ始め、読み出しがセンサー上で進行する前に、光は再び消灯されます。そのため、この2番目の非グローバルフェーズでも有用な情報は収集されません。実際には、これは照明パルスが有効な露光時間を決定することを意味します。なぜなら、照明パルスによって、意味のある光が実際にカメラに到達するフレームサイクルの部分が決まるからです。公称露光時間はこれよりも長くなる可能性がありますが、有用な信号が得られるのは照明された部分のみです。このアプローチは、トリガー蛍光イメージングや同期顕微鏡など、タイミングの一貫性がセンサーをより長く露光しておくことよりも重要な、制御された照明ワークフローにおいて特に有効です。

擬似グローバルシャッターは、グローバルリセットモードとどのように関連していますか？

グローバルリセットは露光開始のタイミングを合わせるのに役立つ一方、擬似グローバルシャッターは、照明の制御方法にも依存する、より広範なタイミング戦略を指します。

グローバルリセットが変えることは何か

グローバルリセットモードを使用すると、フレーム全体で露光開始がより均一になります。これは、トリガー光源や同期ハードウェアなどの外部デバイスとのタイミング関係をより正確に制御できるため重要です。実際のイメージングシステムでは、特に照明と撮影を密接に連携させる必要がある場合に、トリガー主導の再現性の高いワークフローを構築しやすくなります。

グローバルリセットが真のグローバルシャッターと同じではない理由

グローバルリセットは、ローリングシャッターセンサーを真のグローバルシャッターセンサーに変えるものではありません。露光開始時にすべてのピクセルを最初から最後まで同じように露光することとは異なります。カメラはグローバルリセットをサポートしていても、フレームサイクルの残りの部分ではローリングシャッター動作に依存している場合があります。そのため、グローバルリセットは真のグローバルシャッターの別名ではなく、タイミングモードとして扱うべきです。

主なタイミング戦略を並べて比較すると、その違いがより分かりやすくなる。

モード／戦略	露出開始時の行動	有用な光を最も効率的に収集できるタイミング	フレーム全体にわたる時間的均一性	主な制限事項
ローリングシャッター	行ごとに開始します	回転露出全体を通して	より低い	フレームの異なる部分は、わずかに異なる時間に対応している。
グローバルリセット	一緒に、またはより均一に	センサーのタイミングとワークフローの設定にも依存する	露出開始時の改善は見られるが、全体的な改善には至っていない。	完全な露出を真にグローバルなものにするわけではない
擬似グローバルシャッター	ローリングシャッターのタイミングに基づいています	ゲート光によって定義される共有露光ウィンドウの間のみ	照明を厳密に制御すれば、なお良い。	トリガー可能な照明とタイミングの調整に依存します
真のグローバルシャッター	すべてのピクセルを同時に開始して露出します	全世界における暴露期間全体にわたって	最高	真のグローバルシャッターセンサーアーキテクチャが必要

照明制御が依然として重要な理由

グローバルリセット機能があっても、擬似グローバルシャッターは自動的に動作するわけではありません。フレームサイクルの意図した部分のみで有用な信号が収集されるように、照明を制御する必要があります。グローバルリセットはこのタイミング制御戦略をサポートすることはできますが、それに取って代わることはできません。

擬似グローバルシャッターはどのような場合に使用できますか？

擬似グローバルシャッターは、イメージングシステムがカメラだけでなく照明のタイミングも制御できる場合に最も有効です。実際には、これは、照明を高精度でオン/オフでき、照明の間隔が比較的暗い状態が維持されるような環境で最も効果を発揮することを意味します。この制御されたタイミングによって、カメラは不要な信号を収集することなくローリングフェーズを通過できるため、有用な画像データが擬似グローバルウィンドウに集中します。

トリガー式照明システム

擬似グローバルシャッターの最も自然な使用例は、トリガーによる照明ワークフローです。カメラ制御の擬似グローバルモードを使用するとこれが容易になりますが、唯一の選択肢ではありません。タイミングが十分に分かっている場合は、外部トリガーを使用して、センサーがフレームサイクルの適切な部分に到達するまで照明を遅延させることもできます。いずれの場合も、主な要件は高速な光源だけでなく、繰り返しトリガーでき、パルス間で実質的に暗く保つことができる光源です。これが、擬似グローバルシャッターが次のようなアプリケーションで特に重要である理由です。ライトシート顕微鏡, 電圧イメージング, 光遺伝学ワークフローまた、照明のタイミングを慎重に制御する必要がある特定の検査ワークフローもあります。

マルチチャネルおよび同期取得ワークフロー

擬似グローバルシャッターは、ワークフローがカメラ、照明、その他のハードウェアの状態間の緊密な連携に依存する場合にも有効です。マルチチャンネル同期取得では、このような連携によってタイミングの再現性が向上し、各フレームがどのような光学状態を表しているかについての曖昧さが軽減されます。これが、真のグローバルシャッターセンサーが厳密には必要ない場合でも、高度な科学画像処理ワークフローにおいて擬似グローバルタイミングがしばしば議論される理由の一つです。

ローリングアーティファクトが重要な高速イメージングだが、完全なグローバルタイミングは必須ではない

擬似グローバルシャッターは、通常のローリングシャッター動作では問題が生じるものの、真のグローバルシャッターが厳密には必要ない高速イメージングワークフローにおいて、実用的な中間手段となり得る。重要なのは、アプリケーションが単に「高速」であるかどうかではなく、擬似グローバルウィンドウを有効活用できるほどタイミングを適切に管理できるかどうかである。

擬似グローバルシャッターでは不十分な場合

擬似グローバルシャッターは、照明を正確に制御できない場合、アプリケーションがより厳密なフルフレームの時間的一貫性を要求する場合、またはシステムタイミングが複雑になりすぎて確実に管理できない場合に、魅力が低下します。その時点で、回避策は最もシンプルで堅牢な解決策ではなくなる可能性があります。

例：マルチチャンネルイメージング用擬似グローバルシャッター

マルチチャンネルイメージングは、擬似グローバルシャッターが実際に重要である理由を示す良い例です。顕微鏡では、1つのデータセット内で、異なる波長チャンネル、偏光状態、z軸位置、またはx/yステージ位置を交互に切り替えることが一般的です。これは単純に聞こえますが、通常のローリングシャッターカメラでは、取得シーケンスが示唆するほどタイミングが正確ではなくなる可能性があります。

ローリングシャッターがチャンネル分離を複雑にする理由

主な問題点は、フレーム内の異なる部分が必ずしも同じ瞬間を表しているとは限らないことです。ローリングシャッターカメラでは、あるフレームの終わりと次のフレームの始まりが重なることもあります。波長切り替えなどのハードウェア変更がフレーム間で発生すると、システムがすでに次のチャンネル状態に移行している最中に、あるチャンネル用に意図された画像の一部がキャプチャされてしまう可能性があります。例えば、赤と緑の交互切り替えワークフローでは、赤フレーム用に意図された信号が緑フレームのタイミングに漏れ込むことがあり、その逆もまた然りです。

図2：マルチチャンネルイメージングにおける擬似グローバルシャッターモードの使用。

ローリングシャッターカメラを用いた赤/緑蛍光交互撮像では、十分なタイミング制御なしにハードウェアの変更が発生すると、フレームの重なりによってチャンネル間のクロストークが発生する可能性があります。左図：擬似グローバルシャッターがない場合、チャンネルの状態が重なり合っている間に赤と緑のフレームの一部がキャプチャされます。右図：擬似グローバルシャッターを使用すると、有効な照明が重なり合わない露光ウィンドウに制限されるため、チャンネル分離が改善されます。

擬似グローバルタイミングがチャネルをよりクリーンに保つのに役立つ方法

擬似グローバルタイミングは、有効な光の収集を、すべての行が同時に露光される共有露光ウィンドウに限定することで、この問題を軽減します。光源がそのウィンドウ内でのみトリガーされる場合、各フレームは意図されたチャネル状態により明確に結び付けられます。他のハードウェアイベントも同じタイミングロジックに基づいて調整されている場合、チャネル遷移は有効な露光中ではなく、カメラがローリングフェーズにある間に発生する可能性があります。これにより、クロストークのすべての原因が除去されるわけではありませんが、時間的な分離が改善され、チャネルタイミングの予測可能性が高まります。

実際には、このようなワークフローでは、タイミング機能を備えたローリングシャッターsCMOSカメラが特に役立ちます。例えば、次のようなカメラはツーセンのDhyana 400BSI V3 sCMOSカメラローリングリセット／グローバルリセット動作とハードウェアトリガーサポートを組み合わせることで、制御された照明と正確なタイミング調整を必要とするマルチチャンネル顕微鏡ワークフローへの統合が容易になります。

実際にトレードオフがどのように現れるか

トレードオフとして、サイクル時間の一部が有効な光収集に使われなくなります。単純なフリーランニングローリングシャッター方式と比較すると、擬似グローバルタイミングは、慎重に設計しないと、使用可能な露光効率を低下させる可能性があります。しかし、多くのマルチチャンネル実験では、よりクリーンなチャンネルタイミングと優れた光効率の方が、フレームサイクルのあらゆる部分をスループットのために最大限に活用することよりも重要となる場合があるため、このトレードオフは許容範囲内です。

結論

擬似グローバルシャッターは真のグローバルシャッターの代替手段ではありませんが、適切なイメージングシステムにおいては非常に実用的なタイミング制御手法となり得ます。照明を正確に制御できる場合、ローリングシャッターカメラにおいて、よりクリーンな時間分離、チャンネルの一貫性の向上、外部ハードウェアとのより効率的な同期を実現するのに役立ちます。

タイミングが重要な科学画像処理ワークフローを構築している場合、トリガー対応カメラ設計と同期画像処理アプリケーションに関するTucsenの経験は、擬似グローバルシャッターがシステムに適しているかどうかを評価するのに役立ちます。また、Tucsenの科学カメラさまざまなトリガー機能とタイミング機能が、さまざまな顕微鏡観察および画像処理ワークフローにどのように適合するかを確認する。