ルンド大学:ZENITHカメラを用いた4Dエミッション断層撮影

ルンド大学の研究者らが、新興のZENITHカメラを用いて4Dエミッション断層撮影システムを構築

スウェーデンのルンド大学では、セバスチャン・ニルソン博士とデビッド・サンネッド博士(現在はサーブ社に所属)が、プラズマおよび火炎応用における高速体積変化の測定と可視化に取り組んでいる。

彼らの研究は、発光トモグラフィーに焦点を当てています。同期されたカメラが、複数の角度から同時にある体積から放出される光を記録します。その後、独自開発のトモグラフィーアルゴリズムが、時間経過に伴う3D体積を再構築し、プラズマと炎の両方の診断のためにフレームごとに検査できる4Dシーケンスを生成します。

左:セバスチャン・ニルソン博士(ルンド大学燃焼物理学部門、SpectraPlasma Consulting AB創設者)。右:デビッド・サンネッド博士(ルンド大学燃焼物理学部門、現在サーブ社システムエンジニア)。

「Emergent社のカメラは、コスト効率が高く、高性能で、持ち運びにも便利です。eSDKのドキュメントも充実しており、アプリケーションエンジニアリングのサポートも非常に素晴らしかったです。全体として、このカメラとプラットフォームを選んだことに大変満足しています。」
— セバスチャン・ニルソン、ルンド大学研究員

静止画から4Dエミッションイメージングまで

ニルソンとサンネッドは、それぞれ補完的な経歴を持ってこのプロジェクトに参加した。サンネッドの博士課程の研究は、燃焼と火炎放出のための3D断層撮影技術に焦点を当てており、一方ニルソンはプラズマ研究、レーザー診断、熱処理の経験を有していた。

彼らの共同研究は、共通の課題から始まった。平面レーザー診断では、反応流中の物質の種類や特性を特定できるが、それらの2次元断面を移動する3次元の火炎面やプラズマアークの中に正確に配置するのは困難だった。

以前の研究では、研究チームは毎秒50フレームで動作するカメラを使用していた。これにより概念は実証されたものの、フレームレートが低すぎて、炎やプラズマの中で発生する高速な現象を追跡することはできなかった。

ニルソンが我々の議論の中で説明したように、欠けていたギャップは、「最終状態を調査したり観察したりすることはできるが、プラズマがどのようにしてその状態に達したのかを理解できないこと」だった。

高速エミッション断層撮影においては、この制約は極めて重要である。医療用CTスキャンにおける静止物体とは異なり、炎やプラズマは常に変動している。そのため、対象領域をある角度から順にスキャンすることはできず、すべてのカメラ映像を全く同じ瞬間に、かつ現象の推移を追跡できる十分なフレームレートで撮影する必要がある。

放出断層撮影の仕組み

放出断層撮影は、従来のX線画像撮影とは逆の原理で動作します。外部放射線を物体に照射して吸収を測定するのではなく、カメラは炎の化学発光やプラズマ発光など、プロセス自体から放出される光を捉えます。各カメラは視線方向からの2次元投影を記録し、独自のアルゴリズムによって、これらの同期された画像から元の3次元放出体積が再構築されます。

この技術の科学的な利点は、表面の外観に限定されない点にある。再構成によって視野全体を把握できるため、研究者は放射体の外部だけでなく、内部構造も研究することができる。

放出断層撮影の説明図

放出断層撮影法について解説

図2|4D光放出断層撮影の原理:

(A)自己発光型の体積光源(乱流炎化学発光または非熱プラズマ)は全方向に放射する。同期されたカメラアレイは、外部照明やビーム減衰なしに視線方向の線積分を捉える。

(B)3D空間を規則的なボクセルグリッドf(x,y,z)に離散化する。疎な順方向投影重み行列W_ijは、検出器ピクセルp_iに対する各ボクセルの幾何学的寄与をモデル化する。空間平滑化制約によって正則化された反復クリロフ部分空間ソルバー(LSQR)は、システムを反転して内部3D放射密度を再構築する。

100ギガビットイーサネットカメラによる4次元放射線断層撮影の実現

高速4Dエミッション断層撮影法への移行のため、ルンド大学の研究チームはEmergentを使用して6台のカメラアレイを構築した。 ゼニス HZ-2000-G モノクロカメラカメラは実験対象を取り囲むように配置され、それぞれ異なる角度から撮影します。コンパクトな形状のため、スペースや光学アクセスが限られている様々な実験キャンペーンやテスト装置間で容易に配置換えが可能です。その後、独自開発のソフトウェアが同期された映像ストリームを処理し、回転、一時停止、詳細な分析が可能な立体画像を作成します。

6台のカメラを備えた100ギガビットイーサネット放出断層撮影装置

ルンド大学の放射線断層撮影装置

図3|6台のカメラを用いた100ギガビットイーサネット(100GigE)放射断層撮影装置の構成。

Emergent Vision Technologies社製のZENITH HZ-2000-Gモノクロカメラ6台を、振動を遮断した光学テーブル上に設置し、中央のバーナー炎の周囲に光学フィルターを配置した。幾何学的キャリブレーションには、高精度な多面体ドットターゲットを使用する。6台すべてのカメラヘッド間で、100ギガビットイーサネット(100GigE)QSFP28光ファイバーリンクを介して高精度時刻同期プロトコル(PTP / IEEE 1588)により、サブマイクロ秒単位の露光同期を維持する。

HZ-2000-GのGpixel GSPRINT4502 CMOSセンサーは、8ビットモードで最大3,463フレーム/秒で2048 x 1216の解像度を実現します。Lundのセットアップは通常、2×2ビニング(1024 x 608)で2,000 fpsで動作し、関心領域(ROI)ウィンドウを使用して、急速な火炎不安定性やプラズマ過渡現象を解決すると、最大10,000 fpsに達します。カメラは100GigE QSFP28インターフェースを介してストリーミングします。David Sanned氏は、数学的収束に必要な最低限のカメラ数は4台だが、6台で十分な再構成品質が得られると指摘しています。8~10台までカメラを追加すると空間忠実度は向上しますが、効果は逓減します。

高精度時刻同期プロトコル(PTP)を用いて、6台のカメラ間での録画を同期させた。すべてのカメラはイーサネット経由で同じクロックを共有している。断層画像再構成を行う際、複数の視点から同時に現象を観察することができる。

アプリケーションの性能要件を満たすハードウェアを確保するため、ルンド大学のチームとEmergent社は協議的なアプローチを採用しました。これにより、費用対効果の高い選択を行うことができました。

AMD Threadripper CPU、大容量メモリ、および3枚のBroadcom 100GigEネットワークカードで構成されたワークステーションが構築された。Intel Arc Pro GPUは、計算負荷の高い断層画像再構成処理に対応できる十分なVRAM容量を備えていることから選定された。この構成は、チームの価格性能比に関する要求を満たすことができた。

ソフトウェア面では、ニルソンとサンネッドはEmergent社のソフトウェアを使用して独自の取得インターフェースと処理パイプラインを構築した。 eSDKプロその柔軟性は不可欠だった。彼らは、閉鎖的な市販パッケージではなく、独自の科学的ワークフローに統合できるプラットフォームを必要としていたのだ。

(a) Emergent eSDK Proを使用して開発されたカスタムTomoViewマルチカメラ同期取得および再生インターフェース。パケット損失ゼロ、サブマイクロ秒のPTP同期ロックで、6台のZENITHカメラすべてから同時に2,000fpsのライブストリームを表示します。(b) AMD Ryzen Threadripper CPU、256GBのシステムRAM、逆問題ソルバー計算を高速化するIntel Arc Pro GPU、およびゼロコピーRDMA/RoCEv2ストリームをシステムRAMに直接受信する3つのBroadcomデュアルポート100GigE QSFP28 NICを備えたワークステーションアーキテクチャ。

高スループット取得および再構成パイプライン

図4|高スループット取得および再構成パイプライン。

(A)Emergent eSDK Proを使用して開発されたカスタムTomoViewマルチカメラ同期取得および再生インターフェース。パケット損失ゼロ、サブマイクロ秒のPTP同期ロックで、6台のZENITHカメラすべてから同時に2,000fpsのライブストリームを表示します。

(B)AMD Ryzen Threadripper CPU、256 GB システム RAM、逆問題ソルバー計算を高速化する Intel Arc Pro GPU、およびゼロコピー RDMA / RoCEv2 ストリームをシステム RAM に直接受信する 3 つの Broadcom デュアルポート 100GigE QSFP28 NIC を特徴とするワークステーション アーキテクチャ。

セバスチャンとデビッドは、eSDK Proを使用して画像データの取得、処理、転送、保存を行った。セバスチャンは、Emergentのソフトウェア開発キットを「ドキュメントが充実していて効率的」と評し、ハードウェア選定におけるEmergentのサポートが非常に役立ったと述べた。

Broadcom NICを選択したことで、RDMA/RoCEv2を導入することも可能になりました。これにより、画像データをアプリケーションメモリに直接配置できるため、CPUのボトルネックやフレーム落ちを起こすことなく、6台の100GigEカメラからデータを取得する上で非常に重要でした。また、Broadcom NICは、より高価な代替品と比較してコスト効率にも優れています。

4次元における動的現象の可視化

(a) 周囲の 6 台の ZENITH カメラで 2,000 fps (解像度 1024 × 608) で同時に撮影された同期 2D 投影フレーム。視線方向の炎の化学発光を示しています。(b) 空間カービング付き反復 LSQR を使用して同じ時刻に再構築された対応する 3D 断層撮影ボリューム。OpenVDB ボクセル グリッドとしてエクスポートされ、Blender でボリュームレンダリングされて内部反応ゾーンのトポロジーが明らかになります。

図5|多角度投影と再構成された3D放射密度。

(A)周囲の2,000台のZENITHカメラで同時に撮影された、視線方向の炎の化学発光を示す同期2D投影フレーム(解像度1024×608)。

(B)空間カービングを用いた反復LSQRを使用して同一時刻に再構成された対応する3D断層撮影ボリュームをOpenVDBボクセルグリッドとしてエクスポートし、Blenderでボリュームレンダリングして内部反応ゾーンのトポロジーを明らかにします。

動画1|乱流火炎面の4D体積可視化

高解像度ボリュームレンダリング(OpenVDB / Blender)により、2,000 fpsで6台のカメラからなるZENITHアレイから再構築された、炎の化学発光の完全な3D空間回転と時間的変化が示されています。

動画2|滑走アークプラズマ放電の4D断層撮影再構成

過渡的な非熱プラズマフィラメントの動き、伸長、および再構築を、最大10,000fpsで記録した3D体積追跡。

動画3|滑走アーク放電の高速直接光学記録

収束する電極間における大気プラズマフィラメントの周期的な再点弧および滑走挙動を、高速カメラで直接物理的に記録した。

2Dカメラ画像から3Dボリュームを再構築するために、研究者らはJuliaで独自の断層撮影アルゴリズムを開発した。このアルゴリズムは、カメラキャリブレーションと空間カービングを用いて発光領域の物理的境界を決定し、その後、逆問題を反復的に解いてボリューム全体に発光値をマッピングする。再構築されたボクセル配列はOpenVDB形式でエクスポートされ、Blenderでレンダリングされる。レンダリングには1フレームあたり約1分かかる。最大10,000フレーム/秒のキャプチャ速度で、得られた4D再構築画像は、マイクロ秒スケールでの過渡的な炎とプラズマのダイナミクスを捉える。

ニルソンとサンネッドにとって、その目標は自分たちの研究室にとどまらない。彼らは、従来の超高速カメラ装置を購入する予算がない研究者にとって、多角度高速体積イメージングのハードルを下げることを目指している。

ルンド大学の研究チームは、最新の100ギガビットイーサネット対応マシンビジョンカメラとカスタム再構成ソフトウェアを組み合わせることで、複雑な産業システムや物理システム向けの4Dエミッション断層撮影への手軽な道筋を構築した。

新たな視点から産業プロセスを理解する

マルチモーダル診断統合。6台のカメラを備えた高速発光トモグラフィー装置を、平面レーザー誘起蛍光(PLIF)および分光光学系と光学レールシステム上に組み合わせることで、3D構造追跡と局所的な種/温度測定を同時に可能にする。

図6|マルチモーダル診断の統合

6台のカメラを備えた高速発光トモグラフィー装置を、平面レーザー誘起蛍光(PLIF)および分光光学系と組み合わせ、光レールシステム上に配置することで、3D構造追跡と局所的な種/温度測定を同時に行うことが可能となる。

この装置を用いることで、研究者は急速に変化するシステムをより明確に把握できる。燃料混合比、ガス組成、電力、パルス周波数などのパラメータを調整することで、体積放出構造が時間とともにどのように変化するかを追跡できる。これは、燃焼、プラズマ熱分解、噴霧ダイナミクス、金属粉末製造、熱コーティングなど、幅広い分野で有用である。

4D発光トモグラフィーとレーザー診断および分光法を組み合わせることで、さらに新たな情報層が得られます。平面レーザーと分光計は、局所的な温度、化学種、ラジカルの測定に優れていますが、広範囲の3Dコンテキストが不足しています。トモグラフィーは、炎やアークの完全な3D形状と動きをリアルタイムで追跡することで、この不足部分を補います。これらの測定値を組み合わせることで、研究者は化学反応速度と局所的な温度を周囲の体積的な動きに直接結びつけることができます。

さらに読むべき記事

[1] D. Sanned、S. Nilsson、A. Roth、E. Berrocal、A. Ehn、M. Richter、「滑走アークプラズマの3D断層撮影再構成」 アプライドフィジックスレターズ、vol. 123、いいえ。 7、p. 071104 年 2023 日。
DOI: 10.1063/5.0161361 | AIP出版記事
[2] S. Nilsson、D. Sanned、A. Roth、J. Sun、E. Berrocal、M. Richter、A. Ehn、「3Dトモグラフィーとシングルショット蛍光寿命イメージングを使用したグライディングアーク放電の包括的解析」 通信工学 (ネイチャー・ポートフォリオ)、第3巻、第1号、103ページ、2024年。
DOI: 10.1038 / s44172-024-00250-z | Natureのオープンアクセス記事