arXiv reaDer
フェデレーテッド リソースを介したリアルタイム X 線タイコグラフィー データ分析のための AI 支援自動ワークフロー
AI-assisted Automated Workflow for Real-time X-ray Ptychography Data Analysis via Federated Resources
大規模なリモート コンピューティング リソースと組み込み GPU プラットフォームをエッジで使用して、X 線タイコグラフィー用に収集されたデータの AI/ML 高速化リアルタイム分析を可能にする、エンドツーエンドの自動化されたワークフローを紹介します。タイコグラフィーは、隣接する重複するスキャン位置からの多数の回折パターンを同時に数値的に反転することにより、サンプルを画像化するために使用されているレンズレスの方法です。この取得方法は、X 線と電子を使用したナノスケールのイメージングを可能にしますが、これには多くの場合、非常に大規模な実験データセットとそれに見合った長いターンアラウンド タイムが必要であり、リアルタイムの実験操作や低遅延モニタリングなどの実験機能が制限される可能性があります。この作業では、タイコグラフィ データ分析タスクを自動化できるソフトウェア システムを紹介します。従来の反復法と比較して 2 桁のスピードアップを示す位相回復問題を解決するための ML ベースのアプローチである PtychoNN の修正バージョンを使用して、データ分析パイプラインを高速化します。さらに、当社のシステムはさまざまなデータ分析タスクを調整してオーバーラップさせ、ワークフローのさまざまな段階間の同期オーバーヘッドを最小限に抑えます。 Advanced Photon Source の 26ID ビームラインと Argonne Leadership Computing Resources の ThetaGPU クラスターからの実世界の実験ワークロードを使用して、ワークフロー システムを評価します。
We present an end-to-end automated workflow that uses large-scale remote compute resources and an embedded GPU platform at the edge to enable AI/ML-accelerated real-time analysis of data collected for x-ray ptychography. Ptychography is a lensless method that is being used to image samples through a simultaneous numerical inversion of a large number of diffraction patterns from adjacent overlapping scan positions. This acquisition method can enable nanoscale imaging with x-rays and electrons, but this often requires very large experimental datasets and commensurately high turnaround times, which can limit experimental capabilities such as real-time experimental steering and low-latency monitoring. In this work, we introduce a software system that can automate ptychography data analysis tasks. We accelerate the data analysis pipeline by using a modified version of PtychoNN -- an ML-based approach to solve phase retrieval problem that shows two orders of magnitude speedup compared to traditional iterative methods. Further, our system coordinates and overlaps different data analysis tasks to minimize synchronization overhead between different stages of the workflow. We evaluate our workflow system with real-world experimental workloads from the 26ID beamline at Advanced Photon Source and ThetaGPU cluster at Argonne Leadership Computing Resources.
updated: Sun Apr 09 2023 19:11:04 GMT+0000 (UTC)
published: Sun Apr 09 2023 19:11:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト