arXiv reaDer
Bicephalous畳み込みオートエンコーダによる3DスパースTPCの効率的なデータ圧縮
Efficient Data Compression for 3D Sparse TPC via Bicephalous Convolutional Autoencoder
大規模な実験施設でのリアルタイムのデータ収集と分析は、高エネルギー物理学、原子核物理学、宇宙論など、複数のドメインにわたる大きな課題を提示します。これに対処するために、リアルタイムデータ圧縮のための機械学習(ML)ベースの方法が大きな注目を集めています。ただし、比較的小型で連続的なCIFARやImageNetなどの自然画像データとは異なり、科学データは、スパース性が高く(多くのゼロ)、非ガウス値分布の3次元データボリュームとして高レートで入力されることがよくあります。これにより、一般的なML圧縮方法や、従来のデータ圧縮方法を直接適用することは最適ではありません。これらの障害に対処するために、この作業では、スパース性と回帰を同時に解決するデュアルヘッドオートエンコーダーを導入します。これは、Bicephalous Convolutional AutoEncoder(BCAE)と呼ばれます。この方法は、MGARD、SZ、ZFPなどの従来のデータ圧縮方法と比較して、圧縮の忠実度と比率の両方で利点を示します。同様の忠実度を達成するために、従来の方法の中で最高のパフォーマンスを発揮できるのは、BCAEの半分の圧縮率だけです。さらに、BCAE法の徹底的なアブレーション研究は、専用のセグメンテーションデコーダーが再構成を改善することを示しています。
Real-time data collection and analysis in large experimental facilities present a great challenge across multiple domains, including high energy physics, nuclear physics, and cosmology. To address this, machine learning (ML)-based methods for real-time data compression have drawn significant attention. However, unlike natural image data, such as CIFAR and ImageNet that are relatively small-sized and continuous, scientific data often come in as three-dimensional data volumes at high rates with high sparsity (many zeros) and non-Gaussian value distribution. This makes direct application of popular ML compression methods, as well as conventional data compression methods, suboptimal. To address these obstacles, this work introduces a dual-head autoencoder to resolve sparsity and regression simultaneously, called Bicephalous Convolutional AutoEncoder (BCAE). This method shows advantages both in compression fidelity and ratio compared to traditional data compression methods, such as MGARD, SZ, and ZFP. To achieve similar fidelity, the best performer among the traditional methods can reach only half the compression ratio of BCAE. Moreover, a thorough ablation study of the BCAE method shows that a dedicated segmentation decoder improves the reconstruction.
updated: Tue Nov 09 2021 21:26:37 GMT+0000 (UTC)
published: Tue Nov 09 2021 21:26:37 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト