arXiv reaDer
分類のための学習された点群圧縮
Learned Point Cloud Compression for Classification
ディープ ラーニングは、3D 点群データの分類、オブジェクト検出、セグメンテーションなどのマシン ビジョン タスクを実行するために使用されることが増えています。ただし、ディープラーニング推論は計算コストがかかります。したがって、エンドデバイスの計算能力には限界があるため、サーバー側で処理するためにネットワーク経由で点群データを送信するためのコーデックが必要になります。このようなコーデックは軽量であり、精度を犠牲にすることなく高い圧縮率を達成できなければなりません。これを動機として、分類という機械タスクに高度に特化した新しい点群コーデックを紹介します。 PointNet に基づく当社のコーデックは、他の方法と比較して、レート精度のトレードオフが大幅に向上しています。特に、ModelNet40 データセットでは、非特殊コーデックと比較して BD ビットレートの 94% 削減を達成します。低リソースのエンド デバイス向けに、同様の 93% と 92% の BD ビットレート削減を達成し、トップ 1 の精度で 3% と 5% 低下する一方で、消費するエンコーダの消費量はわずか 0.470 と 0.048 のエンコーダの 2 つの軽量構成も提案します。それぞれサイド kMAC/ポイント。私たちのコーデックは、点群の機械解析に特化したコーデックの可能性を実証し、将来的により複雑なタスクやデータセットに拡張するための基礎を提供します。
Deep learning is increasingly being used to perform machine vision tasks such as classification, object detection, and segmentation on 3D point cloud data. However, deep learning inference is computationally expensive. The limited computational capabilities of end devices thus necessitate a codec for transmitting point cloud data over the network for server-side processing. Such a codec must be lightweight and capable of achieving high compression ratios without sacrificing accuracy. Motivated by this, we present a novel point cloud codec that is highly specialized for the machine task of classification. Our codec, based on PointNet, achieves a significantly better rate-accuracy trade-off in comparison to alternative methods. In particular, it achieves a 94% reduction in BD-bitrate over non-specialized codecs on the ModelNet40 dataset. For low-resource end devices, we also propose two lightweight configurations of our encoder that achieve similar BD-bitrate reductions of 93% and 92% with 3% and 5% drops in top-1 accuracy, while consuming only 0.470 and 0.048 encoder-side kMACs/point, respectively. Our codec demonstrates the potential of specialized codecs for machine analysis of point clouds, and provides a basis for extension to more complex tasks and datasets in the future.
updated: Fri Aug 11 2023 06:28:19 GMT+0000 (UTC)
published: Fri Aug 11 2023 06:28:19 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト