arXiv reaDer
On the Information Rates of the Plenoptic Function
 プレノプティック関数(Adelson and Bergen、91)は、空間と時間の任意の時点で観察者が利用できる視覚情報を記述します。プレノプティック関数(POF)のサンプルは、ビデオおよび一般的な視覚コンテンツで見られ、大量の情報を表しています。本論文では、プレノプティック関数の圧縮限界を研究するための確率モデルを提案します。提案されたフレームワークでは、POFの2つの基本的な情報源を分離します。1つはカメラの動きを表し、もう1つは取得および送信される「現実」の情報の複雑さを表します。情報源が組み合わされて、詳細に研究する確率過程を生成します。最初に、時間とともに変化しない現実の集団のモデルを提案します。提案されたモデルは、実用的な関心のある多くの場合に鋭い情報理論的な意味で正確なコーディング境界を導き出すことができるという点で単純です。静的な現実とカメラの動きのこの単純なケースについて、我々の結果は、コーディングの実践が情報理論的な観点からの最適なコーディングに従っていることを示しています。モデルは、時間とともに変化する視覚的現実を考慮してさらに拡張されます。このダイナミックリアリティモデルのロスレスおよびロスのある情報レートの限界を導き出し、限界が厳しい条件を示します。合成ソースを使用した例は、シーンダイナミクスが存在する場合、DPCMを使用した動き/変位推定を使用した単純なハイブリッドコーディングが、実際のレート歪みの限界に対してかなり最適に実行されないことを示唆しています。
The plenoptic function (Adelson and Bergen, 91) describes the visual information available to an observer at any point in space and time. Samples of the plenoptic function (POF) are seen in video and in general visual content, and represent large amounts of information. In this paper we propose a stochastic model to study the compression limits of the plenoptic function. In the proposed framework, we isolate the two fundamental sources of information in the POF: the one representing the camera motion and the other representing the information complexity of the "reality" being acquired and transmitted. The sources of information are combined, generating a stochastic process that we study in detail. We first propose a model for ensembles of realities that do not change over time. The proposed model is simple in that it enables us to derive precise coding bounds in the information-theoretic sense that are sharp in a number of cases of practical interest. For this simple case of static realities and camera motion, our results indicate that coding practice is in accordance with optimal coding from an information-theoretic standpoint. The model is further extended to account for visual realities that change over time. We derive bounds on the lossless and lossy information rates for this dynamic reality model, stating conditions under which the bounds are tight. Examples with synthetic sources suggest that in the presence of scene dynamics, simple hybrid coding using motion/displacement estimation with DPCM performs considerably suboptimally relative to the true rate-distortion bound.
updated: Fri Aug 07 2009 18:11:32 GMT+0000 (UTC)
published: Wed Nov 14 2007 02:54:22 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト