ピクセルビニングは、光学画像の取得と分光法で広く使用されている手法であり、イメージセンサーの隣接する検出器要素を組み合わせてより大きなピクセルにします。これにより、処理するデータの量とノイズの影響が軽減されますが、情報が失われるという犠牲が伴います。ここでは、センサー要素の大部分をチップの全面に広がる単一のスーパーピクセルに結合することにより、ビニングの概念を限界まで押し上げます。特定のパターン認識タスクについて、その最適な形状は、機械学習アルゴリズムを使用したトレーニングデータから決定されます。感度を高め、分類精度を損なうことなく、ナノ秒のタイムスケールでMNISTデータセットから光学的に投影された画像を分類する方法を示します。私たちのコンセプトは、イメージングだけでなく、光学分光法やその他のセンシングアプリケーションにも適用できます。
Pixel binning is a technique, widely used in optical image acquisition and spectroscopy, in which adjacent detector elements of an image sensor are combined into larger pixels. This reduces the amount of data to be processed as well as the impact of noise, but comes at the cost of a loss of information. Here, we push the concept of binning to its limit by combining a large fraction of the sensor elements into a single superpixel that extends over the whole face of the chip. For a given pattern recognition task, its optimal shape is determined from training data using a machine learning algorithm. We demonstrate the classification of optically projected images from the MNIST dataset on a nanosecond timescale, with enhanced sensitivity and without loss of classification accuracy. Our concept is not limited to imaging alone but can also be applied in optical spectroscopy or other sensing applications.