arXiv reaDer
CNN における研究バイアスと二酸化炭素排出量を削減することの重要性を強調
Highlighting the Importance of Reducing Research Bias and Carbon Emissions in CNNs
畳み込みニューラル ネットワーク (CNN) は、コンピューター ビジョンの主要な課題に対処する上で一般的になっています。研究者は、新しい CNN アーキテクチャを考案するだけでなく、既存のアーキテクチャのパフォーマンスを改善するためのさまざまな手法も研究しています。ただし、単純さ、汎用性、比較の公平性、エネルギー効率などの重要な変数を無視して、パフォーマンスの向上を過度に強調する傾向があります。建築設計と評価においてこれらの変数を見過ごすことは、研究バイアスと環境への重大な悪影響につながります。さらに、これは、深層学習モデルを使用して気候変動に取り組む際の研究のポジティブな影響を損なう可能性があります。ここでは、提案された多数の手法の広範かつ公正な経験的研究を実行して、セグメンテーションと分類のための各手法の有用性を評価します。私たちの調査結果は、モデル設計の複雑さよりも単純さを優先することの重要性を再確認しています (オッカムの剃刀)。さらに、私たちの結果は、単純な標準化された慣行が、パフォーマンスの低下をほとんど伴わずに環境への影響を大幅に削減できることを示しています。研究バイアスと炭素排出の問題を軽減するために、CNN の設計と評価を再考する必要があることを強調します。
Convolutional neural networks (CNNs) have become commonplace in addressing major challenges in computer vision. Researchers are not only coming up with new CNN architectures but are also researching different techniques to improve the performance of existing architectures. However, there is a tendency to over-emphasize performance improvement while neglecting certain important variables such as simplicity, versatility, the fairness of comparisons, and energy efficiency. Overlooking these variables in architectural design and evaluation has led to research bias and a significantly negative environmental impact. Furthermore, this can undermine the positive impact of research in using deep learning models to tackle climate change. Here, we perform an extensive and fair empirical study of a number of proposed techniques to gauge the utility of each technique for segmentation and classification. Our findings restate the importance of favoring simplicity over complexity in model design (Occam's Razor). Furthermore, our results indicate that simple standardized practices can lead to a significant reduction in environmental impact with little drop in performance. We highlight that there is a need to rethink the design and evaluation of CNNs to alleviate the issue of research bias and carbon emissions.
updated: Sun Jun 06 2021 20:42:00 GMT+0000 (UTC)
published: Sun Jun 06 2021 20:42:00 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト