大きな数メガピクセルのハイダイナミックレンジ(HDR)画像内の小さなオブジェクト(幅わずか数ピクセル)を識別、検査、編集するためのインタラクティブな画像セグメンテーションおよび視覚化フレームワークを紹介します。天文観測における宇宙線(CR)の検出は、複数のツールを必要とする面倒なワークフローであるため、モデルの推論、HDR画像の視覚化、セグメンテーションマスクの検査、編集を単一のグラフィカルユーザーインターフェイスに統合するインタラクティブなツールキットを開発しました。当初は天文データ用に設計された機能セットにより、この作業は、生物医学、材料科学、リモートセンシングなどの科学分野、およびコンピューターでのヒューマンインザループの小さなオブジェクトのセグメンテーションに役立つ研究支援ツールになります。ヴィジョン。当社のインターフェースは、マウス制御の同期された、画像のデュアルウィンドウ視覚化とセグメンテーションマスクを備えています。これは、数メガピクセルの画像内の小さなオブジェクトを見つけるための重要な機能です。ブラウザベースのツールをWebで簡単にホストして、任意のデバイスにマルチユーザーアクセスとGPUアクセラレーションを提供できます。このツールキットは、高精度の注釈ツールとして使用することも、インタラクティブな機械学習フレームワークのフロントエンドとして使用することもできます。オープンソースのデータセット、CR検出モデル、視覚化ツールキットは、https://github.com/cy-xu/cosmic-connで入手できます。
We introduce an interactive image segmentation and visualization framework for identifying, inspecting, and editing tiny objects (just a few pixels wide) in large multi-megapixel high-dynamic-range (HDR) images. Detecting cosmic rays (CRs) in astronomical observations is a cumbersome workflow that requires multiple tools, so we developed an interactive toolkit that unifies model inference, HDR image visualization, segmentation mask inspection and editing into a single graphical user interface. The feature set, initially designed for astronomical data, makes this work a useful research-supporting tool for human-in-the-loop tiny-object segmentation in scientific areas like biomedicine, materials science, remote sensing, etc., as well as computer vision. Our interface features mouse-controlled, synchronized, dual-window visualization of the image and the segmentation mask, a critical feature for locating tiny objects in multi-megapixel images. The browser-based tool can be readily hosted on the web to provide multi-user access and GPU acceleration for any device. The toolkit can also be used as a high-precision annotation tool, or adapted as the frontend for an interactive machine learning framework. Our open-source dataset, CR detection model, and visualization toolkit are available at https://github.com/cy-xu/cosmic-conn.