自閉症スペクトラム障害 (ASD) は、重大な社会的コミュニケーション障害と、コミュニケーションの合図を知覚して提示することの困難を特徴とする発達障害です。機械学習技術は、自閉症の研究と評価を促進するために広く採用されています。ただし、計算モデルは主に特定の分析に集中しており、自閉症コミュニティのプライベート データセットで検証されているため、プライバシー保護のデータ共有が複雑になるため、モデル間の比較が制限されます。この研究では、自閉症児の遊び療法介入から収集された、プライバシーを保護する新しいオープンソース データセット、マルチモーダル ASD ベンチマーク データセットとしての MMASD を紹介します。 MMASD には、ASD を持つ 32 人の子供からのデータと、100 時間以上の介入記録から分割された 1,315 個のデータ サンプルが含まれています。パブリックアクセスを促進するために、各データサンプルは 4 つのプライバシー保護モダリティのデータで構成されています: (1) オプティカル フロー、(2) 2D スケルトン、(3) 3D スケルトン、(4) 臨床医による子供の ASD 評価スコア (例: ADOS)得点。 MMASD は、研究者や療法士が子供の認知状態を理解し、治療中の進行状況を監視し、それに応じて治療計画をカスタマイズできるように支援することを目的としています。また、行動の質の評価や対人同調性の推定など、下流のタスクにもインスピレーションを与えます。 MMASD データセットには、https://github.com/Li-Jicheng/MMASD-A-Multimodal-Dataset-for-Autism-Intervention-Analysis から簡単にアクセスできます。
Autism spectrum disorder (ASD) is a developmental disorder characterized by significant social communication impairments and difficulties perceiving and presenting communication cues. Machine learning techniques have been broadly adopted to facilitate autism studies and assessments. However, computational models are primarily concentrated on specific analysis and validated on private datasets in the autism community, which limits comparisons across models due to privacy-preserving data sharing complications. This work presents a novel privacy-preserving open-source dataset, MMASD as a MultiModal ASD benchmark dataset, collected from play therapy interventions of children with Autism. MMASD includes data from 32 children with ASD, and 1,315 data samples segmented from over 100 hours of intervention recordings. To promote public access, each data sample consists of four privacy-preserving modalities of data: (1) optical flow, (2) 2D skeleton, (3) 3D skeleton, and (4) clinician ASD evaluation scores of children, e.g., ADOS scores. MMASD aims to assist researchers and therapists in understanding children's cognitive status, monitoring their progress during therapy, and customizing the treatment plan accordingly. It also has inspiration for downstream tasks such as action quality assessment and interpersonal synchrony estimation. MMASD dataset can be easily accessed at https://github.com/Li-Jicheng/MMASD-A-Multimodal-Dataset-for-Autism-Intervention-Analysis.