arXiv reaDer
SignCol: Open-Source Software for Collecting Sign Language Gestures
 手話言語は、コミュニケーションのために手や頭の動きなどのジェスチャーを使用します。手話認識は、聴覚障害を持つ個人のための支援技術であり、その目標は、社会的関与を促進することにより、そのような個人の生活の質を改善することです。サイン言語は、サインとして知られるようにアルファベットが非常に多様であるため、サイン認識ソフトウェアは、8種類のサインの組み合わせを処理できる必要があります。数字、文字、単語、文章。シンボリックジェスチャの本質的な複雑さと多様性のために、認識アルゴリズムには、学習するための包括的なビジュアルデータセットが必要です。このホワイトペーパーでは、手話で使用されるジェスチャをキャプチャおよび保存するための、SignColと呼ばれるMicrosoft Kinectベースのオープンソースソフトウェアの設計と実装について説明します。私たちの仕事は多言語データベースをサポートし、記録されたアイテムの統計を報告します。 SignColは、色付き(RGB)フレーム、深度フレーム、赤外線フレーム、ボディインデックスフレーム、座標マッピングされたカラーボディフレーム、各フレームのスケルトン情報、カメラパラメーターを同時にキャプチャして保存できます。
Sign(ed) languages use gestures, such as hand or head movements, for communication. Sign language recognition is an assistive technology for individuals with hearing disability and its goal is to improve such individuals' life quality by facilitating their social involvement. Since sign languages are vastly varied in alphabets, as known as signs, a sign recognition software should be capable of handling eight different types of sign combinations, e.g. numbers, letters, words and sentences. Due to the intrinsic complexity and diversity of symbolic gestures, recognition algorithms need a comprehensive visual dataset to learn by. In this paper, we describe the design and implementation of a Microsoft Kinect-based open source software, called SignCol, for capturing and saving the gestures used in sign languages. Our work supports a multi-language database and reports the recorded items statistics. SignCol can capture and store colored(RGB) frames, depth frames, infrared frames, body index frames, coordinate mapped color-body frames, skeleton information of each frame and camera parameters simultaneously.
updated: Thu Oct 31 2019 19:36:18 GMT+0000 (UTC)
published: Thu Oct 31 2019 19:36:18 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト