Fugu-MT 論文翻訳(概要): Design and Implementation of a Virtual 3D Educational Environment to improve Deaf Education

論文の概要: Design and Implementation of a Virtual 3D Educational Environment to improve Deaf Education

arxiv url: http://arxiv.org/abs/2006.00114v1
Date: Fri, 29 May 2020 22:56:43 GMT
ステータス: 処理完了
システム内更新日: 2022-11-26 23:50:10.725089
Title: Design and Implementation of a Virtual 3D Educational Environment to improve Deaf Education
Title（参考訳）: 聴覚教育を改善する仮想3次元教育環境の設計と実装
Authors: Abdelaziz Lakhfif
Abstract要約: 本稿では,X3DおよびH-Anim標準に基づく仮想3D教育環境の設計と実装に関する最近の研究課題について述べる。このシステムは、アラビア語入力テキストの全意味をエンコードする意味表現から、自動署名言語文を生成する。
参考スコア（独自算出の注目度）: 0.0
License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
Abstract: Advances in NLP, knowledge representation and computer graphic technologies can provide us insights into the development of educational tool for Deaf people. Actual education materials and tools for deaf pupils present several problems, since textbooks are designed to support normal students in the classroom and most of them are not suitable for people with hearing disabilities. Virtual Reality (VR) technologies appear to be a good tool and a promising framework in the education of pupils with hearing disabilities. In this paper, we present a current research tasks surrounding the design and implementation of a virtual 3D educational environment based on X3D and H-Anim standards. The system generates and animates automatically Sign language sentence from a semantic representation that encode the whole meaning of the Arabic input text. Some aspects and issues in Sign language generation will be discussed, including the model of Sign representation that facilitate reuse and reduces the time of Sign generation, conversion of semantic components to sign features representation with regard to Sign language linguistics characteristics and how to generate realistic smooth gestural sequences using X3D content to performs transition between signs for natural-looking of animated avatar. Sign language sentences were evaluated by Algerian native Deaf people. The goal of the project is the development of a machine translation system from Arabic to Algerian Sign Language that can be used as educational tool for Deaf children in algerian primary schools.
Abstract（参考訳）: NLP、知識表現、コンピュータグラフィック技術の進歩は、聴覚障害者のための教育ツールの開発に関する洞察を与えてくれる。教科書は教室の普通の生徒を支援するために設計されており、そのほとんどが聴覚障害者に向いていないため、聴覚障害者のための実際の教材やツールにはいくつかの問題がある。仮想現実(vr)技術は、聴覚障害者の教育において優れたツールであり、有望な枠組みであると思われる。本稿では,X3DおよびH-Anim標準に基づく仮想3D教育環境の設計と実装に関する最近の研究課題について述べる。このシステムは、アラビア語入力テキストの全意味を符号化する意味表現から、自動署名言語文を生成する。サイン言語生成におけるいくつかの側面と課題について論じる。例えば、手話表現の再利用を促進し、手話生成の時間を短縮する手話表現のモデル、手話言語特性に関する手話表現への意味的要素の変換、X3Dコンテンツを用いて現実的なスムーズなジェスチャー配列を生成してアニメーションアバターの自然な外観のサイン間の遷移を実行する方法などである。アルジェリア原住民によって手話文が評価された。このプロジェクトの目的は、アラビア語からアルジェリア語への機械翻訳システムの開発であり、アルジェリアの小学校における聴覚障害者の教育ツールとして利用できる。

関連論文リスト

Signs as Tokens: An Autoregressive Multilingual Sign Language Generator [55.94334001112357]
テキスト入力から3Dサインアバターを自動回帰的に生成できる多言語手話モデルSigns as Tokens(SOKE)を導入する。我々は,手話とLMを整合させるために,連続する記号を様々な身体部分を表すトークン列に識別する切り離されたトークン化器を開発した。これらのサイントークンは、LMの生のテキスト語彙に統合され、手話データセットの教師付き微調整を可能にする。
論文参考訳（メタデータ） (2024-11-26T18:28:09Z)
Unlocking Textual and Visual Wisdom: Open-Vocabulary 3D Object Detection Enhanced by Comprehensive Guidance from Text and Image [70.02187124865627]
Open-vocabulary 3D object detection (OV-3DDet) は、新しい3Dシーン内において、目に見えないものの両方をローカライズし、認識することを目的としている。視覚基盤モデルを利用して、3Dシーンにおける新しいクラスを発見するための画像的ガイダンスを提供する。オープン語彙の3Dオブジェクト検出における基礎モデルの可能性を明らかにするとともに,精度と一般化の大幅な向上を示す。
論文参考訳（メタデータ） (2024-07-07T04:50:04Z)
A Transformer-Based Multi-Stream Approach for Isolated Iranian Sign Language Recognition [0.0]
本研究の目的は,イラン手話語をトランスフォーマーなどの最新のディープラーニングツールの助けを借りて認識することである。使用されるデータセットには、大学などの学術環境で頻繁に使用されるイラン手話101語が含まれている。
論文参考訳（メタデータ） (2024-06-27T06:54:25Z)
SignAvatar: Sign Language 3D Motion Reconstruction and Generation [10.342253593687781]
SignAvatarは、単語レベルの手話の再構築と生成が可能なフレームワークである。身体,手,顔の3次元関節回転データからなるASL3DWordデータセットをコントリビュートする。
論文参考訳（メタデータ） (2024-05-13T17:48:22Z)
Training program on sign language: social inclusion through Virtual Reality in ISENSE project [0.5277756703318045]
ISENSEプロジェクトは、手話を教えるための様々な技術ツールを聴取コミュニティに提案する。本研究の目的は,VR環境を利用したスペイン語とイタリア語の手話認識アプリケーションを開発することである。
論文参考訳（メタデータ） (2024-01-15T20:40:46Z)
Neural Sign Actors: A diffusion model for 3D sign language production from text [51.81647203840081]
手話 (SL) は難聴者および難聴者コミュニティの主要なコミュニケーション手段である。この研究は、現実的なニューラルサインアバターに向けて重要な一歩を踏み出し、聴覚と聴覚のコミュニティ間のコミュニケーションギャップを埋める。
論文参考訳（メタデータ） (2023-12-05T12:04:34Z)
Learning to Model the World with Language [100.76069091703505]
人間と対話し、世界で行動するためには、エージェントは人々が使用する言語の範囲を理解し、それを視覚の世界に関連付ける必要がある。私たちのキーとなるアイデアは、エージェントが将来を予測するのに役立つ信号として、このような多様な言語を解釈すべきである、ということです。我々は、将来のテキストや画像表現を予測するマルチモーダル世界モデルを学ぶエージェントであるDynalangでこれをインスタンス化する。
論文参考訳（メタデータ） (2023-07-31T17:57:49Z)
Language-Driven Representation Learning for Robotics [115.93273609767145]
ロボット工学における視覚表現学習の最近の研究は、日々の作業を行う人間の大規模なビデオデータセットから学ぶことの可能性を実証している。人間のビデオやキャプションから言語による表現学習を行うためのフレームワークを提案する。我々は、Voltronの言語駆動学習が、特に高レベル制御を必要とするターゲット問題において、先行技術よりも優れていることを発見した。
論文参考訳（メタデータ） (2023-02-24T17:29:31Z)
Skeleton Based Sign Language Recognition Using Whole-body Keypoints [71.97020373520922]
手話は聴覚障害者や言語障害者のコミュニケーションに使用される。また,RGB-D法と組み合わせて最先端の性能を実現することで,Skeletonに基づく音声認識が普及しつつある。近年のボディポーズ推定用citejin 2020wholeの開発に触発されて,全身キーポイントと特徴に基づく手話認識を提案する。
論文参考訳（メタデータ） (2021-03-16T03:38:17Z)
Everybody Sign Now: Translating Spoken Language to Photo Realistic Sign Language Video [43.45785951443149]
難聴者コミュニティが真に理解できるように、手話自動生成システムは、写真リアリスティックなシグナーを生成する必要がある。我々は、音声言語から直接写真リアリスティックな連続手話ビデオを生成する最初のSLPモデルSignGANを提案する。次に、ポーズ条件付き人間の合成モデルを導入し、骨格ポーズシーケンスから写真リアルな手話ビデオを生成する。
論文参考訳（メタデータ） (2020-11-19T14:31:06Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。

指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。