論文の概要: DIY Customized Speech Recognition for a Person with Speech Disabilities
- arxiv url: http://arxiv.org/abs/2611.11327v1
- Date: Sun, 08 Nov 2026 12:04:29 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-11-11 09:45:37.990165
- Title: DIY Customized Speech Recognition for a Person with Speech Disabilities
- Title(参考訳): 音声障害者のためのDIYカスタマイズ音声認識
- Abstract要約: 本稿では,脳性麻痺者を対象とした音声認識システムの設計,実装,評価について述べる。
OpenAIのWhisperメディアとLow-Rank Adaptation (LoRA) を用いた大規模v3モデルを、最初の著者自身の講演から記録されたオーディオサンプルに微調整した。
これらのモデルに基づいて、最初の著者はリアルタイムインタプリタとして機能するモバイルアプリケーションであるAVozを開発した。
- 参考スコア(独自算出の注目度): 45.88028371034407
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: General-purpose state-of-the-art automatic speech recognition (ASR) systems fail systematically for speakers with moderate to severe speech disabilities. This paper describes the design, implementation, and evaluation of a customized ASR system built for the first author, a researcher with cerebral palsy and dysarthria. We fine-tuned OpenAI's Whisper medium and large-v3 models using Low-Rank Adaptation (LoRA) on audio samples recorded from the first author's own speech on consumer-grade hardware. On a held-out test set of 100 previously unseen utterances, the corresponding transcriptions resulted in a Word Error Rate drop from 49% to 17% for medium and from 30% to 12% for large-v3, while the Character Error Rate fell from 26% to 7% for medium and from 16% to 5% for large-v3, indicating that the residual errors are minor phonemic substitutions. Based on these models, the first author developed AVoz, a mobile application that acts as a real-time interpreter, converting his speech into synthesized voice for the listener. All processing is performed locally, ensuring that no audio data leaves the user's machine. We argue that the methodology is replicable. Moreover, we publish the full LoRA configuration, the implementation, and a step-by-step recording and training protocol, so that other people with speech disabilities, or their family members and caregivers, can build their own systems with a few hours of labeled audio data and a couple of days of GPU time.
- Abstract(参考訳): 中等度から重度の音声障害を持つ話者に対して、汎用的最先端自動音声認識(ASR)システムは体系的に失敗する。
本報告では,脳性麻痺および変形性関節症の研究者のために構築されたASRシステムの設計,実装,評価について述べる。
OpenAIのWhisperメディアとLow-Rank Adaptation (LoRA) を用いた大規模v3モデルを、最初の著者自身の講演から記録されたオーディオサンプルに微調整した。
その結果, 単語誤り率は中音速が49%から17%, 大音速が30%から12%, 中音速が26%から7%, 大音速が16%から5%に減少した。
これらのモデルに基づいて、最初の著者はリアルタイムインタプリタとして機能するモバイルアプリケーションであるAVozを開発した。
すべての処理はローカルで行われ、オーディオデータがユーザのマシンを離れないことを保証する。
方法論は複製可能であると我々は主張する。
さらに,LoRAの完全な構成,実装,ステップバイステップのレコーディングおよびトレーニングプロトコルを公開し,音声障害のある人やその家族や介護者が,数時間のラベル付き音声データと2日間のGPUで独自のシステムを構築することができるようにした。
関連論文リスト
- Voice Memory for Agentic Speech Recognition [66.69623133635868]
エージェント音声認識のための推論専用スキームであるVoice Memoryを提案する。
同期的に、スコア付き例は、境界編集を通じてそのファイルを更新する。
10のHyPoradiseドメインにオープン修正器、Voice Memory、重み付き単語エラー率8.36%から7.52%の10のドメインがある。
論文 参考訳(メタデータ) (2026-07-29T02:42:56Z) - StutterZero and StutterFormer: End-to-End Speech Conversion for Stuttering Transcription and Correction [0.0]
この研究で紹介されるStutterZeroとStutterFormerは、最初のエンドツーエンドの波形-波形モデルである。
すべてのベンチマークで、StutterZeroはWord Error Rate(WER)を24%削減し、Whisper-Mediumモデルと比較して意味的類似性(BERTScore)を31%改善した。
論文 参考訳(メタデータ) (2025-10-21T17:54:36Z) - CabinSep: IR-Augmented Mask-Based MVDR for Real-Time In-Car Speech Separation with Distributed Heterogeneous Arrays [25.146785299787542]
CabinSepは、軽量なニューラルマスクに基づく最小分散歪み無応答(MVDR)音声分離手法である。
計算複雑性は0.4 GMACしかなく、CabinSepは音声認識エラー率を17.5%削減している。
論文 参考訳(メタデータ) (2025-09-01T11:50:43Z) - Convoifilter: A case study of doing cocktail party speech recognition [59.80042864360884]
このモデルは、このアプローチにより、ASRの単語誤り率(WER)を80%から26.4%に下げることができる。
我々はオープンに事前学習モデルを共有し、hf.co/nguyenvulebinh/voice-filterのさらなる研究を促進する。
論文 参考訳(メタデータ) (2023-08-22T12:09:30Z) - Fully Automated End-to-End Fake Audio Detection [57.78459588263812]
本稿では,完全自動エンドツーエンド音声検出手法を提案する。
まず、wav2vec事前学習モデルを用いて、音声の高レベル表現を得る。
ネットワーク構造には, Light-DARTS という異種アーキテクチャサーチ (DARTS) の修正版を用いる。
論文 参考訳(メタデータ) (2022-08-20T06:46:55Z) - ASR Error Detection via Audio-Transcript entailment [1.3750624267664155]
音声書き起こしエンターメントを用いたASR誤り検出のためのエンドツーエンドアプローチを提案する。
提案モデルでは,音響エンコーダと言語エンコーダを用いて,それぞれ音声と転写をモデル化する。
提案モデルでは,すべての転写誤りに対して26.2%,医学的誤りに対して23%の分類誤り率(CER)を達成し,それぞれ12%と15.4%の強い基準値を改善することができた。
論文 参考訳(メタデータ) (2022-07-22T02:47:15Z) - On-Device Personalization of Automatic Speech Recognition Models for
Disordered Speech [9.698986579582236]
デバイス上でのASRパーソナライズには非常に少ない話者データを用いたアプローチを提案する。
提案手法は,発話障害のある話者100名を対象に試行し,話者ごとの発話が50人程度しか必要とせず,単語誤り率の中央値が71%向上していることを確認した。
論文 参考訳(メタデータ) (2021-06-18T17:48:08Z) - Advanced Long-context End-to-end Speech Recognition Using
Context-expanded Transformers [56.56220390953412]
コンフォーメータアーキテクチャを導入することで、精度をさらに向上させ、以前の作業を拡張します。
拡張トランスフォーマーは、最先端のエンドツーエンドのASR性能を提供する。
論文 参考訳(メタデータ) (2021-04-19T16:18:00Z) - End-to-End Speaker-Attributed ASR with Transformer [41.7739129773237]
本稿では,エンドツーエンド話者属性自動音声認識システムを提案する。
単調なマルチトーカー音声に対する話者カウント、音声認識、話者識別を共同で行う。
論文 参考訳(メタデータ) (2021-04-05T19:54:15Z) - Dynamic Acoustic Unit Augmentation With BPE-Dropout for Low-Resource
End-to-End Speech Recognition [62.94773371761236]
我々は、OOVレートの高い低リソースセットアップで効果的なエンドツーエンドASRシステムを構築することを検討します。
本稿では,BPE-dropout法に基づく動的音響ユニット拡張法を提案する。
我々の単言語トルココンフォーマーは22.2%の文字誤り率(CER)と38.9%の単語誤り率(WER)の競争結果を確立した。
論文 参考訳(メタデータ) (2021-03-12T10:10:13Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。