論文の概要: Handwriting Prediction Considering Inter-Class Bifurcation Structures
- arxiv url: http://arxiv.org/abs/2009.12743v1
- Date: Sun, 27 Sep 2020 05:13:46 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-14 03:45:32.924056
- Title: Handwriting Prediction Considering Inter-Class Bifurcation Structures
- Title(参考訳): クラス間分岐構造を考慮した手書き予測
- Authors: Masaki Yamagata, Hideaki Hayashi, and Seiichi Uchida
- Abstract要約: 時間的予測は、カオス的挙動、非マルコフ的特性、時間的信号の非定常ノイズにより、まだ難しい課題である。
クラス間の分岐構造から生じる不確実性のため、手書き予測も困難である。
本稿では,この分岐構造に対処可能な時間予測モデルを提案する。
- 参考スコア(独自算出の注目度): 12.387676601792899
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Temporal prediction is a still difficult task due to the chaotic behavior,
non-Markovian characteristics, and non-stationary noise of temporal signals.
Handwriting prediction is also challenging because of uncertainty arising from
inter-class bifurcation structures, in addition to the above problems. For
example, the classes '0' and '6' are very similar in terms of their beginning
parts; therefore it is nearly impossible to predict their subsequent parts from
the beginning part. In other words, '0' and '6' have a bifurcation structure
due to ambiguity between classes, and we cannot make a long-term prediction in
this context. In this paper, we propose a temporal prediction model that can
deal with this bifurcation structure. Specifically, the proposed model learns
the bifurcation structure explicitly as a Gaussian mixture model (GMM) for each
class as well as the posterior probability of the classes. The final result of
prediction is represented as the weighted sum of GMMs using the class
probabilities as weights. When multiple classes have large weights, the model
can handle a bifurcation and thus avoid an inaccurate prediction. The proposed
model is formulated as a neural network including long short-term memories and
is thus trained in an end-to-end manner. The proposed model was evaluated on
the UNIPEN online handwritten character dataset, and the results show that the
model can catch and deal with the bifurcation structures.
- Abstract(参考訳): 時間的予測は、カオス的挙動、非マルコフ的特性、時間的信号の非定常ノイズにより、まだ難しい課題である。
上記の問題に加えて、クラス間分岐構造から生じる不確実性のため、手書き予測も困難である。
例えば、'0' と '6' のクラスは初期部分の点で非常によく似ているため、それに続く部分を初期部分から予測することはほとんど不可能である。
言い換えると、'0' と '6' はクラス間のあいまいさのために分岐構造を持ち、この文脈では長期的な予測はできない。
本稿では,この分岐構造に対処可能な時間予測モデルを提案する。
具体的には,各クラスに対するガウス混合モデル (GMM) およびクラスの後続確率として,分岐構造を明示的に学習する。
予測の最終結果は、クラス確率を重みとしてGMMの重み付け和として表される。
複数のクラスが重みを持つ場合、モデルは分岐を処理でき、不正確な予測を避けることができる。
提案モデルは、長期記憶を含むニューラルネットワークとして定式化され、エンドツーエンドで訓練される。
提案したモデルは,UNIPENのオンライン手書き文字データセットを用いて評価し,そのモデルが分岐構造をキャッチし,扱えることを示す。
関連論文リスト
- Prediction Instability in Machine Learning Ensembles [0.0]
我々は、任意のアンサンブルが以下の予測不安定性の少なくとも1つの形式を示すことを示す定理を証明している。
基礎となるすべてのモデル間の合意を無視したり、基礎となるモデルが存在しない場合、その考えを変更したり、実際に予測することのないオプションを除外したりすることで、操作可能になります。
この分析はまた、特定のアンサンブルアルゴリズムから予測される特定の形の予測不安定性にも光を当てている。
論文 参考訳(メタデータ) (2024-07-03T15:26:02Z) - Pathologies of Pre-trained Language Models in Few-shot Fine-tuning [50.3686606679048]
実例が少ない事前学習言語モデルはラベル間に強い予測バイアスを示すことを示す。
わずかな微調整で予測バイアスを軽減できるが,本分析では,非タスク関連の特徴を捉えることで,モデルの性能向上を図っている。
これらの観察は、より少ない例でモデルのパフォーマンスを追求することは、病理学的予測行動を引き起こす可能性があることを警告する。
論文 参考訳(メタデータ) (2022-04-17T15:55:18Z) - Benign-Overfitting in Conditional Average Treatment Effect Prediction
with Linear Regression [14.493176427999028]
線形回帰モデルを用いて条件平均処理効果(CATE)の予測における良性過剰適合理論について検討した。
一方,IPW-learnerは確率スコアが分かっていればリスクをゼロに収束させるが,T-learnerはランダムな割り当て以外の一貫性を達成できないことを示す。
論文 参考訳(メタデータ) (2022-02-10T18:51:52Z) - Complex Event Forecasting with Prediction Suffix Trees: Extended
Technical Report [70.7321040534471]
複合イベント認識(CER)システムは、イベントのリアルタイムストリーム上のパターンを"即時"検出する能力によって、過去20年間に人気が高まっている。
このような現象が実際にCERエンジンによって検出される前に、パターンがいつ発生するかを予測する方法が不足している。
複雑なイベント予測の問題に対処しようとする形式的なフレームワークを提案する。
論文 参考訳(メタデータ) (2021-09-01T09:52:31Z) - Thought Flow Nets: From Single Predictions to Trains of Model Thought [39.619001911390804]
人間が複雑な問題を解くと、すぐに決定が下されることはめったにない。
その代わり、彼らは直感的な決定から始まり、間違いを見つけ、矛盾を解決し、異なる仮説の間を飛び交う。
論文 参考訳(メタデータ) (2021-07-26T13:56:37Z) - Understanding Neural Abstractive Summarization Models via Uncertainty [54.37665950633147]
seq2seq抽象要約モデルは、自由形式の方法でテキストを生成する。
モデルのトークンレベルの予測のエントロピー、すなわち不確実性について検討する。
要約とテキスト生成モデルをより広範囲に解析する上で,不確実性は有用であることを示す。
論文 参考訳(メタデータ) (2020-10-15T16:57:27Z) - Interpreting Graph Neural Networks for NLP With Differentiable Edge
Masking [63.49779304362376]
グラフニューラルネットワーク(GNN)は、構造的帰納バイアスをNLPモデルに統合する一般的なアプローチとなっている。
本稿では,不要なエッジを識別するGNNの予測を解釈するポストホック手法を提案する。
モデルの性能を劣化させることなく,多数のエッジを落とせることを示す。
論文 参考訳(メタデータ) (2020-10-01T17:51:19Z) - Deducing neighborhoods of classes from a fitted model [68.8204255655161]
本稿では,新しいタイプの解釈可能な機械学習手法を提案する。
量子シフトを用いた分類モデルでは、特徴空間の予測クラスへの分割を理解するのに役立ちます。
基本的に、実際のデータポイント(または特定の関心点)を使用し、特定の特徴をわずかに引き上げたり減少させたりした後の予測の変化を観察する。
論文 参考訳(メタデータ) (2020-09-11T16:35:53Z) - How do Decisions Emerge across Layers in Neural Models? Interpretation
with Differentiable Masking [70.92463223410225]
DiffMaskは、差分性を維持しながら入力のサブセットをマスクアウトすることを学ぶ。
入力トークンを包含または無視する決定は、中間隠蔽層に基づく単純なモデルで行われる。
これにより、属性のヒートマップをプロットするだけでなく、ネットワーク層間で意思決定がどのように形成されるかを分析することができます。
論文 参考訳(メタデータ) (2020-04-30T17:36:14Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。