論文の概要: Factored couplings in multi-marginal optimal transport via difference of
convex programming
- arxiv url: http://arxiv.org/abs/2110.00629v1
- Date: Fri, 1 Oct 2021 19:33:26 GMT
- ステータス: 処理完了
- システム内更新日: 2021-10-07 06:32:20.447581
- Title: Factored couplings in multi-marginal optimal transport via difference of
convex programming
- Title(参考訳): 凸プログラミングの差によるマルチマルジナル最適輸送における因子結合
- Authors: Quang Huy Tran, Hicham Janati, Ievgen Redko, R\'emi Flamary and
Nicolas Courty
- Abstract要約: 本研究は,Multi-marginal OT (MMOT) 問題について検討し,結合に関する構造情報の促進により,その傘の下にいくつかの一般的なOT手法を統合するものである。
このような構造情報をMMOTに組み込むと、異なる凸(DC)プログラミング問題のインスタンスとなり、数値的に解けることを示す。
- 参考スコア(独自算出の注目度): 21.0954687964793
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Optimal transport (OT) theory underlies many emerging machine learning (ML)
methods nowadays solving a wide range of tasks such as generative modeling,
transfer learning and information retrieval. These latter works, however,
usually build upon a traditional OT setup with two distributions, while leaving
a more general multi-marginal OT formulation somewhat unexplored. In this
paper, we study the multi-marginal OT (MMOT) problem and unify several popular
OT methods under its umbrella by promoting structural information on the
coupling. We show that incorporating such structural information into MMOT
results in an instance of a different of convex (DC) programming problem
allowing us to solve it numerically. Despite high computational cost of the
latter procedure, the solutions provided by DC optimization are usually as
qualitative as those obtained using currently employed optimization schemes.
- Abstract(参考訳): 最適輸送(OT)理論は、生成モデリング、伝達学習、情報検索といった幅広いタスクを従来から解決してきた多くの新興機械学習(ML)手法に基づいている。
しかしながら、後者の作業は通常、2つの分布を持つ伝統的なOT構成の上に構築される。
本稿では,Multi-marginal OT (MMOT) 問題について検討し,結合に関する構造情報の促進により,その傘の下にいくつかの一般的なOT手法を統合する。
このような構造情報をmmotに組み込むことで、異なるconvex(dc)プログラミング問題を数値的に解くことができることを示す。
後者の手順の計算コストが高いにもかかわらず、DC最適化によって提供される解は通常、現在使われている最適化方式と同じ質的である。
関連論文リスト
- Online Parallel Multi-Task Relationship Learning via Alternating Direction Method of Multipliers [37.859185005986056]
オンラインマルチタスク学習(OMTL)は、複数のタスク間の固有の関係を活用することで、ストリーミングデータ処理を強化する。
本研究では、分散コンピューティング環境に適した最近の最適化である交互方向乗算器法(ADMM)に基づく新しいOMTLフレームワークを提案する。
論文 参考訳(メタデータ) (2024-11-09T10:20:13Z) - Unlearning as multi-task optimization: A normalized gradient difference approach with an adaptive learning rate [105.86576388991713]
正規化勾配差(NGDiff)アルゴリズムを導入し、目的間のトレードオフをよりよく制御できるようにする。
本研究では,TOFUおよびMUSEデータセットにおける最先端の未学習手法において,NGDiffの優れた性能を実証的に実証し,理論的解析を行った。
論文 参考訳(メタデータ) (2024-10-29T14:41:44Z) - Data-Efficient Interactive Multi-Objective Optimization Using ParEGO [6.042269506496206]
多目的最適化は、競合する目的間の最適なトレードオフを提供する非支配的なソリューションの集合を特定することを目的としている。
実践的な応用では、意思決定者(DM)は実装すべき好みに合わせて単一のソリューションを選択する。
そこで本稿では,パレートフロントの最も好まれる領域を,高コストで評価できる2つの新しいアルゴリズムを提案する。
論文 参考訳(メタデータ) (2024-01-12T15:55:51Z) - Energy-Guided Continuous Entropic Barycenter Estimation for General Costs [95.33926437521046]
任意のOTコスト関数に対して連続的エントロピーOT(EOT)バリセンタを近似する新しいアルゴリズムを提案する。
本手法は、弱いOTに基づくEOT問題の二重再構成に基づいている。
論文 参考訳(メタデータ) (2023-10-02T11:24:36Z) - Low-Rank Multitask Learning based on Tensorized SVMs and LSSVMs [65.42104819071444]
マルチタスク学習(MTL)はタスク関連性を活用して性能を向上させる。
タスクインデックスに対応する各モードを持つ高次テンソルを用いて、複数のインデックスが参照するタスクを自然に表現する。
テンソル化サポートベクターマシン(SVM)と最小2乗サポートベクターマシン(LSSVM)を併用した低ランクMTL手法の汎用フレームワークを提案する。
論文 参考訳(メタデータ) (2023-08-30T14:28:26Z) - MinT: Boosting Generalization in Mathematical Reasoning via Multi-View
Fine-Tuning [53.90744622542961]
数学領域における推論は、小言語モデル(LM)にとって重要な課題である。
多様なアノテーションスタイルで既存の数学的問題データセットを利用する新しい手法を提案する。
実験結果から,LLaMA-7Bモデルが先行手法より優れていることが示された。
論文 参考訳(メタデータ) (2023-07-16T05:41:53Z) - Generalizing Multimodal Variational Methods to Sets [35.69942798534849]
本稿では,マルチモーダル潜在空間を学習するために,Set Multimodal VAE(SMVAE)と呼ばれる新しい変分法を提案する。
共同モダリティ後部分布を直接モデル化することにより、提案したSMVAEは、複数のモダリティ間で情報を交換し、分解による欠点を補うことを学習する。
論文 参考訳(メタデータ) (2022-12-19T23:50:19Z) - Efficient Model-Based Multi-Agent Mean-Field Reinforcement Learning [89.31889875864599]
マルチエージェントシステムにおける学習に有効なモデルベース強化学習アルゴリズムを提案する。
我々の理論的な貢献は、MFCのモデルベース強化学習における最初の一般的な後悔の限界である。
コア最適化問題の実用的なパラメトリゼーションを提供する。
論文 参考訳(メタデータ) (2021-07-08T18:01:02Z) - Multi-Objective Optimization of the Textile Manufacturing Process Using
Deep-Q-Network Based Multi-Agent Reinforcement Learning [5.900286890213338]
本稿では,最適化プロセスをゲームに変換するマルチエージェント強化学習(MARL)フレームワークを提案する。
このゲームでは,複数平衡の中断を避けるために実用的選択機構が採用された。
提案したMARLシステムは,繊維のオゾン化プロセスの最適解を実現することが可能であり,従来の手法よりも優れた性能を発揮する。
論文 参考訳(メタデータ) (2020-12-02T11:37:44Z) - Efficient Robust Optimal Transport with Application to Multi-Label
Classification [12.521494095948068]
OTコスト関数における対称正の半定値マハラノビス計量を用いて特徴-特徴関係をモデル化する。
結果の最適化問題を非線形OT問題とみなし,Frank-Wolfeアルゴリズムを用いて解く。
タグ予測や多クラス分類などの識別学習環境における実証的な結果から,本手法の有効性が示唆された。
論文 参考訳(メタデータ) (2020-10-22T16:43:52Z) - Robust Optimal Transport with Applications in Generative Modeling and
Domain Adaptation [120.69747175899421]
ワッサーシュタインのような最適輸送(OT)距離は、GANやドメイン適応のようないくつかの領域で使用されている。
本稿では,現代のディープラーニングアプリケーションに適用可能な,ロバストなOT最適化の計算効率のよい2つの形式を提案する。
提案手法では, ノイズの多いデータセット上で, 外部分布で劣化したGANモデルをトレーニングすることができる。
論文 参考訳(メタデータ) (2020-10-12T17:13:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。