論文の概要: Measure-to-measure Regression with Transformers
- arxiv url: http://arxiv.org/abs/2605.28075v1
- Date: Wed, 27 May 2026 07:31:04 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-05-28 17:38:55.846262
- Title: Measure-to-measure Regression with Transformers
- Title(参考訳): 変圧器を用いた計測から測定への回帰
- Authors: Matthew Vandergrift, Martha White, Yury Polyanskiy, Philippe Rigollet, Lazar Atanackovic,
- Abstract要約: 本稿では,M2M回帰問題について検討する。
古典回帰とは対照的に、M2M回帰は全分布をデータポイントとして扱う。
非線形M2M回帰の形式化を提案し、そのような演算子を学習するために、使いやすく、表現的でスケーラブルな2つのアプローチを導入する。
- 参考スコア(独自算出の注目度): 31.50462903983186
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Many learning problems require predicting how populations evolve under an unknown transformation. A natural representation for such populations is a probability measure, with point clouds as a key example. In this work, we study the measure-to-measure (M2M) regression problem, in which one seeks to learn a map between probability measures from a finite collection of observed input-output pairs. In contrast to classical regression, where individual samples are transformed independently, M2M regression treats entire distributions as the data points. This perspective is vital in certain scientific applications, for example, cellular and molecular biology, where cells are known to evolve not as independent data points but as a collection. However, few existing approaches address the problem of M2M regression with sufficient expressivity and scalability. We present a formalization of nonlinear M2M regression and introduce two easy-to-use, expressive, and scalable approaches to learn such operators: transformers as static M2M maps and transformers as dynamic M2M velocity fields. Our approach leverages the natural measure-dependent and mean-field structure of transformers to learn nonlinear M2M maps on the space of probability distributions. We illustrate the effectiveness of our proposed method to generalize to unseen measures on synthetic experiments, interacting particle systems, and a large-scale patient-derived organoid dataset for predicting treatment response in colorectal cancer.
- Abstract(参考訳): 多くの学習問題は、未知の変換の下で個体群がどのように進化するかを予測する必要がある。
そのような集団に対する自然な表現は確率測度であり、点雲が重要な例である。
本研究では、観測された入出力対の有限集合から確率測度間の写像を学習しようとする測度-測度(M2M)回帰問題について検討する。
個々のサンプルが独立に変換される古典的回帰とは対照的に、M2M回帰は全分布をデータポイントとして扱う。
この視点は、細胞生物学や分子生物学など、特定の科学的応用において不可欠であり、細胞は独立したデータポイントとしてではなく、コレクションとして進化することが知られている。
しかし、M2M回帰の問題に十分な表現性とスケーラビリティで対処する既存手法はほとんどない。
本稿では、非線形M2M回帰の形式化と、静的M2Mマップとしてのトランスフォーマーと、動的M2M速度場としてのトランスフォーマーの2つの使いやすさ、表現性、スケーラブルなアプローチを提案する。
提案手法は, 変圧器の自然測度に依存した平均場構造を利用して, 確率分布空間上の非線形M2M写像を学習する。
本稿では, 大腸癌における治療反応を予測するための大規模患者由来のオルガノイドデータセットについて, 合成実験, 相互作用粒子システム, および大規模患者由来のオルガノイドデータセットについて検討した。
関連論文リスト
- Meta Flow Matching: Integrating Vector Fields on the Wasserstein Manifold [83.18058549195855]
自然科学における複数の過程は、確率密度のワッサーシュタイン多様体上のベクトル場として表さなければならない。
特に、疾患の発生とその治療反応が患者固有の細胞の微小環境に依存するパーソナライズド医療において重要である。
本稿では,初期個体群上の流れモデルを改善することで,ワッサーシュタイン多様体上のこれらのベクトル場と一体化するためのメタフローマッチング(MFM)を提案する。
論文 参考訳(メタデータ) (2024-08-26T20:05:31Z) - Handling Overlapping Asymmetric Datasets -- A Twice Penalized P-Spline
Approach [0.40964539027092917]
本研究の目的は,特定の応答に対してより小さなコホートをモデル化できる新しい手法を開発することである。
線形B-SplineとP-Spline近似の2倍のペナル化手法により、線形B-SplineとP-Spline近似との適合性が向上することがわかった。
非アルコール性脂肪肝炎の発症リスクに関する実生活データセットに適用すると、モデル適合性は65%以上向上する。
論文 参考訳(メタデータ) (2023-11-17T12:41:07Z) - Stochastic Optimal Control for Collective Variable Free Sampling of
Molecular Transition Paths [60.254555533113674]
分子系の2つの準安定状態間の遷移経路をサンプリングする問題を考察する。
本稿では,その遷移をサンプリングする機械学習手法を提案する。
論文 参考訳(メタデータ) (2022-06-27T14:01:06Z) - Random Forest Weighted Local Fréchet Regression with Random Objects [18.128663071848923]
本稿では,新しいランダム森林重み付き局所Fr'echet回帰パラダイムを提案する。
最初の方法は、これらの重みを局所平均として、条件付きFr'echet平均を解くことである。
第二の手法は局所線形Fr'echet回帰を行い、どちらも既存のFr'echet回帰法を大幅に改善した。
論文 参考訳(メタデータ) (2022-02-10T09:10:59Z) - Inverting brain grey matter models with likelihood-free inference: a
tool for trustable cytoarchitecture measurements [62.997667081978825]
脳の灰白質細胞構造の特徴は、体密度と体積に定量的に敏感であり、dMRIでは未解決の課題である。
我々は新しいフォワードモデル、特に新しい方程式系を提案し、比較的スパースなb殻を必要とする。
次に,提案手法を逆転させるため,確率自由推論 (LFI) として知られるベイズ解析から最新のツールを適用した。
論文 参考訳(メタデータ) (2021-11-15T09:08:27Z) - Gaussian Function On Response Surface Estimation [12.35564140065216]
メタモデリング手法によるブラックボックス機械学習モデルの解釈(機能とサンプル)のための新しいフレームワークを提案する。
メタモデルは、興味のある領域のデータサンプルでコンピュータ実験を実行することによって、訓練された複雑なモデルによって生成されたデータから推定することができる。
論文 参考訳(メタデータ) (2021-01-04T04:47:00Z) - Higher-order interactions in statistical physics and machine learning: A
model-independent solution to the inverse problem at equilibrium [0.0]
複素系における対方向と高次の相互作用を推論する逆問題は、多くの分野において基本的な問題である。
我々は、全階対称相互作用の普遍的、モデルに依存しない、基本的に偏りのない推定器を導入する。
論文 参考訳(メタデータ) (2020-06-10T18:01:18Z) - Inverse Learning of Symmetries [71.62109774068064]
2つの潜在部分空間からなるモデルで対称性変換を学ぶ。
我々のアプローチは、情報ボトルネックと連続的な相互情報正規化器の組み合わせに基づいています。
我々のモデルは, 人工的および分子的データセットにおける最先端の手法より優れている。
論文 参考訳(メタデータ) (2020-02-07T13:48:52Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。