論文の概要: AstroCLIP: Cross-Modal Pre-Training for Astronomical Foundation Models
- arxiv url: http://arxiv.org/abs/2310.03024v1
- Date: Wed, 4 Oct 2023 17:59:38 GMT
- ステータス: 処理完了
- システム内更新日: 2023-10-05 13:20:40.829782
- Title: AstroCLIP: Cross-Modal Pre-Training for Astronomical Foundation Models
- Title(参考訳): AstroCLIP:天文基礎モデルのためのクロスモーダル事前訓練
- Authors: Francois Lanusse, Liam Parker, Siavash Golkar, Miles Cranmer, Alberto
Bietti, Michael Eickenberg, Geraud Krawezik, Michael McCabe, Ruben Ohana,
Mariel Pettee, Bruno Regaldo-Saint Blancard, Tiberiu Tesileanu, Kyunghyun
Cho, Shirley Ho
- Abstract要約: 本稿では、天文学基盤モデルの構築を促進するための戦略であるAstroCLIPを紹介する。
我々は,銀河の光学スペクトルと画像の相互比較学習手法が,高い情報的埋め込みをもたらすことを実証した。
- 参考スコア(独自算出の注目度): 42.19323262199993
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We present AstroCLIP, a strategy to facilitate the construction of
astronomical foundation models that bridge the gap between diverse
observational modalities. We demonstrate that a cross-modal contrastive
learning approach between images and optical spectra of galaxies yields highly
informative embeddings of both modalities. In particular, we apply our method
on multi-band images and optical spectra from the Dark Energy Spectroscopic
Instrument (DESI), and show that: (1) these embeddings are well-aligned between
modalities and can be used for accurate cross-modal searches, and (2) these
embeddings encode valuable physical information about the galaxies -- in
particular redshift and stellar mass -- that can be used to achieve competitive
zero- and few- shot predictions without further finetuning. Additionally, in
the process of developing our approach, we also construct a novel,
transformer-based model and pretraining approach for processing galaxy spectra.
- Abstract(参考訳): 多様な観測モード間のギャップを埋める天体基盤モデルの構築を容易にするための戦略であるAstroCLIPを提示する。
我々は、画像と銀河の光学スペクトルの相互比較学習アプローチが、両モードの高度に情報的埋め込みをもたらすことを示した。
特に, 暗エネルギー分光器 (desi) からのマルチバンド画像と光学スペクトルに適用し, (1) これらの埋め込みはモーダリティの間によく一致し, 正確なクロスモーダル探索に使用できること, (2) これらの埋め込みは銀河の貴重な物理情報(特に赤方偏移と恒星質量)をエンコードし, さらなる微調整をすることなく, 競争力のあるゼロショットと少数ショットの予測を達成することができることを示した。
さらに、このアプローチの開発過程では、銀河スペクトルを処理するための新しいトランスフォーマベースのモデルとプリトレーニングアプローチも構築する。
関連論文リスト
- Tutorial: Shaping the Spatial Correlations of Entangled Photon Pairs [1.2316671400812602]
このチュートリアルでは、光子対の絡み合いに基づく画像スキームに古典的な光整形の概念を適用する方法について述べる。
光子対状態の空間相関を形成するために空間光変調器を用いる2つの基本的な実験構成について述べる。
本稿では、これらの概念を拡張して光子対による収差と散乱補正を行う2つの最近の例を示す。
論文 参考訳(メタデータ) (2024-02-12T14:20:33Z) - Quantum limits of parameter estimation in long-baseline imaging [1.0828616610785522]
本報告では, 分散イメージングシステムによって提供される1つのモノリシック望遠鏡の上下上における拡張の成因について述べる。
2つのクラスのビーム合成戦略を用いて量子最適測定を実現する方法を示す。
論文 参考訳(メタデータ) (2023-05-05T21:05:52Z) - Retrieving space-dependent polarization transformations via near-optimal
quantum process tomography [55.41644538483948]
トモグラフィー問題に対する遺伝的および機械学習アプローチの適用について検討する。
ニューラルネットワークベースのスキームは、リアルタイムにキャラクタリゼーションを必要とするアプリケーションにおいて、重要なスピードアップを提供する。
これらの結果は、より一般的な量子プロセスにおけるトモグラフィーアプローチの最適化の基礎となることを期待する。
論文 参考訳(メタデータ) (2022-10-27T11:37:14Z) - Inverse-Designed Meta-Optics with Spectral-Spatial Engineered Response
to Mimic Color Perception [0.1773006951689229]
逆設計法は、光を同時に集中させ、フィルターを使わずに焦点光のスペクトルを形作る、単層メタ光学のセットを作成するために用いられる。
その結果,CIE 1931 XYZ色空間の色整合関数を模したスペクトルが得られた。
論文 参考訳(メタデータ) (2022-04-28T14:12:54Z) - Exploring Separable Attention for Multi-Contrast MR Image
Super-Resolution [88.16655157395785]
本稿では,SANet という,分離可能なアテンションネットワーク (優先のアテンションと背景分離のアテンションを含む) を提案する。
補助コントラストの助けを借りて、前後方向の前景と背景領域を探索することができる。
これは、補助コントラストを用いて前景と背景領域を予測する分離可能なアテンションメカニズムを探索する最初のモデルである。
論文 参考訳(メタデータ) (2021-09-03T05:53:07Z) - Variational Inference for Deblending Crowded Starfields [0.8471366736328809]
本稿では,混み合った星場の天体画像のソースを損なうベイズ的手法であるStarNetを提案する。
M2球状星団のSDSS画像を用いた実験では、スターネットは2つの競合する手法よりもかなり精度が高い。
論文 参考訳(メタデータ) (2021-02-04T04:36:58Z) - Semi-parametric $\gamma$-ray modeling with Gaussian processes and
variational inference [9.405199445496429]
銀河起源の不確実な拡散放出をモデル化することは、天体物理学的なガンマ線データの特徴に深刻な偏見を与える可能性がある。
ガンマ線解析のためのフレキシブルな背景および信号モデルを構築するためにガウス過程と変分推論を用いる新しい手法のクラスを導入する。
論文 参考訳(メタデータ) (2020-10-20T17:04:37Z) - Hyperentanglement in structured quantum light [50.591267188664666]
光の自由度が1つ以上の高次元量子系の絡み合いは、情報容量を増大させ、新しい量子プロトコルを可能にする。
本稿では、時間周波数およびベクトル渦構造モードで符号化された高次元・耐雑音性ハイパーエンタングル状態の関数的情報源を示す。
我々は2光子干渉と量子状態トモグラフィーによって特徴付けるテレコム波長で高い絡み合った光子対を生成し、ほぼ均一な振動と忠実さを達成する。
論文 参考訳(メタデータ) (2020-06-02T18:00:04Z) - Machine learning-based classification of vector vortex beams [48.7576911714538]
渦ベクトルビームの分類に対する新しいフレキシブルな実験的アプローチを示す。
まず、フォトニック量子ウォークにインスパイアされた任意のベクトル渦ビームを生成するためのプラットフォームについて述べる。
次に、最近の機械学習手法を利用して特定偏光パターンを認識し分類する。
論文 参考訳(メタデータ) (2020-05-16T10:58:49Z) - Hyperspectral-Multispectral Image Fusion with Weighted LASSO [68.04032419397677]
本稿では,高スペクトル像と多スペクトル像を融合させて高画質な高スペクトル出力を実現する手法を提案する。
提案したスパース融合と再構成は,既存の公開画像の手法と比較して,定量的に優れた結果が得られることを示す。
論文 参考訳(メタデータ) (2020-03-15T23:07:56Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。