論文の概要: STEALTH: Steganographic Text Encoding Agnostic to Low-Level Tensor Hardware
- arxiv url: http://arxiv.org/abs/2611.16928v1
- Date: Thu, 12 Nov 2026 15:15:43 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-11-14 01:36:33.499145
- Title: STEALTH: Steganographic Text Encoding Agnostic to Low-Level Tensor Hardware
- Title(参考訳): STEALTH:低レベルテンソルハードウェアに非依存にコードするステレオテキスト
- Abstract要約: 言語ステガノグラフィーは、言語モデルからサンプリングされたテキストの中にメッセージを隠すので、キーがなければ、ステガノグラフィは正直なモデルサンプルと計算的に区別できない。
ほぼ全てのそのようなスキームは、受信機が送信者のトークン確率を正確にビット単位で再計算できると仮定する。
3つのモデルファミリにまたがって、受信機の浮動小数点精度、量子化、GPUアーキテクチャが送信側と異なる場合、ビットエクサクトスキームがメッセージのほとんどをデコードする。
我々は、正確にこの設定のために構築されたスキームであるSTEALTHを提示する。
- 参考スコア(独自算出の注目度): 2.3182313726046315
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Provably secure linguistic steganography hides a message inside text sampled from a language model, so that without the key, a stegotext is computationally indistinguishable from an honest model sample. Nearly every such scheme assumes the receiver can recompute the sender's token probabilities exactly bit for bit. We show this assumption is fragile: across three model families, bit-exact schemes decode almost none of our messages once the receiver's floating-point precision, quantization, or GPU architecture differs from the sender's, or even when the receiver merely scores a text in parallel versus one token at a time, with the same model, precision, and hardware held fixed. We present STEALTH, a scheme built for exactly this setting. The sender draws each token with an exponential race driven by keyed pseudorandom noise, so a receiver's probability mismatch flips a token only when the race is close; a rateless spinal code, decoded by beam search, absorbs the resulting flips without the sender and receiver ever agreeing on a single distribution. We prove stegotexts remain indistinguishable from honest samples under this construction. Empirically, STEALTH decodes every message we sent for every receiver in the sender's model family, at every precision and quantization level, on smaller models, and on a different GPU architecture. STEALTH is even robust across different model families with separate vocabularies and tokenizers, decoding every message we tested. Our approach carries far more payload per token than prior robust schemes, and trained steganalyzers and a targeted statistical test both fail to distinguish its stegotexts from honest model output.
- Abstract(参考訳): 潜在的に安全な言語ステガノグラフィーは、言語モデルからサンプリングされたテキストの中にメッセージを隠すので、キーがなければ、ステガノグラフィは、正直なモデルサンプルと計算的に区別できない。
ほぼ全てのそのようなスキームは、受信機が送信者のトークン確率を正確にビット単位で再計算できると仮定する。
3つのモデルファミリにまたがって、受信機の浮動小数点精度、量子化、GPUアーキテクチャが送信側と異なる場合や、受信機が1つのトークンに対して、同じモデル、精度、ハードウェアが固定されているときでさえも、メッセージのほとんどをデコードする。
我々は、まさにこの設定のために構築されたスキームであるSTEALTHを提示する。
送信者は、キー付き擬似ランダムノイズによって駆動される指数関数で各トークンを描画するので、受信機の確率ミスマッチは、レースが近いときにのみトークンを反転させる。
我々は、この構成の下での正直なサンプルとステゴテキストが区別できないことを証明している。
経験的に、STEALTHは、送信者のモデルファミリーのすべての受信者に対して送信されたすべてのメッセージを、すべての精度と量子化レベルで、より小さなモデル上で、そして異なるGPUアーキテクチャ上でデコードします。
STEALTHは、異なる語彙とトークン化子を持つ異なるモデルファミリに対して、さらに堅牢で、テストしたすべてのメッセージをデコードします。
提案手法では,従来のロバストなスキームよりもトークン当たりのペイロードがはるかに多くなり,トレーニングされたステガナライザーと対象とする統計的テストはどちらも,そのステガナライザーを正直なモデル出力と区別することができない。
関連論文リスト
- Quantum simultaneous decoding via pretty-good measurements of tilted states [13.706331473063882]
本研究では, 同時復号化の自己完結的な説明を行い, 1つの関節計測により, 確立された達成可能な速度でメッセージを復元する。
この証明は、Senの傾いた部分空間法とChengによるかなり良い測定結果の分析を組み合わせたものである。
まず、固定数の送信者を扱う前に、実例と数字で2つのケースを開発します。
論文 参考訳(メタデータ) (2026-10-11T22:21:58Z) - One Token Is Enough: Fingerprinting and Verifying Large Language Models from Single-Token Output Distributions [0.0]
APIアグリゲータ、再販業者、推論プロバイダは、大きな言語モデル(LLM)を使用する。
既存の識別技術には、長いテキスト、トークンレベルのログ確率、反対に作られたプロンプト、またはモデル所有者の協力が必要である。
我々は,LLMの行動指紋を,自明なワンワードプロンプトに対する応答の実証的分布として定義する。
論文 参考訳(メタデータ) (2026-07-11T10:34:17Z) - The Truncation Blind Spot: How Decoding Strategies Systematically Exclude Human-Like Token Choices [3.322376966347217]
8つの言語モデルで180万以上のテキストを分析します。
人間の選択したトークンの8-18%が、典型的なトランケーション境界外にあることがわかった。
論文 参考訳(メタデータ) (2026-03-19T04:36:22Z) - Broken Tokens? Your Language Model can Secretly Handle Non-Canonical Tokenizations [83.93566096400723]
ランダムにサンプリングされたトークン化が与えられた場合、命令調整されたモデルは元の性能の最大93.4%を維持している。
文字レベルのセグメンテーションは文字列操作とコード理解タスクを最大+14%改善する。
右列桁のグルーピングは、大数の算術を+33%向上させる。
論文 参考訳(メタデータ) (2025-06-23T18:02:26Z) - Provably Secure Disambiguating Neural Linguistic Steganography [66.30965740387047]
サブワードに基づく言語モデルを使用する際に生じるセグメンテーションの曖昧さ問題は、時にはデコード障害を引き起こす。
そこで我々はSyncPoolという,セグメンテーションのあいまいさ問題に効果的に対処する,セキュアな曖昧さ回避手法を提案する。
SyncPoolは、候補プールのサイズやトークンの分布を変えないため、確実に安全な言語ステガノグラフィー手法に適用できる。
論文 参考訳(メタデータ) (2024-03-26T09:25:57Z) - Object Recognition as Next Token Prediction [99.40793702627396]
オブジェクト認識を次のトークン予測として提案する。
その考え方は、画像埋め込みからフォームラベルへのテキストトークンの自動回帰予測を行う言語デコーダを適用することである。
論文 参考訳(メタデータ) (2023-12-04T18:58:40Z) - Fast End-to-End Speech Recognition via a Non-Autoregressive Model and
Cross-Modal Knowledge Transferring from BERT [72.93855288283059]
LASO (Listen Attentively, and Spell Once) と呼ばれる非自動回帰音声認識モデルを提案する。
モデルは、エンコーダ、デコーダ、および位置依存集合体(PDS)からなる。
論文 参考訳(メタデータ) (2021-02-15T15:18:59Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。