論文の概要: Structured Like a Language Model: Analysing AI as an Automated Subject
- arxiv url: http://arxiv.org/abs/2212.05058v1
- Date: Thu, 8 Dec 2022 21:58:43 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-13 17:30:59.854179
- Title: Structured Like a Language Model: Analysing AI as an Automated Subject
- Title(参考訳): 構造化された言語モデル:AIを自動課題として分析する
- Authors: Liam Magee, Vanicka Arora, Luke Munn
- Abstract要約: 我々は、大規模言語モデルに対する主観性の意図的な予測は、AIの振る舞いを分析できる別のフレームを生み出すことができると論じる。
我々は、最先端の自然言語処理性能を実現するシステムのリリースにおいて、言語モデルに関する短い歴史を辿る。
批判的メディア手法と精神分析理論が組み合わさって、AI駆動型言語システムの強力な新しい能力を把握するための生産的枠組みを提供すると結論付けている。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by-sa/4.0/
- Abstract: Drawing from the resources of psychoanalysis and critical media studies, in
this paper we develop an analysis of Large Language Models (LLMs) as automated
subjects. We argue the intentional fictional projection of subjectivity onto
LLMs can yield an alternate frame through which AI behaviour, including its
productions of bias and harm, can be analysed. First, we introduce language
models, discuss their significance and risks, and outline our case for
interpreting model design and outputs with support from psychoanalytic
concepts. We trace a brief history of language models, culminating with the
releases, in 2022, of systems that realise state-of-the-art natural language
processing performance. We engage with one such system, OpenAI's InstructGPT,
as a case study, detailing the layers of its construction and conducting
exploratory and semi-structured interviews with chatbots. These interviews
probe the model's moral imperatives to be helpful, truthful and harmless by
design. The model acts, we argue, as the condensation of often competing social
desires, articulated through the internet and harvested into training data,
which must then be regulated and repressed. This foundational structure can
however be redirected via prompting, so that the model comes to identify with,
and transfer, its commitments to the immediate human subject before it. In
turn, these automated productions of language can lead to the human subject
projecting agency upon the model, effecting occasionally further forms of
countertransference. We conclude that critical media methods and psychoanalytic
theory together offer a productive frame for grasping the powerful new
capacities of AI-driven language systems.
- Abstract(参考訳): 本稿では,心理分析と批判メディア研究の資源から,Large Language Models (LLMs) の分析を自動化対象として開発する。
我々は、LLMに主観性を意図的に投影することで、偏見や害などを含むAIの振る舞いを分析できる別の枠組みが得られると主張している。
まず,言語モデルを紹介し,その意義とリスクを議論し,モデル設計とアウトプットを精神分析的概念から支援して解釈する事例を概説する。
2022年には、最先端の自然言語処理性能を実現するシステムのリリースとともに、言語モデルに関する短い歴史を辿った。
このようなシステムであるOpenAIのInstructGPTを事例として,構築のレイヤを詳述し,チャットボットによる探索的,半構造化的なインタビューを行う。
これらのインタビューは、デザインによってモデルの道徳的命令が有益で、誠実で無害であることを調査する。
このモデルは、しばしば競合する社会的欲求の凝縮として、インターネットを通じて具体化され、訓練データとして収集され、規制され、抑圧されなければならない。
しかし、この基礎的な構造はプロンプトによってリダイレクトされ、モデルが直接の人間対象に対してそのコミットメントを識別し、伝達する。
これらの自動的な言語生産は、人体投射エージェントをモデルに導く可能性があり、時として反伝達のさらなる形態に影響を及ぼす。
批判的メディア手法と精神分析理論は共に、ai駆動型言語システムの強力な新しい能力を理解するための生産的な枠組みを提供すると結論づける。
関連論文リスト
- Proceedings of the First International Workshop on Next-Generation Language Models for Knowledge Representation and Reasoning (NeLaMKRR 2024) [16.282850445579857]
推論は人間の知性の本質的な要素であり、批判的に考える能力において基本的な役割を果たす。
自然言語処理における最近の進歩は、トランスフォーマーに基づく言語モデルの出現とともに、これらのモデルが推論能力を示す可能性を示唆している。
言語モデルにおける推論について議論が続いているが、これらのモデルが実際に推論できる程度に注目することは容易ではない。
論文 参考訳(メタデータ) (2024-10-07T02:31:47Z) - Explanation, Debate, Align: A Weak-to-Strong Framework for Language Model Generalization [0.6629765271909505]
本稿では,言語モデルにおける弱強一般化によるモデルアライメントの新たなアプローチを提案する。
このファシリテーションに基づくアプローチは、モデルの性能を高めるだけでなく、モデルアライメントの性質に関する洞察も提供することを示唆している。
論文 参考訳(メタデータ) (2024-09-11T15:16:25Z) - Generative Artificial Intelligence: A Systematic Review and Applications [7.729155237285151]
本稿では、ジェネレーティブAIにおける最近の進歩と技術に関する体系的なレビューと分析について述べる。
生成AIがこれまで行った大きな影響は、大きな言語モデルの開発による言語生成である。
論文は、責任あるAIの原則と、これらの生成モデルの持続可能性と成長に必要な倫理的考察から締めくくられる。
論文 参考訳(メタデータ) (2024-05-17T18:03:59Z) - Detection of Machine-Generated Text: Literature Survey [0.0]
本研究の目的は,機械生成テキスト分野における成果と成果をコンパイルし,合成することである。
また、機械が生成するテキストの傾向を概観し、より大きな社会的意味を探求する。
論文 参考訳(メタデータ) (2024-01-02T01:44:15Z) - Combatting Human Trafficking in the Cyberspace: A Natural Language
Processing-Based Methodology to Analyze the Language in Online Advertisements [55.2480439325792]
このプロジェクトは、高度自然言語処理(NLP)技術により、オンラインC2Cマーケットプレースにおける人身売買の急激な問題に取り組む。
我々は、最小限の監督で擬似ラベル付きデータセットを生成する新しい手法を導入し、最先端のNLPモデルをトレーニングするための豊富なリソースとして機能する。
重要な貢献は、Integrated Gradientsを使った解釈可能性フレームワークの実装であり、法執行にとって重要な説明可能な洞察を提供する。
論文 参考訳(メタデータ) (2023-11-22T02:45:01Z) - RT-2: Vision-Language-Action Models Transfer Web Knowledge to Robotic
Control [140.48218261864153]
本研究では,インターネット規模のデータに基づいて学習した視覚言語モデルを,エンドツーエンドのロボット制御に直接組み込む方法について検討する。
提案手法は,インターネット規模のトレーニングから,RT-2による創発的能力の獲得を可能にした。
論文 参考訳(メタデータ) (2023-07-28T21:18:02Z) - Foundational Models Defining a New Era in Vision: A Survey and Outlook [151.49434496615427]
視覚シーンの構成的性質を観察し、推論する視覚システムは、我々の世界を理解するのに不可欠である。
モデルは、このようなモダリティと大規模なトレーニングデータとのギャップを埋めることを学び、コンテキスト推論、一般化、テスト時の迅速な機能を容易にした。
このようなモデルの出力は、例えば、バウンディングボックスを設けて特定のオブジェクトをセグメント化したり、画像や映像シーンについて質問したり、言語命令でロボットの動作を操作することで対話的な対話を行うなど、リトレーニングすることなく、人為的なプロンプトによって変更することができる。
論文 参考訳(メタデータ) (2023-07-25T17:59:18Z) - From Word Models to World Models: Translating from Natural Language to
the Probabilistic Language of Thought [124.40905824051079]
言語インフォームド・シンキングのための計算フレームワークである「構成」を合理的に提案する。
我々は、自然言語から確率論的思考言語への文脈感応的なマッピングとして、言語の意味を定式化する。
LLMは、現実的に適切な言語的意味をキャプチャする文脈依存翻訳を生成することができることを示す。
認知的なモチベーションを持つシンボリックモジュールを統合するために、我々のフレームワークを拡張します。
論文 参考訳(メタデータ) (2023-06-22T05:14:00Z) - Grounded Decoding: Guiding Text Generation with Grounded Models for
Embodied Agents [111.15288256221764]
グラウンデッドデコーディングプロジェクトは、両方のモデルの知識を活用することで、ロボット環境で複雑な長期タスクを解決することを目的としている。
我々はこれを確率的フィルタリングに類似した問題として、言語モデルの下で高い確率を持つシーケンスをデコードし、基底モデル対象のセットで高い確率を示す。
本研究では,3つのシミュレーション領域と実世界の領域にまたがって,そのような基底モデルがどのように得られるのかを実証し,両モデルの知識を活用して,ロボット環境での複雑な長期的タスクを解くことができることを示す。
論文 参考訳(メタデータ) (2023-03-01T22:58:50Z) - DIME: Fine-grained Interpretations of Multimodal Models via Disentangled
Local Explanations [119.1953397679783]
我々は,マルチモーダルモデルの解釈における最先端化に注力する。
提案手法であるDIMEは,マルチモーダルモデルの高精度かつきめ細かな解析を可能にする。
論文 参考訳(メタデータ) (2022-03-03T20:52:47Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。