論文の概要: A Workflow Manager for Complex NLP and Content Curation Pipelines

• arxiv url: http://arxiv.org/abs/2004.14130v1
• Date: Thu, 16 Apr 2020 21:23:28 GMT
• ステータス: 処理完了
• システム内更新日: 2022-12-12 22:05:53.747508
• Title: A Workflow Manager for Complex NLP and Content Curation Pipelines
• Title（参考訳）: 複雑なnlpとコンテンツキュレーションパイプラインのためのワークフローマネージャ
• Authors: Juli\'an Moreno-Schneider, Peter Bourgonje, Florian Kintzel, Georg Rehm
• Abstract要約: ワークフローマネージャは、さまざまなNLPタスクとハードウェアベースのリソース使用との相互運用性の課題に対処する。 汎用性、柔軟性、スケーラビリティ、効率性の4つの重要な原則に基づいて、ワークフローマネージャの最初のバージョンを提示します。
• 参考スコア（独自算出の注目度）: 1.0531877946586032
• License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
• Abstract: We present a workflow manager for the flexible creation and customisation of NLP processing pipelines. The workflow manager addresses challenges in interoperability across various different NLP tasks and hardware-based resource usage. Based on the four key principles of generality, flexibility, scalability and efficiency, we present the first version of the workflow manager by providing details on its custom definition language, explaining the communication components and the general system architecture and setup. We currently implement the system, which is grounded and motivated by real-world industry use cases in several innovation and transfer projects.
• Abstract（参考訳）: NLP処理パイプラインの柔軟な作成とカスタマイズのためのワークフローマネージャを提案する。 workflow managerはさまざまなnlpタスクとハードウェアベースのリソース使用における相互運用性の課題に対処する。 汎用性、柔軟性、スケーラビリティ、効率性の4つの重要な原則に基づいて、我々はワークフローマネージャの最初のバージョンを、そのカスタム定義言語の詳細を提供し、コミュニケーションコンポーネントと一般的なシステムアーキテクチャとセットアップを説明する。 我々は現在,いくつかのイノベーション・トランスファープロジェクトにおいて,実業界でのユースケースを基盤とし,モチベーションの高いシステムを実装している。

関連論文リスト

• Exascale Workflow Applications and Middleware: An ExaWorks Retrospective [3.4423220997316593]
  多様な大規模プラットフォーム上で異種ソフトウェアコンポーネントをコーディネートし、デプロイするという課題に対処するExaWorksプロジェクトを紹介します。 我々はジョブ管理抽象化APIであるSoftware Development Toolkit(SDK)と、ジョブの提出と監視のための最小限のインターフェースであるPSI/Jを開発した。 当社のプロジェクトでは,ワークフローコミュニティや大規模コンピューティング施設,HPCプラットフォームベンダと連携して,エクサスケールでの要件を持続的に解決する方法について論じる。
  論文  参考訳（メタデータ） (2024-11-16T00:10:53Z)
• Benchmarking Agentic Workflow Generation [80.74757493266057]
  複数面シナリオと複雑なグラフワークフロー構造を備えた統合ワークフロー生成ベンチマークであるWorFBenchを紹介する。 また,サブシーケンスとサブグラフマッチングアルゴリズムを利用したシステム評価プロトコルWorFEvalを提案する。 我々は、生成されたタスクが下流のタスクを強化し、推論中により少ない時間で優れたパフォーマンスを達成することができることを観察する。
  論文  参考訳（メタデータ） (2024-10-10T12:41:19Z)
• ComfyGen: Prompt-Adaptive Workflows for Text-to-Image Generation [87.39861573270173]
  本稿では,各ユーザプロンプトに自動的にワークフローをカスタマイズすることを目的とする,プロンプト適応型ワークフロー生成の新しいタスクを紹介する。 本稿では,この課題に対処する2つの LLM ベースの手法を提案する。ユーザ・参照データから学習するチューニングベース手法と,既存のフローを選択するために LLM を使用するトレーニングフリー手法である。 本研究は,現場における既存研究の方向性を補完し,テキスト・画像生成の品質向上のための新たな経路を提供することを示す。
  論文  参考訳（メタデータ） (2024-10-02T16:43:24Z)
• Multi-domain Knowledge Graph Collaborative Pre-training and Prompt Tuning for Diverse Downstream Tasks [48.102084345907095]
  知識グラフ事前学習(KGP)は、大規模知識グラフ(KG)上でニューラルネットワークを事前訓練することを目的としている MuDoKは、異なる下流タスクバックボーンに適応可能な、プラグインとプレイのプロンプト学習アプローチである。 私たちのフレームワークは、その汎用性、効率性、転送可能性とともに、大幅なパフォーマンス向上をもたらします。
  論文  参考訳（メタデータ） (2024-05-21T08:22:14Z)
• FlowMind: Automatic Workflow Generation with LLMs [12.848562107014093]
  本稿では,Large Language Models(LLM)の機能を活用した新しいアプローチであるFlowMindを紹介する。 信頼性のあるアプリケーションプログラミングインタフェース(API)を用いたLLM推論を支援する講義のための汎用的なプロンプトレシピを提案する。 また、N-CENレポートからの質問応答タスクをベンチマークするための金融の新しいデータセットであるNCEN-QAについても紹介する。
  論文  参考訳（メタデータ） (2024-03-17T00:36:37Z)
• ManagerTower: Aggregating the Insights of Uni-Modal Experts for Vision-Language Representation Learning [73.47165576175541]
  2tower Vision-Language (VL)モデルは、様々な下流タスクに有望な改善を示している。 異なるレベルの訓練済みユニモーダル専門家の洞察を収集し、組み合わせた、新しいVLモデルアーキテクチャであるManageTowerを提案する。
  論文  参考訳（メタデータ） (2023-05-31T18:23:57Z)
• Cloud Services Enable Efficient AI-Guided Simulation Workflows across Heterogeneous Resources [3.0448404204967003]
  このような異種システムに2つのAI誘導シミュレーションをデプロイした経験を紹介する。 このアプローチのユニークな側面は、クラウドでホストされた管理サービスを使用することです。 これらの手法は,資源間の直接接続に依存するシステムと性能的に同等であることを示す。
  論文  参考訳（メタデータ） (2023-03-15T17:54:02Z)
• Nemo: Guiding and Contextualizing Weak Supervision for Interactive Data Programming [77.38174112525168]
  私たちは、WS 学習パイプラインの全体的な生産性を、一般的な WS 監督アプローチと比較して平均20%(最大 47% のタスク)改善する、エンドツーエンドのインタラクティブなスーパービジョンシステムである Nemo を紹介します。
  論文  参考訳（メタデータ） (2022-03-02T19:57:32Z)
• A Data-Centric Framework for Composable NLP Workflows [109.51144493023533]
  アプリケーションドメインにおける経験的自然言語処理システム(例えば、ヘルスケア、ファイナンス、教育)は、複数のコンポーネント間の相互運用を伴う。 我々は,このような高度なNLPの高速な開発を支援するために,統一的なオープンソースフレームワークを構築した。
  論文  参考訳（メタデータ） (2021-03-02T16:19:44Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。

指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。