論文の概要: A Workflow Manager for Complex NLP and Content Curation Pipelines
- arxiv url: http://arxiv.org/abs/2004.14130v1
- Date: Thu, 16 Apr 2020 21:23:28 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-12 22:05:53.747508
- Title: A Workflow Manager for Complex NLP and Content Curation Pipelines
- Title(参考訳): 複雑なnlpとコンテンツキュレーションパイプラインのためのワークフローマネージャ
- Authors: Juli\'an Moreno-Schneider, Peter Bourgonje, Florian Kintzel, Georg
Rehm
- Abstract要約: ワークフローマネージャは、さまざまなNLPタスクとハードウェアベースのリソース使用との相互運用性の課題に対処する。
汎用性、柔軟性、スケーラビリティ、効率性の4つの重要な原則に基づいて、ワークフローマネージャの最初のバージョンを提示します。
- 参考スコア(独自算出の注目度): 1.0531877946586032
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We present a workflow manager for the flexible creation and customisation of
NLP processing pipelines. The workflow manager addresses challenges in
interoperability across various different NLP tasks and hardware-based resource
usage. Based on the four key principles of generality, flexibility, scalability
and efficiency, we present the first version of the workflow manager by
providing details on its custom definition language, explaining the
communication components and the general system architecture and setup. We
currently implement the system, which is grounded and motivated by real-world
industry use cases in several innovation and transfer projects.
- Abstract(参考訳): NLP処理パイプラインの柔軟な作成とカスタマイズのためのワークフローマネージャを提案する。
workflow managerはさまざまなnlpタスクとハードウェアベースのリソース使用における相互運用性の課題に対処する。
汎用性、柔軟性、スケーラビリティ、効率性の4つの重要な原則に基づいて、我々はワークフローマネージャの最初のバージョンを、そのカスタム定義言語の詳細を提供し、コミュニケーションコンポーネントと一般的なシステムアーキテクチャとセットアップを説明する。
我々は現在,いくつかのイノベーション・トランスファープロジェクトにおいて,実業界でのユースケースを基盤とし,モチベーションの高いシステムを実装している。
関連論文リスト
- Leveraging Large Language Models to Build and Execute Computational
Workflows [40.572754656757475]
本稿では,これらの新たな能力が,複雑な科学的研究を促進するためにどのように活用できるかを考察する。
我々はPhyloflowをOpenAIの関数呼び出しAPIに統合する試みからの最初の成果を提示し、包括的なワークフロー管理システムを開発するための戦略を概説する。
論文 参考訳(メタデータ) (2023-12-12T20:17:13Z) - Agent Lumos: Unified and Modular Training for Open-Source Language
Agents [93.16203525451985]
LUMOSは、オープンソースのLLMベースのエージェントをトレーニングするための最初のフレームワークの1つです。
LUMOSは、高レベルなサブゴール生成を学習する計画モジュールを備えた、学習可能で統一されたモジュラーアーキテクチャを備えている。
我々は、多様な地道理理性から導かれた大規模で統一的で高品質なトレーニングアノテーションを収集する。
論文 参考訳(メタデータ) (2023-11-09T00:30:13Z) - ManagerTower: Aggregating the Insights of Uni-Modal Experts for
Vision-Language Representation Learning [73.47165576175541]
2tower Vision-Language (VL)モデルは、様々な下流タスクに有望な改善を示している。
異なるレベルの訓練済みユニモーダル専門家の洞察を収集し、組み合わせた、新しいVLモデルアーキテクチャであるManageTowerを提案する。
論文 参考訳(メタデータ) (2023-05-31T18:23:57Z) - Cloud Services Enable Efficient AI-Guided Simulation Workflows across
Heterogeneous Resources [3.0448404204967003]
このような異種システムに2つのAI誘導シミュレーションをデプロイした経験を紹介する。
このアプローチのユニークな側面は、クラウドでホストされた管理サービスを使用することです。
これらの手法は,資源間の直接接続に依存するシステムと性能的に同等であることを示す。
論文 参考訳(メタデータ) (2023-03-15T17:54:02Z) - Controllable Dynamic Multi-Task Architectures [92.74372912009127]
本稿では,そのアーキテクチャと重みを動的に調整し,所望のタスク選択とリソース制約に適合させる制御可能なマルチタスクネットワークを提案する。
本稿では,タスク親和性と分岐正規化損失を利用した2つのハイパーネットの非交互トレーニングを提案し,入力の嗜好を取り入れ,適応重み付き木構造モデルを予測する。
論文 参考訳(メタデータ) (2022-03-28T17:56:40Z) - Nemo: Guiding and Contextualizing Weak Supervision for Interactive Data
Programming [77.38174112525168]
私たちは、WS 学習パイプラインの全体的な生産性を、一般的な WS 監督アプローチと比較して平均20%(最大 47% のタスク)改善する、エンドツーエンドのインタラクティブなスーパービジョンシステムである Nemo を紹介します。
論文 参考訳(メタデータ) (2022-03-02T19:57:32Z) - A Data-Centric Framework for Composable NLP Workflows [109.51144493023533]
アプリケーションドメインにおける経験的自然言語処理システム(例えば、ヘルスケア、ファイナンス、教育)は、複数のコンポーネント間の相互運用を伴う。
我々は,このような高度なNLPの高速な開発を支援するために,統一的なオープンソースフレームワークを構築した。
論文 参考訳(メタデータ) (2021-03-02T16:19:44Z) - Deploying Crowdsourcing for Workflow Driven Business Process [5.531452309322118]
本稿では,クラウドソーシングプラットフォームとワークフローをサポートするシステムを統合する方法について論じる。
この作業は、選択したプロセスタスクを無制限の人的リソースで実行できるようにすることで、典型的なビジネスシステムの機能的機能を拡張する試みである。
論文 参考訳(メタデータ) (2021-01-04T18:57:21Z) - Deep Multimodal Neural Architecture Search [178.35131768344246]
様々なマルチモーダル学習タスクのための一般化された深層マルチモーダルニューラルアーキテクチャサーチ(MMnas)フレームワークを考案する。
マルチモーダル入力が与えられたら、まずプリミティブ演算のセットを定義し、その後、ディープエンコーダ-デコーダベースの統一バックボーンを構築する。
統合されたバックボーンの上にタスク固有のヘッドをアタッチして、異なるマルチモーダル学習タスクに取り組む。
論文 参考訳(メタデータ) (2020-04-25T07:00:32Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。