論文の概要: DynamicISP: Dynamically Controlled Image Signal Processor for Image
Recognition
- arxiv url: http://arxiv.org/abs/2211.01146v3
- Date: Mon, 28 Aug 2023 02:59:24 GMT
- ステータス: 処理完了
- システム内更新日: 2023-08-30 01:24:10.030300
- Title: DynamicISP: Dynamically Controlled Image Signal Processor for Image
Recognition
- Title(参考訳): dynamicisp:画像認識のための動的制御型画像信号処理装置
- Authors: Masakazu Yoshimura, Junji Otsuka, Atsushi Irie, Takeshi Ohashi
- Abstract要約: 動的ISPは、複数の古典的ISP関数から構成され、前のフレームの認識結果に応じて各フレームのパラメータを動的に制御する。
本稿では,複数のISP関数のパラメータの制御に成功し,単一および複数カテゴリのオブジェクト検出タスクにおいて,計算コストの低い最先端の精度を実現する。
- 参考スコア(独自算出の注目度): 0.5530212768657544
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Image Signal Processors (ISPs) play important roles in image recognition
tasks as well as in the perceptual quality of captured images. In most cases,
experts make a lot of effort to manually tune many parameters of ISPs, but the
parameters are sub-optimal. In the literature, two types of techniques have
been actively studied: a machine learning-based parameter tuning technique and
a DNN-based ISP technique. The former is lightweight but lacks expressive
power. The latter has expressive power, but the computational cost is too heavy
on edge devices. To solve these problems, we propose "DynamicISP," which
consists of multiple classical ISP functions and dynamically controls the
parameters of each frame according to the recognition result of the previous
frame. We show our method successfully controls the parameters of multiple ISP
functions and achieves state-of-the-art accuracy with low computational cost in
single and multi-category object detection tasks.
- Abstract(参考訳): 画像信号処理装置(isp)は、画像認識タスクや撮像画像の知覚品質において重要な役割を果たす。
ほとんどの場合、専門家はISPの多くのパラメータを手動で調整するために多くの努力をしています。
文献では、機械学習に基づくパラメータチューニング技術とDNNベースのISP技術という2つの手法が活発に研究されている。
前者は軽量だが、表現力に欠ける。
後者は表現力があるが、計算コストはエッジデバイスでは重すぎる。
これらの問題を解決するために,複数の古典的ISP関数からなるDynamicISPを提案し,前フレームの認識結果に応じて各フレームのパラメータを動的に制御する。
本稿では,複数のISP関数のパラメータの制御に成功し,単一および複数カテゴリのオブジェクト検出タスクにおいて,計算コストの低い最先端の精度を実現する。
関連論文リスト
- AdaptiveISP: Learning an Adaptive Image Signal Processor for Object Detection [15.63212587981912]
Image Signal Processors (ISP)は、生のセンサー信号をデジタル画像に変換する。
ISPは画像品質を最大化するために設計されており、これはハイレベルコンピュータビジョンタスクのパフォーマンスに最適である。
本稿では,タスク駆動型かつシーン適応型ISPであるAdaptiveISPを提案する。
論文 参考訳(メタデータ) (2024-10-30T11:49:06Z) - Parameter-Inverted Image Pyramid Networks [49.35689698870247]
Inverted Image Pyramid Networks (PIIP) と呼ばれる新しいネットワークアーキテクチャを提案する。
私たちの中核となる考え方は、パラメータサイズの異なるモデルを使用して、画像ピラミッドの解像度の異なるレベルを処理することです。
PIIPは、オブジェクト検出、セグメンテーション、画像分類などのタスクにおいて優れたパフォーマンスを達成する。
論文 参考訳(メタデータ) (2024-06-06T17:59:10Z) - Simple Image Signal Processing using Global Context Guidance [56.41827271721955]
ディープラーニングベースのISPは、深層ニューラルネットワークを使用してRAW画像をDSLRライクなRGBイメージに変換することを目指している。
我々は,全RAW画像からグローバルなコンテキスト情報をキャプチャするために,任意のニューラルISPに統合可能な新しいモジュールを提案する。
本モデルでは,多種多様な実スマートフォン画像を用いて,様々なベンチマークで最新の結果が得られる。
論文 参考訳(メタデータ) (2024-04-17T17:11:47Z) - PQDynamicISP: Dynamically Controlled Image Signal Processor for Any Image Sensors Pursuing Perceptual Quality [0.5530212768657544]
ISPのパラメータをチューニングする代わりに,各環境,さらにはローカルでも動的に制御することを提案する。
本手法では,1つのISPで複数のイメージセンサを動的制御により処理することができるが,従来の手法では各センサのトレーニングが必要であった。
論文 参考訳(メタデータ) (2024-03-15T08:08:24Z) - Learning to Compose SuperWeights for Neural Parameter Allocation Search [61.078949532440724]
提案手法は,同じ重み集合を用いて多くのネットワークに対してパラメータを生成することができることを示す。
これにより、効率的なアンサンブルや、いつでも予測できるようなタスクをサポートできます。
論文 参考訳(メタデータ) (2023-12-03T04:20:02Z) - DRL-ISP: Multi-Objective Camera ISP with Deep Reinforcement Learning [82.4114562598703]
本稿では,Deep Reinforcement Learning(DRL)とカメラISPツールボックスを利用するカメラISPフレームワークを提案する。
DRLベースのカメラISPフレームワークは、ツールボックスから適切なツールを反復的に選択し、画像に適用して、与えられた視覚タスク固有の報酬関数を最大化する。
提案するDRLベースのISPフレームワークは,RAW-to-RGB画像復元,2次元物体検出,単眼深度推定などの視覚タスクに応じて,画像品質を効果的に向上する。
論文 参考訳(メタデータ) (2022-07-07T04:34:05Z) - Controllable Image Enhancement [66.18525728881711]
いくつかのパラメータを制御して、複数のスタイルで高品質な画像を生成できる半自動画像強調アルゴリズムを提案する。
エンコーダ・デコーダフレームワークは、リタッチスキルを潜在コードにエンコードし、イメージ信号処理機能のパラメータにデコードする。
論文 参考訳(メタデータ) (2022-06-16T23:54:53Z) - ReconfigISP: Reconfigurable Camera Image Processing Pipeline [75.46902933531247]
Image Signal Processor(ISP)は、センサー信号を画像に変換するデジタルカメラにおいて、知覚と理解のために重要なコンポーネントである。
既存のISP設計では、固定されたアーキテクチャ(例えば、厳密な順序で接続されたいくつかのシーケンシャルなモジュール)が常に採用されている。
本研究では,Reconfigurable ISP(Reconfigurable ISP)を提案する。
論文 参考訳(メタデータ) (2021-09-10T09:56:43Z) - TFPnP: Tuning-free Plug-and-Play Proximal Algorithm with Applications to
Inverse Imaging Problems [22.239477171296056]
Plug-and-Play (MM) は非最適化フレームワークであり、例えば、数値アルゴリズムと高度なデノゲーション前処理を組み合わせたものである。
我々は、学習戦略とともに最先端の成果である、より難解な問題に対するいくつかの実践的考察について論じる。
論文 参考訳(メタデータ) (2020-11-18T14:19:30Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。