PhyCV: The First Physics-inspired Computer Vision Library

要約

タイトル：PhyCV：物理学に基づく最初のコンピュータビジョンライブラリ
要約：
– PhyCVは、物理現象を支配する物理学方程式から直接派生したアルゴリズムを使用する最初のコンピュータビジョンライブラリです。
– 現在リリースされているアルゴリズムは、自然および工学的な回折特性を持つ物理媒質を通過した光の伝搬を形容的に模倣するものであり、その後相干検出が続きます。
– 従来のアルゴリズムは、手作りの経験則のシーケンスであったり、データ駆動型で計算負荷が高い深層学習アルゴリズムであるのに対し、物理に基づくアルゴリズムは、アルゴリズムの発明のための設計図として自然の物理法則を活用します。
– PhyCVは低次元性と高効率を備え、エッジコンピューティングアプリケーションに最適です。NVIDIA Jetson Nanoを使用したリアルタイムビデオ処理のデモを実演します。
– さらに、これらのアルゴリズムは、アナログコンピューティングの形で実際の物理デバイスに実装され、高速で効率的な計算が可能です。
– オープンソースのコードは、https://github.com/JalaliLabUCLA/phycvで利用可能です。

要約(オリジナル)

PhyCV is the first computer vision library which utilizes algorithms directly derived from the equations of physics governing physical phenomena. The algorithms appearing in the current release emulate, in a metaphoric sense, the propagation of light through a physical medium with natural and engineered diffractive properties followed by coherent detection. Unlike traditional algorithms that are a sequence of hand-crafted empirical rules or deep learning algorithms that are usually data-driven and computationally heavy, physics-inspired algorithms leverage physical laws of nature as blueprints for inventing algorithms. PhyCV features low-dimensionality and high- efficiency, making it ideal for edge computing applications. We demonstrate real-time video processing on NVIDIA Jetson Nano using PhyCV. In addition, these algorithms have the potential to be implemented in real physical devices for fast and efficient computation in the form of analog computing. The open-sourced code is available at https://github.com/JalaliLabUCLA/phycv

arxiv情報

提供元, 利用サービス

arxiv.jp, OpenAI