CLIPSE — a minimalistic CLIP-based image search engine for research

要約

Clipseの簡単な概要、研究の主なアプリケーションを備えた自己ホストの画像検索エンジンが提供されています。
一般に、Clipseはクリップ埋め込みを使用して画像とテキストクエリを処理します。
全体的なフレームワークは、簡単な拡張と使用を可能にするためのシンプルで設計されています。
2つのベンチマークシナリオが説明および評価され、インデックスとクエリの時間をカバーします。
クリプスは、より小さなデータセットを処理できることが示されています。
より大きなデータセットの場合、いくつかのインスタンスを備えた分散アプローチを考慮する必要があります。

要約(オリジナル)

A brief overview of CLIPSE, a self-hosted image search engine with the main application of research, is provided. In general, CLIPSE uses CLIP embeddings to process the images and also the text queries. The overall framework is designed with simplicity to enable easy extension and usage. Two benchmark scenarios are described and evaluated, covering indexing and querying time. It is shown that CLIPSE is capable of handling smaller datasets; for larger datasets, a distributed approach with several instances should be considered.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google