Conceptwm: A Diffusion Model Watermark for Concept Protection

要約

拡散モデルのパーソナライゼーション技術は、特定の概念を生成することに成功していますが、著作権保護や違法使用の脅威にもなります。
モデル透かしは、主題主導またはスタイル主導の画像生成の不正使用を防止し、コンセプトの著作権を保護する効果的な方法です。
しかし、コンセプト指向の保護という目標の下、現在の透かし入れスキームは通常、特定のコンセプトを対象とした洗練された方法で透かしを適用するのではなく、すべての画像に透かしを追加します。
さらに、拡散モデルのパーソナライゼーション技術により、透かしを簡単に削除できます。
既存の透かし手法では、特定のコンセプトのいくつかの画像を使用してきめの細かい透かし埋め込みを実現し、パーソナライズされた微調整による透かしの削除を防ぐのが困難です。
したがって、我々は、知覚できない透かしを拡散モデルの概念にシームレスに埋め込む、新しい概念指向の透かしフレームワークを導入します。
私たちはフレームワークを検証するために広範な実験とアブレーション研究を行っています。
私たちのコードは https://anonymous.4open.science/r/Conceptwm-4EB3/ で入手できます。

要約(オリジナル)

The personalization techniques of diffusion models succeed in generating specific concepts but also pose threats to copyright protection and illegal use. Model Watermarking is an effective method to prevent the unauthorized use of subject-driven or style-driven image generation, safeguarding concept copyrights. However, under the goal of concept-oriented protection, current watermarking schemes typically add watermarks to all images rather than applying them in a refined manner targeted at specific concepts. Additionally, the personalization techniques of diffusion models can easily remove watermarks. Existing watermarking methods struggle to achieve fine-grained watermark embedding with a few images of specific concept and prevent removal of watermarks through personalized fine-tuning. Therefore, we introduce a novel concept-oriented watermarking framework that seamlessly embeds imperceptible watermarks into the concept of diffusion models. We conduct extensive experiments and ablation studies to verify our framework. Our code is available at https://anonymous.4open.science/r/Conceptwm-4EB3/.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google