Physics-Inspired Generative Models in Medical Imaging: A Review

要約

物理学にヒントを得た生成モデル (GM)、特に拡散モデル (DM) とポアソン フロー モデル (PFM) は、ベイジアン手法を強化し、医療画像処理における大きな有用性を約束します。
このレビューでは、そのような生成手法の変革的な役割を検討します。
まず、ノイズ除去拡散確率モデル (DDPM)、スコアベース拡散モデル (SDM)、ポアソン流生成モデル (PFGM および PFGM++) など、物理学にインスピレーションを得たさまざまな GM を、その精度と堅牢性に重点を置いて再検討します。
加速も同様に。
次に、画像再構成、画像生成、画像分析を含む、医療画像処理における物理学にヒントを得た GM の主な応用例を紹介します。
最後に、物理学にインスピレーションを得た GM の統合、視覚言語モデル (VLM) との統合、GM の新しい応用の可能性など、将来の研究の方向性についてブレインストーミングが行われます。
生成手法の開発は急速であるため、このレビューにより、同僚や学習者がこの新しい物理駆動型生成モデルのタイムリーなスナップショットを提供し、医用画像処理の巨大な可能性を活用するのに役立つことが期待されます。

要約(オリジナル)

Physics-inspired Generative Models (GMs), in particular Diffusion Models (DMs) and Poisson Flow Models (PFMs), enhance Bayesian methods and promise great utility in medical imaging. This review examines the transformative role of such generative methods. First, a variety of physics-inspired GMs, including Denoising Diffusion Probabilistic Models (DDPMs), Score-based Diffusion Models (SDMs), and Poisson Flow Generative Models (PFGMs and PFGM++), are revisited, with an emphasis on their accuracy, robustness as well as acceleration. Then, major applications of physics-inspired GMs in medical imaging are presented, comprising image reconstruction, image generation, and image analysis. Finally, future research directions are brainstormed, including unification of physics-inspired GMs, integration with Vision-Language Models (VLMs), and potential novel applications of GMs. Since the development of generative methods has been rapid, this review will hopefully give peers and learners a timely snapshot of this new family of physics-driven generative models and help capitalize their enormous potential for medical imaging.

arxiv情報

著者 Dennis Hein,Afshin Bozorgpour,Dorit Merhof,Ge Wang
発行日 2024-08-23 14:13:19+00:00
arxivサイト arxiv_id(pdf)

提供元, 利用サービス

arxiv.jp, Google

カテゴリー: cs.CV, eess.IV, physics.med-ph パーマリンク