arXivDaily arXiv每日学术速递 周一至周五更新
arXiv 2310.09495cs.LGcs.CVstat.ML
收藏

通过物理潜空间学习图像间动态

Learning In-between Imagery Dynamics via Physical Latent Spaces

Dartmouth College(达特茅斯学院)

Jihun Han, Yoonsang Lee, Anne Gelb

AI总结:

提出一个通过物理潜空间学习连续时间图像间动态的框架,利用PDE潜变量实现可解释性,并在地球科学图像数据上验证了鲁棒性和有效性。

摘要:

我们提出一个框架,旨在学习在连续时间步观测到的两幅图像之间的潜在动态。图像数据的复杂性和时间信息的缺乏,给捕捉独特的演化模式带来了重大挑战。我们的方法侧重于估计图像演化的中间阶段,通过潜动态实现可解释性,同时保持与图像的空间相关性。通过引入一个遵循偏微分方程(PDEs)所表达的物理模型的潜变量,我们的方法确保了所学模型的可解释性,并提供了对相应图像动态的洞察。我们通过一系列使用地球科学图像数据的数值测试,展示了我们学习框架的鲁棒性和有效性。

英文摘要:

We present a framework designed to learn the underlying dynamics between two images observed at consecutive time steps. The complex nature of image data and the lack of temporal information pose significant challenges in capturing the unique evolving patterns. Our proposed method focuses on estimating the intermediary stages of image evolution, allowing for interpretability through latent dynamics while preserving spatial correlations with the image. By incorporating a latent variable that follows a physical model expressed in partial differential equations (PDEs), our approach ensures the interpretability of the learned model and provides insight into corresponding image dynamics. We demonstrate the robustness and effectiveness of our learning framework through a series of numerical tests using geoscientific imagery data.

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑