CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录

这篇具有很好参考价值的文章主要介绍了CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

目录

论文 Multi-Modal Remote Sensing Image Matching Considering Co-Occurrence Filter

参考论文:SIFT系列论文,

SIFT    Distinctive Image Features from Scale-Invariant Keypoints,作者:David G. Lowe

快速样本共识算法FSC:A Novel Point-Matching Algorithm Based on Fast Sample Consensus for Image Registration ,Digital Object Identifier 10.1109/LGRS.2014.2325970

 低通巴特沃斯滤波器

Shi-Tomasi特征检测:

不同分辨率图像配准

SAR-SIFT:

基于共现矩阵的共现滤波

PSO-SIFT

总结CoFSM流程图

描述符构建过程:

特征向量匹配阶段:


论文 Multi-Modal Remote Sensing Image Matching Considering Co-Occurrence Filter

Digital Object Identifier 10.1109/TIP.2022.3157450

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

论文主要提出基于共现尺度空间进行图像配准。

参考论文:SIFT系列论文,

SIFT    Distinctive Image Features from Scale-Invariant Keypoints,作者:David G. Lowe

除了SIFT论文中提出的经典的尺度空间构造等细节,下图关于base_image的创建也是值得注意的,根据3.3 Frequency of sampling in the spatial domain第二段,有时候可以对输入图片进行长宽扩大一倍达到增大等效第一层的尺度sigma的效果(因为sigma越大卷积耗时越久)

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

另外,特征匹配阶段的最近邻次近邻比也值得注意,

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

特征向量构建:1.网格划分2.统计每个格子,每个格子用一个向量表示,每个特征点的方向维数

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

NMS非最大值抑制 3*3*3邻域

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

相关代码可以查看opensift,或者见sift 解释-CSDN博客

快速样本共识算法FSC:A Novel Point-Matching Algorithm Based on Fast Sample Consensus for Image Registration ,Digital Object Identifier 10.1109/LGRS.2014.2325970

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

 低通巴特沃斯滤波器

低通巴特沃斯滤波器是一种常用的信号处理滤波器,用于滤除输入信号中高频成分,只保留低频成分。它基于巴特沃斯滤波器的设计原理,其中包括了一些参数,比如截止频率和阶数。

截止频率(cutoff frequency):低通巴特沃斯滤波器的截止频率指的是滤波器开始减弱信号幅度的频率。截止频率越低,滤波器就会滤除更高频率的信号。

阶数(order):低通巴特沃斯滤波器的阶数决定了其滤波器的陡峭程度。阶数越高,滤波器在截止频率附近的衰减越快,但也会导致相位延迟增加。

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

这是低通巴特沃斯滤波器的传递函数公式,其中 是滤波器的传递函数,是复频率变量, 是截止频率, 是滤波器的阶数。

CoFSM中低通巴特沃斯滤波器的介绍如下

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

Shi-Tomasi特征检测:

Good Features to Track 在Harris基础上,自相关矩阵最小特征值作为响应值,和自定义阈值进行比较即可判断出角点与否。角点检测:Harris 与 Shi-Tomasi - 知乎

matlab函数:detectMinEigenFeatures

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

不同分辨率图像配准

Matching Images with Different Resolutions 

不同分辨率下Harris自相关矩阵形式

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

SAR-SIFT:

A SIFT-Like Algorithm for SAR Images 

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

基于共现矩阵的共现滤波

Bilateral Filtering: Theory and Applications

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

Co-Occurrence Filter 

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

PSO-SIFT

Remote Sensing Image Registration With Modified SIFT and Enhanced Feature Matching

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

主要创新点:定义新的梯度图像;结合位置-尺度-方向的特征匹配方法 

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

使用二阶导数梯度作为图像梯度 

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

结合位置-尺度-方向的特征匹配方法 

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

An Efficient SIFT-Based Mode-Seeking Algorithm for Sub-Pixel Registration of Remotely Sensed Images  logic filter

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

 

总结CoFSM流程图

描述符构建过程:

对于输入图片image,首先进行共现矩阵的计算随后获得共现滤波的每层尺度,并计算共现尺度空间,随后进行特征检测部分,结合低通滤波和Sobel的二阶导数梯度计算,基于Shi-Tomasi进行特征点检测并去除重复特征点。描述符构建就是基于检测到的特征点在对数极坐标下进行描述符构建,其中对数极坐标网格划分为每个圆环划分为9个区域,梯度方向直方图统计按照8bin统计。

特征向量匹配阶段:

参考PSO-SIFT,仅取其中的position的部分,首先进行基于欧式距离的匹配,随后进行基于位置欧式距离匹配,最后再进行快速样本共识FSC匹配去除误匹配点对(粗差剔除)。

CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录,计算机视觉,人工智能

Fig Multi-modal image matching process of CoFSM method文章来源地址https://www.toymoban.com/news/detail-856869.html

到了这里,关于CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包赞助服务器费用

相关文章

  • python数字图像处理基础(八)——harris角点检测、图像尺度空间、SIFT算法

    python数字图像处理基础(八)——harris角点检测、图像尺度空间、SIFT算法

    原理 Harris 角点检测是一种用于在图像中检测角点的算法。角点是图像中局部区域的交叉点或者突出的特征点。Harris 角点检测算法旨在寻找图像中对于平移、旋转和尺度变化具有不变性的角点。 该算法通过计算图像中每个像素点的灰度值的变化,来识别角点。具体来说,Ha

    2024年01月19日
    浏览(15)
  • 遥感图像多模态检索AMFMN(支持关键词、句子对图像的检索)论文阅读、环境搭建、模型测试、模型训练

    遥感图像多模态检索AMFMN(支持关键词、句子对图像的检索)论文阅读、环境搭建、模型测试、模型训练

    1、摘要背景 遥感跨模态文本图像检索以其灵活的输入和高效的查询等优点受到了广泛的关注。然而, 传统的方法忽略了遥感图像多尺度和目标冗余的特点,导致检索精度下降 。为了解决遥感多模态检索任务中的多尺度稀缺性和目标冗余问题,提出了一种新的 非对称多模态

    2024年03月17日
    浏览(11)
  • 162基于matlab的多尺度和谱峭度算法对振动信号进行降噪处理

    162基于matlab的多尺度和谱峭度算法对振动信号进行降噪处理

    基于matlab的多尺度和谱峭度算法对振动信号进行降噪处理,选择信号峭度最大的频段进行滤波,输出多尺度谱峭度及降噪结果。程序已调通,可直接运行。 162 matlab 信号处理 多尺度谱峭度 (xiaohongshu.com)

    2024年02月19日
    浏览(11)
  • 基于数据驱动的多尺度表示的信号去噪统计方法研究(Matlab代码实现)

    基于数据驱动的多尺度表示的信号去噪统计方法研究(Matlab代码实现)

     💥💥💞💞 欢迎来到本博客 ❤️❤️💥💥 🏆博主优势: 🌞🌞🌞 博客内容尽量做到思维缜密,逻辑清晰,为了方便读者。 ⛳️ 座右铭: 行百里者,半于九十。 📋📋📋 本文目录如下: 🎁🎁🎁 目录 💥1 概述 📚2 运行结果 🎉3 参考文献 🌈4 Matlab代码实现 文献来

    2024年02月15日
    浏览(9)
  • 多模态 | 基于GNN的多模态情感识别技术COGMEN项目复现

    多模态 | 基于GNN的多模态情感识别技术COGMEN项目复现

    COGMEN: COntextualized GNN based Multimodal Emotion recognitioN COGMEN: 基于GNN的多模态情感识别技术 Paper:   https://arxiv.org/abs/2205.02455  源代码 GitHub - Exploration-Lab/COGMEN 论文翻译及总结可参考我另外一篇博文:多模态 |COGMEN: COntextualized GNN based Multimodal Emotion recognitioN论文详解_夏天|여름이다

    2023年04月09日
    浏览(40)
  • 【遥感数字图像处理(朱文泉)】第三章 空间域处理方法

    【遥感数字图像处理(朱文泉)】第三章 空间域处理方法

     一、空间域与变换域  二、常见数字图像空间域处理方法   - 空间域处理方法是根据图像像元数据的空间表示f(x, y)进行处理;   - 变换域处理方法是对图像像元数据的空间表示f(x, y)先进行某种变换,然后针对变换数据进行处理,最后再把处理的结果反变换到空间域。 注

    2024年01月21日
    浏览(59)
  • 基于深度学习的多模态语音识别与合成

    作者:禅与计算机程序设计艺术 语音识别(ASR)、语音合成(TTS)及其相关技术一直是当今人工智能领域的一大热点,也是当前研究的重点方向之一。近年来随着深度学习技术的不断突破,多模态语音理解和处理技术的进步,结合深度学习方法的多模态语音识别系统得到了广

    2024年02月10日
    浏览(44)
  • 论文阅读-基于深度学习的多模态情感分析研究综述

    论文阅读-基于深度学习的多模态情感分析研究综述

    非核心 原文链接:基于深度学习的多模态情感分析研究综述 - 中国知网 (cnki.net) 深度学习完成多模态情感分析综述。主要介绍 多模态情感分析 的概念、背景、意义。总结了 多模态融合技术和交互技术 ,讨论多模态情感分析 未来发展 。 目前经典的多模态情感分析研究已经

    2024年02月04日
    浏览(19)
  • ImageBind 多模态文本、图像、音频 Embedding同一个共享空间

    ImageBind 多模态文本、图像、音频 Embedding同一个共享空间

    参考: https://github.com/facebookresearch/ImageBind ImageBind 多个模态共享同一个空间Embedding,这样可以通过一个模态检索相似其他模态,相比CLIP文本图像两个模态,向外扩展了很多 1、这边windows上测试的,由于audio相关库没装好,所以只测试了文本与图形相关模态的相似度召回计算;

    2024年02月03日
    浏览(7)
  • 基于LLMs的多模态大模型(Flamingo, BLIP-2,KOSMOS-1,ScienceQA)

    基于LLMs的多模态大模型(Flamingo, BLIP-2,KOSMOS-1,ScienceQA)

    前一篇博客已经整理了不训练视觉模型的文章们: 基于LLMs的多模态大模型(Visual ChatGPT,PICa,MM-REACT,MAGIC) 本篇文章将介绍一些需要训练视觉编码器来适配多模态大模型的工作们,这也是目前最为流行的研究思路。 其实早在2021年DeepMind发表Frozen的时候就已经有了few-shot甚至

    2024年02月06日
    浏览(11)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包