基于Spin图的形状局部相似性度量及其应用

合集下载

基于局部自相似性的图像质量度量

基于局部自相似性的图像质量度量

基于局部自相似性的图像质量度量
郑圣超;叶正麟;陈作平
【期刊名称】《计算机应用》
【年(卷),期】2006(026)003
【摘要】使用图像所包含的一种更本质和深层的特征--局部自相似性,并结合人眼观察图像时注意力由中央向周围递减这一特性,提出了一种基于局部自相似性的图像质量度量方法.通过与已有方法的对比实验表明,该方法能对不同类型的失真图像进行更有效的评判,评价结果能够更好地符合人眼主观视觉特性.
【总页数】3页(P605-606,621)
【作者】郑圣超;叶正麟;陈作平
【作者单位】西北工业大学,理学院,陕西,西安,710072;西北工业大学,理学院,陕西,西安,710072;西北工业大学,理学院,陕西,西安,710072
【正文语种】中文
【中图分类】TN919.81
【相关文献】
1.一种基于局部梯度比率特征度量SAR图像相似性的新方法 [J], 项德良;粟毅;赵凌君;唐涛;陆军
2.基于Spin图的形状局部相似性度量及其应用 [J], 缪永伟;包凌宏;陈敏燕;张旭东;
3.基于多特征相似性融合的半参考图像质量评价 [J], 崔力
4.基于多特征相似性融合的半参考图像质量评价 [J], 崔力
5.核映射和Rank-Order距离的局部保持投影相似性度量方法 [J], 秦玉华;张萌;杨宁;单秋甫
因版权原因,仅展示原文概要,查看原文内容请购买。

基于图神经网络的工艺表格语义相似性度量

基于图神经网络的工艺表格语义相似性度量

基于图神经网络的工艺表格语义相似性度量
花豹;周彬;顾星海;鲍劲松
【期刊名称】《计算机集成制造系统》
【年(卷),期】2022(28)12
【摘要】为解决人工评估复杂工艺表格的相似性用于工艺重用设计存在效率低、
精度差等问题,提出一种图神经网络组合算法,以有效提取工艺表格的结构、语义等
特征以度量相似性。

首先提出改进Mask R-CNN算法用以进行表格检测,包括距离变换突出表格特征、Confluence算法提高检测精度、角点定位调整检测框以实现精准定位,同时利用光学字符识别(OCR)技术提取表格文本信息。

然后,针对提取的
关键单元信息,分别建模工艺表格的结构特性图网络与语义关系图网络。

进一步,提
出图神经网络组合算法提取图网络模型的结构特征与节点属性,并转化成低维实值
向量,以支撑提出的一种联合相似度综合评估方法,实现度量工艺表格语义相似性。

最后,经实验分析表明了所提方法的有效性,并以工艺重用实例验证了方法的可行性。

【总页数】17页(P3805-3821)
【作者】花豹;周彬;顾星海;鲍劲松
【作者单位】东华大学机械工程学院
【正文语种】中文
【中图分类】TP183
【相关文献】
1.基于语义路径覆盖的Gene Ontology术语间语义相似性度量方法
2.一种RDF 图的语义相似性度量方法
3.基于深度神经网络的文本语义相似性度量
4.基于语义感知图神经网络的智能合约字节码漏洞检测方法
5.基于图神经网络的汉语依存分析和语义组合计算联合模型
因版权原因,仅展示原文概要,查看原文内容请购买。

基于局部特征的图像匹配

基于局部特征的图像匹配
利用图像的局部信息足以描述图像包含 的内容
2、D. G. Lowe, Distinctive Image Features from Scale-Invariant Keypoints, International Journal of Computer Vision, 60, 2 (2004),91–110.
60
1 a b c d e f g h i ……
2
3
4
5

N
2.2 基于Shape Context
Shape Context描述符
N*60
2.2 基于Shape Context
Shape Context描述符
优点: 我们可以选择一些图像,比如人的,然 后训练得到SC特征并且建立局部特征的数据 库。 目标识别
三、基于局部不变特征匹配的应用
例:基于shape context特征匹配的目标跟踪
三、基于局部不变特征匹配的应用
投票预计目标中心 关于检测点A的SC信息被定义为 { fi} ,并且 被定 义为数据库中的 cek 和 fi 之间的匹配概率,并且 目标O中的中心点C被A点估计定义为 p(o,c | cek , A) 。 所以我们可以得到目标中心的概率为:
2.1 联合ARPIH和直方图相似性距离
这个匹配算法的匹配步骤如下:
Step4:在目标图像中滑动模板图像,搜寻和 模板图像一样大小的子图像,计算ARPIH。 Step5:重复第三步和第四步直到扫描完整个 目标图像,匹配位置即为有最大的 的区域。
2.1 联合ARPIH和直方图相似性距离
2.1 联合ARPIH和直方图相似性距离
RGB~HSV
2.3 联合色彩和几何信息
可以看到,这种定义的一种好处是在亮度 加上一个不变值时色调是不变的。

基于局部特征的图像匹配

基于局部特征的图像匹配

基于局部特征的图像匹配在局部特征匹配中,我们通常会先检测和提取图像中的局部特征点,然后通过匹配这些特征点来寻找相似的图像区域。

局部特征点是在图像中具有独特性质并能够在多个图像中重复出现的图像片段。

它们通常是由图像的纹理、边缘或角点等属性决定的。

一种常用的局部特征点检测和提取方法是SIFT(尺度不变特征变换)。

SIFT算法通过寻找图像中的稳定局部极值点来检测特征点。

然后,对每个特征点,提取其周围区域的图像特征描述子,描述了该点的局部外观信息。

SIFT特征描述子是一种基于梯度直方图的向量表示,具有尺度不变性和旋转不变性。

在图像匹配过程中,首先需要选择一个参考图像,并将其作为基准图像。

然后,在其他图像中寻找与基准图像中特征点最匹配的对应特征点。

这可以通过计算特征点间的距离或相似度来实现。

一种常用的距离度量方法是欧氏距离或汉明距离,而相似度度量则可以使用余弦相似度或相关系数等。

为了提高匹配的准确性和鲁棒性,可以使用一些机制来过滤错误的匹配。

例如,基于基于几何一致性的方法将基于特征的匹配结果与图像的几何属性相结合,通过对匹配的平移、旋转和尺度变换的限制来筛选出高质量的匹配。

此外,还可以应用一些优化算法来进一步提高匹配精度。

例如,RANSAC(随机示例一致性)算法可以通过随机采样和验证来估计几何模型的参数,并通过剔除外点来改善匹配结果。

总的来说,基于局部特征的图像匹配是一个广泛应用的计算机视觉任务。

通过检测和提取图像中的局部特征点,并通过匹配这些特征点来寻找相似的图像区域,我们可以实现图像识别、物体检测、图像拼接和图像检索等多种应用。

然而,该任务仍然存在一些挑战,如光照变化、视角变换和遮挡等问题,需要进一步研究和改进算法以提高匹配的鲁棒性和准确性。

常用的特征描绘子

常用的特征描绘子

常用的特征描绘子在计算机视觉和图像处理领域,特征描绘子是用于描述图像中的特定属性或纹理信息的数学表示。

特征描绘子对于图像匹配、对象识别和图像检索等任务非常重要。

下面将介绍一些常用的特征描绘子。

1.SIFT(尺度不变特征变换):SIFT是一种用于在不同尺度上检测和描述局部特征的算法。

它通过应用高斯滤波器来寻找具有高灵敏度的关键点,并使用关键点周围的局部图像区域来构建描述子。

SIFT特征具有尺度不变性和旋转不变性,因此在大规模图像检索和对象识别中广泛应用。

2. SURF(加速稳健特征):SURF是一种基于Hessian矩阵的局部特征描述子。

它通过计算图像中的灰度变化率来检测特征点,并构建了一种基于梯度直方图的描述子。

SURF特征具有尺度不变性、旋转不变性和光照不变性,且计算速度比SIFT更快,因此适用于实时图像处理任务。

3.ORB(方向鲁棒特征):ORB是一种结合了FAST角点检测器和BRIEF特征描述子的特征描绘子。

它通过检测图像中的角点,并使用二进制描述子来描述这些角点的特征。

ORB特征具有尺度不变性、旋转不变性和仿射不变性,且计算速度比SIFT和SURF都更快,因此适用于实时图像处理应用。

4.HOG(方向梯度直方图):HOG是一种用于物体检测和人体姿态估计的特征描述子。

它通过计算图像中局部区域的梯度直方图来描述图像的形状和纹理信息。

HOG特征在人体检测和行人识别等任务中表现出色,并且对于图像的尺度和旋转变化具有一定的鲁棒性。

5.LBP(局部二值模式):LBP是一种用于纹理分析和表情识别的特征描述子。

它通过将局部图像区域与其周围像素比较,并将比较结果编码为二进制数来描述纹理特征。

LBP特征在纹理分类和人脸识别等任务中表现出色,并且对于光照变化和噪声干扰具有一定的鲁棒性。

除了上述特征描绘子,还有许多其他的常用特征描绘子,如GIST(总体图像特征)、BRISK(加速旋转不变特征)、FREAK(快速稳定特征)等。

图像内容检索中的相似性度量和相关反馈

图像内容检索中的相似性度量和相关反馈

图像内容检索中的相似性度量和相关反馈
李彦强;夏定元
【期刊名称】《微计算机信息》
【年(卷),期】2007(023)030
【摘要】在颜色RGB三维空间中,结合空间解析几何,以分块直方图图像检索为基础,提出了特征向量的球域相似性度量算法,同时还对相关反馈进行了深入研究,改进了区域权重自动调整的相关反馈.最后,通过对检索结果进行验证,本文所叙述的方法有良好的检索效果.
【总页数】3页(P304-306)
【作者】李彦强;夏定元
【作者单位】541004,广西桂林,桂林电子科技大学,通信与信息工程学院;430070,湖北武汉,武汉理工大学信息工程学院
【正文语种】中文
【中图分类】TN391
【相关文献】
1.解剖学结构方法在基于医学图像内容检索中的应用 [J], 陶怡墨;王磊;罗立明
2.视觉图像相似性在三维模型相似性比较中的应用 [J], 章志勇;杨柏林
3.相关反馈在古籍页面图像内容检索中的应用 [J], 刘莉;张亮;张琪;周向东;施伯乐
4.图象内容检索中的相似性度量和分层索引 [J], 伯晓晨;黄爱民
5.小世界粒子群算法在图像相关反馈中的应用 [J], 成伟
因版权原因,仅展示原文概要,查看原文内容请购买。

基于局部子图及其相互作用建模的图神经网络算法和应用

基于局部子图及其相互作用建模的图神经网络算法和应用
局部子图
在图结构中,节点之间的相互作用是指它们之间的连接关系和连接强度。通过对局部子图间相互作用进行建模,可以更好地理解节点间的连接方式和连接强度。
相互作用
相互作用模型概述
注意力机制
是一种用于建模局部子图间相互作用的方法,它通过计算每个节点对其他节点的贡献程度来衡量它们之间的连接强度。
点积注意力
点积注意力是一种常用的注意力计算方法,它通过计算两个向量的点积来衡量它们之间的相似度,进而衡量节点间的连接强度。
为图神经网络领域的研究提供了一种新的思路和方法,为未来的研究奠定了基础。
研究不足与展望
谢谢您的观看
THANKS
2023-10-26
《基于局部子图及其相互作用建模的图神经网络算法和应用》
目录
contents
引言基于局部子图的图神经网络模型局部子图间的相互作用建模图神经网络在推荐系统中的应用图神经网络在图像分类中的应用总结与展望
01
引言
图神经网络(GNN)是一种能在图结构上学习节点间关系和属性信息的机器学习算法。随着社交网络、生物信息学、推荐系统等领域的快速发展,GNN在很多应用场景中都发挥了重要作用。
图像分类的定义
图像分类广泛应用于目标检测、图像识别、场景分类等场景,对于自动驾驶、安防监控、智慧城市等领域具有重要意义。
图像分类的应用
图像分类面临着类间相似度高、类内多样性大、数据标注成本高等挑战,如何提高分类准确率是亟待解决的问题。
图像分类的挑战
局部子图建模
通过提取图像的局部子图特征,如纹理、边缘、角点等,对图像进行局部建模,以捕捉图像的局部细节信息。
构建过程
在构建过程中,一些关键技术包括如何选择局部子图的范围和类型、如何设计特征提取和编码方法、如何设计神经网络模型等。这些技术的选择和设计将直接影响模型的性能和应用效果。

shapecontext算法

shapecontext算法

shapecontext算法Shape context算法是一种用于计算形状相似度的图像处理算法。

它首先将形状表示为一组描述符,并通过计算这些描述符之间的距离来确定形状之间的相似度。

下面我将详细介绍Shape context算法的原理和应用。

Shape context算法最初由Serge Belongie等人于2002年提出,它是一种基于特征点的形状匹配算法。

该算法的基本思想是通过分析形状的几何特征来描述并比较不同形状之间的差异。

具体来说,Shape context算法将形状表示为一组特征点,每个特征点都有一个位置和一个方向。

然后,通过计算每个特征点与其他特征点之间的距离和方向差异,来构建形状的描述符。

Shape context的计算过程如下:1.检测特征点:通过使用角点检测算法或其他特征点检测方法来检测形状中的关键点。

这些关键点通常位于形状的边缘或角点处。

2.特征点描述:对于每个关键点,计算它与其他关键点之间的距离和相对方向。

可以使用极坐标来表示距离和方向。

这样,每个关键点就可以用一组距离和方向的组合来描述。

3. 构建形状描述符:对于每个关键点,使用一个直方图来表示距离和方向的组合。

直方图的每个bin表示一段距离和一段角度范围,该bin的值表示在该范围内出现的特征点的数量。

4. 形状匹配:通过比较两个形状的描述符,计算它们之间的相似度。

一种常见的方法是计算两个形状的描述符直方图之间的Chi-Square距离或Kullback-Leibler距离。

Shape context算法的优点是可以在不同比例和旋转的形状之间进行匹配。

它还具有较好的鲁棒性,对噪声和局部变形具有一定的容忍度。

因此,Shape context算法在许多计算机视觉应用中得到了广泛的应用,如目标检测、目标跟踪、图像检索等。

然而,Shape context算法也存在一些限制。

首先,它对形状的表示依赖于特征点的检测结果。

特征检测的准确性和可靠性会直接影响到形状匹配的结果。

  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。

现以第一张法平面 0 为切割面说明沿一个采样方向进行均匀采样的过程。 这里切割面 0 的法向量为 m0 ,
路径”的快速计算方法计算三角形与平面 0 的交点, 若交点已经在集合 S 中, 则继续循环下一个邻接三角形。 如图 1(b)中的三角形 po1o3 会被判定为不相交,而当循环至三角形 po2 o1 时,可以求得与平面 0 交点 A ,然后 将交点 A 加入到集合 S 中,并求出由 A 所在边构成的两个三角形中的另一三角形 o1o2 o4 与平面 0 的交点,重 复之前操作,直到集合 S 中每两个相邻交点之间的长度和大于或等于一个给定的阈值 L max (称为采样长度, 实验中通常取阈值 L max 为模型平均边长的 3~5 倍之间)时算法停止。 遍历其三条边分别判断与切割面 0 相交情况。首先建立直线 po1 的方程: p ' p t o1 p ,其中 p ' 是直线 即 t 0 ,也就是 p 点;在 S 中已经存在则判断与下一条边 o1o3 相交情况,易知 t 0 ,得出 o1o3 与切割面 0 也 不相交;最后判断切割面 0 与边 o3 p 交点,求得交点是 p ,综上可以得出三角形 po1o3 与平面 0 不相交。而 对于三角形 po2 o1 ,同样遍历其三条边,首先可以得到 po2 直线方程为: p p t o2 p ,联立切割面 0 方 程可以求得 t 0 ,即不相交;继续计算切割面 0 与下一条边 o2 o1 交点, o2 o1 的方程为: p o2 t o1 o2 , 联立切割面 0 方程求得 t p m0 o2 m0 / o1 m0 o2 m0 ,可以计算得到交点为 A ,并加入到 S 中;而切 割面 0 与边 o1 p 没有交点。 利用以上方法可以求得切割面 0 与三维模型表面的交点集合 S {A, B, C, D, E, F} ,接下来需要根据交点 集合 S 确定均匀分布且位于模型上的离散采样点,故在连接这些交点之间的线段上等间距(距离为 Lmean )的 位置上选取离散的采样点,这里的距离不是指两点之间的直线欧式距离,而是其在网格曲面上的距离。如图 1(b)所示,我们在曲面上均匀采样,取离散采样点集为 U {q1 , q2 , q3 , q4 , q5 , q6 , q7 , q8 , q9 } ,则有: 判断邻接三角形和切割面 0 相交情况的方法如下。以邻接三角形 po1o3 和 po2 o1 为例。对于三角形 po1o3 ,
引言
在计算机图形学和计算机视觉领域,三维形状的局部相似性描述刻画了模型表面两个局部区域之间的相 似性程度。三维形状的局部相似性度量在许多领域都有广泛的应用,例如在三维模型对齐和配准[1, 2, 3]、三维 模型识别和分析[4]、 模型修复[5]和曲面造型[6]等实际应用中, 三维形状的局部自相似性衡量都是一个关键问题。
基于 Spin 图的形状局部相似性度量及其应用*
缪永伟 1,包凌宏 2,陈敏燕 1,张旭东 1
1. 浙江工业大学 计算机科学与技术学院,浙江 杭州 310023 2. 浙江工业大学 理学院,浙江 杭州 310023 摘 要: 形状局部相似度是衡量三维模型表面两个局部区域之间相似性程度的一个指标, 该指标在计算机图形学和计算机
Transactions on Computer Science and Technology September 2013, Volume 2, Issue 3, PP.40-48
Spin Image Based on Local Shape Similarity and Its Application
- 41 /cst
值非零(不妨设 n x 不为 0),利用下列公式计算可以得到 8 张切割平面的法向量:
m0 n 2 n2 / n x ,n y ,n z , m1 n m0 , m2 m0 m1 , m3 m1 m0 , y z
Yongwei Miao 1†, Linghong Bao 2, Minyan Chen 1, Xudong Zhang 1
1. College of Computer Science and Technology, Zhejiang University of Technology, Hangzhou 310023, China 2. College of Science, Zhejiang University of Technology, Hangzhou 310023, China
*
基金资助:受国家自然科学基金项目(基金号 61272309)和浙江省教育厅项目(基金号 Y201017442)资助。 - 40 /cst
为了描述三维形状局部特征,通常有基于特征的局部形状描述和基于直方图的局部形状描述两类方法。基于 特征的局部形状描述方法通过计算模型表面采样点局部邻域的一个或多个几何指标来描述其局部属性。 Zerlinka 和 Garland [6]通过对模型采样点切平面建立使用测地坐标系,对采样点邻域进行均匀采样,分析离散 采样点处的局部高度或颜色等属性的直方图,利用直方图分布描述不同顶点之间的形状相似程度。 Chua 和 Jarvis[7]通过利用曲面和以当前采样点为中心的球体交线的高度分布来定义了当前采样点的局部形状特征。 Gatzke 等[8]利用曲面上顶点的曲率分布,通过分析顶点邻域的曲率分布来衡量形状局部区域之间的形状相似 性。Gal 和 Cohen-Or [9]引进了若干个能刻画模型局部特征的基本形状描述子,并利用基本形状描述子定义复 合描述子作为模型局部形状特征的一种度量。Cipriano 等[10]提出以模型表面顶点为中心,以固定半径距离大 小的圆形区域上分析其局部凹凸特征。基于直方图的局部形状描述是通过计算和分析模型局部区域的不同分 布直方图描述曲面局部形状,如局部几何属性直方图、点的邻域拓扑属性直方图等。Belongie 等[11]将形状上 下文的描述方法应用在模型匹配和形状识别中,并使用了直方图分析的方法来描述形状特征。Maximo 等[12] 提出了一种基于模型表面局部高度分布的形状描述方法,将模型表面顶点邻域的局部高度场在 Zernike 基函 数下展开,分析其展开系数向量的差异程度来度量局部形状相似程度。 在三维形状描述中,Spin 图在曲面局部特征描述和模型匹配中起到重要作用[13,14],通常主要是将 Spin 图应用在两个模型的匹配中,对每个待匹配模型都需要进行预处理以得到采样点分布均匀的模型用于随后的 模型匹配中。Spin 图方法将模型局部区域范围上的点投影到中心点切平面上,通过分析其不同属性的分布刻 画局部形状特性。基于三维模型表面顶点局部邻域的 Spin 图分析,本文提出了一种三维形状表面局部相似性 的一种度量方法,该方法对模型上每个顶点邻域沿均匀分布的采样方向进行均匀加密采样,然后建立每个点 的邻域采样点 Spin 图作为其形状描述符,通过比较局部区域之间的形状描述符得到局部相似性度量。同时, 根据形状的局部相似性度量,对模型表面进行基于相似度的着色,实现模型表面的视觉增强操作。
视觉领域得到了广泛的应用。基于 Spin 图,提出了三维形状表面局部相似性的一种度量方法,并将局部相似性度量应用 到模型表面的视觉增强应用中。 为了能够有效比较模型表面两个局部区域之间的相似性程度, 首先对模型上每个顶点邻域 沿均匀分布采样方向进行均匀加密采样,然后建立采样点邻域的 Spin 图作为其形状描述符,通过比较局部区域之间的形 状描述符得到局部相似性度量。同时,根据形状的局部相似性度量,对模型表面进行基于相似度的着色,实现模型表面的 视觉增强操作。实验表明,基于 Spin 图的相似度分析方法能够较好地刻画模型表面的相似性程度,方便地实现模型表面 的视觉增强效果。 关键词:形状局部相似性;Spin 图;均匀采样;视觉增强
1.2 模型顶点邻域的加密采样
对于给定的三维模型,如果直接将模型上的顶点作为采样点,可能会由于模型本身顶点分布的不均匀性 和稀疏性导致 Spin 图分析结果的不合理,往往难以得到一个比较好的局部形状描述,从而需要对三维模型顶 点的邻域进行均匀加密采样以得到足够多的采样点。在对模型顶点邻域进行均匀加密采样过程中,首先根据 顶点法向确定顶点处的切平面,然后在切平面上选取 16 个分布均匀的采样方向,并沿着这些采样方向进行 均匀采样,也就是说,我们需要在顶点 p 的法平面中找到 8 个均匀分布的平面作为切割平面,利用切割平面 与 p 点处的切平面交线得到加密采样点。 如图 1(a)所示,它表示了 8 个均匀分布的切割平面法向,设顶点 p 的法向量 n n x ,n y ,n z ,则必有一个

Email: ywmiao@
Abstract
Local shape similarity, an indicator to measure how similar a region of 3D shape is or dissimilar to another region, has been widely applied to computer graphics and computer vision. Different from traditional curvature map, a novel spin image based on local shape similarity measure is presented in this paper and its application on visual enhancement of 3D models is also given. To efficiently compare two different regions, the neighboring points for each surface vertex are firstly obtained by uniformly sampling along evenly distributed directions on the tangent plane. The spin images are constructed for these uniformly distributed sampling points and the local shape similarity measure can thus be calculated by comparing two spin images of different regions. Finally, due to our proposed local shape similarity definition, an efficient visual enhancement scheme is provided by incorporating our similarity measure into the color adjustment operation. Experimental results indicate that our spin image based on local shape similarity definition is robust and also contributes to visual enhancement. Keywords: Local Shape Similarity; Spin Image; Uniform Sampling; Visual Enhancement
相关文档
最新文档