视频对象分割技术研究
CBR中基于区域的视频分割技术

对 象 ( ie o jc , O) 。 这 意 味 着 一 vd o be t V ”
张 国 平 (9 9 ) 16 ,男 ,汉 族 ,教 授 ,博 士 生导 师 。
研究 方 向 :光 电子 技 术 、多 媒体 通 信 。
幅 人 的 画 面 不 再 是 人 和 背 景 在 相 机 焦 平 面 上 的 投 影 而 是 由 人 和 背 景
随 着 网 络 和 多 媒 体 技 术 的 迅 速 发 展 基 于 内容 的 检 索 ( B Cotn- CR ne t B sd er v 1 日渐 成 为 多 媒 体 查 询 和 ae R ti a ) e
灰 度 亮 , 或 者 背 景 的 灰 度 亮 而 对 象
的 灰 度 相 对 地 咭 。 这 样 从 背 景 中 提
Ab t a t Ba e n c n e tr t iv l e h d p o o i  ̄ S t h e r q e t o v d o fe u n y o e t r c s i  ̄ Du e s r e : s d o o t n e re a t o r p sn , e st e n w e u s i e r q e c bjc o e s n . m t p et t o h e r i go n e tb s d f n t nai e P G一 d a p y n f PE 7 o ic — a e e me t t nt c n l g ,h e a n a me g n f o tn — a e u c i l i s n M E 4 a p l i  ̄o c o t i n M G一 b e t s d s g n a i h o o y t es  ̄ e t — b o e t n o e a t al a i g l b e t n v d o s q e c s b c me o u a s a c i e i l . r m h t b s dt x r c i n i f m n i l me n n f ic i e e u n e e o sap p lr e e r h i v d o fed F o s o — a e e ta t o s c y u o i r n o o
一种自动分割视频对象的新方法

关键 词 : 频对 象 ; 视 变化检 测 ;差 分边 缘 ;二值 边缘模板 中图分类号 :T 3 14 P 9. 1 文 献标识 码 : A 文章 编号 :09— 56 20 ) 3— 0 1 0 10 3 1 (0 6 O 0 6 — 4
且适用性广的方法L , 4 缺点是易受到噪声的干扰并且由于缺少空间边缘信息而使得对象边缘不准确。 J
本文提出一种利用边缘信息分割视频对象的新 方法。首先对相邻帧进行差分检测和边缘检测。其次通
过差分边缘、 当前帧边缘检测出视频对象的初始边缘模板, 并分为快变和慢变两部分进行跟踪和更新以适应
自 动视频对象的分割方法大致可分为光流法、 运动跟踪法和帧间差运动检测法… 。光流法 受到光流
可靠性的影响 , 对噪声极为敏感 , 计算复杂。运动跟踪法 的思想是根据视频对象 的先前状 态来估计它的
当前状 态 , 征的选 取决 定其 准确性 和有效 性 。利用 帧间差 特征 的运动检 测 时空 法是一 种 简单 、 特 直接 、 快速 、
原始视频数据通常都包含很多与视频内容无关的噪声 , 有的还存在摄像机运动而造成 的全局运动。因 此, 为了提高视频对象分割的效率和准确性 , 首先对视频序列进行去噪和背景的运动估计 和补偿。本文用 中 值滤波器进行去噪, 因为中值滤波器可以保护图像边缘并且可以有效的去除噪声 。
对于背景存在全局运动的序列 , 采用 6 参数的仿射变换模型补偿进行 。变换公式如下式所示。
基于视频内容的片段分割关键技术探讨

基于视频内容的片段分割关键技术探讨作者:陈伟来源:《硅谷》2012年第03期摘要:视频分割技术在基于内容的视频编码、视频检索、模式识别等领域应用广泛,成为近年来视频处理技术研究中的热点。
系统阐述视频分割技术的应用及常用的算法,并提出另一种基于机器学习、模式识别的方法,将机器学习的思想引入镜头边界检测。
此类方法是目前镜头边界检测研究领域中的热点。
关键词:视频分割;视频检索;镜头边界检测中图分类号:G632 文献标识码:A 文章编号:1671-7597(2012)0210173-021 研究视频分割的意义近年来,随着多媒体技术的发展,视频图像得到了广泛应用,数字视频数量的急剧增长,自动的视频分析技术变得十分有必要,而视频分割技术更是为视频理解、视频编码等领域广泛应用。
所谓视频分割就是把视频中重要的或人们感兴趣的物体或对象(Video Object VO)与背景分割开来,或者说就是要划出分别具有一致属性的一个个区域,同时区分背景区域和前景区域。
视频图像可以看作一类3-D图像,换句话说,视频图像是由一系列时间上连续的2-D图像组成的。
从空间分割的角度看,视频图像分割主要是利用时域信息和空域信息把视频图像中独立运动的区域逐帧检测出来[1]。
视频对象是一个具有一定生存周期的在时间轴上连续的概念,属于包含时间轴在内的三维空间。
视频对象在某一帧中的表象称为视频对象平面(Video Object Plane,VOP),具体分割时,到底哪些部分重要,人们对哪些部分感兴趣,要看具体的应用而定。
视频图像分割在视频处理中的作用如图1所示:图1 视频图像分割在视频处理中的作用视频对象的分割提取是基于对象的视频处理的第一步,也是关键的一步。
因而,视频分割技术的研究是非常有意义的。
2 镜头边界检测镜头,是指由一个摄像机镜头连续拍摄的一组内在相关的连续帧,它用来表现在时空上连续的一组运动,它表示一个完整的动作。
我们通过镜头边界检测将视频分为一个个小的视频段,为随后的高层内容分析、分类、索引和查询提供基础,带来应用上的便利例如,它可以避免大量相同或相似的视频图像处理,简化了视频内容分析的复杂度,大大提高了视频处理的效率;另一方面给快捷的视频浏览带来了可能,用户无需浏览视频的全部内容(即线性浏览),而只需通过浏览关键帧图像以及相应的内容分析结果,就可以对视频的整个内容有了概括的了解,从而大大提高了浏览的效率。
视频对象分割技术综述

视 频 对 象 分 割 技 术研 究现 状
早在 2 世纪 8 年代末 9 年代初 , o o o 视频对象分 MP G- E 4中, 用 的就是 基 于对象 的编 码 方式 , 仅 割 就 引 起 了许 多 学 者 的 兴 趣 [ 。近 年 来 , 着 采 不 】 q] 随 提高 了压缩效 率 , 且 提 供 了更 加 灵 活 的 视 频 操 作 MP G 4和 MP G 7的推 广 和应 用 。 而 E - E - 视频 对 象 分割 方 式 。而新制 定 的多 媒 体 描 述 国际 标 准 MP G-, 算法 已经成 为多媒体领 域的热点研究课题[ 。在 E 7 | ] 本身就要求支持基于对象方式的内容组织与检索。 然而 , 由于视 频 对 象 分 割 是 一 个 相 当 困难 的 问
QI AN a ZHANG a -a XI Jn _ o Yu n, Xio y n, A g b i
( TheTeeo lcmm u iainEn ie rn n tt t Ai Fo c g n e ig Unv r i , ' 1 0 7 C ia nc t g n eig I si e, r reEn ie rn ie st Xin 7 0 7 , hn ) o u y a
Ab ta t Wi ed vlp n n p l ai fnen t nl tn ad E - dMP G 7 vdooj t src : t t e e me t da pi t no trai a sa drsMP G 4a E - ,i be hh o a c o i o n e c
vdoo jc sg nai eh i e o o r t n da cdv e bet e e tt nag r h r n ie bet emett ntc nq .S mei o u mp t da v ne i oojc g nai l i msae — n a a d sm o ot 8
基于变化检测的视频对象分割算法研究

2 0 .4 1 ) 1 1 1 3 0 8 4 ( 3 :6 — 6 .
A s a t Wi te ee p e to bet bsd vdo p l ao ste e m na o o ie ojc bc m s n o h bt c: t h d vl m n f ojc - ae ie api tn , sg ett n f v o bet eo e oe f te r h o ci h i d s ht o ht epe eerhT i p pr pee t m to f h at emettn o ie ojc bsd o te c a g os t ta ps po l sac .hs ae rsns r a ehd o te fs g n i f v o bet ae n h hn e r s ao d s
dt tnFrt , edf rn ei aei po ue e en tocniu u rm sad te h oig ae ftev e beti ee i .i l t ieec m g s rd cd b t e w o t o sf e ,n hn te m vn rao h i o ojc s co sy h w n a d
视频分割算法的研究

Abtat Vd os met inia ii lpolm ie rcsn ,ts o tn— ae tea ojc rcg io s c: ie g nao d c t rbe i v opo e ig iicnet bsdr r vl beteont n r e t s f u n d s e i , i a ditrc o lmei hsi ot t p l a o s S h td nvdo ojc sg na o eh iu s a n eat n mut da a mp r n pi t n. otes yo ie bet eme tt ntcnq e h s n i i a a ci u i
i mpora i ni c n e a ppi a on vaue n t st ss W O d fe e l ort tntsg f a c nd a lc t l .I hi hei,t i r ntag ihm de e m e a on,i l i g i i ofvi o s g ntt i ncud n
ag it a e f lu e o m ea d pa e i or ai n.To ob i a sa t r e e a on. l or hm m k ul s ft n s c nf m to i t n as t fc o y s g ntt a i m i The m o on una m ou l t i ni sy
m oto o evi o s g e t to i n ft de e h m n i n. a K e w or :v d o s g e a on; m po a—s ailm oto y ds i e e m ntt i t e r l—p ta; i n una m ous ni l y
视频分割技术浅析
视频分割技术浅析初广丽,肖 洁(白城师范学院计算机系,吉林白城137000;大连轻工业学院,辽宁大连116034) 摘要:随着M PEG -4和M PEG -7的研究发展以及最近几年数字视频图书馆技术的崛起,基于内容编码和面向对象的存取和操纵技术日益得到人们的重视,视频分割技术迅速成为当前视频研究领域的热点.视频分割是新一代视频编码、视频检索、互联网多媒体交互等新兴领域的关键技术.本文简述了视频分割的概念,分析了当前视频分割技术的研究现状、尚存在的问题和研究前景。
关键词:视频分割;视频对象;分水岭算法;边缘检测中图分类号:T N919.81文献标识码:A 文章编号:167323118(2006)0420079203收稿日期63作者简介初广丽(———),女,白城师范学院计算机系助教、在读硕士研究生,研究方向视频图像处理;肖洁(———),女,大连轻工业学院管理与社会科学学院助教、在读硕士研究生。
1 引言视频分割在很多领域中有非常重要的作用,在视频编码中,基于内容和利用人眼视觉特性的编码技术已经提出,提取视频对象可以很大地提高压缩效率,并为存储和传输视频图像提供了便利,而且基于对象的视频分割技术是实现基于内容的视频检索和浏览技术以及视频数据库操作的基础和关键技术,是计算机视觉研究的难点之一,同时也是新一代多媒体交互、流媒体应用等新兴领域的研究热点。
在互联网领域的W EB 技术中,我们需要提取视频对象,以对静止或动态场景进行查询和交互,利用提取得到的“关键帧”,可以更好的进行检索,从而为互联网浏览和查询提供一个简便而有效的方式。
另外视频分割在模式识别、基于视频的智能人机交互以及地质、环境、气象等领域也得到了广泛的应用。
因此视频分割技术的研究具有重要意义。
2 视频分割视频分割是指对图像或视频序列按一定的标准分割成区域,目的是为了从视频序列中分离出有一定意义的实体,这种有意义的实体在数字视频中称为视频对象面V OP (V ideo Objects Plane)。
一种有效的基于时空信息的视频运动对象分割算法鲁梅
0
引言
4 和 MPEG7 采用基于对象的编码 视频编码标准 MPEG-
依赖于选择的帧间时间间隔 。 基于时域光流场对运动对象进 行分割的光流法, 其性能受到估计的光流场准确性的影响, 对 噪声敏感, 且涉及光流场的计算很复杂 。 空域分割通过将图像分割成不同的纹理一致区域来获取 运动 对 象 的 区 域 和 准 确 边 缘, 主要有基于阈值的图像分割 法
第 30 卷第 1 期 2013 年 1 月
计 算 机 应 用 研 究 Application Research of Computers
Vol. 30 No. 1 Jan. 2013
一种有效的基于时空信息的视频运动对象分割算法
鲁
摘
1 梅 ,卢 2 1 忱 ,范九伦
*
( 1. 西安邮电大学 通信与信息工程学院,西安 710061 ; 2. 武警工程大学 通信工程系,西安 710086 ) 要: 为实现视频编码标准 MPEG-4 中语义对象的自动提取, 提出一种基于时空信息的运动对象分割算法 。
Effective video moving objects segmentation algorithm based on temporalspatial information
LU Mei1 ,LU Chen2 ,FAN Jiulun1
( 1 . School of Communication & Information Engineering, Xi’ an University of Posts & Telecommunications, Xi’ an 710061 , China; 2 . Dept. of Commumed Police Engineering University,Xi’ an 710086 ,China)
视频对象分割方法的研究
方法 是将 图像分割 成 8 8象素大 小的 匹配块 , * 再利 用相邻两
帧 图 像 的 差 异 来 检 测 每 个 匹 配 块 的位 移 矢 量 。 测 位 移 矢 量 检 的函数表示如 下:
d1 _ d1 .
2 1 分割原 则 . 通常静 态 图像 可依 据两 种原则 进行 分割 。一种是 基 于 点相关 的分 割技术 ,依 据各个 象素 点的灰 度不连 续性 进行 分割 ; 二是基 于区域相 关 的分 割技 术 , 依据 同一 区域具 有相 似 的灰度 ( 或组织特性 ) 一特 征 , 这 寻求不 同区域的边 界。本
配 块 逐 渐 缩 小 时 ,任 何 噪 声 的 干 扰 都 可 能 影 响 位 移 矢 量 的
结果 , 最终难于取 得移动物体 的准确轮廓 。
当前 还 没 有 一 个 比 较 完 整 和 成 熟 的 方 法 能 可 以 满 意 地 实 现 对 对 象 的 分 割 与 提 取 , 而 且 MP G- 中也 只 定 义 了 框 E 4
其 中 为 测 试 匹 配 度 的 评 价 函数 , 为 当 前 帧 图 像 , e 为 前 一 帧 图像 。 取 评 价 函 数 D 的最 小 值 , 时 x 方 向 和 Y 这
一
5 — 9
维普资讯
插值处理 , 即运 动 估 值 。 取得轮廓 候补块后 , 处于边缘位 置的轮廓候补块进行 对 标 记 , 是 被 认 为 是 轮 廓 候 补 块 的 小 块 , 赋 一 个 值 “ ”其 凡 都 1, 余 非 轮 廓 候 补 块 赋 值 为 “ ” 然 后 对 这 些 记 号 跟 踪 , 可 以 0; 就 得 到 移 动 物 体 的轮 廓 线 , 图 5所 示 。 如
一
多特征联合建模的视频对象分割技术研究
中图法分类号
Vi d e o Ob j e c t S e g me n t a t i o n Re s e a r c h B a s e d o n F e a t u r e s J o i n t Mo d e l i n g
到 一起 的 . 该 文 通 过 主 成分 分析 法 ( P r i n c i p a l C o mp o n e n t A n a l y s i s , P C A) 比较 准 确 地 衡 量 了 各 特 征 在 前 景 检 测 中 所 占的权 再 , 使 其 有 效 指 导前 景 分 割. 同 时 通 过对 各 特 征 建 立 相 应 的高 斯 模 型 , 有 效 提高 J , 前 景分 割 的 质 量 , 最 后 再 通 过基 于 颜 色 不变 量 的 阴影 检 测算 法 得 到 了 比较 准确 的结果 . 实验 中采 用 了颜 色 ( R G B ) 和局部二值模式 ( L o c a l B i n a r y
e v e r y f e a t u r e’ S we i gh t b y t h e f or e gr o un d d e t e c t i o n, m a ke i t e f f e c t i ve f o r f o r e g r o und s e g me nt a —
( L BP) i n o u r e x p e r i me n t . Ex p e r i me n t s o n v i d e o s d e mo n s t r a t e t h e e f f i c i e n c y o f o u r p r o p o s e d
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
Ke o d v e betv e e e tt n t oa sg nain sai —e o rlsg ett n y w r s i oojc; i osg nai ;e rl eme t o ;p t tmp a e n i d d m o mp t l a m ao
ZHANG . i一 , IZ a 0 L u - a L a — n Ya d L h o IJ ns n , IJ nJ 4 h i u
,
( . h eod Atly E gnei ol e, ’ nS a x 10 5 C ia; 1 T eScn rlr n ier g C lg a h ni7 0 2 , hn i e n e 2 TeScn r lr Ⅱp . h eodA ie tl y i, 船眦 A a e cdmy, ei 00 5 C ia; B in 10 8 , hn j g 3 TeScn rt la er etteO ̄ ei h izu n S i zu n bi00 8 , hn ; . h o A tl Mitr Rpe nai jt S iah a g, h i h a gHee 50 1 C i e d i ̄y iy s v c n j j a a
T3 1 P 9 文献 标 识 码 A 文 章编 号 10 —3 0 (0 8 1 —0 1 —0 0 3 16 2 0 )0 0 4 3 中 图 分类 号
Reerh o ie jc eetS g nai eh iu o
摘 要 视 频 对 象 分 割 是 新 一 代 视 频 编 码 、 视 频 检 索 、互 联 网 多 媒 体 交 互 等 新 兴 领 域 的 关 键 技 术 。 介 绍 了 视 频
对 象 分 割 的 相 关 理 论 概 念 ,对 其 各 种 算 法 分 类 进 行 了详 细 阐 述 ,并 对 现 有 的基 于 运 动 分 割 算 法 进 行 了 分 析 。 重 点 研
tmp r noma o ep c v l a d a ay stec re tvd os g n t n rs ac tt dprbe . o cu in, ep p rp o o e e o a i r t n r se t ey, n l  ̄ h u rn ie e me ti e e r hsausa o lms Asac n lso t a rp s s l f i i n a o n h e
0 引言
多媒 体数 据压缩 国际标 准 MP G4采 用 基 于对 E. 象的编码 方法 , 求 在 编码 前 把 视 频序 列 的场景 分 要 解 为多个 视频 对象平 面 , 过程 即视频对 象分 割 , 此 是
T ep p rit d c ssmei otn ie betsg ett n mehd n nlzste a oi m lsict n, e ecie h vn h a e nr u e o mp r tvd oojc e nao to sa d a aye g rh c s a o t nd sr stemoig o a m i h l t a f i h i b ojc eme tt n I se icl tde oc r nl o ua to s vdoojc sg ett n bsdo mp rl nomaina dsa a- be t g nai .t p c al s ist ur t p p lrme d :ie bet e n i ae nt o a fr t n p t s o i f y u w e y h m a o e i o i l
4 T eSc ! Sren Sho , i zo h n o 6 5 0 C i . h o A 以e e a t c ol Qn h uS ad n 2 2 0 , h a) e n d g g g n
Ab ta t Vie e me tt n i e e h iu fn w e eain vd oc d n vd o rt e a n n en tmulme i nea t n, t sr c d o sg nai sak ytc nq eo e g n rt ie o i g, ie er v la d Itr e o o i t da itrci ec. i o
维普资讯
信 号 与 信 息 处 理
视 频对 象分 割技 术 研 究
张亚 迪 ,李 钊 ,李 俊 山 ,李 建 军
(. 1 第二炮兵 工程 学院 ,陕西 西安 7 02 ; . 10 5 2 第二炮 兵装备 研 究院 ,北 京 10 8 ; 0 0 5 3 第二炮 兵驻 石家庄地 区军事代 表 室 ,河北 石家庄 0 0 8 ;4 第二炮兵 士 官学院 , 山东 青州 2 20 ) . 50 1 . 6 50
究 了时下 比较热 门 的 2种 算 法 ,即基 于时域 信息 分 割法 和时 空域 信息 联合 分割 算 法 ,同 时分 析 了 当前 视频 分 割技 术
的 研 究 现 状 、 尚 存 在 的 问 题 ,有 针 对 性 地 提 出 了未 来 工 作 应 重 点 研 究 的 几 方 面 内 容 。 关键 词 视 频 对象 ; 频分 割 ; 域分 割 ; 空 域 联 合 分 割 视 时 时