高速图像采集与处理

图像编码
基于香农信息论的编码方法： 香农编码定理指出在不产生任何失真的前提下，通 过合理的编码，对于每一个信源符号分配不等长的码字， 平均码长可以任意接近信源的熵。 游程编码、Huffman编码、算术编码等，这些通常 称为熵编码。熵编码是基于信号统计特性的编码技术， 它是一种无损编码方法，解码后能无失真地恢复图像。 新型图像编码方法： 分形编码、模型编码、小波编码
运动目标ROI检测
基于光流场的方法：通过计算图像的光流场，再结合目标的运 动特征进行目标ROI检测。所谓光流是指图像中模式运动的速度， 它是一种二维瞬时速度场。 基于统计模型的方法：首先利用较简单的算法对运动场进行粗 略的估计，然后根据马尔可夫 (Markov)随机场理论构造出运动 场的间断点分布模型，利用此模型来检测运动场间的断点，以 此来实现运动目标ROI的检测。 基于小波变换的方法：小波理论是在 20 世纪 80 年代后期发展 起来的一种新兴的信号处理方法，它具有良好的时频局部化特 征和方向性特征，已被广泛应用于运动目标检测、模式识别、 信号处理等领域。
高速图像采集与处理
高速图像采集与处理
1. 图像的采集与处理 2. 高速图像采集与处理 3. ATR-Directed 图像压缩方法 4. 高速图像采集处理系统 5. 硬件实现方法
图像采集
图像采集：
图象经过采样、量化以后转换为数字图象并输入、存储 到帧存储器的过程，叫做图像采集。 由于图像信号的传输需要很高的传输速度，通用的传输 接口不能满足要求，因此需要图像采集卡。
图像编码
小波变换：小波变换采用变时间窗的方法对图像进行分 析，对整幅图像的能量进行了重新分配。在低频时它对 频率的定位较准，图像的能量主要集中于低频部分，能 反映图像的整体特征；而在高频时它对时间的定位较准， 很大的区域中数据的动态范围很小，有效地保留原始图 像的细节和边缘。
高速图像采集处理系统
基于SCSI实时存储的高速图像采集处理系统属于非 实时处理采集系统，这种架构主要针对采集速率大于 100fps 的图像采集系统，其不对图像进行实时处理，而 是将其直接存储于 SCSI（小型计算机系统接口）磁盘 阵列。
基于SCSI实时存储的高速图像采集处理系统架构
基于 SCSI 实时存储的高速图像采集处理系统
因此，如何实时的压缩图像数据，如何提升系统实 时处理速度成为高速图像采集处理系统中的两个关键技 术
ATR-Directed 图像压缩方法
ATR-Directed 图像压缩方法 ATR-Directed （面向自动目标识别）图像压缩是目 前高速图像采集处理系 统中应用最为广泛的一种实时 图像压缩方法。它是利用目标 ROI（Region-of-interest, ROI）检测算子提取出可能存在的目标 ROI，然后对目 标 ROI 进行优先编码。这种算法可以在实现较高压缩比 的同时，较好的保留目标信息。 利用现有比较成熟的目标ROI检测算法得到图像中 的目标ROI，然后利用嵌入式图像压缩方法，对目标 ROI进行高保真度压缩，从而尽可能地保持图像ATR性 能。
基于实时图像处理的高速图像采集处理系统
基于实时图像处理的高速图像采集处理系统属于实时 处理采集系统，这种架构在系统中嵌入高速实时图像处理 单元。
图采集
CMOS（Complementary Metal Oxide Semiconductor），互补金属 氧化物半导体。电压控制的一种放大 器件。是组成CMOS数字集成电路的 基本单元。 CMOS传感器有可细分为：被动式像素传感CMOS （Passive Pixel Sensor CMOS）与主动式像素传感器 CMOS（Active Pixel Sensor CMOS）。
图像编码
分形图像编码：在分形几何理论上发展起来的一种编码方 法。分形理论描述自然界物体的自相似性，这种自相似性 可以是确定的，也可以是统计意义上的。分形压缩编码算 法与原图像分辨率无关，压缩确定性分形图像时图像复原 质量较高，但在处理不具有明显确定性分形结构的图像复 原质量不理想。 模型编码：不压缩实际的量化数据，而是采用一个表示景 物（一般是人、人脸等）的模型，传送的信息是告诉接收 方如何改变模型以匹配输入景物（如眨眼、扭头等）。基 于模型的解码器也有一个与对应编码器相同的模型，解码 器利用收到的数据调整其模型，然后生成供显示的图像模 型。
静态目标 ROI 检测
基于图像分 割的方法
基于模板 匹配的方法
基于阈值 检测方法
局部熵 方法
可以利用目标 图像的灰度、 纹理等特征来 分割出目标ROI 和背景，再利 用目标的先验 知识对目标和 背景进行分离。
利用目标的 模板来寻找 场景中的相 似目标。
基于阈值检测 方法一般的检 测步骤是先进 行预处理或预 检测，然后再 进行阈值检测。
图像采集
图像采集元件——图像传感器（image transducer ） 图像传感器（感光元件）是一种将光学图像转换 成电子信号的设备，它被广泛地应用在数码相机和其 他电子光学设备中。 早期的图像传感器采用模拟信号，如摄像管。如 今，图像传感器主要分为CCD和CMOS图像传感器两 大类。
图像采集
图像分割将图像划分为一些互不重叠的区域， 每一区域是像素的一个连续集。通常采用把 像素分入特定区域的区域法和寻求区域之间 边界的境界法。
从图像中抽取某些有用的度量、数据或信息。
高速图像采集与处理
高速图像采集处理系统：
一般是指采样率和数据实时处理速率在 100MSPS 以上的图像采集处理系统。（SPS—ADC的参数，即每 秒模数转换器采点数） 与传统的图像采集系统相比，高速图像采集处理系 统以其高帧频、高分辨率的采集特点，可以实现对高速 运动目标的实时采集、跟踪和传输，因此，被越来越广 泛的应用于军事、航天、工业生产及科研等领域。
利用目标出现在 局部时会引起局 部熵较大的变化 的特点来检测目 标ROI，可以说 也是背景预测
运动目标ROI检测
检测运动目标ROI，主要有帧积分法、差分图像法、基 于光流场的方法、基于统计模型的方法、基于小波变换的方 法和基于神经网络的方法等。 帧积分法：对图像进行多帧积累增加，是序列图像检测目标 ROI最直接最简单的方法。为了兼顾检测性能和算法的实时 性，帧积分法将目标轨迹和目标的能量积累结合起来，有效 地抑制噪声的影响，提高目标的信噪比。 差分图像法：根据差分策略不同，又可以分为基于相邻帧差 的算法和基于背景图像与当前帧差的算法。在环境亮度变化 不大的情况下，如果对应像素灰度相差很小，可以认为此处 景物是静止的；如果图像区域某处的灰度变化很大，则认为 这是由于图像中运动物体引起的，然后求出运动目标ROI在 图像中的位置
图像处理（锐化）效果
图像处理
图像压缩
图像处理
图像增强 和复原
匹配、描述 和识别
图像处理
图像数字化 图像编码
图像分析
常见图 像处理
图像增强
图像分割
图像复原
图像处理
图像数 字化
通过取样和量化过程将一个以自然形式存在 的图像变换为适合计算机处理的数字形式。 图像在计算机内部被表示为一个数字矩阵， 矩阵中每一元素称为像素。
阈值处理图像
图像编码
图像编码是ATR-Directed图像压缩方法中另一个关 键环节。 图像编码是数字图像处理的重要组成部分之一。随 着数字图像采集器件分辨率的提高，表示数字图像的数 据不断增加，从几百兆比特增加到千兆比特传输率，要 满足巨大数据量的传输和存储就需要很宽频率带宽以及 大容量存储器。 为了提高传输效率和节省存储空间，需要运用图像 编码技术通过去除冗余数据来减少描述数字图像的数据。
基于 SCSI 实时存储的高速图像采集处理系统架构在
目前高速的采集系统中应用非常广泛，尤其在科研中的 姿态测量、碰撞试验等采集对象的运动速度非常快的采 集系统都应用这种架构。 这种架构只要在存储空间足够大的前提下，可以满 足任意高速采集速率的传输要求，但是应用多硬盘阵列 （通常为几十块硬盘阵列，多则可达到几百块硬盘）会 带来系统成本提高、占用空间增大、设备保管困难及系 统整体的灵活性、可靠性差等许多方面的问题，而且应 用这种设备进行传输存储对于数据线的要求也非常高。
CCD图像传感器，英文全称：Charge-coupled Device， 中文全称：电荷耦合元件。CCD是一种半导体器件，能够 把光学影像转化为数字信号。 CCD上植入的微小光敏物质 称作像素（Pixel）。一块CCD上包含的像素数越多，其提 供的画面分辨率也就越高。 CCD的作用就像胶片一样，但它是把 图像像素转换成数字信号。CCD上有许 多排列整齐的电容，能感应光线，并将 影像转变成数字信号。经由外部电路的 控制，每个小电容能将其所带的电荷转 给它相邻的电容。
图像采集
图像采集传 感器
CCD：
1，高解析度 2，低噪声 3，动态范围广 4，良好的线性特性 曲线 5，大面积感光 6，低影像失真
CMOS：
1，功耗低 2，成本低 3，发展起步晚， 工艺不成熟，效果 差 4，发展空间大
图像处理
图像处理(image processing)，用计算机对图像进行分 析，以达到所需结果的技术，又称影像处理。 基本内容：图像处理一般指数字图像处理。数字图像是 指用数字摄像机、扫描仪等设备经过采样和数字化得到的一 个大的二维数组，该数组的元素称为像素，其值为一整数， 称为灰度值。
多通道视 频音频输 入 A/D模拟 转换 视频信号 帧存储 D/A视频 音频压缩 编码 显示输 出
视频采集控制器
计算机主机
图像采集
图像采集卡：
图像采集卡（Image Capture Card），又称图像捕捉 卡，是一种可以获取数字化视频图像信息，并将其存储和播 放出来的硬件设备。很多图像采集卡能在捕捉视频信息的同 时获得伴音，使音频部分和视频部分在数字化时同步保存、 同步播放。 图像采集卡的功能是将图像信号采集到电脑中，以数据 文件的形式保存在硬盘上。它是图像采集到图像处理过程间 必不可少的硬件设备，通过它，我们就可以把摄像机拍摄的 视频信号从摄像带上转存到计算机中，利用相关的视频图像 编辑软件，对数字化的视频信号进行后期编辑处理。