Halcon案例之BLOB分析 / 开普饭

图像处理(image processing)

用计算机对图像进行分析，以达到所需结果的技术。又称影像处理。图像处理一般指数字图像处理。数字图像是指用工业相机、摄像机、扫描仪等设备经过拍摄得到的一个大的二维数组，该数组的元素称为像素，其值称为灰度值。图像处理技术一般包括图像压缩，增强和复原，匹配、描述和识别3个部分。

Blob分析（Blob Analysis）

在计算机视觉中的Blob是指图像中的具有相似颜色、纹理等特征所组成的一块连通区域。Blob分析（Blob Analysis）是对图像中相同像素的连通域进行分析(该连通域称为Blob)。其过程其实就是将图像进行二值化，分割得到前景和背景，然后进行连通区域检测，从而得到Blob块的过程。简单来说，blob分析就是在一块“光滑”区域内，将出现“灰度突变”的小区域寻找出来。

举例来说，假如现在有一块刚生产出来的玻璃，表面非常光滑，平整。如果这块玻璃上面没有瑕疵，那么，我们是检测不到“灰度突变”的；相反，如果在玻璃生产线上，由于种种原因，造成了玻璃上面有一个凸起的小泡、有一块黑斑、有一点裂缝，那么，我们就能在这块玻璃上面检测到纹理，经二值化（Binary Thresholding）处理后的图像中色斑可认为是blob。

而这些部分，就是生产过程中造成的瑕疵，这个过程，就是Blob分析。Blob分析工具可以从背景中分离出目标，并可以计算出目标的数量、位置、形状、方向和大小，还可以提供相关斑点间的拓扑结构。在处理过程中不是对单个像素逐一分析，而是对图像的行进行操作。图像的每一行都用游程长度编码（RLE）来表示相邻的目标范围。这种算法与基于像素的算法相比，大大提高了处理的速度。

适用范围

针对二维目标图像和高对比度图像，适用于有无检测和缺陷检测。常用于二维目标图像、高对比度图像、存在/缺席检测、数值范围和旋转不变性需求。

显然，纺织品的瑕疵检测，玻璃的瑕疵检测，机械零件表面缺陷检测，可乐瓶缺陷检测，药品胶囊缺陷检测等很多场合都会用到blob分析。

另一方面，Blob分析并不适用于以下图像：

1.低对比度图像；

2.必要的图像特征不能用2个灰度级描述； ·

3.按照模版检测 (图形检测需求)

主要处理技术

Blob分析主要内容包括但不限于以下几点：

（1）图像分割：将图像中的目标和背景分离。

（2）去噪：消除或减弱噪声对目标的干扰。

（3）场景描述：对目标之间的拓扑关系进行描述。

（4）特征量计算：计算目标的2-D形状特征。

图像分割(Image Segmentation)

因为 Blob分析是一种对闭合目标形状进行分析处理的基本方法。在进行Blob分析以前，必须把图像分割为构成斑点(Blob)和局部背景的像素集合。Blob分析一般从场景的灰度图像着手进行分析。在Blob分析以前，图像中的每一像素必须被指定为目标像素或背景像素。典型的目标像素被赋值为1，背景像素被赋值为0。有多种技术可将图像分割为目标像素和背景像素。这些技术包括：二元阈值(Binary Thresholding)、空间量化误差(Spatial~ mtization Error)、软件二元阈值和像素加权(SoftBinary Thresholding and Pixel Weighting)、相关阈值(Relative Thresholds)、阈值图像(Threshold Image)。

图像分割是图像处理的一大类技术，在Blob分析中拟提供分割技术包括：直接输入、固定硬阈值、相对硬阈值、动态硬阈值、固定软阈值、相对软阈值、像素映射、阈值图像。其中固定软阈值和相对软阈值方法可在一定程度上消除空间量化误差，从而提高目标特征量的计算精度。

自动全局阈值分割方法一：

计算直方图；
寻找出现频率最多的灰度值；
在threshold中使用与最大值有一定的距离的值作为阀值；

halcon代码实现：

gray_histo(Image,Image,AbsoluteHisto,RelativeHisto)

PeakGray := sort_index(AbsoluteHisto)[255]

threshold(Image,Region,0,PeakGray -25)

自动全局阈值分割方法二：

多次迭代平滑；
查找两个波峰；
使用threshold找到两波峰之间的最小值
bin_threshold（Image,Region）

常用图像分割算子：

threshold:全局阈值二值化
bin_threshold:自动阈值二值化
dyn_threshold:本地阈值二值化
watersheds:分水岭

连通性分析(Connectivity Analysis)

当图像被分割为目标像素和背景像素后，必须进行连通性分析，以便将目标图像聚合为目标像素或斑点的连接体。

连通性分析的三种类型如下：

*全图像连通性分析(Whole Image ConnectivityAnalysis)在全图像连通性分析中，被分割图像的所有的目标像素均被视为构成单一斑点的像素。即使斑点像素彼此并不相连，为了进行Blob分析，它们仍被视为单一的斑点。所有的Blob统计和测量均通过图像中的目标像素进行计算；

*连接Blob分析(Connected Blob analysis) 连接Blob分析通过连通性标准，将图像中目标像素聚合为离散的斑点连接体。一般情况下，连接性分析通过连接所有邻近的目标像素构成斑点。不邻近的目标像素则不被视为是斑点的一部分；

*标注连通性分析(Labeled Connectivity Analysis) 在机器视觉应用中，由于所进行的图像处理过程不同，可能需对某些已被分割的图像进行Blob分析，而这些图像并未被分割为目标像素和背景像素。例如：图像可能被分为四个不同像素集合，每一集合代表不同的像素值范围。这类分割称为标注连通性分析。当对标注分割的图像进行连通性分析时，将连接所有具有同一标注的图像。标注连通分析不再有目标和背景的概念。