第七讲图像形态学处理西安电子科技大学机电工程学院王义敏形态学:生物学的分支,研究动植物的形态和结构数学形态学是一门交叉学科,有严格的数学理论(集合代数和数论等),理论基础艰深,但基本观念比较简单。理论基础和所用语言为:集合论。图像中的集合:代表二值图像或者灰度(彩色)图像的形状。如:黑白图像中的黑像素集合是图像的完全描述,感兴趣目标区域的像素集合。一、数学形态学图像处理数学形态学:分析几何形状和结构的数学方法,建立在集合代数的基础上,用集合论方法定量描述集合结构的学科。1985年以后成为分析图像几何特征的工具。数学形态学图像处理的基本思想:使用具有一定形态的结构元素,去度量和提取图像中的对应形状,如边界、骨架、凸壳等,以达到对图像进行分析和识别的目的。数学形态学图像处理意义:可以简化图像数据,保持它们基本的形状特性,并除去不相干的结构。数学形态学的基本运算:膨胀、腐蚀、开启和闭合,击中击不中变换。二、基本概念结构元素:任意大小,包含任意0、1组合的一个区域。结构元素中的任意一点都可以成为结构元的原点。形态学:从图像出发,研究物体目标的结构和拓扑关系形态学图像处理:结构元素与图像进行逻辑运算产生新的图像的处理方法。结构元与图像的运算:类似卷积,但用逻辑运算代替乘加运算,结果为处理后图像的像素值。形态学处理效果:取决于结构元素的大小、形状与逻辑运算的方法。具有某种性质的、确定的、有区别的事物的全集,用大写字母表示。不包含任何元素的集合称为空集,规定任何空集都只是同一个集合,记作Φ。三、集合论的基本概念2、子集:BABaAa,3、并集:}|{BcorAccCBAC1、集合的定义:在数字图像处理中,集合是图像中描述的对象或其他感兴趣特征的像素坐标。4、交集:}and|{BcAccCBAC5、补集:}|{AxxAc6、集合的差:cBABxAxxBA},|{7、位移:},|{)(AaxayyAx8、映像(集合的反射):},|{ˆAaaxxA集合的图解表示:ABZBAcA)(BABA1x2x2x1x)),(()(21xxxAxAˆ四、膨胀与腐蚀}])ˆ[(|{ABxBAx1、膨胀(使图像扩大)}])ˆ[(|{AABxBAx解释:A被B膨胀是所有位移x的集合,B的映射与A至少有一个元素是重叠的。换言之,用B膨胀A得到的集合是B的映射的位移与A至少有一个非零元素相交时B的原点x位置的集合。从而上式变为:膨胀的另外定义为:},,|{BbAabaxxBAbBbABA)(膨胀的算法:1、用结构元素,扫描图像的每一个像素;2、用结构元素与其覆盖的二值图像做“与”运算3、如果都为0,结果图像的该像素为0,否则为11、用3x3的结构元时,物体的边界沿周边增加一个像素2、把目标周围的背景点合并到目标中,目标之间存在细小的缝隙,膨胀可能将不同目标连通在一起3、填补分割后物体中的空洞膨胀的作用:2、腐蚀(使图像缩小)解释:A被B腐蚀是所有位移x的集合,其中B平移x后仍包含于A中。换言之,用B腐蚀A得到的集合是B完全包含在A中时B的原点位置的集合。腐蚀的另外定义为:})(|{ABxBAx},|{BbAbxxBAbBbABA)(向量的观点位移的观点1、用结构元素,扫描图像的每一个像素;2、用结构元素与其覆盖的二值图像做与运算3、如果结果都为1,结果图像的该像素为1,否则为0腐蚀的算法:腐蚀的作用:1、用3x3的结构元时,物体的边界沿周边减少一个像素2、消除掉图像中小于结构元大小的目标物体3、若物体之间有细小的连通,选择适当的结构元,可以将物体分开。4、不同的结构元及其不同的原点,产生不同的结果3、膨胀的运算+++a、基于膨胀定义本身的运算图像A结构元B原点位于结构元素中的膨胀操作原点不在结构元素中的膨胀操作++?增加的点删除的点保留的点增加的点保留的点图像A结构元B},)4,4(,)4,3(,)3,3(,)4,2(,)3,2(,)2,2(,)2,1(,)3,5(,)3,4(,)2,4(,)3,3(,)2,3(,)1,3(,)1,2(,)3,4(,)3,3(,)2,3(,)3,2(,)2,2(,)1,2(,)1,1{(BAb、基于向量运算的膨胀操作设图像左上角的坐标为(0,0),则:A={(1,1),(2,1),(2,2),(2,3),(3,2),(3,3),(4,3)},B={(0,0),(1,0),(0,1)}})2,5(,)3,4(,)2,4(,)4,3(,)3,3(,)2,3(,)1,3(,)4,2(,)3,2(,)2,2(,)1,2(,)2,1(,)1,1{(++c、基于位移运算的膨胀操作图像A结构元B原点位于结构元素中的膨胀操作原点不在结构元素中的膨胀操作+?增加的点保留的点增加的点保留的点删除的点图像A结构元BA相对位移BA相对位移B此时膨胀的结果与A没有任何关系,即:+增加的点删除的点图像A结构元B???ABA)(4、腐蚀的运算++a、基于腐蚀定义本身的运算图像A结构元B原点位于结构元素中的腐蚀操作原点不在结构元素中的腐蚀操作+保留的点腐蚀掉的点保留的点腐蚀掉的点图像A结构元Bb、基于向量运算的腐蚀操作设图像左上角的坐标为(0,0),则:A={(1,1),(2,1),(2,2),(2,3),(3,2),(3,3),(4,2)};B={(0,0),(1,0),(0,1)}})2,3(,)2,2{(},|{BbAbxxBA-++图像A结构元BBA-+++c、基于位移运算的腐蚀操作图像A结构元B原点位于结构元素中的腐蚀操作原点不在结构元素中的膨胀操作++共同的点B的映射A的移位并求交BA-图像A结构元BB的映射A的移位并求交BA-共同的点腐蚀掉点5、膨胀与腐蚀的对偶性BABACC腐蚀膨胀求补求补3x3结构元6、膨胀与腐蚀的不足改变了原目标物的大小例一、膨胀的应用(二值图像中的应用)000011111间断间隔2个像素间断连接目标加粗例二、腐蚀的应用(二值图像中的应用)图像内部边长为1、3、5、7、9和15像素的正方形图像结构元素进行一次腐蚀结构元素进行一次膨胀结构元素为13x13,主要目的“滤除掉小于13个像素的小目标。五、开操作与闭操作1、定义BBABA)(-BBABA)(-开操作为:关闭操作为:即:使用结构元素B对集合A的开操作是用B对A腐蚀,然后用B对腐蚀结果进行膨胀。即:使用结构元素B对集合A的闭操作是用B对A膨胀,然后用B对腐蚀结果进行腐蚀。开操作的另一定义为:})(|){(ABBBAxx2、开操作与闭操作的几何解释·结构元腐蚀操作膨胀操作开操作示意ΒΑ闭操作示意ΒΑ3、开操作与闭操作的性质ΒΑBΒΑ)(ΒΑBΒΑ)(开操作的性质闭操作的性质ΑΒΑ)()()(ΒΑΒCAC)(ΒΑΑ)()(ΒΑΒCAC由开闭的性质有:同一结构元对于同一幅图像的多次开闭操作等同于对图像的一次开闭操作4、开操作与闭操作ΒΑΒΑΒΑ-ΒΑ·结构元开操作:使对象轮廓变得光滑,断开狭窄的间断和消除细的突出物闭操作:使对象轮廓变得更为光滑,消除狭窄的间断和长细的鸿沟,消除小的孔洞并填补轮廓线中的断裂。开操作与闭操作优势:不明显改变目标面积的同时,平滑目标的边缘。腐蚀、膨胀、开与闭的比较:原始图像腐蚀结果膨胀结果开运算闭运算例三、开闭操作(先开操作后闭操作构成噪声滤波器)111111111BA—B+B—B噪声消除背景噪声指纹噪声增加指纹噪声减除指纹产生间断指纹间断消弱指纹纹路加粗噪声斑点消除指纹纹络间断例四、引述电路板+(a)原始灰度图像;(b)二值化后的图像;(c)用开运算清除噪声;(d)用腐蚀和膨胀抽取各结点;(e)抽取骨架分离各线路;(f)线路、结点和端点的最终显示abcdef六、击中或击不中变换1、作用:形状检测(图像中的对象是彼此不相连的)2、表达式(有三种)为:B1是由与一个对象相联系的B元素构成的集合,B2是与相应背景有关的B元素的集合,相应有B1=X,B2=W-X)]([)(XWAXABAc--*][)(21BABABAc--*]ˆ[)(21BABABAc--*例四、形状检测••ZYXAWXWcA•••••YXZ)(cXWA-XA-))((cXWA-)(XA-七、形态学的主要应用1、边界提取3x3结构元素获得单像素宽度边界,5x5结构元获得2或3个像素宽度的边界。)()(BAAA-原点A)(AB-AB例五、形态学提取边界简单的二值图象单像素宽度边界结构元为3x32、区域填充c1)(ABXXkkAB,3,2,1k区域用1填充(非边界点为0)0X:初始点1kkXX:迭代终止原点cA填充结果二值图象选定区域填充后的图象填充所有区域后的图象例六、区域填充初始点3、连通分量的提取ABXXkk)(1,3,2,1k连通分量Y0X:初始点1kkXX:迭代终止结构元起点AkXY第一次迭代的结果最终的结果例七、使用连通分量检测包装食物中的异物原始图门限处理5x5腐蚀后的结果连通分量中像素的数目4、凸壳如果连接集合A内任意两个点的直线段都在A的内部,则A是凸形的。集合A的凸壳H是包含A的最小凸集合。求集合A的凸壳C(A)的形态学算法:,3,2,14,3,2,1kiABXXikik)(1*1kkXX:迭代终止AXi0iiDAC)(41ikiXD结构元为:xxxxxxxxxxxxxxxxxxxx1B2B3B4B不考虑点原点寻找几何凸壳的过程:AX1014X22X38X42X凸壳显示每个结构元素的属性凸壳设定水平和垂直尺寸大小使得凸壳尺寸最小5、细化细化过程定义为:xxxx1B2B3B4BcBAABAABA)()(**))))((((}{21nBBBABA细化过程的另一种定义为:},,,,{}{321nBBBBB细化常用的结构元:5B6B7B8Bxxxxxxxxxxxx细化过程:1BAA2BA3BA4BA5BA6BA8,7BA3,2,1BA3,2,1,8,7,6,5,4BA收敛后的结果转换为具有m连通度的结果6、粗化粗化过程定义为:粗化过程的另一种定义为:},,,,{}{321nBBBBB)(BAABA*•))))((((}{21nBBBABA••••粗化和细化是形态学上的对偶过程,为了将集合粗化,先求集合的补,通过对集合补的细化后,对细化结果求补,最后消除间断即获得集合的粗化。粗化过程的解释:AcAA补的细化A补的细化的补最终A的粗化7、骨架S(A)骨架示意图:a)若z是S(A)的点并且(D)z是在A内以z为圆心的最大圆盘,则不存在位于A中的能包含(D)z的更大圆盘。集合A最大圆盘的位置不同线段的最大圆盘最终骨架由图有:b)圆盘(D)z在两个或更多的不同位置上与A的边界接触。A的骨架通过腐蚀和开操作表达:)()(0ASASkk:表示对A的连续k次腐蚀BkBAkBAASk)()()(--kBA-BBBAkBA)))((-----})(|max{kBAk))((0kBASAkk表示对Sk(A)的连续k次膨胀八、灰度级图像的形态学内容:灰度级图像中的膨胀、腐蚀、开操作和闭操作。|),(),(max{)(),(yxbytxsfbfts1、膨胀的定义:}),(,)(),(bfDyxDytxs上式与二维卷积计算相比:最大值代替卷积求和,加法运算代替卷积相乘。2、腐蚀的定义:-|),(),(min{)(),(yxbytxsfbfts}),(,)(),(bfDyxDytxs上式与二维相关计算式相似,最小值代替相关运算,减法代替乘法。3、膨胀、腐蚀的几何解释(以一维函数为例))}()(max{2xsbxf)}()(max{