公路交通科技  2018, Vol. 35 Issue (11): 11−16, 25

扩展功能

文章信息

周基, 英红, 田琼, 盛明强, 刘杨
ZHOU Ji, YING Hong, TIAN Qiong, SHENG Ming-qiang, LIU Yang
基于方格靶标的沥青混合料颗粒群变形跟踪方法
A Method for Tracking Deformation of Asphalt Mixture Particles Based on Grid Target
公路交通科技, 2018, 35(11): 11-16, 25
Journal of Highway and Transportation Research and Denelopment, 2018, 35(11): 11-16, 25
10.3969/j.issn.1002-0268.2018.11.002

文章历史

收稿日期: 2018-06-06
基于方格靶标的沥青混合料颗粒群变形跟踪方法
周基1 , 英红2 , 田琼1 , 盛明强3 , 刘杨2     
1. 湖南科技学院 土木与环境工程学院, 湖南 永州 425199;
2. 桂林电子科技大学 建筑与交通工程学院, 广西 桂林 541004;
3. 南昌工学院 建筑工程学院, 江西 南昌 330108
摘要: 为探测沥青混合料内部颗粒群的变形情况,提出了一种基于方格靶标的抗干扰能力强、精度高、多目标跟踪的颗粒群变形分析方法。首先,将混合料车辙试件制成切片,在切面颗粒上印制5×5黑白相间的方格靶标,采集切面图像,捕捉该图像中的靶标图案,计算靶标中心点的位置坐标及靶标方位角,记录为颗粒的初始位姿。然后进行车辙试验,反复轮碾后,再次采集切面图像,提取颗粒群变形后的靶标图案,并由其计算靶标中心点位置及方位角,作为颗粒加载后的位姿。最后通过对比颗粒在两种位姿下靶标中心的位移量和靶标转角实现颗粒内部任意点的变形计算。在捕捉靶标的过程中,利用平行方格靶标明显的几何特征,使用边缘检测、投影技术,根据靶标图像旋转角度与边缘强度投影累加峰值的关系曲线,获得靶标角点阵列初始坐标及靶标角度候选值。在靶标位姿参数提取方面,主要通过角点阵列的亚像素搜索实现靶标中心点坐标高精度计算,结合靶标与集料纹理的图像相关性分析技术,完成靶标角度确定。试验结果表明:该方法能够实现颗粒群变形跟踪,为分析沥青混合料在荷载作用下内部颗粒群运动规律提供了一种有效的分析方法。
关键词: 道路工程     沥青混合料     变形跟踪     方格靶标     数字图像    
A Method for Tracking Deformation of Asphalt Mixture Particles Based on Grid Target
ZHOU Ji1, YING Hong2, TIAN Qiong1, SHENG Ming-qiang3, LIU Yang2    
1. School of Civil and Environmental Engineering, Hunan University of Science & Engineering, Yongzhou Hunan 425199, China;
2. School of Architecture & Traffic Engineering, Guilin University of Electronic Technology, Guilin Guangxi 541004, China;
3. School of architectural engineering, Nanchang Institute of Science & Technology, Nanchang Jiangxi 330108, China
Abstract: In order to detect the deformation of particles in asphalt mixture, a method for analysing deformation of particles based on grid target is proposed. This method has the advantages of anti-jamming capacity, high precision and multi-target tracking. First of all, the rutting specimens of the mixture are sliced into sections, and a 5×5 black and white grid target is printed on the cut plane particles. The image of the cut plane is collected, the target pattern in the image is captured, and the coordinates of the center position and the azimuth angle of the target are calculated, which is recorded as the initial position of the particle. Then, rutting test is carried out, after repeated roll grinding, the image of the cut plane is collected again, the target pattern after particle group deformation is extracted, and the center position and azimuth angle of the target are calculated as the particle orientation after loading. Finally, the deformation calculation of any point inside the particle is realized by comparing the displacements of the target center and the target rotation angles in 2 positions. In the process of capturing the target, by using the obvious geometric characteristics of the parallel grid target plate, edge detection and projection technology, the candidate values of the corner array initial coordinates and the target angle can be obtained according to the curve of relation between the target image rotation angle and the edge strength projection accumulation peak. In terms of target position parameter extraction, the sub-pixel search technology of corner array is used to achieve the high accuracy calculation of the target center point coordinates, and then the target angle is determined combining with the technique of image correlation analysis of target and aggregate texture. The experiment result shows that this method can realize tracking deformation of particles, which provides an effective method for analyzing the motion of the particles in asphalt mixture under the action of load.
Key words: road engineering     asphalt mixture     deform tracking     grid target     digital image technology    
0 引言

车辙变形是目前沥青路面主要的病害之一。矿质混合料的组成对其影响显著,因此陆续有研究者尝试通过多种力学试验,希望建立材料组成与力学性能的联系。但试验结果变异性很大,真正的规律淹没在噪声中,问题的根源在于材料内部颗粒群复杂的结构形态,只有深入到材料内部,即从细观角度出发,充分挖掘颗粒群结构的形态特征和变形特征,才能深刻揭示由材料组成引起的复杂结构形态对力学性能的影响机理,建立材料组成与力学性能的联系。材料的细观特征(接触形态[1-3]、空间分布均匀性[4-5],集料长轴角度[5]等),及其与宏观变形[6-9]的相关性或宏观变形预测方面[10-13]的研究较多,但由于缺乏有效的颗粒群变形探测手段,在材料组成与颗粒群变形特征方面研究难以深入,因此,探索多目标、精度高、抗干扰能力强的混合料颗粒群变形跟踪方法十分必要。

目前在混合料颗粒群变形跟踪方面主要有3类做法。一是利用特征参数总体的变化描述内部结构的改变,如吴文亮[14]通过计算车辙试件切片图像在加载前、后中颗粒角度分布的变化,得到荷载作用下的集料转动规律,该方法由于没有对集料个体在加载前后进行辨识,无法得到集料个体的变形或转动。二是利用图像相关法计算局部变形[15-16],但集料颗粒发生较大位移或转动时,计算精度无法保障。三是乔英娟[17]捕获贴于试件表面的方块靶标角点,从而检测出颗粒群的变形,但该方法靶标特征过于简单,仅仅依靠方块的4个角点特征,而集料边界存在大量角点,靶标角点容易淹没于噪声中,从而导致自动化识别程度大大降低。本研究将方格阵列靶标印制在集料表面,通过跟踪靶标的位移、旋转实现颗粒上任意一点的变形计算,而且组成靶标的角点阵列具有明显的几何特征,便于计算机进行识别。同时,角点阵列提供多个亚像素坐标用于变形计算,确保了精度问题,为解决混合料内部颗粒群变形跟踪难题提供了有效途径。

1 颗粒群变形跟踪方法 1.1 方格靶标

方格靶标由黑白相接的方格组成,两个黑色方格相交处具有明显的角点特征,称为方格靶标角点,如图 1(a)中的方格靶标形成4×4角点阵列。当靶标制成印章,印制在集料表面上时,对于变形前图像从上到下逐行扫描到的角点阵列中,第一个角点定义为角点1,其他角点序列的编号如图 1(b)所示。

图 1 方格角点阵列靶标 Fig. 1 Grid corner array target

1.2 变形跟踪原理

基于方格靶标的颗粒群变形跟踪方法就是利用方格靶标的色彩、几何特征从变形前、后图像中的集料纹理、边界、划擦、色彩蜕变等干扰噪声中提取出来,再根据靶标角点阵列的几何特征实现集料颗粒位移、旋转等变形参数的计算。

方格靶标角点阵列的几何中心定义为靶标中心(xt, yt),其变形后坐标为(xt, yt)。过角点1和靶标中心的直线为靶标u轴,过角点13和靶标中线的直线为v轴,两轴的方向如图 2所示。定义靶标v轴正半轴离开x正半轴逆时针旋转的角度为靶标的角度。将方格靶标制成印章,使用光敏印油将其印制在集料颗粒表面,颗粒发生位移或转动后,通过跟踪靶标中心的位移和靶标角度的转角可以计算出集料上任意一点的位移量,如图 2所示,靶标初始角度为a,变形后角度为a′,集料上任意点为(x, y),则变形后的坐标(x′, y′)为:

(1)
图 2 变形跟踪原理 Fig. 2 Deformation tracking principle

使用方格靶标对混合料颗粒群进行变形跟踪,首先将混合料进行切割、打磨,使截面集料颗粒表面尽量光滑、平整,然后将靶标印制在集料颗粒表面上,风干后采集颗粒群初试位置图像,然后将试件组装、加载,采集加载后的颗粒群图像,通过捕捉两张图像中的靶标,获得各靶标的中心点及靶标角度,即可按式(1)计算集料上各点的位移情况,制作颗粒群的变形图谱。因此,方格靶标识别成为颗粒群变形跟踪的关键问题,其中主要难点为靶标角点阵列的定位和靶标几何参数计算。

2 方格靶标角点阵列定位 2.1 颗粒边界提取

图 3为带有靶标的颗粒边界的提取情形。

图 3 带有靶标的颗粒边界提取 Fig. 3 Extracting particle boundary printed with target

印制在颗粒群表面上的靶标识别为多目标识别,它是以单靶标逐个识别的方式实现的。为排除颗粒边界的影响,使用多阶段自适应边界分割方法[18]对试件截面图像进行二值化。接着对各颗粒进行边界跟踪,对跟踪到的颗粒进行编号,要求每个颗粒有唯一编号。然后使用该编号对颗粒区域像素进行赋值,制成颗粒区域的编号映射图,并对映射图做腐蚀运算。由此,在利用外接矩形进行颗粒单靶标图像识别时,取映射图中与当前颗粒编号相同的像素区域,这样就将其他颗粒及颗粒自身的边缘影响排除了。

2.2 平行靶标图像特征

当靶标角度为kπ/2+π/4时,靶标方格的4边分别与图像的水平、垂直方向平行,称为平行靶标,它是靶标位姿的一种特殊形态,此时靶标图像具有明显的几何特征。首先使用Sobel边缘检测法对靶标图像进行边缘检测,排除颗粒边界的边缘像素,得到图 4(a)所示的边缘强度图像,并对其进行二值化,使边缘位置像素为0,非边缘区域像素为255。

图 4 靶标角度为kπ/2+π/4时的图像特征 Fig. 4 Image feature when target angle is kπ/2+π/4

对边缘强度图像做水平、垂直方向的投影:

(2)
(3)

式中,Th(i)为第i行水平方向投影;Tv(j)为第j列垂直方向投影;mn为颗粒图像长和宽尺寸;E(i, j)为边缘图像中第i行、第j列的边缘强度。

图 4(a)所示,水平、垂直两个方向的投影均出现若干峰值,峰值的位置对应方格的竖向边界V1~V4和水平边界H1~H4,部分噪声在两个方向的投影曲线中也出现若干峰值,但其大小一般小于方格边界处的投影峰值。为了找到方格边界所对应的峰值位置,以方格边长r为周期做两投影的累加曲线ChCv

(4)

式中,λ为图像水平投影位置;k为方格从上到下的递增序数。

(5)

对于Chk为0,1, …, m/r;对于Cvk为0,1, …, n/rChCv曲线峰值位置分别对应着靶标方格的4条横、纵边界线。设ξζ分别使曲线ChCv达到峰值,通过搜索曲线ChCv的峰值位置,找到ξζ,方格靶标纵向4条边界V1~V4对应Tv曲线kr+ξ中4个最强的峰值位置,而方格靶标横向4条边界H1~H4对应Th曲线kr+ζ中4个最强的峰值,也即由累加曲线的ξζ可以重构平行靶标的16个角点坐标,如图 4(b)所示。

由上述分析,当颗粒靶标角度为kπ/2+π/4时,可通过靶标明显的纵、横投影曲线及各自以r为周期的累加曲线峰值位置计算平行靶标角点阵列坐标。

2.3 任意位姿靶标角点阵列定位

为找到任意位姿的靶标角点阵列坐标,对颗粒靶标图像逆时针旋转1周,得到每个旋转角度下的图像边缘强度图像,由边缘强度图像计算边缘强度的纵、横投影及相应的以r为周期的累加曲线。搜索各旋转角度θ下的边缘强度累加曲线峰值Ch(ξθθ)和Cv(ζθθ),其中ξθ为靶标旋转角度为θ时,使纵向边缘强度投影以r为周期的累加曲线Ch取得峰值的点;ζθ为靶标旋转角度为θ时,使纵向边缘强度投影以r为周期的累加曲线Cv取得峰值的点,绘制ChCvθ的关系图,见图 5

图 5 旋转角度与边缘强度投影累加峰值的关系 Fig. 5 Relationship between rotation angle and edge strength projection accumulation peak

图 5中可以看出,曲线Ch(ξθθ)与Cv(ζθθ)的形状相同,相位差为π/2,靶标旋转1周的过程中,两曲线均出现4个明显的强峰值,且峰值位置相同。很明显,这4个峰值位置正是靶标角度为kπ/2+π/4时,方格的边界线分别与图像的水平、垂直方向平行的情况。由于角点阵列是关于靶标中心的中心对称,在计算靶标角点阵列坐标时,可通过搜索曲线Ch(ξθθ)或Cv(ζθθ)在[0, π/2]上的最大峰值计算靶标角度。设图像逆时针旋转角度为θm时,曲线Ch(ξθθ)在[0, π/2]为最强峰值,则靶标角度必然为θm,π/2+θm,π+θm,3π/2+θm中的一个。图像在逆时针旋转θm后,得到ξθζθ值。在Th曲线的kr+ξ上取4个最强峰的位置,即为V1~V4的横坐标;在Tv曲线上的kr+ζ上取4个最强峰的位置,即为H1~H4的纵坐标位置,由此可计算得到16个靶标角点在图像旋转θm后的坐标。最后,将这些坐标值顺时针旋回θm后得到靶标角点坐标,如图 6所示。

图 6 获取靶标角点阵列坐标 Fig. 6 Obtaining target corner array coordinates

3 方格靶标参数计算 3.1 靶标中心

得到靶标角点阵列坐标后,为了进一步提高坐标计算精度,以这些坐标为初始位置,对各角点进行Harris角点亚像素搜索。该算法根据角点在任意方向移动均会发生较大灰度变化这一特点,通过在高斯平滑后的图像上移动1个小窗口,根据小窗图像差分及实对称性质,构建参数Rcorner用以表征窗口内的灰度变化与由图像梯度组成的二阶矩阵Q相关性。Rcorner越大则当前位置是角点的可能性越大,Rcorner由下式计算:

(6)

式中,IxIy分别为沿xy方向的灰度梯度;det为矩阵的行列式;trace为矩阵的迹。

Rcorner在移动窗口(本研究取3×3窗口,步长为0.1像素)范围内最大时,即为角点,从而实现在给定角点初始位置的情况下的亚像素搜索。最后由16个亚像素角点坐标的均值获取靶标中心点坐标。

3.2 靶标角度

由前文分析可知,靶标角度可能为θm,π/2+θm,π+θm,3π/2+θm中的一个,但究竟是多大角度,仍需做进一步判断。对于变形前图像,根据角点编号的规则,角点阵列中的第一角点是图像从上到下逐行扫描过程中第一个检测到的角点,以该角点为中心取周边M×M的子图像S0(M为奇数),然后对原颗粒图像分别逆时针旋转θm,π/2+θm,π+θm,3π/2+θm,取各图像中以左上角角点为中心、大小为M×M的子图像S1~S4,计算S0S1~S4的相似度,其中相似度最大的图像所对应的旋转角度即为靶标角度,相似度计算式为:

(7)

式中,k为1~4,M取值为5。

对于变形后图像,设图像逆时针旋转角度为θm时,曲线Ch(ξθθ′)在[0, π/2]为最强峰值,对变形后的图像分别逆时针旋转θm,π/2+θm,π+θm,3π/2+θm后,取各图像中以左上角角点为中心、大小为M×M的子图像Q1~Q4,用式(7)计算S0Q1~Q4的相似度Rangle,该值最大的子图像所对应的旋转角度即为变形后图像靶标角度。

4 颗粒群变形跟踪试验

采用方格靶标跟踪颗粒群变形时,靶标的最小边长可以做到8 mm,这样的尺寸可以印制在9.5 mm粒级以上的颗粒表面上。尽管少量靶标图案超出集料颗粒边界仍可识别,但为了保证识别率,在印制靶标图案时,尽量将靶标印制在颗粒边界内部,且离边界越远越好。如图 7所示,将车辙试件切割后印上靶标,使用高分辨率扫描仪(300 dpi)采集变形前截面图像,然后将试件重新装入试模中进行车辙试验,加载完成后,取出试件,采集变形后的截面图像,分别对图 7(a)~(b)中的靶标进行捕捉,得到各靶标的中心点和靶标角度,按式(1)计算集料上栅格点的位移,制作变形图谱,见图 7 (c)。为了突出显示颗粒变形情况,将位移放大了3倍。

图 7 基于十字靶标的颗粒群变形跟踪 Fig. 7 Tracking particles deformation based on cross target

图 7(a)~(b)中可以看出,在集料纹理、边界、表面划擦、色彩蜕变等干扰噪声下,几乎所有的方格靶标均被捕捉,尤其是车轮加载区域,颗粒变形大,存在较大的旋转角度,沥青从集料缝隙中挤出,对靶标图像造成了较严重的污染,在此情况下,方格靶标仍能被准确识别,说明方格靶标明显的几何特征及较为复杂的靶标图案具有较强的抗噪声干扰的能力,适用于大变形跟踪。

图 7 (c)中可以看出,荷载附近区域的颗粒以向下运动为主,并沿着深度方向向两侧扩散。当这种扩散被左右边界试模约束时,颗粒位移的形态逐步变为向上隆起,但左右两侧的变形情况并不对称。在外力作用下,混合料内部以颗粒为单位不断改变运动方向,颗粒运动趋势受到混合料内部颗粒的空间排布、集料接触形态的影响。基于方格靶标的颗粒群变形跟踪作为一种有效的分析工具,将混合料的宏观变形与内部颗粒群的细观变形结合起来,并与反映混合料内部细观形态的集料形状、颗粒空间分布、颗粒接触状况等参数存在天然密切联系,因而颗粒群变形能够将宏观力学性能与细观结构形态参数联系起来,为深刻揭示混合料宏观行为的内在机理和改善混合料性能提供一种新的思路。

5 结论

(1) 基于方格靶标的沥青混合料截面内部颗粒群变形跟踪方法,将靶标图案印制在混合料截面集料颗粒上,通过捕捉变形前、后图像中的靶标,获得其旋转角度和中心点坐标,实现集料颗粒上任意一点的变形跟踪。靶标图案边缘特征明显,结构较复杂,且提供了多个角点用于靶标中心的计算,具有抗干扰能力好、适用性强的优点,为探索沥青混合料内部颗粒群变形机理提供了一种有效的分析手段。

(2) 平行靶标图像具有明显的几何特征,它的边缘强度在水平、垂直方向的投影在方格边界处会出现强峰,结合其累加曲线峰值,可得到平行靶标角点阵列。根据靶标角度将平行靶标旋回可得到靶标角点阵列,最后通过靶标角点阵列亚像素均值化处理完成靶标中心计算。

(3) 由颗粒图像旋转角度与边缘强度投影累加峰值的关系可知,此曲线在[0, 2π]上会出现4个峰值,峰值相差π/2,且竖直方向与水平方向曲线形状相同,相位差为π/2,将4个峰位作为靶标角度的候选值,并结合变形前第一角点与各候选值下的平行靶标左上角角点的相似度分析,能够得到靶标角度。

参考文献
[1]
COENEN A, EMINKUTAY M, SEFIDMAZGI N R, et al. Aggregate Structure Characterisation of Asphalt Mixtures Using Two-dimensional Image Analysis[J]. Road Materials & Pavement Design, 2012, 13(3): 433-454.
[2]
SEFIDMZAGI N R. Defining Effective Aggregate Skeleton in Asphalt Mixture Using Digital Imaging[M]. Madison: University of Wisconsin-Madison, 2011.
[3]
英红, 周基, 吴倩, 等. 沥青混合料集料颗粒接触形态变化规律[J]. 建筑材料学报, 2016, 19(2): 292-299.
YING Hong, ZHOU Ji, WU Qian, et al. Variation of the Contact Form of Coarse Aggregate Particles in Skeleton Type Asphalt Mixture[J]. Journal of Building Materials, 2016, 19(2): 292-299.
[4]
彭勇, 孙立军, 董瑞琨. 沥青混合料均匀性评价新方法的探讨[J]. 同济大学学报, 2015, 33(2): 166-170.
PENG Yong, SUN Li-jun, DONG Rui-kun. Discussion about New Method for Evaluating Homogeneity of Hot-mix Asphalt[J]. Journal of Tongji University:Natural Science Edition, 2015, 33(2): 166-170.
[5]
张婧娜.基于数字图像处理技术的沥青混合料微观结构分析方法研究[D].上海: 同济大学, 2000.
ZHANG Jing-na. Research on Asphalt Mixture Microstructure Analysis Method Based on Digital Image Processing Technology[D]. Shanghai: Tongji University, 2000. http://www.wanfangdata.com.cn/details/detail.do?_type=degree&id=W1657268
[6]
KWAN A K H, MORA C F, CHAN H C. Particle Shape Analysis of Coarse Aggregate Using Digital Image Processing[J]. Cement & Concrete Research, 1999, 29(9): 1403-1410.
[7]
王端宜, 黎侃, 蔡旭. 基于集料接触特性的沥青混合料抗车辙性能评价[J]. 华南理工大学学报:自然科学版, 2012, 40(11): 121-126.
WANG Duan-yi, LI Kan, CAI Xu. Evaluation of Rutting Resistance of Asphalt Mixture Based on Aggregate Contact Characteristics[J]. Journal of South China University of Technology:Natural Science Edition, 2012, 40(11): 121-126.
[8]
SEFIDMAZGI N R, TASHMAN L, BAHIA H. Internal Structure Characterization of Asphalt Mixtures for Rutting Performance Using Imaging Analysis[J]. Road Materials and Pavement Design, 2012, 13(S1): 21-37.
[9]
谭忆秋, 宋宪辉, 纪伦, 等. 粗集料性能对沥青混合料高温性能的影响[J]. 中国公路学报, 2009, 22(1): 29-33.
TAN Yi-qiu, SONG Xian-hui, JI Lun, et al. Influence of Coarse Aggregate Performance on High Temperature Performance of Asphalt Mixture[J]. China Journal of Highway and Transport, 2009, 22(1): 29-33.
[10]
YUE Z Q, CHEN S, THAM L G. Finite Element Modeling of Geomaterials Using Digital Image Processing[J]. Computers & Geotechnics, 2003, 30(5): 375-397.
[11]
TASHMAN L, WANG L B, THYAGARAJAN S. Microstructure Characterization for Modeling HMA Behavior Using Imaging Technology[J]. Road Materials and Pavement Design, 2017, 8(2): 207-238.
[12]
YOU Z, GOH S W, DONG J. Predictive Models for Dynamic Modulus Using Weighted Least Square Nonlinear Multiple Regression Model[J]. Canadian Journal of Civil Engineering, 2012, 39(5): 589-597.
[13]
MASAD E, BUTTON J. Implications of Experimental Measurements and Analyses of the Internal Structure of HMA[J]. Transportation Research Record, 2004, 1891: 212-220.
[14]
吴文亮, 张肖宁, 李智. 沥青混合料车辙试验中粗颗粒运动轨迹的分析[J]. 华南理工大学学报, 2009, 37(11): 27-30.
WU Wen-liang, ZHANG Xiao-ning, LI Zhi. Analysis of Movement Track of Coarse Particles During Rutting Test of Asphalt Mixture[J]. Journal of South China University of Technology:Natural Science Edition, 2009, 37(11): 27-30.
[15]
LI Kan, WANG Duan-yi, LI Jia, et al. Deformation Analysis of Asphalt Mixtures with Digital Image Correlation Method[J]. Advanced Materials Research, 2013, 831: 470-475.
[16]
ROMEO E. Two-dimensional Digital Image Correlation for Asphalt Mixture Characterisation:Interest and Limitations[J]. Road Materials and Pavement Design, 2013, 14(4): 747-763.
[17]
乔英娟.沥青混合料位移场测定与流动性车辙分析[D].大连: 大连理工大学, 2008.
QIAO Ying-juan. Measurement of Displacement Field of Asphalt Mixture and Analysis of Flow Rutting[D]. Dalian: Dalian University of Technology, 2008. http://cdmd.cnki.com.cn/Article/CDMD-10141-2008034266.htm
[18]
HUANG Qing-ming, GAO Wen, CAI Wen-jian. Thresholding Technique with Adaptive Window Selection for Uneven Lighting Image[J]. Pattern Recognition Letters, 2005, 26(1): 801-808.