公司建网站搭建服务器,目前主流搜索引擎是哪种,wordpress怎么导入demo文件,奉贤网站制作自动驾驶汽车视觉车道线跟踪和预测
摘要 我们提出了一种用于自动驾驶汽车跟踪水平道路车道标记位置的可视化方法。我们的方法是基于预测滤波的。预测步骤估计在每个新的图像帧中期望的车道标记位置。它也是基于汽车的运动学模型和嵌入式测程传感器产生的信息。使用适当准备的测…自动驾驶汽车视觉车道线跟踪和预测
摘要 我们提出了一种用于自动驾驶汽车跟踪水平道路车道标记位置的可视化方法。我们的方法是基于预测滤波的。预测步骤估计在每个新的图像帧中期望的车道标记位置。它也是基于汽车的运动学模型和嵌入式测程传感器产生的信息。使用适当准备的测试车辆获得的实验结果表明在某些条件下如振荡和变道预测步骤可以显著地减少跟踪误差。因此我们相信我们的方法应用于基于图像的控制自动驾驶汽车可以提高系统性能。
1.介绍 汽车本身无疑是现代自动化的最大挑战之一。一方面飞机和船舶的汽车驾驶员是众所周知的和广泛使用的。另一方面由于更加复杂对于汽车和卡车这项技术仍在开发中。其目标是使汽车自动从地址A驾驶到地址B与有经验的人类司机一样安全或更安全。在这种情况下用户就只是一名乘客。 对于汽车来说自动驾驶系统的一个基本要求是能够将车辆保持在道路内并行驶在车道的中心。这需要了解周围环境的知识这是通过安装在汽车上的传感器获得的例如照相机、激光扫描、GPS和惯性单元。 NASHMAN1992年、SCHNEIDERMAN1994年、POMERLEAU1996年、BROGGI1999年和LU2002年等项目只依赖于摄像机生成的灰度图像用于检测道路的位置和估计曲率。在CHRISMAN1998和SALES2010中彩色图像被用来对属于道路的区域进行分类。这一想法也被应用于DAHLKAMP2006以扩大系统的范围超出在其自主车辆上使用的激光测距仪LRF传感器的范围。 立体视觉系统允许计算场景上物体的距离。在BROGGI2010和LIMA2010中使用了双目视觉系统立体视觉用于障碍检测。但是这种系统具有计算成本高的缺点。 像GUIZZO2011和自动驾驶实验室2012等项目将LRF传感器与相机、GPS、IMU和地图信息相结合使自动驾驶研究达到前所未有的水平。这两个项目都成功地完成了在真实城市环境中的自主导航任务。 在巴西这一领域的研究正在开始发展我们强调一些为你驾驶UNIFEIVEERMAS2010CADUUFMGLIMA2010VEROCTI /CampinasVERO2012EESC / USPSENA2012CARINACARINA2010由ICMC / USP开发。我们大学的另一个小组UFES也在开发一个自动驾驶汽车项目。他们买了一辆已经安装了主要硬件组件的车他们主要关注的是软件方面。他们的主要目标是了解人类大脑是如何利用图像来解释世界的LCAD2013。另一方面我们项目的主要目标是建立一辆具有简单和低计算成本的解决方案的自动驾驶汽车。为了实现这一目标我们正在通过安装执行器和传感器来调整普通汽车。我们的汽车已经能够在可控的条件下在真实的道路上自动驾驶VIVACQUA等人2012年。 我们的系统由一台连接到一个USB摄像头的笔记本电脑和一个接口板组成。USB摄像头安装在前挡风玻璃上指向道路。接口板将计算机连接到汽车编码器并连接到负责驱动轮定位的步进电机。 计算视觉系统产生的视觉信息受到由遮挡、反射、阴影等引起的噪声或误差的影响。为了使这些问题的影响最小化对原始图像进行过滤过程以产生更可靠的信息。这些信息是所谓的模型状态的基础并被反馈到视觉算法中以定义感兴趣的图像区域ROI见图1。在VIVACQUA 等人2012中这些信息也被控制器用来使自动驾驶汽车保持在道路的中心。 图1用来生成模型状态的可视化信息流 一些视觉车道跟踪的方法SCHNEIDERMAN1994)、AUFRERE2000、LU2002和CHOI2012。它们都使用某种过滤过程来更新其模型状态描述车道标记的参数但没有一种方法使用预测。为了实现预测车辆的位移信息必须是可访问的和可靠的。我们已经对我们的自动驾驶汽车进行了必要的调整在本文中我们提出了一种基于预测过滤的可视化方法来跟踪水平道路车道标记的位置的可视化方法。预测步骤估计在每一个新的图像帧中的期望车道标记位置以最小化跟踪误差。下面的几部分将对我们的系统进行解释并讨论一些实验结果。
2.参照系 在进行预测步骤之前需要将系统参照系从相机的参照系更改为汽车的参照系考虑到摄像机在原点自我参照系-OR。在自动驾驶汽车中使用的视觉系统检测到的水平车道标记VIVACQUA2012通过反向透视投影图2进行映射就像图像是从天空看到的一样假设道路是完美的平面鸟瞰图。 图2参照系。A相机参照系B汽车参照系 在自我参照系中原点是地平面中相机正下方的点Z轴对应于汽车的位移方向当向前移动时X轴是横向方向。图2 (B)显示了与图2 (A)图像中检测到的信息对应的两条导线左和右。预测步骤的基本思想是可以根据运动学模型预测汽车在下一个图像帧中的位置和在实际帧上的位置。
3.汽车运动学模型 汽车运动学模型可以用图3所示的自行车模型来近似。图中Pr为描述车辆轨迹的圆周的中心Pc为车辆中的摄像机位置或原点R为Pc描述的轨迹曲率半径Lt为车辆前后轴的距离Lr为或原点与后轴的距离α为前轮转角。 图3汽车运动学模型 使用汽车运动学模型(1)根据其参数和前轮转角(α)我们可以计算出世界参照系WR中的车辆轨迹。 1 其中x、z、θ为车辆在WR中的位置和方向v为车辆的线速度。值得注意的是世界参照系WR的起源是固定在地面上的而不是固定在汽车上的。因此当汽车移动时点Pc描述了点线轨迹固定物体在世界中的位置保持不变。
4.位置预测 在OR参考系中点Pc与原点重合世界上的固定物体旋转Pr但方向相反。图4显示了在或参考系统中所看到的世界上一个固定物体的初始位置。根据初始位置的信息和由运动学模型所定义的轨迹可以估计未来的位置。 图4对象位置预测(a)右转(b)左转(c)直行。 旋转中心Pr、摄像机轨迹的曲率半径(R)和角位移Δθ采用(2)、(3)和(4)进行计算。 以米为单位的距离通过位于前轴的编码器获得和前轮转角(α)通过安装在驱动轮轴上的另一个编码器获得 2 3 4 其中ΔL为位移距离。
5.抛物线旋转 要估计任何物体的新位置人们只需知道旋转中心Pr、旋转角度Δθ并应用一个二维旋转操作。在VIVACQUA2012中描述的自动驾驶车辆的具体案例中系统被测试跟踪对象是构成道路模型的两个道路车道标记。每一个标记都用一个二次多项式表示。 5 给定旋转抛物线的一个点XZ我们可以通过反向旋转操作在原始抛物线中找到相应的点XZ由下式给出 6 7 其中Px和Pz为旋转中心的坐标。在(5)中替换(6)和(7)我们得到了旋转抛物线的一般形式 8 这种形式与软件中使用的原始数据结构不兼容不允许对X给定Z的显式计算这在计算上是不可取的。为了解决这个问题我们提出了一种方法来找到一个良好的旋转抛物线的近似值以保持在(5)中给出的默认形式。 考虑旋转的抛物线方程 9 我们需要解决的问题是找到系数a2ra1r和a0r。解决这个问题的一般思想是找到区间内原始抛物线x (z)的中心点M[z0..z1]应用Δθ绕Pr点旋转从而使M变成Mr考虑Mr属于新的抛物线xr (z)并考虑这个点的切线方向被旋转角度Δθ减去。 切线在M点上的倾角由给出。利用切线差的性质我们有
。由于旋转的抛物线曲率没有改变我们有a2ra2。系数a1r可以用计算系数a0r用计算。通过这样做我们得到在OR参考系的旋转抛物线参数。 图5旋转抛物线的近似值
6.滤波 我们考虑到车道标记位置在连续帧中不会有太大的变化大量的噪声会导致图像快速变化(如反射或遮挡)。为此我们选择使用一阶低通滤波器考虑到其对系统行为的影响我们在实验中定义了该时间常数:如果该值过低滤波对零星误差测量的衰减作用很小。另一方面如果它太高这将延迟响应并且会给模型带来困难例如在弯道前后发生的道路形状的缓慢变化。在用车载摄像机在80km/h速度下拍摄的视频进行测试后我们发现τ 3的值在鲁棒性和响应速度之间产生了很好的折衷。 式10表示表示状态模型的向量Wi。式11是低通滤波器的表达式它从视觉系统Ui生成的度量中更新模型状态。 10 11
7.实验结果 为了测量预测系统的性能我们使用一个适当适应的测试车辆进行了一些实验以获取与里程长测量同步的道路图像。该车辆在三种曲率条件下驾驶如图6 (A)在左转(B)在一条直线上和(C)在右转。在每个曲率条件下车辆就轨迹的振荡水平以三种不同模式进行图6 (D)至6 (F))无振荡L0车辆沿与导线平行的道路行驶低振荡水平L1车辆周期性穿过中心线高振荡L2车辆也穿过中心线但有更明显的偏差。 图6实验条件(A)左转、(B)直行、(C)右转、D、E、F对应路线 在轨迹中引入振荡迫使车辆移动不平行于道路线以便预测能够证明其保持模型状态接近瞬时测量的能力。 测试在100米长的路径上以大约40 km/h的速度进行每40 ms采集一次数据图像和里程计。图7显示了图6中每个轨迹的注册驱动轮位置。 图7在试验中获得的驱动轮位置数据 收集到的数据在实验室进行分析用来评估系统性能有和不使用预测。所使用的性能指数是绝对水平平均误差AHAE由模型定义的曲线与瞬时测量定义的曲线的差值计算出来。 12
8.讨论 图8显示了从测试中获得的视频中获得的帧序列它与图6(D)中所示的L2轨迹的情况相对应。这个序列对应于车辆远离中心线的延伸可以从黄色标记的连续位移到左边。 图8帧序列显示了有和没有预测的跟踪过程。 图8清楚地显示与只使用滤波和预测的模型黑色虚线相比使用滤波和预测的模型白色虚线更接近度量值红色连续线。这说明了我们的方法的好处。 感知模型状态和视觉测量之间更接近的另一种方法是通过图9中的图图中显示了过滤模型和带有预测的过滤模型的多项式的参数a0(车道偏移)和a1(车道方向)。曲率参数(a2)没有给出因为它在考虑的拉伸中实际上是恒定的。 图9仅滤波和滤波-预测的模型参数表现 图10振荡等级2中的累积误差 在图9中我们可以注意到低通滤波去除高频噪声的能力这导致了延迟平滑曲线没有预测情况。通过使用预测可以减少不期望的延迟预测。这种减少是因为预测补偿了汽车运动对捕获图像的影响。图10为具有较高振荡L2的测试条件下指数AHAE的归一化累积误差NAE其中认为无预测的累积误差为1。用13计算其中n为实验中使用的总帧数。 13 在所有测试用例中有预测的累积误差上升速率小于未有预测的累积误差低于0,51。 图11总结为在所有测试条件下得到的最终NAE值详见图11。我们可以注意到当汽车以较高振荡水平的轨迹行驶时NAE的值会降低。这是因为当存在振荡时车道标记在摄像机视野内横向发生位移预测的使用补偿了这种效应使模型更接近真实测量同时保持滤波过程给出的鲁棒性。我们相信预测步骤将提高自动驾驶车辆在类似条件下驾驶时的性能。
