虽然汽车制造商和监管机构担心车辆遭黑客攻击，但华盛顿的研究者们担心的却是一个更现实的问题：街边路牌破坏。研究者们了解到：通过贴纸有针对性的改变街道路牌标志，就能轻易干扰自动驾驶汽车系统进行正确判断。如果使坏者知道汽车如何识别物体，如路牌的标志性图片，那他们就能够做出相应的贴纸来干扰自动驾驶汽车，从而让汽车将路牌误认为其他意思。例如下图中，添加了“love/hate”贴纸后，自动驾驶汽车将停车标志认成了限速标志。
那这样的话，潜在的危险就显而易见了。你可以在家中自制这样的贴纸，而那些想要做坏事的人则更可以如此。这有可能会造成车祸，甚至可能造成长时间的恐慌——这条路可能会被封掉，直到维修人员能将贴纸刮下为止。
不过这一问题也是有望解决的。研究小组建议使用上下文信息来验证标志是否准确。例如，在高速公路上出现停车标志，或在小路上出现高速限制，这些都是不可能的。另外，地方政府也可以安装防粘材料的路牌，或者将其放在不能接触到的位置。无论如何，要让乘客信任自动驾驶汽车的路标识别能力，必须就得有所改变。