虽然车牌识别技术已得到很大发展，但是仍然存在难点。这些难点集中体现在以下几个方面：
1、天气的影响
雨雾天气能见度较低，获取的车牌图片质量会有严重的退化，因此车牌识别系统必须实现图像复原功能，即采用图像复原算法对雨雾天退化图像实现场景的再现。
2、我国车牌的特殊性。（a）我国车牌的字符包括中文、数字和英文字母。由于中文字符的笔画较为复杂，在对中文字符进行二值化处理后，容易造成笔画模糊，从而导致错误的识别。同时在对车牌字符识别时，需要对英文字母和数字进行混合识别，受部分英文字母和数字字符相似的影响，会造成英文字母和数字的误识。（b）我国车牌识别颜色的多样性，比如蓝色白底、黄底黑字、黑底白字等，在利用车牌颜色的特征时需要考虑多种情况，增加了额外的工作量。
3、夜间亮度不强，光线不分散
夜间在大灯的作用下，车牌的图像可能会变得一团黑一团白的情况，解决这个问题通常会用到以算法控制补光灯的智能补光技术，同时采用双重宽动态，使其车牌识别摄像机能够在同一画面捕捉到更多的亮面和暗部的细节，更接近于人眼睛看到的事物。
4、背对光线
对于顺逆光而言，可以通过局部曝光、强光抑制等智能控光技术调整摄像机的曝光参数从而实现优异的成像自动控制。
5、车辆来往方向不同
对于因车辆运行而形成的大角度，个别厂家的车牌识别系统对于此种情况的处理效果并不理想，该问题在有转弯和出入口较宽的停车场显得尤为明显，当然通过对车牌识别摄像机的高度和角度的控制，可以减少大角度的弧度，但是并不能完全解决这个问题，安快车牌识别系统就有效的解决了这一问题。
