Selain itu, sistem road damage detection juga masih menghadapi beberapa tantangan yang berasal dari luar sistem. Contohnya adalah kondisi lingkungan eksternal berupa lalu lintas yang padat dan perbedaan faktor pencahayaan saat pagi, siang, atau malam. Kedua faktor ini sangat berpotensi menyebabkan gagal deteksi kerusakan jalan oleh sistem. Oleh karena itu, sistem road damage detection juga masih harus melalui tahap-tahap perbaikan lebih lanjut untuk menyempurnakan cara kerjanya.