Google car dneska potřebuje mapu s každým semaforem, sloupem veřejného osvětlení, přechodem, se značením pruhů, značkami, výškovým oddělením pruhů atd. Mapa musí být aktuální, protože jinak auto nemusí značku nebo semafor vůbec zachytit. Mapování provádí automobil s kamerami, lidary atd., a pak se zpracovává strojově i ručně. Je to tak náročný proces, že Google neumí sestavit ani mapu celých US, natož jejich aktuální mapu.
Navíc mapa nestačí. Auto se orientuje (mimo jiné) podle shody obrazu z kamer a lidaru s mapou. Samotná GPS pozice rozhodně nestačí. Její přesnost je řádově v metrech, a dál se zhoršuje vlivem počasí, stromů a zástavby. Například v "údolí" mezi mrakodrapy se přesnost snadno může snížit na desítky metrů.