Näiteks kasutatakse ämblikke sageli märksõnade kogumiseks veebilehtedelt, mis seejärel sorteeritakse, et kasutajad saaksid need leheküljed Interneti otsingumootori kaudu leida.
Botid, indekseerimine, Interneti-terminid, robot, Robots.txt, veebileht, veebisait