L'indicizzazione è il processo di inserimento di un sito web negli indici dei motori di ricerca. Si tratta di un'operazione che i motori di ricerca possono svolgere in autonomia, tramite software chiamati crawler o spider, oppure con l'aiuto manuale di un utente che segnala il sito al motore stesso.
Quando un nuovo sito viene pubblicato in rete, dopo un tempo variabile (possono trascorrere anche 2 mesi) il motore di ricerca ne scansiona i contenuti tramite lo spider, programma in grado di leggere il codice e seguire i link presenti sul sito.
Finita la fase di scansione il motore cerca di classificare il sito e lo fa in base ai suoi algoritmi, analizzando ad esempio le parole chiave e individuando il settore di riferimento del sito. Dopo questa fase si può comprendere se l'ottimizzazione del sito web è stata adeguata o meno.
E' possibile impedire l'indicizzazione di un sito tramite la stringa:
<meta name=”robots” content=”noindex”>
nella head della pagina HTML.