Premessa

Quando si costruisce un sito la cosa che si aspetta con maggiore trepidazione è l'indicizzazione delle proprie pagine da parte di motori di ricerca e directory. L'indicizzazione è aspetto assai importante perché permette di aumentare il numero degli accessi alle nostre URL.
Fortunatamente appena motori di ricerca quale Google o directory come Yahoo cominciano a tenere conto delle nostre pagine Web spesso accade che anche altri muovano nella stessa direzione indicizzandoci.

A questo scopo possiamo personalmente suggerire a motori e cartelle di prenderci in considerazione; Google, ad esempio, offre dei suggerimenti in tal proposito alla URL http://www.google.com/webmasters/guidelines.html.
La segnalazione dell'URL tuttavia non garantisce affatto l'inserimento del sito nell'indice.
Sembrerà paradossale, ma a causa dell'elevato numero di richieste per l'inserimento di URL, quasi sicuramente le nostre pagine verranno rilevate ancor prima che la richiesta sia presa in considerazione!

La menzione di Google non è casuale, lo prenderemo in considerazione per compiere le nostre analisi.
Siamo di fronte ad un motore di ricerca del tutto automatizzato, che fa uso di software conosciuti col nome di "spider" per effettuare la scansione del Web ed individuare quindi i siti da includere nel suo elenco.

Uno spider legge pagine di siti, può essere paragonato ad un vecchio browser che ne visualizza il contenuto, ma le sue capacità sono molto limitate rispetto ai browser moderni, pertanto non riesce a leggere Javascript, Flash ed in generale tutto ciò che è grafica.
Qualora volessimo una minima idea di ciò che un motore vede delle nostre pagine, basta navigarvi con una versione 3 di IE ed i Javascript disabilitati. È anche possibile acquistare appositi simulatori: se è vero che fra i vari spider esistono alcune dissomiglianze e subiscono modifiche nel tempo, è altrettanto vero che farsi un'idea approssimativa è, comunque, utile.
Le altre parti di cui i motori non tengono conto ancora sono quelle in ASP e PHP (che al motore non arrivano).

Lo spider deve tenere traccia delle informazioni contenute nel nostro sito per indicare al navigatore l'elenco di quelli con più attinenza con la ricerca eseguita.
Una immagine non è indicizzabile o catalogabile perché un software può analizzarla per ricavarne il disegno, ma non può comprendere il significato.
Il software di qualche search engine è in grado di arrivare a distinguere i caratteri all'interno delle immagini o di scomporre un filmato (o movie) Flash per interpretare le componenti testuali, ma ai fini del posizionamento, tali contenuti hanno incidenza assai minore rispetto agli altri in codice HTML.

L'indice viene aggiornato ogni volta che il programma di ricerca automatico (il c.d. "crawler")  esegue la scansione della rete.
Il nostro scopo sarà quello di essere indicizzati in posizioni alte, comparire in una ricerca ma alla trentesima pagina su migliaia di risultati risulterà poco utile: vi è capitato spesso di cercare attraverso un motore di ricerca un sito la cui URL è mostrata oltre la terza pagina?!

Il primo passo, fondamentale, consiste nell'ottimizzare il codice HTML, anche se oggi i motori ottimizzano i loro algoritmi e con pochi accorgimenti validi possiamo ottenere un buon codice.