Un crawler è un tipo di bot (programma o script che automatizza delle operazioni). I crawler solitamente acquisiscono una copia testuale di tutti i documenti visitati e le inseriscono in un indice. Un motore Crawler based sfrutta tutte queste informazioni (contenuti, links in ingresso ed in uscita…)e li visualizza nelle pagine di ricerca.
Inoltre molti meta crawlers includono una toolbar gestibile direttamente dal desktop che permette ricerche su singoli Search Engine. Un motore meta Search sfrutta praticamente gli stessi parametri; non scandagliano il web per costruire listati ordinati per pertinenza, ma permettono di richiedere informazioni a diversi motori di ricerca contemporaneamente, e raccogliere così i top search results da differenti indici. I Motori Crawler-based collezionano le informazioni inerenti un web site in modo molto differente rispetto le Directories human-powered. Ciò non significa che l’uno sia meglio dell’altro, ma solamente che il successo di un sito web in ciascun Motore di Ricerca è basato sull’incontro di specifici requisiti. Analizziamo qui di seguito alcune diverse tipologie di Search Engine.
Motori di ricerca basati Crawler-Based – Solitamente la parola Search Engine viene abbinata a “Spider”. I Motori di ricerca basati Crawler-Based come Google, Altavista o Inktomi (per citarne qualcuno) scavano e leggono i percorsi dei link web scrutando le piattaforme web. Sottomettere un percorso Url a questi motori significa essenzialmente invitarli a visitarlo. E’ un processo lungo e delicato che potrebbe impiegare diversi mesi. Tmd Web Agency sisegna siti web performanti per i Motori di ricerca. L’ottimizzazione dei contenuti risulta una chiave vincente per ottenere il successo nei processi di spideriazzazione.
Directories Human-Powered: si tratta di immensi archivi che immagazzinano una grande mole di dati. Nelle directories, l’inclusione delle pagine dipende dall’attività manuale dei propri editori. Quando si sottoscrive l’inclusione di un sito in una directory, bisogna sottostare alle regole ed ai controlli proprietari. Inoltre i contenuti che si vanno ad inserire, devono essere perfettamente inerenti alla categoria prescelra. Gli editori delle inclusioni (esseri umani e non macchine) sono liberi di trattare le informazioni inserite in modo parziale o totale, e di spostare l’inclusione in un’altra area se più inerente. Se l’url ed i contenuti inseriti non rispettano il regolamento sottoscritto al momento dell’inclusione, la directory è libera di non inserire o cancellare i contenuti sottoposti. Le combinazioni di risultati: quando si effettuano ricerche utilizzando Msn, verranno visualizzati i risultati derivanti dalle lista di LookSmart, le ricerche su Aol visualizzeranno i risultati di Google, cercando su LookSmart si visualizzeranno dapprima i risultati da esso raccolti ed a seguire quelli contenuti in Inktomi. Ciò sta a significare che molti Search Engine hanno strette relazioni con le liste altri motori di ricerca. Per ottenere ottimi risultati di ricerca bisogna sottoporre le query a MetaSearches come Ixquick o DogPile..
Citiamo alcuni dei più importanti Meta Searches riconosciuti a livello mondiale: Dogpile (http://www.dogpile.com) è un popolare sito di Metasearch di proprietà della InfoSpace, che ha la particolarità di raccogliere I risultati dei più importanti search engine con possibilità di visualizzaizone individuale e multipla. E’ vincitore del Premio “Miglior Search Engine 2003”. Vivisimo (http://vivisimo.com/) è un famoso meta Search. La sua particolarità è che i risulteti restituiti da ogni query di ricerca vengono automaticamente in pagine di categoria. E’ vincitore del premio “Miglior Search Engine 2003”. Mamma (http://www.mamma.com) fu fondato nel 1996 ed è uno dei più anziani meta Search Engine del Web. Il servizio di indicizzazione oggigiorno prevede una inclusione a pagamento. I risultati sono ottimi. E’ stato menzionato in modo onorevole nell’assegnazione del Premio Miglior Search Engine del 2003.
In conclusione, l’essere inclusi negli indici di alcuni motori di Ricerca è importantissimo per ottenete una certa visibilità nel web; ma non bisogna sottovalutare il fatto che i risultati di ricerca sono variabili nel tempo, cambiano in ogni istante. Ciò è dovuto a cause diverse, quali ad esempio il cambiamento dell’algoritmo (modifica delle regole di elencazione dei risultati) o alle strategie di web marketing utilizzate dalla concorrenza. Scalare le posizioni di una Serp è importantissimo..non utilizzare tecniche di Search Engine Optimization significa essere esclusi dall’utenza web, nonostante si possa essere presenti in internet con un bellissimo e funzionalissimo sito.
