Premessina : Googlebot è lo spider di Google per scansionare il web.

Ma, una ricerca più approfondita del solito, mi ha portato, finalmente a capire meglio quanti e quali sono i bot (spider) che Google usa per scandagliare milioni di pagine web ogni giorno. Non poteva, infatti, essere un unico spider responsabile dell’indicizzazione di milioni di contenuti differenti fra loro.

• 
  

  Google Bot

  Questo spider è utilizzato da Google alla ricerca di nuove pagine. Si divide in due versioni. Il Deep bot cerca di seguire ogni link e scaricare più pagine possibili. Legge il contenuto nel dettaglio inclusa la struttura interna. Il Fresh bot ricerca nuovi e recetni contenuti rivisitando pagine già indicizzate alla ricerca di update particolari. Logicamente, pagine ad elevato ranking per Google riceveranno la visita del Fresh bot più spesso rispetto ad altre a ranking più basso.

• 
  

  Media Bot

  Come fà Google a piazzare annunci Adsense sempre pertinenti al contenuto visualizzato? La risposta sta in questo bot che analizza i vari contenuti e pagine in cui inserire Adsense. Solo dopo che questo spider ha visitato per la prima volta le vostre pagine vedrete comparire Adsense, altrimenti nulla. Per facilitare questo processo che, a volte, è lento, inserite nel file robot.txt file :
  User-agent: Mediapartners-Google*

• 
  

  Image Bot

  Come indica chariamente il nome, si tratta del bot usato per ricercare e indicizzare le immagini da piazzare in Google’s image search. Il ranking delle immagini si basa sul nome del file, testo dell’attributo alt, alt text, contenuti di contorno e titolo della pagina che le include. Ne ho parlato dettagliatamente qui

• 
  

  Ads Bot

  Determina la qualità degli ads da assegnare alle pagine web. Va a braccetto con il Media bot per determinare quali annunci e con quali caratteristiche di qualità inserire nelle varie pagine web.

Questo è il mio primo post su Google Buzz. Sinceramente lo sto testando giorno dopo giorno, a piccole dosi. Nato come Twitter killer, al momento, ancora non riesco a vedere come possa ucciderlo, ma quasi tutto ciò che produce Google può tramutarsi in oro prima o poi. E Buzz è un predestinato a mio avviso.

Prima di darvi un resoconto dettagliato delle mie impressioni sull’ingresso di BigG nel Sociale, eccomi a segnalarvi una delle tante e nuove integrazioni di Google Buzz.

E’ la prima e non sarà l’ultima considerando che siamo solo a pochi giorni dal lancio di Buzz. Ecco come poter aggiungere il pulsante di Google Buzz ai vostri post su Wordpress (stile pulsante per il retweet, per intenderci).

Manualmente

Se volete metter mano velocemente la codice per aggiungere il vostro bottone, nulla di più facile e veloce.

Aprite con l’editor il file single.php e incollate, nel punto in cui volete far comparire il pulsante, il seguente codice :

<a
href="http://www.google.com/reader/link?url=<?php the_permalink() ?>&title=<?php the_title(); ?>&srcURL=<?php bloginfo('url'); ?>" target="_blank" rel="nofollow external"><img
src="http://img2.pict.com/15/da/3e/2809374/0/googlebuzz.png" width="50" height="58" alt="" /></a>

Plugin

Ma ti pare che Wordpress non sfornava subito un plugin per automatizzare l’operazione? Scaricateto da questo link e attivatelo dalla Dashboard. Vedrete il pulsante di Buzz comparire ad inizio dei vostri articoli. L’immagine usata per il bottone è ospitata su Pict. Se volete velocizzarne il caricamento, salvatela sul vostro server.

A momento, io ancora non ho deciso se sfruttare questo plugin. Uno dei motivi deriva dal fatto, da non sottovalutare, che molti plugin attivi sulle pagine di un blog ne rallentano e di molto il caricamento. E se Google comincia davvero a tenerne conto…

Google Analyticator

Google Website Optimizer for WordPress

Google Doc Embedder

XML Google Map

Google Ajax Translation

Feed Burner Count

Articoli a Tema

Il Browser

Il Protocollo

Gli strumenti

Escludere una pagina web dalla SERP di Google è una faccenda che, prima o poi, potrebbe capitare a tutti. I motivi alla base potrebbero essere moltemplici, contenuti duplicati su tutti.
La rimozione di una URL dai risultati di ricerca di BigG non è cosa difficile purchè si seguano alcuni passi basilari e non si cerchino altre strade che non portano a nulla.
La mia esperienza mi dice che, seguendo una delle due seguenti strade, nel giro di poche ore, vedrete sparire la url interessata dalla SERP.



Strumento per la richiesta di rimozione di pagine web

L’attività in comune, per le due strade che vedremo in seguito, è quella di sfruttare lo strumento Google Webmaster per la rimozione di url. Accedete con il vostro account a Google Webmaster e, quindi, aprite la pagina relativa allo strumento di rimozione e procedete ad inserire le pagine web che volete rimuovere leggendo bene ciò che è scritto per effettuare la scelta migliore.
Ma non basta. Solitamente Google vi chiede di accompagnare a questa azione, un’altra modifica.
Vediamo, proseguendo nell’articolo, le due alternative a disposizione in dettaglio anche se Google ce ne da un assaggio in questa pagina.

File Robots.txt

Il file robots.txt è un file che viene utilizzato per dare delle istruzioni precise ai crawler dei motori di ricerca. In sostanza, è usato per non far indicizzare una pagina, un sito, una directory del proprio sito o anche per rimuovere una o più immagini da Google Immagini. E non solo da Google, logicamente
E’ possibile creare un file robots.txt come indicato qui
Dopo aver creato il file, potete inserire tutti i comandi che desiderate per impedire a Google di indicizzare pagine web o immagini.
Fondamentalmente il file robots.txt utilizza 2 comandi :
User-agent: il robot al quale si da l’istruzione
Disallow: l’URL che si desidera bloccare

Ad esempio, se volete bloccare l’intero sito/blog ecco cosa scrivere :

User-agent: *
Disallow: /

Oppure per bloccare un folder e il suo contenuto :

User-Agent: Googlebot
Disallow: /cartella/

Oppure per bloccare una pagina web :

User-Agent: *
Disallow: /pagina.html

Oppure per bloccare un’immagine da Google :

User-agent: Googlebot-Image
Disallow: /immagini/esempio.jpg

Insomma avete capito come funziona. Ricordatevi che utilizzando l’asterisco bloccherete la pagina su tutti i motori, mentre con Googlebot solo per Google. Questa è la prima alternativa. Passiamo alla seconda.

Metatag noindex

Se Google rileva un metatag noindex su una pagina (come quello mostrato qui sopra), provvede ad eliminare completamente la pagina dai risultati di ricerca. Questo accade anche se altre pagine contengono link a essa. Il metatag in oggetto che dovete inserire ad inizio pagina come semplice codice html, in pratica, consente di controllare l’accesso al vostro sito pagina per pagina. Anche in questo caso, se sostituite alla voce robots, la voce googlebot, restringerete la non indicizzazione solo al motore di Google e non a tutti.


Chioso l’articolo con un video di MattCutts che, in circa tre minuti, cerca di dare un sunto del discorso. Interessante :