Come Scaricare tutte le pagine indicizzate dai motori di ricerca

By Sante Achille April 28, 2014



Architettura Siti Web: Index Bloating

Come Risolvere con Majestic SEO

Recentemente ho fatto un Audit SEO e riscontrato un problema molto serio nella struttura del sito: lo spidering dei motori di ricerca aveva individuato migliaia e migliaia di pagine finte, portando al fenomeno chiamato index bloating.

Per index bloating s’intende un incremento artificioso del numero complessivo di pagine web di cui è costituito un sito per via di una attività non controllata di spidering dei motori di ricerca. Il problema è di non poco conto considerando le implicazioni in termini di crawl equity ovvero la quantità di risorse messe a disposizione dai motori di ricerca per esplorare e presidiare il sito.

Come riconoscere problematiche di index bloating

Il Webmaster Tools è il punto di partenza per qualsiasi esplorazione dove è possibile identificare la problematica nella sezione variabili. Sarebbe tropo lungo e fuori contesto spiegare come sviluppare un’analisi di questo genere. I problemi individuati vanno risolti e le pagine in eccesso cancellate. Queste pagina daranno agli spider errore 404.

È credenza dei più che pagine 404, essendo pagine non trovate, verranno automaticamente cancellate dai motori di ricerca ma non è così: restano nell’indice e nel link graph (a buon intenditori poche parole …) ed è per questo che bisogna intraprendere delle iniziative più “energiche” per garantire che le pagine vengano rimosse e questo si ottiene sostituendo l’errore 404 (pagina non trovata) con un errore 410 (pagina rimossa).

Ma non basta.

Le pagine cancellate dovrebbero essere rimosse attraverso lo strumento Remove URLs

Google Remove URL tool

Ed è qui che Majestic SEO ci viene in aiuto.

Majestic SEO offre un download standard di 5.000 pagine individuate attraverso i report ed il Site Explorer – per avere l’elenco completo, dal menu opzioni di download scegliere Filtra backlink da scaricare, quindi attivare l’opzione Crea solo conteggi dei backlink, indicando subito dopo 0 (ZERO) come numero minio di backlink esterni per url:

How to download known pages from Majestic SEO

Articolo scritto da:

Posted In: General

Comments are closed.