consiglio su robots

**hosting-newbie** · 02-10-2010, 12:43

Ciao a tutti, ho inserito nel mio robots:

disallow: /cartella/

perchè ho bisogno di non far indicizzare niente all'interno di quella cartella, tranne però solo di una soltanto che si chiama "link", quindi ho pensato di inserire:

disallow: /cartella/
allow: /cartella/link/

il problema è che la cartella link contiene parecchie sottocartelle che dovrebbero essere indicizzate ma nonostante ho inserito allow: /cartella/link/ non vengono calcolate dai motori.

che stringa dovrei usare per fare in modo che all'interno della cartella link deve essere indicizzato tutto, sia file che cartelle?

**xAnder** · 02-10-2010, 16:20

Prova così?

Codice:

disallow: /cartella/cartella1
disallow: /cartella/cartella2
..
disallow: /cartella/cartellaN
allow: /cartella/link/

**hosting-newbie** · 02-10-2010, 16:29

ma non posso inserirli uno alla volta, sono centinaia.

**flagg** · 03-10-2010, 14:33

prova

disallow: /cartella/
allow: /cartella/link/*

**hosting-newbie** · 04-10-2010, 16:59

ho provato anche cosi ma nulla, non viene scansionata nemmeno un'immagine.

**xAnder** · 04-10-2010, 21:32

Oltre al robots.txt esiste anche il metatag noindex e nofollow per selezionare i contenuti da non indicizzare/seguire

**hosting-newbie** · 04-10-2010, 21:39

si ma sono file jpg e gif posizionati in cartelle all'interno di quella cartella padre.

**Uno** · 05-10-2010, 10:44

Originariamente Scritto da hosting-newbie

ho provato anche cosi ma nulla, non viene scansionata nemmeno un'immagine.

Non capisco su cosa ti basi per affermare ciò.
A distanza di 26 ore potrebbe essere che google bot non sia neanche ripassato sul tuo sito, come che sia passato 20 volte ma non abbia preso la direzione di quelle pagini, immagini o quel che è....

Se dopo una settimana (o più dipende dal sito) ancora non hai riscontro allora puoi avere una certa sicurezza, non al 100% ma insomma....

Comunque non trovo logico che una cartella non debba essere indicizzata ma contenga altre cartelle indicizzabili, sarebbe meglio mettere le immagini in una cartella img (con relative sottocartelle)

**CoolNetwork** · 05-10-2010, 13:31

esiste un bellissimo tool di webmaster tools per analizzare se la propria configurazione dei robots.txt è stata eseguita correttamente.

ovviamente una volta "confermata" la validità del robots.txt occorre tempo per vederne l'effetto sul motore di ricerca.

Per le immagini esiste anche questo useragent

User-agent: Googlebot-Image