qui
support.google . com/webmasters/bin/answer.py?hl=it&answer=156449 la direttiva allow viene utilizzata ogni tanto, ma inserire un allow per ogni pagina che vorrei venisse indicizzata sarebbe in pratica come inserire la sitemap all'interno del file robots.txt (non il link della sitemap, ma ciascun link che dovrebbe stare dentro alla sitemap)...

in ogni caso volevo anche sapere: se nel robots.txt inserisco una direttiva che dice di escludere tutte le pagine del sito, ma poi nella sitemap indico alcune pagine (non tutte), queste pagine che indico nella sitemap vengono prese in considerazione o no? chi è che comanda di più? il disallow del robots o la sitemap?

Ciao a tutti, mi sa che questo è il mio primo post qui.. Vi pongo subito la domanda, in pratica vorrei escludere dall'indicizzazione sui motori di ricerca le pagine del sito ad esclusione delle sole che indico nella sitemap...

se nel file robots.txt inserisco la direttiva

Disallow: /

ma creo una sitemap in cui inserisco le pagine che voglio che vengano indicizzate, queste pagine vengono prese in considerazione oppure siccome nel robots c'è scritto di non seguire nessuna pagina all'interno del sito allora la sitemap non viene presa in considerazione?
(in alternativa qualcuno può dirmi come posso fare per risolvere il problema?)

grazie anticipatamente per la risposta