Google es passa el robots.txt pel forro // BlocFRIKI

Aquest és un bloc friki

Google es passa el robots.txt pel forro
Tal com sona. Ja fa un parell de dies que ho vaig veure, indexen continguts que el robots.txt demana que no siguin indexats, ho podeu comprovar simplement mirant a http://www.google.es/search?q=site:friki.cat/libs i si creis que el meu robots.txt està mal definit ho podeu mirar: https://friki.cat/robots.txt. Vos deix una instantània per si el dia de demà corregeixen l'errada: Fins i tot ells em donen la raó. Mirau els resultats d'una consulta a les "Google Webmaster Tools": El problema es repeteix a can http://search.live.com/results.aspx?q=site:friki.cat/libs, però els nois de Yahoo n'han sabut més. He fet la prova a altres cercadors i pareix que cadascú fa un poc el que vol. El que m'ha cridat l'atenció és que només indexen malament el que està al directori '/libs/', els altres directoris com el de '/descarregues/' no són indexats enlloc.
Enviat a les 0:06 20/4/2007 a la categoria La Xarxa amb 2 comentaris.

#1	Si ho vols solucionar manualment: http://www.google.es/support/webmasters/bin/answer.py?answer=61062
	argggg a les 8:40 20/4/2007
#2	#1 Gràcies argggg, la veritat, però és que no em molesta que enllacin a aquests llocs. Simplement és questió de llimpiesa i de fer les coses bé. Ah i disculpa'm, el sistema antispam ha caçat el teu comentari :-P (motius: el primer cop que comentes i no el teu navegador no executa javascript). Salut!
	FrIkI a les 14:19 20/4/2007

Articles