És un cas que no he requerit personalment però que ahir el Law em va haver d’explicar com es fa per poder ajudar a en Martin. La cosa és ben simple, els bots de google són molt inquiets i en un moment donat poder arribar a indexar webs o parts de webs que no ens interessa que estiguis accessibles a través del buscador. Doncs bé, si teniu la necessitat de donar de baixa alguna cosa que no volieu que s’indexés cal que a través de les google webmaster tools la doneu de baixa, concretament a l’screenshot següent podeu veure la secció exacte on fer-ho.
Doncs bé després de complimentar adequadament el procés i en unes 48h la URL hauria de deixar d’estar indexada.
Per altre banda, i perquè això no torni a passar és important que a l’arrel del vostre servidor web afegiu, si no ho teniu, el fitxer robots.txt. Amb, per exemple, el següent contingut:
- Exemple 1: Cap robot de cap buscador indexa res del nostre site
User-agent: * Disallow: /
- Exemple 2: Cap robot de cap buscador indexa res de la URI /admimn/.
User-agent: * Disallow: /admin/
En princpi amb aquest parell d’idees hauria de ser suficient perquè pogueu dormir tranquils.