Salut à tous.
J'aimerais savoir comment s'y prendre de façon à supprimer complétement un site d'internet.
Faut il créer un robots.txt particulier
via le htaccess
ou autre
Environ 75.000 pages indexées à ce jour
Merci pour vos solutions
Pas du tout, il suffit qu'il repasse une seule fois sur n'importe quelle page et il va forcément prendre en compte le robots.txt qui va donc s'appliquer à tous le site et pas uniquement à la page qu'il était venu mettre à jour.Salut alors effectivement le premier est lien est tout simple.
Le problème c'est qu'il va falloir que j'attendant que google repasse sur mes pages web pour que ce robots.txt soit appliqué et il à justement du mal à aller sur certaines page, dernière indexation de page il y a environ 5 mois pour certaines...donc très moyen.
A vérifier (et même à tester) car il me semble qu'on peut indiquer un répertoire racineEt l'autre lien ( le second ) apparament il faut supprimer les urls une par une j'ai 70.000 pages, donc un peut délicat.....
Un peut dépité du coup par tout ca
Je vois que les robots passe tous les jours sur le site, donc si je comprends bien je met dans mon htaccess uniquement:Pas du tout, il suffit qu'il repasse une seule fois sur n'importe quelle page et il va forcément prendre en compte le robots.txt qui va donc s'appliquer à tous le site et pas uniquement à la page qu'il était venu mettre à jour.
User-agent: *
Disallow: /
Mon site disparait d'internet ?
AuthName "Site en maitenance"
AuthType Basic
AuthUserFile "/home/site/www/.htpasswd"
Require valid-user
Donc avec les lignes ci-dessus je bloque l'acces à l'emsemble du site sauf si on rentre le mot de passe qui vasa bienjean:test
Si le mot de passe est jean on accéde au siteMerci pour vos avis et conseils à tous
Important ! Cela supprimera toutes les pages du site http://monsite.fr/ de nos résultats de recherche pendant au moins 90 jours.
Pour empêcher définitivement une page de s'afficher dans nos résultats de recherche, supprimez la page de votre site, protégez-la avec un mot de passe ou ajoutez une balise NOINDEX à cette dernière et autorisez Googlebot à l'explorer.