Uciderea boturilor prin .htaccess (+ add-ons)
În director este permisă doar o ip, restul în baie.
Ordine Respingeți, Permiteți
Negi de la toate
Permiteți de la 84.216.203.46
Interzicerea de agent de utilizator, arată o eroare de 403
RewriteEngine activată
RewriteCond%! ^ / 403.php $
RewriteCond%. * Slurp. * [OR]
RewriteCond%. * Twiceler. * [OR]
RewriteCond%. * WebAlta. * [OR]
RewriteCond%. * Ia_archiver. * [OR]
RewriteCond%. * Msnbot. * [OR]
RewriteCond%. * Teleport \ sPro. * [OR]
RewriteCond%. * WebCopier. * [OR]
RewriteRule. * /403.php [F]
Privind prin jurnalele de multe ori vă puteți da peste un Yahoo bot, beneficiile acestui motor de căutare sau al unui proprietarii de resurse vorbitoare de limba rusă, pentru optimizatori fericire, puteți trage link-uri, dar cel puțin traficul adus cel puțin un fel, dar 0.4-.6% din fluxul total de vizitatori - nu este se pare că numai resursele bot se pierde. Am decis să trimit Yahoo și prietenul său MSN la baie.
Sper că aceste motoare de căutare sunt corecte și nu vor ignora regulile pentru ele în robots.txt:
Agent-agent: Slurp
Nu permiteți: /
Agent-utilizator: msnbot
Nu permiteți: /
Dar sa dovedit că Yahoo nu sa liniștit și a continuat să strălucească paginile site-ului pe care nu ar fi trebuit. A fost necesar să abordăm mai mult coordonarea acestei întrebări, să folosim capabilitățile lui apache, și anume .htaccess. Acum, cu ajutorul lui, voi interzice un personaj negativ pe User Agent, aici această regulă magică:
După cum puteți vedea că lista este avansată, puteți elimina niște roboți dacă aveți nevoie de ele. Ideea este de a ajuta, cu excepția cazului în regulile sunt scrise corect, să te distrezi adăugând o regulă care să interzică utilizatorilor cu FireFox:
A funcționat, prin FireFox nu am început cu Opera și IE totul a fost OK pentru a vizualiza site-ul. Dacă nu funcționează, vă voi dezabona.
Articole similare
Trimiteți-le prietenilor: