Bezár a weboldalakhoz való hozzáférés rossz botok
Mi az a bot? Ez egy olyan program, amely megvizsgálja a webhelyen. Botok jók és vannak rosszak. Mi a különbség a jó és a rossz bot? Egy jó bot hasznos. Például egy kereső bot, hogy érdekli a mozgó oldalon jó, mert ez segíti a helyszínen indexelt oldalak gyorsabb és vegye fel helyet a keresési eredmények között. Bad bot nem ilyen célokra irányul, úgy néz ki, a biztonsági réseket, letölti az adatokat az igényeket a tulajdonos, anélkül, hogy bármit cserébe - nem jár haszonnal, sem kényelmes szolgáltatásokat. Gyakran előfordul, hogy rossz botok mellett lopás tartalmat hoz létre újabb és zavarja - az extra terhet, amely lelassítja a helyszínen, amíg meg nem áll. Ezért, ha figyelembe vesszük az ideális technika munkát a helyszínen, a munkát el kell ösztönözni a jó bot, a rossz botok és a munka tilalmat.
Igen, van, de hogyan lehet megkülönböztetni a jót a rossztól bot? Van néhány viszonylag egyszerű módon lehet megtenni. Az első dolog, ami eszébe jut - egy bot aláírás, ami elhagyta a nyomot. Jó csónakok mindig van egy igazi aláírás, amely azt mutatja, akik a webhely feltérképezésére. Bad botok hajlamosak elrejteni a nevét és küldetése, álcázva közönséges látogató. Persze, a modern technológia könnyen meghatározható viselkedés, hogy valós személy honlapján néz, vagy bot vizsgál. De most automatikusan meghatározza, ha ez a bot is jó, vagy rossz, ez nem mindig lehetséges.
Emiatt az aláírás kell egészíteni egy másik jellemzője a viselkedés pedig rossz bot: rossz robot mindig mászik, ahol hegymászó tilos. Utalni tiltott helyek hajók ott a robots.txt fájlt - mondja ki a módját, hogyan lehet menni bot. Egy jó bot nem fog menni, ahol nem engedték, de egy rossz bot csak ne hagyjon ki egyetlen lehetőséget szorítani a helyeken, ahol a helyszínen.
Alapértelmezésben ez hagyjuk meg ezt az oldalt botok:
Ha azt szeretnénk, hogy a bot már lehetővé tette a hozzáférést a helyén, akkor azt, hogy a lista az engedélyezett oldalak.