Tiltják indexelés oldalak

Tiltják indexelés oldalak / könyvtárak (robots.txt)

Minden keresőrobotok, amikor közeledik a helyszínen az első helyen keresi a robots.txt fájlt. Ez egy szöveges fájl található a gyökér könyvtárába a hely (ugyanazon a helyen, ahol a fő index fájlt. Elsődleges domain / honlap az public_html mappa), akkor rögzített különleges utasításokat kereső robotokat. Ezek az utasítások nem teszik lehetővé indexelés egy mappát vagy telek oldalon adja meg a robot a fő tükör helyén, hogy javasolja a keresést robot megfigyelni egy bizonyos időintervallumban webhely indexelése, és így tovább

Ha robotx.txt fájl nem található meg a webhelyén, akkor hozza létre.
Letiltásához indexelése az oldalon keresztül a robots.txt fájlt, irányelvek használt 2: User-agent és Disallow.

User-agent: UKAZAT_POISKOVOGO_BOTA
Tiltása: / # tilos lesz indexelése az egész oldalon
Disallow: / oldal / # tilos lesz indexelni a / page /

1. Prevent webhely indexelése bot MSNBot

2. Prevent indexelése webhely Yahoo bot

User-agent: Slurp
Disallow: /
3. Prevent webhely indexelése Yandex bot

4. Prevent webhely indexelése Google bot

5. Prevent webhely indexelése az összes keresők

6. bonyolítja a problémát, és tiltja az ilyen Yandex indexelt mappa cgi-bin és a képeket, és sikerült a fájlok myfile1.htm és myfile2.htm a subdir könyvtár (mappa nevét, ahol myfile1.htm és myfile2.htm fájlok találhatók)

User-agent: Yandex
Disallow: / cgi-bin /
Disallow: / images /

User-agent: Aport
Letiltás: /subdir/myfile1.htm
Letiltás: /subdir/myfile2.htm

7. tilalma indexelés mappa cgi-bin és képek minden keresők
User-agent: *
Disallow: / cgi-bin /
Disallow: / images /


Most, hogy hogyan oldja meg az index az összes oldalt a webhely minden keresők (Megjegyzés: a megfelelője az utasítás lenne a robots.txt fájl):

Ui A különböző CMS, az interneten megtalálható ajánlás, amely jobban zárja a könyvtárban van indexelve a keresőmotorok. nagyobb mértékben ez szükséges a biztonságot és csökkenti a terhelést a szerveren.

  • 9. A tagok találta ezt hasznosnak

Kapcsolódó cikkek

Átirányítás HTTP-ről HTTPS használatával .htaccess

Hogyan lehet növelni a memória korlátoz a script (memory_limit).

Hogyan lehet növelni a memória korlátoz a script, weboldal, CMS (memory_limit)? 1. Ha kell korlátozni.

Milyen gyorsan feltölteni a webhelyen (vagy fájlokat) FTP

Mindenki tudja, hogy ha másolni sok kis fájlokat FTP vagy a számítógépen, p.

Hogyan nézheti meg a jelenlegi PHP beállításokat.

Erre a célra egy speciális phpinfo () függvényt. Hozzon létre egy könyvtárat

Létrehozása és használata a saját file php.ini (suPHP)

Létrehozása és használata saját php.ini fájl Figyelmeztetés. Ez az információ nem releváns.

Kapcsolódó cikkek