Miért van szükség
Miért van szükség a robots.txt?
robots.txt fájl található a gyökér könyvtárban az Ön honlapján. Meg kell jelölni, hogy a bejáró mely oldalak lehetnek, vagy nem tartalmaznak az index.
Alapvetően szükséges, ha van olyan bizalmas információkat, a webhely felhasználóinak, hogy ne indexelve. A robots.txt könnyedén zárja be az indexelés bármelyik oldal. Továbbá, ez a fájl a célja, hogy egyéb problémák megoldásához. Miután wordpress motor létrehozhat egy oldalt archívumokat, címkék, fejezetek, amelyek tartalma jellemzően ismétlődik rendszeresen. És az admin a blog semmi köze robot Jellemzően a keresőprogram segítségével ismétlődő oldalak, de lehet csinálni rendesen. E helyzet orvoslása érdekében, meg kell használni a robots.txt. Használat után, akkor megakadályozhatja az indexelés ismétlődő oszlopok, archívumok vagy címkéket.
Ha webhelye van egy fórum, akkor használja ezt a fájlt, akkor is megakadályozzák az indexelési profilokat hogy megvédje őket a lehetséges spam. Így robots.txt könnyen biztosítja a megfelelő hely indexelve a keresőmotorok és a minősített adatok védelmét.
minden robots.txt fájl kell tekinteni részletesen.
A User-agent sort kell a nevét egy kereső robot.
A csillag azt jelzi, hogy az irányelvet alkalmazni kell minden olyan munkát kereső. És Yandex kell kezelni egyenként.
Tiltása irányelv viszont rámutat, hogy a szakaszok és oldalak, amelyek nem akarnak index.
Sitemap használják, hogy pont egy fájlt, hogy van egy hely a térképen.
Ahhoz, hogy hozzon létre egy robots.txt akkor speciális plug-in PC robots.txt, amely először telepíteni kell és aktiválja. A bővítmény beállítások fájl jellemző. Ez tartalmaz egy nagy számú irányelvek, amelyek célja a különböző robotok. Így lehet megelőzni a nem kívánt robotok, hogy vegyenek részt a webhely indexelése, de nem fognak figyelni az alapelveket, amelyek szerepelnek a robots.txt. Tehát akkor hagyja a fájlban csak a szakaszt, melyet szeretnénk tiltani.
De plug-inek még jobb, ha nem zloupotreblyat.Vmesto ezt a plugint jobb, mint bármely más készlet. robots.txt fájlt. Akkor lehet manuálisan beállítani.
Robots.txt.v hagyományos könyvjelző létre. Nyílt jegyzettömb, írjon, vagy másolja a szöveget (lásd alább) azt állítja, a „mentés másként ...”. A „File name” előírja: robotok .txt formátumú lesz helyette avtomaticheski.Zatem ezt a fájlt feltölteni a szerverre a gyökérkönyvtárban a blog. Azok számára, akik nem tudják, hogyan kell egy megfelelő robots.txt., Másolhatja a robots.txt.
Ne felejtsük el, hogy az utolsó két strochki.Vmesto rootfront.com adja meg domainje.
Fájl nélkül sallang és speciális csapatok. Általában szabvány. A legfontosabb dolog, hogy már tesztelt és működik.