Hogyan lehet elkerülni az indexelés az összes oldalra, kivéve a fő seo fórum
2 hónappal ezelőtt kérte Madame magas (nagyon nagy) forgalom a webhelyre, és több zárak hostingerov
openkart motor és az ár szűrőt, nem emlékszem a nevére
NCA és így a Google-botok Yado oka minden vele prolblem a robots.txt és NOINDEX nem segített)
.htacess semmilyen hatást nem ad egyáltalán, akkor is, ha nem blokkolja sokáig, mert ők (botok) folyamatosan változik és az IP és reprezentációs őszintén ilyen horror nem láttam
Igazából elküldte őket az erdőben, nem a lehetőséget, de ez biztosan működni fog
miozhno kódot, és vágni, de ez mind a maximális tisztaság nakidal, dobtam a php kódot, és minden bot erdőben, de akkor újra meg kell minden oldalt utalnak index php
Azonban ez nem szabványos
Alapvető szabvány hívás nevek, mint „protokoll kivételek,” van csak User-agent és Disallow meghatározva. Két évvel később, volt egy hosszabb szabványt, amelyben vannak engedélyezése, és így tovább. A 20 éves lehetett tanulni bármi elemezni robotok.
Ezért a fejlesztők a keresőrobotok az erkölcsi jogot, hogy figyelmen kívül hagyja
PS fejlesztők a jogot, hogy figyelmen kívül hagyja magát a robotok, amelyet nem. Valószínűleg észrevette, hogy mennyire félénk botok végig az oldalakat, tilos indexelés.