Ma eszrevettem, hogy a google egyik botja epp a web szerveremen maszkal. Megneztem mit ir rola, igy talaltam ra a Webmaster Tools-ra. Miutan kiprobaltam, inditottam egy keresest a “foton tv series” szavakkal es ezt a blogot lattam az eredmenyekben az elso helyen. 🙂
Ez tok jo, lassan nem kell a blog keresomotorjat hasznalni, hasznalhatom es kereshetek a google-lel a sajat oldalamon. Legutobb egy eve neztem akkor nem voltak az oldalak indexelve (ami nem is csoda, hisz a robots.txt-ben le voltak tiltva meg nehany honappal ezelott). A kereso bottal mar tobb mint 5 eve talalkoztt egyebkent a szerverem, akkor a hibalogban hianyolta a robots.txt-t, akkor hoztam letre es tiltottam le minden botot.