Durchgeknallter GSA (Google Search Appliance) Crawler? Was nun?
- Ersteller feelx
- Erstellt am
feelx
Grand Admiral Special
Hallo Leute
Ich betreibe eine Webpräsenz eines Kunden und stelle mittlerweile seit dem 17. Juni (!!) fest, dass ein google GSA crawler (offenbar von tobaccopeople.com) die Site ständig belagert.
Mit ständig meine ich tatsächlich ständig
Also seit Mitte Juni gibts wirklich 24h lang Dauerzugriffe
aus dem apache Log:
Seit Anfang Juli habe ich 60'000 (!!!) einträge dieser Art (= 60'000 Zugriffe), was eine Last von bereits mehr als 800mb verursacht hat.
Zum Vergleich: Googlebots (die echten) haben 5480 Zugriffe getätigt und 41MB verursacht.
Was könnte das sein? Kennt ihr sowas? Vllt schreib ich mal an die angegebene email-Adresse ein email und frage nach... aber bin skeptisch...
greetings
Ich betreibe eine Webpräsenz eines Kunden und stelle mittlerweile seit dem 17. Juni (!!) fest, dass ein google GSA crawler (offenbar von tobaccopeople.com) die Site ständig belagert.
Mit ständig meine ich tatsächlich ständig
Also seit Mitte Juni gibts wirklich 24h lang Dauerzugriffeaus dem apache Log:
Code:
216.246.45.86 - - [10/Jul/2007:21:42:54 +0200] "GET /index.php?id=13&no_cache=1&L=0&user_alfa_pi1%5Bmode%5D=1&user_alfa_pi1%5Bpointer%5D=0&user_alfa_pi1%5BshowUid%5D=28 HTTP/1.0" 200 16679 "-" "gsa-crawler (Enterprise; S5-HKQ2CJT3FSJJT; info@tobaccopeople.com)"
216.246.45.86 - - [10/Jul/2007:21:42:54 +0200] "GET /index.php?id=13&no_cache=1&L=0&user_alfa_pi1%5Bmode%5D=1&user_alfa_pi1%5Bpointer%5D=0&user_alfa_pi1%5BshowUid%5D=3 HTTP/1.0" 200 16737 "-" "gsa-crawler (Enterprise; S5-HKQ2CJT3FSJJT; info@tobaccopeople.com)"Seit Anfang Juli habe ich 60'000 (!!!) einträge dieser Art (= 60'000 Zugriffe), was eine Last von bereits mehr als 800mb verursacht hat.
Zum Vergleich: Googlebots (die echten) haben 5480 Zugriffe getätigt und 41MB verursacht.
Was könnte das sein? Kennt ihr sowas? Vllt schreib ich mal an die angegebene email-Adresse ein email und frage nach... aber bin skeptisch...
greetings
nightsky99
Grand Admiral Special
Moin!
Nachfragen wird da wahrscheinlich nix bringen.
Kannst du die IP bzw. die Domain nicht einfach sperren lassen per Filter?
Ist es überhaupt immer die selbe IP?
Nachfragen wird da wahrscheinlich nix bringen.
Kannst du die IP bzw. die Domain nicht einfach sperren lassen per Filter?
Ist es überhaupt immer die selbe IP?
JKuehl
Grand Admiral Special
robots.txt hat nichts gebracht?
