New spiders
authorJoey Schulze <joey@infodrom.org>
Mon, 20 Apr 2009 09:35:06 +0000 (09:35 +0000)
committerJoey Schulze <joey@infodrom.org>
Mon, 20 Apr 2009 09:35:06 +0000 (09:35 +0000)
lib/core.inc

index 5fbbe7e..d84b694 100644 (file)
@@ -141,6 +141,8 @@ function is_spider()
       strpos($_SERVER['HTTP_USER_AGENT'], 'holmes/3.12') !== false ||
       strpos($_SERVER['HTTP_USER_AGENT'], 'NoteworthyBot/0.1') !== false ||
       strpos($_SERVER['HTTP_USER_AGENT'], 'Eurosoft-Bot') !== false ||
       strpos($_SERVER['HTTP_USER_AGENT'], 'holmes/3.12') !== false ||
       strpos($_SERVER['HTTP_USER_AGENT'], 'NoteworthyBot/0.1') !== false ||
       strpos($_SERVER['HTTP_USER_AGENT'], 'Eurosoft-Bot') !== false ||
+      strpos($_SERVER['HTTP_USER_AGENT'], 'Eurobot/1.1') !== false ||
+      strpos($_SERVER['HTTP_USER_AGENT'], 'Yandex') !== false ||
       strpos($_SERVER['HTTP_USER_AGENT'], 'msnbot') !== false ||
       strpos($_SERVER['HTTP_USER_AGENT'], 'Twiceler-0.9') !== false ||
       strpos($_SERVER['HTTP_USER_AGENT'], 'ScoutJet') !== false ||
       strpos($_SERVER['HTTP_USER_AGENT'], 'msnbot') !== false ||
       strpos($_SERVER['HTTP_USER_AGENT'], 'Twiceler-0.9') !== false ||
       strpos($_SERVER['HTTP_USER_AGENT'], 'ScoutJet') !== false ||