Summary List of Robots Ordered by Popularity (percent):
Click for: Agent Switchboard Browsers by Name Browsers by Popularity
This page was Last Updated: 21-Mar-2010 04:44 GMT
Robot Apr May Jun Jul Aug Sep Oct Nov Dec Jan Feb Mar Ocelli 10.4 1.1 30.3 2.7 25.9 0.0 0.0 1.5 0.0 0.0 1.4 7.6 Googlebot 21.6 37.6 53.6 40.6 0.4 0.5 0.4 44.8 26.5 45.8 33.1 2.7 Psbot - - 0.4 0.1 0.4 0.0 0.1 0.3 0.2 0.0 0.3 1.3 Googlebot-Image 0.0 0.1 0.0 0.1 0.1 0.1 0.1 0.0 0.1 0.0 0.0 0.6 BaiDuSpider 0.0 0.0 0.1 0.1 3.0 1.5 0.1 0.0 0.0 0.0 0.0 0.2 Yahoo! Slurp 134.8 141.3 187.8 0.0 0.0 129.2 0.0 0.0 0.0 137.1 166.5 0.1 Webwombat 0.5 0.3 0.4 0.5 0.5 0.7 0.4 0.2 0.5 0.7 0.5 0.0 Libwww-perl 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.1 0.1 0.0 0.1 0.0 Yahoo-MMCrawler 0.0 0.0 0.1 0.0 0.1 0.0 0.0 0.1 0.0 0.1 0.1 0.0 Msnbot 43.4 0.0 48.7 34.9 61.0 15.3 6.5 16.2 0.0 23.5 24.2 0.0 Ask Jeeves 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.1 0.0 MS Data Access 0.0 0.5 0.0 0.0 0.0 0.0 0.2 0.0 0.0 0.1 0.0 0.0 Wget 0.2 0.0 0.0 0.0 0.0 0.0 0.0 0.1 0.0 0.0 0.4 0.0 Appie 0.2 0.1 0.3 0.0 0.0 0.1 0.0 0.0 0.0 0.0 0.0 0.0 Big Brother - - - - - - - - - - - 0.0 HTTrack 0.0 0.0 0.5 0.4 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Ia_archiver 0.3 0.1 1.4 0.7 42.8 0.4 0.3 60.3 0.7 0.5 0.4 0.0 Larbin 0.0 0.0 0.0 0.1 0.0 0.0 0.0 0.0 0.0 0.1 0.0 0.0 Indy Library 0.0 0.0 0.1 0.0 0.0 0.0 0.0 0.0 0.1 0.0 0.0 0.0 E-SocietyRobot - - - - - - - 0.0 0.0 0.1 0.0 0.0 Girafabot 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Microsoft URL Control 0.0 0.3 0.0 0.0 0.1 0.0 0.0 0.0 0.0 0.1 0.0 0.0 Scooter - - - - - - - 0.0 0.0 0.0 0.0 0.0 EmailSiphon 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 MysteryBot 0.1 0.1 0.1 0.1 0.1 0.2 0.1 0.1 0.1 0.1 0.1 0.0 Mozilla 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 BorderManager 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Gigabot - - - 0.0 0.0 0.1 0.0 0.0 0.0 0.0 0.0 0.0 BDFetch 0.0 0.0 0.0 0.0 0.1 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Httpget 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Mediapartners-Google 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 MS FrontPage 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 ICS - - - - - - - - - 0.0 0.0 0.0 InternetLinkAgent - - - - 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Search Agent - - 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Xenu Link Sleuth - 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 AnswerBus 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 W3C-checklink 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Lwp-request - 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Portal Manager - - - - - - - - 0.0 0.0 0.0 0.0 W3C_Validator - - - - - - - - 0.0 0.0 0.0 0.0 ZyBorg 0.2 0.1 0.0 0.0 1.2 0.5 0.9 0.5 0.0 0.0 0.0 0.0 Custo - - - - - - - 0.0 0.0 0.0 0.0 0.0 Firefly - 0.1 0.2 0.2 0.2 0.1 0.1 0.0 0.0 0.0 0.0 0.0 NutchBot - - - - - - 0.0 0.0 0.0 0.0 0.0 0.0 TheSuBot 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Szukacz - 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 FAST Enterprise Crawler - - - - - - 0.0 0.0 0.0 0.0 0.0 0.0 Obot - - - - - 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Goldfire Server - - - - - 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Links SQL - - - - - 0.0 0.0 0.0 0.0 0.0 0.0 0.0 IconSurf - - - 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 TurnitinBot 0.5 0.3 0.0 0.7 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Inktomi slurp - - - 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Infoseek SideWinder 2.0B - 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Robozilla 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Filangy - - 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 DoCoMo - 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 FDSE robot - 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Almaden 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 Lycos_Spider 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0 0.0