List of Robots Ordered by Robot (Percent)

Click Here For:    Agent Switchboard

Change Order:   Order by robot name     Show values as visits

Browser	Aug	Jul	Jun	May	Apr	Mar	Feb	Jan	Dec	Nov	Oct	Sep
SemrushBot	44.6	39.1	43.8	39.0	36.9	19.5	16.2	19.4	23.9	22.3	16.3	18.5
unknown crawler	14.6	34.4	20.3	18.0	20.6	31.8	23.6	26.1	29.9	35.0	28.5	26.1
MJ12bot	7.1	5.2	7.0	5.6	6.8	8.8	5.9	6.0	6.8	9.4	7.1	4.3
Googlebot	6.6	5.2	7.1	7.5	8.9	8.1	8.6	5.9	7.3	8.0	10.2	4.6
python-requests	6.3	2.0	2.1	2.1	2.4	2.5	2.5	2.0	3.2	1.7	6.2	3.4
Baiduspider	4.6	2.0	3.1	2.2	3.3	4.7	5.5	11.8	0.0	0.0	0.3	0.0
curl	3.6	2.7	3.5	4.2	2.3	0.6	0.5	0.5	0.6	0.9	1.6	0.5
SERankingBacklinksBot	1.8	0.1	0.6	1.5	1.4	1.5	0.5	0.9	0.6	0.0	0.0	0.0
AhrefsBot	1.2	0.8	1.0	0.9	2.4	2.8	6.1	3.5	3.1	1.2	1.4	1.2
YandexBot	1.0	0.9	5.3	12.5	8.0	11.7	21.0	9.7	12.6	12.5	13.7	9.2
Baiduspider	0.9	0.6	0.8	0.1	0.5	1.4	1.4	2.3	0.0	0.0	0.3	0.1
Python-urllib	0.7	0.0	0.0	0.0	0.1	0.0	0.0	0.0	0.0	0.0	0.3	0.1
txtbot	0.6	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
AffsignalCrawler	0.5	0.3	0.2	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
FlowIQLabsBot	0.5	2.3	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
CriteoBot	0.5	0.9	0.6	0.7	1.1	0.9	0.4	0.2	0.0	0.1	0.2	0.1
GenomeCrawler	0.4	0.5	0.9	0.3	0.1	0.5	0.2	0.0	0.0	0.0	0.0	0.0
Orbbot	0.4	0.0	0.2	0.0	0.0	0.0	0.0	0.0	0.1	0.0	0.5	0.1
SeznamBot	0.4	0.2	0.1	0.2	0.3	0.1	0.0	0.1	0.1	0.2	0.2	0.1
ClueWeb-Crawler	0.3	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
HaloBot	0.3	0.0	0.1	0.0	0.0	0.1	0.1	0.1	0.0	0.0	0.1	0.1
archive.org_bot	0.3	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.1	0.2	0.0	0.0
DotBot	0.3	0.4	0.2	1.1	1.1	2.2	0.0	1.1	1.3	0.6	1.2	0.6
CCBot	0.3	0.2	0.2	0.2	0.1	0.1	0.2	0.1	0.2	0.6	0.3	0.1
crawler	0.3	0.4	0.4	0.3	0.4	0.2	0.2	0.4	0.1	0.0	0.7	0.1
AwarioBot	0.2	0.3	0.2	0.0	0.0	0.2	0.7	0.4	0.1	0.7	0.3	0.5
SEMrushBot	0.1	0.0	0.0	0.0	0.1	0.1	0.1	0.1	0.0	0.1	0.0	0.0
Google-Display-Ads-Bot	0.1	0.1	0.1	0.1	0.1	0.1	0.1	0.1	0.1	0.2	0.2	0.1
MojeekBot	0.1	0.1	0.0	0.0	0.1	0.1	0.4	0.4	0.5	0.5	1.3	1.0
Amzn-SearchBot	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
facebookexternalhit	0.1	0.0	0.0	0.0	0.0	0.1	0.0	0.0	0.0	0.0	0.0	0.0
OAI-SearchBot	0.1	0.0	0.0	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
bingbot	0.1	0.0	0.0	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
ev-crawler	0.1	0.1	0.1	0.1	0.1	0.1	0.2	0.1	0.1	0.1	0.3	0.1
SearchEngineBot	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
ReflectionBot	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
DeepSeekBot	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
WebCorpusBot	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
jscrawler	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
CFNetwork	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.1	0.1	0.0
QueritBot	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
Amazonbot	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
NagetBot	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
ZoominfoBot	0.1	0.1	0.1	0.1	0.1	0.1	0.1	0.2	0.4	0.4	0.7	0.4
PerplexityBot	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
ClaudeBot	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
ConceptBurstBot	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
MakeWebSalesBot	0.1	0.1	0.1	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
unknown	0.1	0.1	0.1	0.2	0.1	0.1	0.1	0.1	0.1	0.1	4.3	20.4
ExaSearchBot	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
VelenPublicWebCrawler	0.0	0.2	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
wpbot	0.0	0.2	0.2	0.3	0.3	0.3	0.2	0.1	0.1	0.1	0.2	0.1
DataForSeoBot	0.0	0.1	0.2	0.1	0.2	0.1	0.5	0.2	0.4	0.2	0.4	0.2
DuckDuckBot	0.0	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
yacybot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.1	0.0
LWP Script	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.1	0.0
NVBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
AliyunSecBot	0.0	0.0	0.0	0.0	0.0	0.1	0.1	1.1	0.9	0.0	0.8	0.9
TechSpyBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
LyonlBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
heritrix	0.0	0.0	0.0	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
tranco-crawler	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
smdb-crawler	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
RankPulseBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
GeoGraphBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
WebatlaBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
OI-Crawler	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
SitemapResearchBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
Applebot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
awi-research-crawler	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
DataDingoBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
MetaCrawler	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
RankzonBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
MeasureboardResearchBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
WanScannerBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.2	0.1
GoGuidesCrawler	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
PipericBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
W3C_Validator	0.0	0.0	0.0	0.0	0.0	0.1	0.0	0.0	0.0	0.0	0.0	0.0
Spider	0.0	0.0	0.3	0.0	0.2	0.1	0.0	0.0	0.0	0.0	0.3	6.0
SurdotlyBot	0.0	0.0	0.2	0.1	0.0	0.0	0.1	0.1	0.3	0.1	0.0	0.0
Timpibot	0.0	0.0	0.1	0.2	0.2	0.2	0.0	0.0	0.0	0.0	0.0	0.0
WordPress	0.0	0.0	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
Exabot	0.0	0.0	0.1	0.4	0.4	0.0	0.0	0.0	0.0	0.0	0.0	0.0
gwf-carbon-txt-crawler	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
FetchDonkeyBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
SaaSBrowserBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
PricedroneShoppingBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
SiteAnalyzerbot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
TenMillionDomainsBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
INETDEX-BOT	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
IntercomDetectBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
ProductLookoutBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
CCMetaBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
BrokenLinksBot	0.0	0.0	0.0	0.5	0.5	0.0	0.0	0.0	0.0	0.0	0.0	0.0
WebTrackrCrawler	0.0	0.0	0.0	0.4	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
YouBot	0.0	0.0	0.0	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
ContactGraphBot	0.0	0.0	0.0	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
EveryTabBot	0.0	0.0	0.0	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
xAI-SearchBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
ris-bot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
Wget	0.0	0.0	0.0	0.0	0.0	0.0	0.4	0.2	0.4	0.0	0.0	0.1
TobavaBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
CohereBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
serpstatbot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
cis5550-crawler	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
BingPreview	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
Thinkbot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.1	0.0	0.1	0.1	0.2
TheduCrawler	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
FeedFetcher-Google	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
Brightbot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
Java	0.0	0.0	0.0	0.0	0.1	0.0	0.0	0.2	0.6	0.1	0.2	0.0
ImageMetaBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
ZeroBot	0.0	0.0	0.0	0.0	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0
research-crawler	0.0	0.0	0.0	0.0	0.1	0.0	0.0	0.0	0.0	0.0	0.0	0.0
EECS498-CELSearchEngineCrawler	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
MineBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
Proximic Spider	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.1
UMichSearchEngineCrawler	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
MyWebCrawler	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
Xenu Link Sleuth	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
vague-crawler	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
FacebookBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
BingIndexCrawler	0.0	0.0	0.0	0.0	0.0	0.1	0.1	0.0	0.0	0.0	0.0	0.0
YandexRenderResourcesBot	0.0	0.0	0.0	0.0	0.0	0.1	0.0	0.0	0.1	0.1	0.0	0.0
IbouBot	0.0	0.0	0.0	0.0	0.0	0.1	3.7	4.5	5.3	3.6	0.4	0.4
research crawler	0.0	0.0	0.0	0.0	0.0	0.1	0.0	0.0	0.0	0.0	0.0	0.0
HenkBot	0.0	0.0	0.0	0.0	0.0	0.1	0.0	0.0	0.0	0.0	0.0	0.0
DuckAssistBot	0.0	0.0	0.0	0.0	0.0	0.1	0.0	0.0	0.0	0.1	0.0	0.0
SBIntuitionsBot	0.0	0.0	0.0	0.0	0.0	0.1	0.2	0.2	0.2	0.1	0.6	0.0
TechCrawler	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
DirectoryBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
IABot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
YahooBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
research-bot	0.0	0.0	0.0	0.0	0.0	0.0	0.1	0.0	0.0	0.0	0.0	0.0
msnbot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
DomainStatsBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.1	0.0
ResearchBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
expo-research-bot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	1.7	0.0	0.0	0.0	0.0
Ask Jeeves	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
Google Web Preview	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
BLEXBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.1	0.3	0.0	0.1
browse-crawler	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
Facebot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
Buddybot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.1	0.0	0.0
ZenixOpsBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
BitSightBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.2
LinkupBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
TurnitinBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
GoParserBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
KhazandeBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
NiueBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
t3versionsBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
AmazonAdBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
DomCopBot	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0	0.0
Total	100.0	100.0	100.0	100.0	100.0	100.0	100.0	100.0	100.0	100.0	100.0	100.0