集中整理常见蜘蛛 UA
覆盖 Google、Bing、百度、搜狗、360、神马等常见搜索引擎蜘蛛标识。
覆盖 Google、Bing、百度、搜狗、360、神马等常见搜索引擎蜘蛛标识。
除了 UA 字符串,还给出典型用途和主机名反查提示,减少误判。
搜索、筛选和复制都在浏览器本地完成,不会请求第三方接口。
SEO 速查 · 蜘蛛 UA · 浏览器本地筛选
适合做日志排查、爬虫识别、SEO 规则核对和反向匹配。当前只提供本地筛选和复制,不会发请求验证来源。
当前命中
3
建议结合 UA + 反查主机名双重判断,避免把伪造 UA 当成真实搜索引擎蜘蛛。
Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
常见用途
Google 网页抓取
反查主机名提示
googlebot.com / google.com
Googlebot-Image/1.0
常见用途
Google 图片抓取
反查主机名提示
googlebot.com / google.com
Googlebot-News
常见用途
Google 新闻抓取
反查主机名提示
googlebot.com / google.com
工具使用说明
例如输入 `google`、`baidu`、`bingbot`,快速缩小到目标蜘蛛。
先核对蜘蛛用途,再结合反查主机名提示做二次确认。
可复制单条 UA,也可把当前筛选结果整体复制到日志排查或规则配置里。
功能说明
适合做 SEO 日志排查、搜索引擎蜘蛛识别、访问规则核对和站点抓取来源确认。
当你只记得部分 UA 片段时,直接本地搜索比翻多份站长文档更快。
单看 User-Agent 不够,很多恶意请求会伪造常见蜘蛛 UA。
更稳的做法是结合 UA、访问行为和反向 DNS / 主机名结果一起判断。
常见问题
不会。当前只提供本地速查、筛选和复制,不会主动发请求做来源验证。
不能。UA 很容易被伪造,建议至少再结合反查主机名和访问行为一起判断。
不会,页面里的搜索和复制都在浏览器本地完成。
不是,当前覆盖的是常见高频蜘蛛,适合日常站长和日志排查场景。