首页 > 解决方案 > 爬虫机器人用户代理格式

问题描述

据我所知,最流行的机器人用户代理字符串遵循以下格式:

Mozilla/5.0 (compatible; <botname>/<botversion>; +<boturl>)

什么compatible意思?

+为什么机器人信息网址前有加号( )?

标签: web-crawleruser-agent

解决方案


推荐阅读