python添加请求头和请求体 被别人爬虫了,应该怎么找出来?

被别人爬虫了,应该怎么找出来?首先,爬虫有一定的特点。爬虫一般有以下特点:单IP访问频率非常规律,我们经常遇到一个问题,当我们在网站上发帖时,会提示“发帖太快,请等待XX秒”,或提示“刷新频率太快,请

被别人爬虫了,应该怎么找出来?

首先,爬虫有一定的特点。爬虫一般有以下特点:

单IP访问频率非常规律,我们经常遇到一个问题,当我们在网站上发帖时,会提示“发帖太快,请等待XX秒”,或提示“刷新频率太快,请休息一会儿”,这是网站为了缓解对“用户”的压力而做出的一些限制,而爬虫是相关用户比较猖獗,访问频率比较快,如果单个IP访问频率很高,那么就会判断为“爬虫”,然后进行限制。