检测爬虫特征的网站
https://bot.sannysoft.com/
这个网站可以检查是否有不同于正常浏览器的爬虫特征. 如果要爬取网站数据则要非常注意了.
参考文章https://cloud.tencent.com/developer/article/1755512
- 上一篇: 对分页和瀑布流的UI呈现的再次理解
- 下一篇: 对网站进行测试的工具,哪个比较好用?
https://bot.sannysoft.com/
这个网站可以检查是否有不同于正常浏览器的爬虫特征. 如果要爬取网站数据则要非常注意了.
参考文章https://cloud.tencent.com/developer/article/1755512