做python爬虫代理服务器用的服务器或者VPS用什么好

来源：蜘蛛抓取(WebSpider) 时间：2016-07-17 07:04 标签： python爬虫代理服务器
查看: 542|回复: 7
怎么对付“反爬虫检测的网站”
对方站，好像有个系统，自动检测爬虫。
我采集了一半，停了。
怎么保护我的 IP 不被检测到？
表示 楼主老是爬着爬那 很是 MJJ
哪有什么反爬虫检测& &只不过是nginx限制之类的东西
提示: 作者被禁止或删除 内容自动屏蔽
有的，我打算弄个调戏爬虫的站，把它引坑里去，让你丫爬，哪天爬出鬼来了。
感觉不像是 nginx 限制，像是防火墙那样的过滤检测。请求次数一多，封。
&&楼主买10个c模拟不同浏览器轮训试试它还能屏蔽不。。。。
降低撸的频率可以更长久的爽受~~~~
Powered bypython爬虫要自动运行有什么办法_百度知道
python爬虫要自动运行有什么办法
world除了放在VPS或者BAE，那爬虫不一定三百秒就能结束战斗啊而且不知道为什么，还有什么办法吗在SAE上试了一下、SAE这类云平台上，说最多请求300秒就会强制结束请求，按照他的办法写了hello
提问者采纳
当然你也可以试试阿里云，不一定要放到服务器上，让程序自己去运行呗，我在上面部署的scrapy跑的很不错，弄个台式机爬虫自己本地就可以啊。如果解决了您的问题请采纳，晚上关了显示器
提问者评价
也去申请了个阿里云试用，感觉不错，正好学习一下linux和服务器相关知识
来自团队：
其他类似问题
为您推荐：
您可能关注的推广
python的相关知识
等待您来回答
下载知道APP
随时随地咨询
出门在外也不愁第三方登录：

我要回帖

更多关于 python爬虫代理服务器 的文章

 

随机推荐