V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  adminPUBG  ›  全部回复第 1 页 / 共 2 页
回复总数  32
1  2  
2020-04-24 14:22:52 +08:00
回复了 zhuwd 创建的主题 程序员 V 友们有没有防止灰产爬虫的方法?
@zdnyp 有道理,爬虫和发爬虫就是矛和盾的关系,也不存在一劳永逸的方法,说 IP 池的,我们现在用的 IP 池,一天能获取 200 多万不重复的 IP,重复调用能到 3000 多万次,而且这些 IP 都是普通的住宅 IP,有很多真实用户就是用的这些 IP,没办法在不影响正常用户的情况下封爬虫的,只能说你提高爬虫获取数据的成本,到它无路可图的地步,就像薅羊毛的一样,它成本高了,自然就不来薅你了,否则是防不住的。
2020-03-31 10:26:04 +08:00
回复了 zlyrjk 创建的主题 Linux 有无好用的国外 ip 池商家推荐吗
我用过叫速联云的,有全球的动态住宅 IP,挺好用的。可以试试。其它的就都是国外的了,测试了头部的几家,不过存在语言问题,而且价格也贵。
2019-12-04 14:12:43 +08:00
回复了 LevineChen 创建的主题 问与答 付费的国外 ip 代理池,用于爬虫大伙有推荐么
@xianyu0 我找过,海外的都贵,要找到合适的太难了,我当时用的时候有试用的呀,你联系他们问问看。
2019-11-27 14:35:53 +08:00
回复了 kookoo900 创建的主题 分享发现 今天办了一年电信 300M 宽带,花了 300 元。
@xxsww211 深圳什么价?我深圳电信的,200M,3 张卡,700 分钟通话,无限流量套餐,一起 139 一个月,肉疼!
2019-11-27 14:28:23 +08:00
回复了 adminPUBG 创建的主题 问与答 迫于工作需要,国内有提供住宅 http 代理的吗?
我醉了,没有一个大佬给我推荐的,最近市面上的测试了一圈,几乎都是机房的,还有,国内这个行业水太深了吧,太多马甲了,一测试结果发现跟 XX 是一家,简直浪费时间,目前找到一家叫飞蚁的,质量还不错。推荐给做爬虫的朋友们,有需要可以去测试。
2019-11-22 15:17:23 +08:00
回复了 QGabriel 创建的主题 问与答 看中了一套顶楼坡屋顶的房子大家来说说能不能买~
坡顶的漏水的可能性比较小,坡顶又不蓄水
2019-11-13 14:23:07 +08:00
回复了 LevineChen 创建的主题 问与答 付费的国外 ip 代理池,用于爬虫大伙有推荐么
@itskingname 我没用过他们的 demo,我也没注册过,我是联系他们客服测试的,我刚刚去看了一下,他们网站改了,也许就像你说的,是个改版的半成品吧。哈哈哈哈
2019-10-18 10:54:50 +08:00
回复了 MontagePa 创建的主题 程序员 寻求代理 IP 池方案
讲道理,别说 2000 个,20000 个都算少了,我之前用过飞蚁代理的,那时候就有 50 多万独立 IP 了,可用率也贼高,不知道现在有多少了。
2019-09-03 11:22:43 +08:00
回复了 luzihang 创建的主题 Python 求推荐 国外网站爬虫代理,附我整理的资料
可以百度一下,一家 FstCloud 的,在香港,貌似可以开票。
1  2  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2899 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 25ms · UTC 14:06 · PVG 22:06 · LAX 06:06 · JFK 09:06
Developed with CodeLauncher
♥ Do have faith in what you're doing.