V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  WaJueJiPrince  ›  全部回复第 2 页 / 共 2 页
回复总数  38
1  2  
@konikoo 淘宝的判断 Selenium 的原理是什么呢?
@beneo 您破解过淘宝登陆的验证码的那个吗?淘宝现在好像又升级了,似乎能检测到 Selenium,您有什么解决方案吗?
2019-03-07 14:27:36 +08:00
回复了 lryepoch 创建的主题 程序员 现在的爬虫还用 Java 吗
@letitbesqzr 有的语言还是有优势的,很少见过有人用 C 或者 VB 直接写爬虫的,不同的语言的出现就是为了弥补其他语言的不足的,所有还是有差距的,不同的语言有不同的优点和缺点。另外,爬虫也不一定就注重的是异步,任务调度,一味追求快速的爬虫不是好的爬虫,也要兼顾对方的负载均衡,稳定性也很重要。另外验证码,js 加密,账号登陆这些不容易追求快速,
@CriseLYJ 嗨,我看了您的 github 中的采集淘宝的爬虫代码,您采用的是 Sphash 的方式,但是淘宝应该需要登陆才能采集商品页面吧?也就是当我点击一类商品的时候会出现这种页面
https://i.loli.net/2019/03/07/5c80b61730d91.png
也就是要求登陆,请问您是怎么解决的呢?而且我在代码中似乎没有看到有关 Cookie 的信息。
2019-02-19 14:33:53 +08:00
回复了 mapnaqi 创建的主题 Python 有没有什么好的打码平台推荐?
超级鹰打码平台
2019-02-17 21:06:48 +08:00
回复了 meichuanyi 创建的主题 Python 现在还有人能够模拟登陆上淘宝么? 是在没办法了
不知道你的账号多不多 不多的话可以尝试手动登陆:
1. 让浏览器记住账号密码
2. 在代码中指定 Selenium 的 user-data-dir[该路径保存了你的浏览器记录的账号信息]
3. 用代码打开浏览器[这种方式吃内存]
尝试解决方法:
采用 Docker 的 selenium/hub 和 selenium/node-chrome
[效果我没测试]
2019-02-17 21:02:35 +08:00
回复了 meichuanyi 创建的主题 Python 现在还有人能够模拟登陆上淘宝么? 是在没办法了
@PhilosophyKing 确实 Web 目前是 Python 最多工作机会的了 但是 Python 做 Web 感觉始终没有优势 Java PHP 比 Python 更简单 所以为了长远发展 不建议选择 Web 开发。。。感觉大数据 机器学习 数据分析 /挖掘等岗位更好一些
2019-02-17 20:53:27 +08:00
回复了 Ewig 创建的主题 新手求助 pyspider 安装报错 如下
试试安装离线呢
2019-01-17 12:58:11 +08:00
回复了 frogex 创建的主题 Python 淘宝反爬求解
人工登陆,然后记录登陆信息可以吗?
使用 Selenium 中的 user-data-dir 参数。另外,淘宝好像是登陆以后频繁的翻页也会触发验证码。
Scrapy-Redis 有个功能是动态切换域名,不知道是不是你想要的。
2018-09-14 18:27:09 +08:00
回复了 smallseven 创建的主题 程序员 你们都用什么图床啊?
Typora + 坚果云
2018-08-31 15:21:31 +08:00
回复了 iblislsy 创建的主题 程序员 入职创业公司一年,从热血到离职。
吾乃布衣,自幼愚,学未满,急赴于世。承蒙领导错爱,不以吾之卑微,收容门下,知遇之恩不敢待忘!自知才浅识薄,万不敢以千里马自居,虽无鸿鹄之志,然不愿屈膝于林,故思良久,挣扎再三,终决意就此离去,另某生计,他日诺需吾之用武之地,定当倾之全力,三言两语道不尽离衷两两,一纸书文鼎鼎离别之意,书不尽言,词不达意,岁未请辞,望余恩准!
2018-08-26 12:45:10 +08:00
回复了 Little2hong 创建的主题 Markdown 说说写技术笔记、博客使用什么 markdown 编辑器
2018-08-25 00:09:10 +08:00
回复了 Little2hong 创建的主题 Markdown 说说写技术笔记、博客使用什么 markdown 编辑器
用了 Typora,就没用过其他的了。
2018-08-20 12:43:47 +08:00
回复了 WaJueJiPrince 创建的主题 Python Python 模拟“黑客帝国”影片中的终端动画脚本
@viho 我抓取过今日头条等 APP,是你需要的吗?
1  2  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5635 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 118ms · UTC 03:32 · PVG 11:32 · LAX 19:32 · JFK 22:32
Developed with CodeLauncher
♥ Do have faith in what you're doing.