V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  jeeyong  ›  全部回复第 12 页 / 共 47 页
回复总数  934
1 ... 8  9  10  11  12  13  14  15  16  17 ... 47  
2022-06-06 19:15:18 +08:00
回复了 brave256 创建的主题 Python 爬虫 5s 盾现在有什么解决办法啊
@LeeReamond 只是一种手段....而且其实是很低阶的方法
检测是否存在这个变量..检测这个变量是否还是 Native Function...
还可以检测 navigator.webdriver, 检测方法也是, 简单的就判断属性是否存在, 是否返回 false, 或者 undefined. 不同平台返回是不一样, ios 是 false, 但是 android 我记得好像是 undefined..至少部分是.
还可以检测 webdriver 的是否挂了方法, 或者是通过 Proxy()或者 Reflect()伪造过.
初次之外还是有好多好多方法..哎...没头没头...
2022-06-04 23:43:19 +08:00
回复了 996bujiaban 创建的主题 程序员 好迷茫啊, Python 该怎么走向中级工程师或者初级
我和你的工作内容差不多... 运气好的是我的"客单价"可能更高...
越来越感觉走不通了...这条路是个死胡同..
实名越来越完善, 大部分服务登录才可以继续使用. 这一点就极大的拉高了爬虫的成本.
试图解决这个问题, 解决的越多你离刑法就越近...

做完手上这个系统, 我就不准备做爬虫相关了..估计能再吃个 2,3 年...然后用这段时间开始转型..

我准备看的方向.
主线: c#和 unity.. 我觉得下一个风口和生产力提升的方向是元宇宙, 至少算一个. 所以看游戏开发这块的知识, 能做最好, 做不了起码懂一些..
说服了一个投资人做元宇宙方向, 目前通过朋友间的了解和市场调研, 发现, 至少能实现短期内产生流水..回笼部分资金.

支线: 有条件继续熟悉了解 js 吧.. 到现在我只能看懂 js, 让我上手写我就懵逼.. 而且基于 webgl 的 3d 也是个低成本尝试的手段..
另外更多的兴趣角度, 想重新捡起来 C/C++看看.
2022-06-04 19:00:30 +08:00
回复了 wellhome 创建的主题 程序员 有爬蟲外包平台?
@Buges 富贵险中求...
如果进去了...
就带几本 C 的书, 出来我就不用 python 写了..
都是 c 写...自己完整的工具链..想想都兴奋...
在里面用知乎练手, 专门抓 1450... 抓取, 反爬, 大数据, 数据分析, 深度学习...啥都实战了...
哈哈哈
2022-06-04 17:57:27 +08:00
回复了 brave256 创建的主题 Python 爬虫 5s 盾现在有什么解决办法啊
@LeeReamond

git 上写了.... 我并不知道所有的特征, 我也是学一点改一点..

替换了字符串:
$cdc_asdjflasutopfhvcZLmcfl_
这个长度不能变...
但是虽然替换了... 依旧可以用其他方式进行检测, 比如正则直接取$ _ 之间的东西... 因为长度不变, 所以 length 一下也可以判断出来.

这部分原始代码里是
var someVar = cdc_adoQpoasnfa76pfcZLmcfl_Array || window.Array
var someVar = cdc_adoQpoasnfa76pfcZLmcfl_Promise || window.Promise
var someVar = cdc_adoQpoasnfa76pfcZLmcfl_Symbol || window.Symbol

我直接把 cdc_adoQpoasnfa76pfcZLmcfl_Symbol || 这部分删掉了..
但是, 好像在特定场景下还是可以在 window 全局变量中发现到这个值 cdc_adoQpoasnfa76pfcZLmcfl_Symbol.
目前我没法重现...

以上特征都是在 chrome/test/chromedriver/js 的文件中...
2022-05-30 22:21:00 +08:00
回复了 zficode 创建的主题 Android 求一个安卓备用机推荐
@IDAEngine +1 9R 挺好..
前几天被家里小朋友把屏幕摔碎了...好疼
2022-05-30 22:18:40 +08:00
回复了 brave256 创建的主题 Python 爬虫 5s 盾现在有什么解决办法啊
https://github.com/onebits/chromedriver/releases

重新编译了 chromedriver, 删除了 js 层面的一些特征.. README 里有说.
虽然有时候并没啥卵用..
2022-05-30 22:18:18 +08:00
回复了 zficode 创建的主题 Android 求一个安卓备用机推荐
@jeeyong 我发错了..同时打开两个帖子...弄混了.
2022-05-30 21:02:53 +08:00
回复了 zficode 创建的主题 Android 求一个安卓备用机推荐
https://github.com/onebits/chromedriver/releases

重新编译了 chromedriver, 删除了 js 层面的一些特征.. README 里有说.
虽然有时候并没啥卵用..
@jeeyong 嗯..特意看了一下..
玩时间最长得 PUBG, 大概 300W 不到. CPU: 90W 左右
GPU 190 - 250W 浮动...
那这算下来是没那么多...

但我今年过年回家, 冰箱不插电...家里电器 一个光猫, 一个 NAS 45W 吧. 群晖 DS220+ 一个 WIFI 路由器
一个机箱..
正好呆了整个 2 月份. 月底结算电费是 180.. 我没玩游戏啊..

另外 PUBG 一天我可能玩的时间打到 10 个小时哈哈...
@beijiaoff 850W 电源得主机, 10900k, 3080 不超频.
每天工作 10 - 14 个小时. 包括玩游戏, 写代码, 看电影.
一个月单主机得电费在 200 左右

所以我传播什么错误信息了?
@Suzutan 850W 电源得主机, 10900k, 3080 不超频.
每天工作 10 - 14 个小时. 包括玩游戏, 写代码, 看电影.
一个月单主机得电费在 200 左右
2022-05-24 16:55:11 +08:00
回复了 MakHoCheung 创建的主题 程序员 Jetbrains 全家桶全新 UI 界面
我有点担心这 UI 一出, 是不是 fleet 要跳票啊
2022-05-24 16:00:43 +08:00
回复了 Zien 创建的主题 程序员 大脑多线程强迫症
不要焦虑, 我也这样...
因为担心报销或者采购内容填写或者复合时出现纰漏, 一心一意做, 反而会犯很低级得错误. 比如金额大写就时常写错.
一边聊天, 一边听音乐就没事..
写代码, 后台开着游戏更容易专注..
特别因为这个事情问过我同学, 复旦得心理学博士哦.. 挺厉害得.
然后他告诉我, 就是有一部分人是这样得.. 找出自己最舒服的节奏做事就行了..
2022-05-22 15:14:59 +08:00
回复了 HarrisonLee 创建的主题 程序员 多少内存够用?
64GB 从来没担心过啥...编译 chromedriver 都是在虚拟机里完成
2022-05-22 11:45:16 +08:00
回复了 zcloud 创建的主题 程序员 想搞个 itx 主机写代码,有推荐吗?
@zcloud 但是体积, 散热, 做不到 nuc 那种程度吧.
2022-05-02 02:04:16 +08:00
回复了 angrylid 创建的主题 Linux 虚拟机里的 Linux 用什么桌面环境好?
@findex 主板不给核显供电...MSI MEG z490 ACE
而且不知道是否会有损耗...我还要打游戏呢...哈哈
2022-05-01 18:03:16 +08:00
回复了 angrylid 创建的主题 Linux 虚拟机里的 Linux 用什么桌面环境好?
2022-05-01 17:33:12 +08:00
回复了 angrylid 创建的主题 Linux 虚拟机里的 Linux 用什么桌面环境好?
@geekvcn 我可以理解成虚拟机得融合模式嘛? parallels desktop 那种...osx 里可以直接运行 window 程序.
如果就是当虚拟机用呢?
windows 日常还得用啊...
2022-05-01 16:52:24 +08:00
回复了 angrylid 创建的主题 Linux 虚拟机里的 Linux 用什么桌面环境好?
@geekvcn 请问 wsl2 可以装桌面版本了是吗
2022-05-01 16:24:53 +08:00
回复了 angrylid 创建的主题 Linux 虚拟机里的 Linux 用什么桌面环境好?
10900K, 全核 5.1, 64GB 4000/c18 内存 32*2, 三星 nvme 9801tB 系统盘 虚拟机在 nvme 980 2t pro 盘上..
3080 显卡..
vmware workstation 16.x
啥桌面都掉帧.. 因为是软解得关系
没有显卡直通
1 ... 8  9  10  11  12  13  14  15  16  17 ... 47  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2006 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 31ms · UTC 16:13 · PVG 00:13 · LAX 09:13 · JFK 12:13
Developed with CodeLauncher
♥ Do have faith in what you're doing.