V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  milukun  ›  全部回复第 20 页 / 共 24 页
回复总数  471
1 ... 12  13  14  15  16  17  18  19  20  21 ... 24  
2020-11-14 21:09:24 +08:00
回复了 liuser666 创建的主题 问与答 为什么微信公众号难抓取?
重点忘说了,chromedriver 也好,puppeteer 也好,甚至按键精灵也好,这些都逃不过微信号这一关的。
2020-11-14 21:08:12 +08:00
回复了 liuser666 创建的主题 问与答 为什么微信公众号难抓取?
曾经的经验给你简单分享一下,有几个知识点需要知道:
( 1 )微信文章有两种链接,临时链接和永久链接。在微信里打开的是永久链接,在搜狗里面搜索出来的是临时链接
( 2 )顾名思义,临时链接有时间限制,一般超过 6 个小时就无法打开显示链接已过期。但是放到微信里点又可以打开,因为微信使用了 key 进行了链接转换。
( 3 )这个 key 又分为万能 key (解任何文章,与你的微信账号相关联,有效期 2 小时)和公众号 key (只对单一公众号有效,有效期 2 小时)。key 不仅可以转换链接,还可以用来打开列表页。
( 4 )一个微信账号的万能 key 使用频繁会导致封号(无法转换、浏览文章)
( 5 )自 19 年开始搜狗不再根据时间顺序返回搜索结果,导致无法通过“关键词”查找最新文章,且未登录账号只能看到前 100 页的数据
( 6 )搜狗搜索公众号显示最近 10 条文章(目前已经不显示数据了),也是临时链接
( 7 )搜狗搜索微信出现验证码非常频繁
( 8 )使用手机或 pc 客户端可以查看公众号列表页,但是 pc 端需要先关注才能看到。这里能做的抓取方案是中间人攻击,但是别忘了你是用自己的微信号做的,你要考虑怎么自动化控制刷页面,最重要的是你能撑几个小时不被封号?以及你有多少实例,能花大价钱购买养好的微信号呢?(新号权重非常低,浏览列表页的数量很少,如果只看不养号,很快就被封了)
( 9 )可能有人说,不就是 python 发个 requests 请求吗?我手机刷一下列表页,找到 url,request body,模拟一下不就好咯。关于这一点你可以去看( 3 )和( 4 )

最主要的成本来自于,需要真实有效的微信号和批量操作。

综合以上成本,你倒不如选择有腾讯做股东的公众号数据分析平台-新榜(不是做广告哈)去买数据....
当然,数据二道贩子有很多,也有很多个人在卖,都比自己去搞定要低成本的多(学习除外)

另外未经授权抓取数据并贩卖是违法行为!
2020-11-13 12:09:00 +08:00
回复了 isno 创建的主题 程序员 V2 的程序员们,学学法律吧
应该是说的这个吧: https://zhuanlan.zhihu.com/p/285778671 [独立开发者因为广告拦截被优酷起诉 100 万元]
2020-10-27 15:23:09 +08:00
回复了 lewisli1996 创建的主题 分享创造 Authing 2.0,来了!
1k 活跃用户 169 一个月...
如何定义活跃用户呢?如果只是注册看看,就没有跟进的用户算不算活跃
如果算的话,就太贵了...
2020-10-25 11:29:24 +08:00
回复了 nl101531 创建的主题 分享创造 边学习边写的一款动森服装类小程序
无图无真相
@JokerLiang 是的,简直没话说。ios 就是天然支持动画,强大
@JokerLiang 哈 刚才搜了一下 才发现你说的这个,看到了他的 logo,确实看了哈,是看他的视频入门的。是在 b 站看的,XD 我都不知道课程是 design&code,只知道是个很厉害的老外
@JokerLiang 并没有哈 这个 app 是边学 swiftui 边速成的 之前一直用 flutter 的 感觉 swiftui 的动画确实厉害
@iwh718 嗯啊 正文里面 cue 到你了哈哈
另外注意哈,因为是全 swiftUI 开发,加上主要功能是小组件,所以系统限制为 ios14
需要梯一下哈,不然拉不到数据的
另一个帖子里追过来的,楼主是换了 app store 账号提交的 app 吗?
2020-10-19 23:31:07 +08:00
回复了 ydatong 创建的主题 iDev AppStore 的审核有点看不懂了..
楼主后续怎么样了?我提交了一个正在审核中 5 天了
怎么上传 excel 呢?朋友有一个需求,需要一个在线增删改查的程序,原始数据是 excel,感觉没有必要专门开发。但是你这个好像不能上传 excel 把?
2020-10-06 13:36:42 +08:00
回复了 iwh718 创建的主题 分享创造 分享一个刚发布的 ios 桌面组件小 app: BiliFans
哈哈不错,之前一直用 flutter 开发 app,最近想学学做小组件,有好多想法,看来要学习原生开发了
2020-10-03 21:41:43 +08:00
回复了 nix1024 创建的主题 分享创造 分享一个业余时间做的小 app:小决定 - 选择困难症克星
可以加个好友吗?
2020-09-26 11:55:17 +08:00
回复了 chemfinder 创建的主题 问与答 苹果个人开发者账号被禁后, APP 也被下架,如何申诉呢?
@RyanGo 是呀,中间提交申诉,过了 14 天也没封。申诉结果是封号改为 4.3
明显抄袭字幕说,自媒体必备广告语都一样
@dyxang 哈哈 好主意
1 ... 12  13  14  15  16  17  18  19  20  21 ... 24  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   2364 人在线   最高记录 6543   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 28ms · UTC 10:26 · PVG 18:26 · LAX 03:26 · JFK 06:26
Developed with CodeLauncher
♥ Do have faith in what you're doing.