V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
woscaizi
V2EX  ›  程序员

大佬们, http://chuansong.me/ 传送门,这个网站是怎么爬取到最新的公众号文章的?

  •  
  •   woscaizi · 2018-01-04 20:43:37 +08:00 · 3541 次点击
    这是一个创建于 2521 天前的主题,其中的信息可能已经有所发展或是发生改变。
    搜狗微信搜索是做了反扒的,求解。
    15 条回复    2018-01-05 00:17:22 +08:00
    forestyuan
        1
    forestyuan  
       2018-01-04 20:54:58 +08:00
    是公众号作者自己提交的,可能微信有接口取数据吧
    mcfog
        2
    mcfog  
       2018-01-04 20:55:56 +08:00 via Android
    搜微信群控
    so1n
        3
    so1n  
       2018-01-04 21:09:20 +08:00   ❤️ 1
    可能用一个自己的微信小号关注后,自动获取把
    F1024
        4
    F1024  
       2018-01-04 21:24:59 +08:00
    微信网页版 抓个文章不是轻轻松松吗
    oonnnoo
        5
    oonnnoo  
       2018-01-04 21:43:21 +08:00
    直接爬它就好啦~
    F1024
        6
    F1024  
       2018-01-04 21:54:49 +08:00
    我又看了下 搜狗微信可以直接爬 打开源码就能找到相应信息 应该没什么反爬
    woscaizi
        7
    woscaizi  
    OP
       2018-01-04 21:58:32 +08:00 via iPhone
    @F1024
    试试一次打开多篇文章,会弹验证码的
    caomu
        8
    caomu  
       2018-01-04 22:00:04 +08:00 via Android
    谢谢 lz,原来已经恢复更新了啊。
    woscaizi
        9
    woscaizi  
    OP
       2018-01-04 22:03:22 +08:00 via iPhone
    爬到的数据包含阅读数,点赞数。
    所以数据来源应该和搜狗微信无关了。
    通过微信小号关注公众号然后爬取文章这个方法非常有可能。
    F1024
        10
    F1024  
       2018-01-04 22:14:46 +08:00
    验证码 只弹出一次 后面我猛打开十几篇也没出现验证码了
    AlwaysBee
        11
    AlwaysBee  
       2018-01-04 22:17:48 +08:00
    这个网站已经被卖了
    iyaozhen
        12
    iyaozhen  
       2018-01-04 23:39:48 +08:00 via Android
    这个网站很久远了。还没有搜狗微信搜索的时候就有了。估计还是客户端抓取的
    angith
        13
    angith  
       2018-01-04 23:42:43 +08:00 via Android
    这个站去年 不 前年的时候还比较火的 我还找站长加了我的公众号的
    wzwwzw
        14
    wzwwzw  
       2018-01-04 23:47:08 +08:00
    搜狗微信好像也只能爬取十条的吧。
    remenbo
        15
    remenbo  
       2018-01-05 00:17:22 +08:00
    被卖了多少钱啊 现在还是更新得很大
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2704 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 05:18 · PVG 13:18 · LAX 21:18 · JFK 00:18
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.