就是想针对一些商品的评论,做一些数据分析
大概需要 1000 个商品,每个商品 100 条的话,就是 10 万条评论,,,,可能更多,因为评论里,很多无效的。
请问下,难么?
之前只写过很简单的爬虫,抽取一些简单 html 的文章什么的
1
dremy 2020-02-28 13:04:51 +08:00 via iPhone
劝放弃,各种反爬策略会让没有太多经验的小白欲死欲仙
|
2
yujiang 2020-02-28 13:15:58 +08:00 via Android
反爬已经很先进了,小白建议退坑吧。。。
|
3
Vegetable 2020-02-28 13:21:56 +08:00
1000 个而已,你写爬虫的时间,手动+代理已经采集完了
浏览器+mitmproxy 脚本 自己刷一天 1000 个肯定能刷完。 |