python 爬虫方向的工作有前途么

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

已注册用户请登录

这是一个创建于 3513 天前的主题，其中的信息可能已经有所发展或是发生改变。

内推网上有人给我发消息问我对scrapy爬虫是否有兴趣，可我想做web开发的工作,感觉写爬虫的工作似乎没有啥发展前景啊，大家有什么意见。

9 条回复 • 2014-10-10 01:42:23 +08:00

imn1

2014-10-09 13:06:48 +08:00

爬虫是大数据必备能力

laoyuan

2014-10-09 13:31:57 +08:00

去一淘。。。

laozhao0

2014-10-09 13:36:53 +08:00

大大的有前景。我们做大数据分析，有时候要去爬京东，当当等网站的全站数据，你懂的。

RangerWolf

2014-10-09 13:59:35 +08:00

我觉得爬取数据的能力是基础能力的一种~
但是要说前途？我不能确定
不过钱途不会很差就是了

GeekGao

2014-10-09 14:15:53 +08:00

哥在做crawler，唉，在杭州没啥前途的干嚼

azurefang

2014-10-09 14:19:01 +08:00

@GeekGao 不能往数据分析上发展么

GeekGao

2014-10-09 14:32:03 +08:00

@azurefang 可以，但是你的岗位给你机会么，不给的话还得是私下里自学吧

imn1

2014-10-09 15:27:45 +08:00

@azurefang
爬虫是获取数据，和数据分析有关但也是两码事，分析更多是数学/统计学的功夫
当然，一切视乎你的努力

20150517

2014-10-10 01:42:23 +08:00 via Android

不知道这里几个是真正做大数据的，爬虫是最基本的能力，实在没什么大的可研究的，我公司这种都是让新进毕业生写。。。答主自己感受下