这是一个创建于 3374 天前的主题，其中的信息可能已经有所发展或是发生改变。
各位技术猛士：
寻求一位搭档，帮忙监测几个网站的活跃度、交易量等。待跟踪数据都是在网页上有展示的公开数据，无须hack。能者不难，但求搭档。
要求：
技术能力强，搞定技术方面的各种问题，如多IP、验证码等；
自我驱动，自己发现问题解决问题，自我约束时间实现需求，自我驱动改进程序以匹配目标网站发展更新；
责任心强，细心周全，自我苛求抓取数据的正确、全面、客观；
易于沟通；
有一定的资源积累或相关经验，因为我无法帮你学习提高；
最好在上海，确实有能力&有诚意也可外地。
回报：
常年合作，兼职SOHO，薪酬月付。年终根据监测结果对相关投资决策的贡献，支付奖金，奖金将以人民币十万为单位。
背景说明及合作愿景：
对冲基金是最简单暴力的钱生钱的行业。华尔街上对冲基金行业年收入千万美元的从业者比比皆是，是顶级商学院学生工作首选目标。中国对冲基金行业尚处初期但正在高速发展。我有幸在一家实力强劲但也竞争激烈的基金工作，觉得十分有趣大有可为。若你是实力干将&合作愉快，将来(2~3年后)我自己做对冲基金时，诚邀合伙加入负责各项技术。届时您将轻松实现财务自由。
此次我是自己出资寻找长期搭档，你的酬劳将与我的投资组合收益相关，搭档关系，远非一般兼职可比，望你我自此结缘。
若有意，请邮件至：lixiangprime#foxmail.com
请简单介绍自己的教育及工作背景，详细介绍你的技术能力、合作意愿。
来信必复，春节后定下合作伙伴。
寻求一位搭档，帮忙监测几个网站的活跃度、交易量等。待跟踪数据都是在网页上有展示的公开数据，无须hack。能者不难，但求搭档。
要求：
技术能力强，搞定技术方面的各种问题，如多IP、验证码等；
自我驱动，自己发现问题解决问题，自我约束时间实现需求，自我驱动改进程序以匹配目标网站发展更新；
责任心强，细心周全，自我苛求抓取数据的正确、全面、客观；
易于沟通；
有一定的资源积累或相关经验，因为我无法帮你学习提高；
最好在上海，确实有能力&有诚意也可外地。
回报：
常年合作，兼职SOHO，薪酬月付。年终根据监测结果对相关投资决策的贡献，支付奖金，奖金将以人民币十万为单位。
背景说明及合作愿景：
对冲基金是最简单暴力的钱生钱的行业。华尔街上对冲基金行业年收入千万美元的从业者比比皆是，是顶级商学院学生工作首选目标。中国对冲基金行业尚处初期但正在高速发展。我有幸在一家实力强劲但也竞争激烈的基金工作，觉得十分有趣大有可为。若你是实力干将&合作愉快，将来(2~3年后)我自己做对冲基金时，诚邀合伙加入负责各项技术。届时您将轻松实现财务自由。
此次我是自己出资寻找长期搭档，你的酬劳将与我的投资组合收益相关，搭档关系，远非一般兼职可比，望你我自此结缘。
若有意，请邮件至：lixiangprime#foxmail.com
请简单介绍自己的教育及工作背景，详细介绍你的技术能力、合作意愿。
来信必复，春节后定下合作伙伴。
第 1 条附言 · 2015-02-12 20:10:25 +08:00
标题可能有误解。
基础酬劳按月支付，如果爬虫合适，可以月付1万。
年底奖金，10万 * N，取决于对我业绩的帮助。N从0到10吧，先。
其实做得好，酬劳真不是问题。
基础酬劳按月支付，如果爬虫合适，可以月付1万。
年底奖金，10万 * N，取决于对我业绩的帮助。N从0到10吧，先。
其实做得好，酬劳真不是问题。
第 2 条附言 · 2015-02-13 11:23:14 +08:00
统一回复：
验证码，多IP等技术方面的问题：
我只是提出来而已，因为这些问题我不懂，需要你自己解决。我不希望，到时候你和我说，因为有验证码做不了了，或者因为IP被封做不了了。发现问题解决问题的人，才是被欣赏和珍惜的。实际需求中也不一定会遇到这些问题。
数据分析及验证问题：
我有第三方数据公司提供的付费报告，只是这些报告及时性不够（大概一个季度一期），且不是独家的，所有人看到的都一样，关系好的可能还能提前一周拿到。如果我的决策都是基于这些报告，我也就分分钟可以滚蛋了。
我也有一些目标公司业务线的朋友，偶尔问些经营情况，同行相互交流，大概的数也差不了太多。
这些口径的数，都将和通过爬虫获取的数交叉对比。一段时间下来，就知道爬虫的数靠谱不靠谱，该如何修正。
数据分析这些，当然，都是我必须自己做的。
另：
收到一些邮件，抱歉，今天是我年前最后一个工作日，比较忙。邮件稍晚回复。
倾向于BAT或其他互联网公司工作的朋友，这样我们很容易会有共同的圈子，有利于我们以后长期合作。
感谢大家的兴趣。
顺祝春节快乐！
验证码，多IP等技术方面的问题：
我只是提出来而已，因为这些问题我不懂，需要你自己解决。我不希望，到时候你和我说，因为有验证码做不了了，或者因为IP被封做不了了。发现问题解决问题的人，才是被欣赏和珍惜的。实际需求中也不一定会遇到这些问题。
数据分析及验证问题：
我有第三方数据公司提供的付费报告，只是这些报告及时性不够（大概一个季度一期），且不是独家的，所有人看到的都一样，关系好的可能还能提前一周拿到。如果我的决策都是基于这些报告，我也就分分钟可以滚蛋了。
我也有一些目标公司业务线的朋友，偶尔问些经营情况，同行相互交流，大概的数也差不了太多。
这些口径的数，都将和通过爬虫获取的数交叉对比。一段时间下来，就知道爬虫的数靠谱不靠谱，该如何修正。
数据分析这些，当然，都是我必须自己做的。
另：
收到一些邮件，抱歉，今天是我年前最后一个工作日，比较忙。邮件稍晚回复。
倾向于BAT或其他互联网公司工作的朋友，这样我们很容易会有共同的圈子，有利于我们以后长期合作。
感谢大家的兴趣。
顺祝春节快乐！
 |
101
yizhi523 2015-02-13 14:27:03 +08:00
专业爬虫，看这里~ 我在上海
|
 |
102
JQ 2015-02-13 15:48:10 +08:00
看大家的回复，原来爬虫程序在做这么多事情啊。之前只是知道搜索引擎的爬虫，还有爬来做垃圾站。其实，爬一个网站真的还好。目前验证码这块，不熟。否则，对楼主这个需求可以考虑的。
|
 |
103
zhanglp888 2015-02-13 16:25:27 +08:00
爬数据简单，但是后面如何用，去掉无用的东西，组合多个网站的数据很难，用的时候出问题，改变爬数据（图片中的数据）的方式，这些可能就更困难。以前做过专门去爬新闻，然后分析新闻的用词来确定是积极的还是消极的，统计后再去卖股票，前前后后几个月，调来调去，很困难。
|
 |
104
Sunya 2015-02-13 20:07:41 +08:00
LZ 需要找的是一个数据挖掘的砖家咯.
|
 |
105
scholers 2015-02-13 21:56:48 +08:00
LZ可以考虑做基金定量交易
|
 |
106
weikey 2015-02-13 23:30:38 +08:00
楼主，爬完数据后，如果需要一个大数据的分析平台的话可以找我，😜
|
 |
107
crosslight 2015-02-17 08:47:23 +08:00
露珠应该不只需要一个爬虫， 爬虫只是最基础原始的状态， 后面他就会想要一个数据normalization的东西，大数据分析呈现的系统。随着数据量越来越大，又会涉及到大数据的存储。最后就会包装这些数据，卖钱！
|
 |
109
mlzboy 2015-02-19 19:55:07 +08:00
加微信1036130199聊
|
 |
110
chunshuai 2015-02-25 09:01:44 +08:00
每天抓一遍东方财富通上的股价和成交量数据 ：）
|
 |
111
liyangdal 2015-02-26 00:51:39 +08:00
刚看到这条信息，现在已经找到合作伙伴了吗
|
Select Language