通用爬虫、数据处理系统开发 远程兼职
一般月薪70000元- 项目类型:数据挖掘/爬虫
- 每月工作: 70天
- 工作方式:定期坐班
职位详情
多项目的互联网通用爬虫、数据处理分词、索引、机器打标签的数据抓取、处理系统:
1 爬虫系统,希望使用scrapy系统、多个爬虫项目可使用同一套系统(开发适配模板)
2 数据处理,希望使用elasticsearch系统,能自定义中文词库、能索引、机器打标签(自定义标签库)。
3 按照业务数据原始DB设计的需求,数据抛给MySQL作为业务数据原始数据库,供业务数据模型指标算法使用。