毕业于北京邮电大学,研究生,在校期间一直研究海量数据分析处理
毕业后就职于广东某通信公司,主要从事数据分析工作,负责后台数据分析处理
熟练使用python hadoop java Linux shell 数据库等技术,并独立完成多个项目
业余时间主要用python爬取过多个电商网站,旅游网站,房产网站,视频网站等信息
1.利用python爬取过京东 唯品会 天猫等多家电商网站上千万个商品信息,包括商品ID,名称,分类,品牌,价格,店铺,评论等
2.利用python爬取过旅游网站,包括景点,酒店和机票等信息
3.利用python爬取过链家网站,包括小区,二手房等价格和交易信息
4.利用hbase实现了百亿级话单存储查询系统,查询速率可以达到秒级响应
5.有三年多海量数据处理分析经验,分析用户上网日志数据
可兼职时间
可兼职地点
丁伟彬 2017-05-23 20:34
非常认真的妹子,沟通很认真。做东西也很快