实现网
zxtworh_hard

昵称登录后显示

500/8小时
3年工作经验

北龙中网科技有限公司
python工程师

0

被预约次数

0

被收藏次数

0

被评价次数

擅长技能

三年一直从事IT行业,有一年的Python前、后台交互开发及两年的Python爬虫工作经验,熟悉常见python爬虫的反爬机制并有相应的解决方案,熟练使用动态网页抓取工具selenium、PhontomJs等。了解web前端页面的布局技术,例如html,css,js ,ajax等熟悉mysql和redis数据库;熟悉常用的第三方库,会分布式爬虫,破解有一定难度的验证码,也会数据清洗以及数据可视化。熟悉django web编程框架,了解django rest framework。同时爬取过门户网站、贴吧、微信公众号。写过简单的通用爬虫,会js逆向。
本人性格和蔼谦逊、乐观开朗、注重团队建设及合作,热爱学习能与同事间处理好人际关系,有一定的独立的思考能力和钻研的精神。我的座右铭 : 无论未来如何,我将拥抱变化,

项目经验

责任描述:
1、负责爬虫设计和开发;
2、负责网络爬虫或数据采集;
3、负责网页数据抽取和解决并记录爬取过程中的各种问题;
4、负责日常跟踪数据抓取和传输,保证数据抓取/传输的及时准确。
项目简介:
1.根据项目的需求抓取简历咖、纷简历、51job、智联招聘、赶集网等网站的简历。账号自动登录,主要是用到cookie和post模拟登录,登录之后需要进行搜索,搜索行业和地区,最后是下载简历。以上这几个都是封装成接口。直接调取接口。
2.使用scrapy-redis分布式以及定时任务爬取数据。构建自己爬取ip代理池或公司购买的稳定ip代理,应对限制访问频率。利用多个账号进行模拟登陆,获取cookie,构建cookie池,防止账号限制登陆。用python的smtp定时发邮件汇报爬虫获取数据的情况。
3.将网络招聘从“简历交互模式”推进到“招聘流程全部网络化”的产品,为产品提供相应的简历,同时为数据实时处理平台提供简历。

0条评论 雇主评价

暂无评论~

可兼职时间

周六全天
周六半天
周日全天
周日半天
工作日下班后

可兼职地点

海淀
全北京

被预约

0

被收藏

0

被评价

0

立即预约

可兼职时间

周六全天
周六半天
周日全天
周日半天
工作日下班后

可兼职地点

海淀
全北京