-
求职意向 举报
-
- 应聘职位:python爬虫工程师 | 8001-10000元/月
- 期望薪资: 10000-14999元
- 期望地区: 北京
- 期望行业: IT服务(系统/数据/维护)
自我介绍-
归纳和总结所学的知识,提高自身的价值 有很好的团队合作精神,性格活泼,善于沟通 责任心和执行能力强 英语: 读写能力一般 听说能力一般
工作经验:- 2016.11 - 至今 北京殿臣科技有限公司
- IT服务(系统/数据/维护)
- python爬虫工程师 | 8001-10000元/月
- 工作描述:
1、根据产品经理给与的项目需求抓取目标网站的信息; 2、对抓取的网页进行分析,制定抓取机制,抓取数据。 3、对爬取后的内容进行处理、优化、去重、入库等操作; 4、优化抓取效率,提升爬虫的抓取效果; 5、对数据进行存储; 6、后期的代码维护;
项目经验-
项目名称2018.06 - 2018.10 招聘信息采集 责任描述1、调查分析各个招聘网站的优缺点; 2、负责爬虫系统的开发和维护,使用scrapy_redis分布式爬取智联、Boss、拉钩等多个招聘网站,拼接连接进行逐层抓取重点字段信息,并应用正则和xpath进行数据清洗; 3、数据通过DRF项目接口, 存储到MySQL数据库; 项目描述该项目是针对多个招聘网站在热门城市的热门职位中去进行信息定向爬取,并进行数据清洗过滤和 数据分析,与相关部门的人对接,将爬取的数据实现实时推送 项目名称2017.09 - 2018.05 中医大数据采集 责任描述1、根据项目需求分析数据源框架,制定数据抓取方案 2、通过使用xpath、re进行数据匹配 3、通过pyexecjs模拟执行js解决加密问题 4、将抓取的数据进行处理,按指定格式保存到MySQL数据库中 项目描述此项目是一个智能化的在线辅助诊断系统,我对这个系统的基础数据提供支持, 通过对中医智库、中医e百、中医世家等中医类网站的分析,针对站中的古籍、 医案、文献、处方等内容进行定向抓取 项目名称2017.05 - 2017.09 二手车信息采集 责任描述1、分析(瓜子、优信、二手车之家)三个网站的请求方式 2、在程序中加入headers头,使用代理ip,避免ip被封 3、利用xpath和re对数据进行提取 4、将提取出来的数据保存到Excel里面 5、对Excel中的数据按地区进行分类整理 项目描述数据来源瓜子二手车、优信二手车、二手车之家,抓取这些网站上二手车的车辆型号、价格、上牌时间、上牌地、表显里程、排量、然后对这些数据进行清洗,按照地区进行分类存储 项目名称2016.11 - 2017.05 公司管理系统 责任描述1、参与需求分析和需求细化 2、负责员工和部门管理模块 3、员工信息增加,修改,在职离职状态设置,设置员工所属部门,员工通知(邮件发送) 4、模块维护和bug修复 项目描述项目采用Django开发,主要用于公司内部的员工管理,项目管理和日常流程管理
学历教育- 大连科技学院
- 计算机科学与技术
- 教育经历:
2012.09 - 2016.07 大连科技学院 计算机科学与技术 本科
获得证书培训经历 -
-
- 相似的简历



关注微信
消息提醒
在线客服