1、熟练掌握Python编程语言
2、熟悉MySQL、Redis、MongoDB数据库的使用
3、熟练掌握常用模块Requests、Selenium,熟悉urllib
4、熟练掌握Python爬虫框架Scrapy，熟悉scrapy-redis、scrapy-slpash的应用
5、了解HTML、CSS、JavaScript、jQuery前端技术
6、熟悉各种源代码解析工具，re、Xpath、BeautifulSoup
7、熟悉使用Git进行项目版本控制
8、了解Numpy、Pandas、Matplotlib等常用数据分析第三方库
9、了解Charles手机抓包工具
10、了解TensorFlow

MySQL(熟练)  Linux(熟练)  Web前端(一般)  JavaScript(一般)  数据分析(一般)  Python(熟练)

2016-07至2018-09——公司:深圳市聚盟物流有限公司(少于50人)
行业:交通/运输/物流
性质:创业公司
部门:  技术部
职位: 爬虫工程师

工作描述：根据要求爬取指定网站中的所需要的数据，将数据进行清洗去重后按要求保存。

2016-07至2018-09——外贸B2B网爬虫
所属公司：深圳市聚盟物流有限公司
项目描述：定期查看和爬取中国制造、阿里巴巴国际站等网站的企业信息，将数据进行清洗去重后按要求保存。
1.使用scrapy_redis框架爬取网站数据，实现增量式爬虫和url的去重，提供抓取数据的质量。
2.分析请求url,了解规律，制定url请求方案。
3.使用xpath提取请求到的数据，保存到mongodb中。

2012-09至2015-06——广东培正学院
计算机科学 本科