工作描述
1、根据需要爬取的数据进行需求分析，分析目标网站的网站结构和一些反爬手段。
2、通过requests、scrapy、xpath等技术手段编写爬虫程序进行有关的内容抓取，供其他部门使用。
3、通过工作中遇到的反爬手段，不断优化程序，定期维护ip代理池，不断的学习新知识。
4、协助后端开发人员完成代码的编写。

1 熟练掌握Python语言，熟悉Linux开发环境，能熟练使用常用Linux命令。
2 熟悉MySQL、MongoDB数据库相关操作，了解redis数据库。
3 可熟练使用Django、Flask框架进行开发，对CSS、JS、JQuery、Ajax有一定了解。
4 熟悉requests，scrapy框架，能熟练使用xpath、正则表达式提取要抓取的信息。
5 熟悉nginx+uwsgi+Django进行项目部署。
6 熟悉网络编程，TCP/UDP编程。
7 了解Git常用命令，可熟练使用pycharm提升编码效率。

联系人：张老师
公司地址：山东省济南市天桥区蓝翔路15号时代总部基地二区29号楼
最近登录：2019-08-16