岗位职责：
1、在现有的基础上进行网站开发数据采集；
2、优化参数提升爬虫抓取的效率和质量；
3、根据数据产品需求，负责大规模文本、图片数据抓取、清洗、存储等开发工作。
5、加分项：etl，vm，docker，k8s。

任职要求：
1、熟悉python flask web开发；
2、简单的前端代码和熟悉restfulAPI；
3、熟悉多线程、网络编程、网页抓取原理、正则表达式等；
4、熟悉mysql、mongodb，redis等常用数据库。