【职责描述】

1. 负责电商平台的数据采集、爬取与解析；

2. 负责数据的清洗、整理、整合及合并等工作；

3. 优化抓取策略，提升抓取性能。充分利用带宽资源，避免限制；

4. 分析爬虫系统的技术缺陷，对架构做出合理地调整和改进。


【职位要求】

1. 计算机相关专业大专以上学历；

2. 精通Java、Python或Go中至少一门编程语言；

3. 熟悉正则表达式，从结构化的和非结构化的数据中获取信息；

4. 能独立解决实际开发过程碰到的各类问题；

5. 有电商平台数据爬取和多线程开发经验者优先。