待遇详情
工作职责
1、负责数据采集系统开发工作,保障代码质量和可重用性;
2、负责数据采集系统相关模块和API接口的开发与维护;
3、负责数据库的建设和维护,以及数据采集爬虫代码的更新和维护;
4、通过架构优化,提升产品整体的运行效率与稳定性,降低代码错误。
5、通过使用自动化部署工具,自动化测试工具,自动化集成工具,自动化配置工具,推动CI/CD的自动化持续集成、持续交付的实现;
岗位要求:
1、本科以上学历,有1年以上Python开发经验;
2、熟练掌握PythonScrapy、Pyquery、Pymysql、PyMongo、xpath、redis;
3、熟悉HTML、JS、正则表达式、Jsoup或jQuery等,从结构化和非结构化数据中解析数据;
4、熟悉网页以及APP抓取原理及技术,能够总结分析不同网站,网页的结构特点及规律;
5、熟悉Webmagic框架、PhantomJS或HeadlessChrome、Selenium、WebDriver等技术
6、解Selenium、Django、MySQL,MongoDB;7、有快速学习和持续自学能力,主动性强
陈老师
重庆开林教育科技… · 招聘主管