- 标签:大数据开发工程师招聘
- 学历: 本科
- 公司性质: 上市公司
- 所在行业: 电气
- 行业:输配电设备
英威腾invt欢迎最新从事过大数据 分析 Python hadoop spark等行业的优秀人才加入我们,深圳市英威腾电气股份有限公司将为您提供广阔的发展平台!
岗位职责:
1、负责网页信息的抽取、去重、分类、解析、增量、入库,分布式爬虫系统的架构设计与开发。
2、负责数据可视化、数据分析建模、模型优化等相关工作。
3、对挖掘的数据进行分析,提取出有价值的数据,输出分析报告。
4、负责软件需求分析、方案设计、概要设计、详细设计等文档编写。
5、负责软件生命期维护,快速解决市场反馈的bug。
任职要求:
1、计算机、通信、电子等相关专业,本科及以上学历,2年以上Python软件开发经验。
2、扎实的Python基础,熟悉Web、APP破解爬虫,掌握反爬虫技术,有实际项目经验。
3、掌握常见爬虫库和框架,如urlib、requests、Scrapy、Selenium等,熟悉基于正则表达式、Xpath、CSS选择器等网页信息抽取技术。
4、熟悉Flask、Django、Tornado等至少一种web框架,至少熟悉redis、mongodb、mysql等数据库中的一种。
5、熟悉常用数据挖掘算法,如机器学习、决策树、朴素贝叶斯、SVM、KNN、K-Means、线性回归、逻辑回归、实验设计、聚类等,有实际挖掘分析经验优先。
6、熟悉数据建模及Hadoop、Spark、Flink、Kafka、Flume、Hive、Hbase等相关大数据处理技术。
7、能熟练阅读英文资料,有较强的学习能力和抗压能力,具有快速问题分析能力及解决能力。
8、工作认真负责、积极主动、团队协作意识强,并能独立、高效地完成任务。
五险一金 员工旅游 专业培训 年终奖金 定期体检 通勤班车 周末双休 餐饮补贴