昆仑数智欢迎最新从事过系统架构设计师等行业的优秀人才加入我们,昆仑数智科技有限责任公司将为您提供广阔的发展平台!
岗位职责:
1. 分析大数据平台的功能需求,对平台功能架构、数据规模与平台资源匹配情况进行评估;
2、负责公司数据湖架构设计,离线/实时平台的数据ETL工作;
3、跨团队/部门协作,系统分析并解决各类大数据平台相关的运行或数据问题;
4、分析大数据平台功能及架构的可用性,并给出优化调整建议和方案;
5. 设计大数据平台全链路监控分析体系;
6. 根据大数据平台的非功能性需求,设计大数据平台的资源管理调度、扩容、安全灾备、管理维护、扩展兼容等方面的标准规范;
任职资格:
1、熟悉hadoop生态系统架构,包括存储、计算、调度等引擎的原理;
2、熟悉hive、spark、tez等计算引擎,熟练运用SQL处理大数据场景的问题;
3、熟悉FLink架构,熟练编写实时计算程序;
4、熟悉数据仓库建设理论;
5、了解消息队列的基本原理,如kafka等;
6、至少熟练掌握java/python/c++语言之一,数据结构基础良好。
7、5-10年工作经验。
8、有华为大数据产品研发与应用经验优先考虑。
五险一金 补充医疗保险 交通补贴 餐饮补贴 通讯补贴 专业培训 绩效奖金 年终奖金 定期体检 免费班车