大数据高级开发工程师/架构师
发布日期：2021-09-25 10:11:06 浏览次数：
岗位职责：
1、依据客户需求完成大数据项目的数据分析及建模;
2、进行大数据核心算法的编写;
3、参与项目的需求分析、系统设计、编码工作;
4、参与开发过程中相关新技术的研究和验证；
5、协助承担架构性的体系设计和改造工作,配合制定技术实施方案，按照总体设计组织子系统的设计和开发。
任职要求:
1、精通数据建模、数据体系建设,备数据仓库架构设计、模型设计和处理性能调优等相关经验;
2、具有丰富的基于hadoop体系的数据平台、数据仓库建设经验,精通基于hadoop源码的开发、优化改造及成功应用案例;
3、精通hadoop生态体系各项技术,如kafka、 flume、 hive、 impala、 hbase、 spark等,具有100+节点hadoop集群的开发、运维经验;
4、熟悉Oracle、MySQL等关系型数据库，精通非关系型数据库应用场景，能够熟练运用MongoDB；
5、熟悉国产数据库生态，对国产主流数据库功能与特点比较了解；
6、具有对大型hadoop集群的硬件规划能力;
7、有城市级数据中心项目建设经验或熟悉政务数据服务体系者优先考虑；
8、具有数据标准制定、数据治理、数据安全审计、数据共享交换研发等经验者优先考虑。
