大数据工程师 – 职位描述 （JD）

岗位职责

1、负责海量物流数据的数据仓库建设和研究，建设 PB 级数据仓库，负责数据仓库设

计，建模，ETL，报表开发等；

2、熟悉 Hadoop、Hive、Spark、Flink、YARN

3、至少参与过 2 个大型数据仓库/大数据/数据治理项目的经验；

4、熟练 HBase、Starrocks、Doris、ES、Kafka，MongoDB 等常用大数据系统、组件或

计算框架;

5、有大规模数据（TB 级、PB 级）处理及优化经验

任职要求

1、本科及以上学历，计算机相关专业；

2、熟悉 Hadoop 生态，Hdfs、Hive 等，熟悉 Spark、Flink 等计算框架原理，有过大数据

相关实习开发经验；

3、具备独立的编程能力，至少熟悉 Java/Scala/Python 一门编程语言；熟悉基本的 Spring

boot 开发框架

4、具备一定的数据分析能力，具备数据敏感性和探知欲，专注数据的价值发现和转化；

5、具备快速学习能力、沟通协调能力及团队精神，有较强的责任心和学习积极性