职责描述：

1. 可以使用Airflow/Python构建和更新大数据管道创建和维护ETL管道；

2. 建立和更新大数据管道，维护Kargo的数据湖；

3. 确保用户能够正确访问我们的数据资产；

4. 与洞察团队协调，提取数据进行临时报告；

5. 使用各种BI工具设计和创建有影响力的可视化效果；

6. 检测并清除数据中的任何差错；

7. 熟练使用书面、口头或演示的方式，进行沟通和业务汇报。

任职要求：

1. 使用Hadoop、Hive、Spark、Kafka、HDFS等Apache Hadoop/Spark生态系统应用进行大数据处理的经验者优先；

2. 对数据仓库ETL设计和开发、方法、工具、流程和实践方面必须拥有丰富的经验；

3. 有丰富的c级管理人员的星盘和报表制作经验；

4. 热爱数据，能够发挥展示使用真正大型数据集的经验；

5. 在AWS、Azure或阿里云等云技术方面有丰富的经验；

6. 具有使用Python、Airflow或ETL等工具创建数据管道的丰富经验；

7. 具有丰富的数据建模经验；

8. 具有专业SQL技能；

9. 熟练掌握Linux工具；

10. 有较强的学习能力，可以充分发挥所掌握技能及岗位专业性；

11. 全日制本科及以上学历，具有丰富工作经验者优先考虑；

12. 具备流利的英语口语和书写能力。