大数据ETL工程师

职位介绍DA南京正在寻找一个高度关注细节乐于挑战现状的人才加入我们的团队。 您需要拥有丰富的数据开发项目经验，与客户保持良好的关系。您将与团队一同为客户实现我们的营销自动化解决方案，并从数据工程方面为交付高质量的 API 优先数据解决方案做出贡献。 【语言要求】 优秀的英文听说读写能力，可在纯英文的工作环境下工作 【岗位职责】 1. 与客户维持良好的关系，保证产品实施和产品服务有序进行 2. 设计、建立和维护各种营销用例的数据管道（ETL开发） 3. 确保有效控制安全和弹性的数据传输过程（包括输入/输出） 4. 迅速排除故障并修复数据查询/问题 5. 建立质量和性能指标，系统地跟踪和监测数据管道的进展 6. 了解当前的EDL（CDM）数据模型 【技能要求】 1. 本科或以上学历，学信网可查 2. 具备数据库（mysql，postgresql等）使用和优化实践，大数据仓库建模及数据ETL开发经验 3. 精通SQL语言, 4. 优秀的Python编程技能，熟悉各种数据存储技术和架构 5. 良好的Java编程技能&对面向REST的API有良好的理解 6. 善于使用Unix/Linux Shell脚本。 7. 良好的hadoop生态系统知识（HDFS，Hive，Hbase），深刻理解使用Spark的分布式数据流程 8. 使用Apache Kafka进行流处理 9. 对Airflow等工作调度工具有良好的理解 10. 具备优秀的逻辑思维能力，对解决挑战性问题充满热情，善于解决问题和分析问题； 11. 良好的团队合作精神，较强的沟通能力 【加分项】 1. 熟悉营销自动化，营销工具 (如DM Hub, 企点，神策，Salesforce Marketing Cloud, HCL Unica等) 2. 熟悉数据分析、数据挖掘基本原理和流程 3. 深刻理解客户生命周期，理解客户为中心的营销概念和营销渠道 4. 基于业务准则，对识别客户方面具有丰富的经验，了解大数据系统 5. 有线上支付项目等金融行业大数据开发相关经验者优先