职位描述:
1、 负责数据需求分析,数据仓库的模型设计和搭建;
2、 负责ETL流程的设计、开发和部署,特别是海量日志的处理、分析和挖掘;
3、 负责数据采集和接入数据湖,开展业务数据质量探查;
4、 前端可视化开发,包括固定报表、管理驾驶舱、自定义分析报表等;
5、 协助运维工程师进行ETL线上任务的优化和运维;
职位要求:
1、 计算机或相关专业,本科以上学历
2、 熟悉ETL开发过程和规范,至少熟悉一种调度工具(如Airflow);
3、 熟悉数据仓库理论,熟悉维度建模,至少具有2年大型数据仓库开发经验;
4、 精通SQL;熟悉Java、Python、Scala任意一门高级编程语言
5、 掌握Hadoop、Spark、Hive、Presto、Kafka等相关大数据技术,具备1年以上Spark ETL任务开发经验;熟悉Oracle、MySQL或Redshift等关系型数据库;
7、 有AWS、阿里云使用经验者优先;
8、 有Spark Streaming、Fli
9、 对帆软报表、帆软BI、Tableau等数据可视化产品有使用和开发经验;
职能类别:数据仓库工程师
Copyright @ 2018-2023 All Rights Reserved 版权所有 江苏华英汇人力资源开发股份有限公司 苏ICP备17056320号-4
地址: EMAIL:29059245@qq.com