数据仓库工程师的主要职责

时间:2024-09-20 20:38:38 来源:风铃百科 作者:管理员
数据仓库工程师的主要职责

职责:

负责企业级数据仓库设计、规划、建设、实施、管理,数据仓库架构设计与数据开发,创建数据仓库、数据集市

熟悉数据仓库领域知识,从架构和技术层面参与建设数据仓库,包括元数据管理、数据质量、主数据管理、性能优化和调优。

负责数据仓库平台相关数据管理工作,如研发规范、质量规范、保障规范的制定与推动实施落地

配合和协助数据分析/数据挖掘形成底层/中间层的业务逻辑切片

任职资格:

本科或硕士以上学历,计算机工程相关专业

熟悉大数据相关技术能力(Hadoop/MapReduce/Hive/Hbase等),熟练进行数仓Hive建设和软件架构,较强的数据抽象能力

精通SQL,具备海量数据处理和Hive/Spark性能调优经验,3年以上大规模分布式数据仓库建设经验

熟练使用Druid/Kylin之一进行数据挖掘模型设计,熟练掌握Java/Scala之一,具备良好的coding素养和习惯,了解脚本语言,如Python、Shell等

强烈的责任心,工作态度积极主动,有较好的团队精神和沟通能力,工作细致认真


同级分类