数据仓库工程师的岗位职责表述
数据仓库工程师的岗位职责表述
数据仓库工程师负责大数据应用类项目的设计和交付,能独立和客户对接业务,并编写需求文档、模型设计文档。以下是学习啦小编整理的数据仓库工程师的岗位职责表述。
数据仓库工程师的岗位职责表述1
职责:
1. 利用数据仓库建模及相关技术,参与数据仓库模型的设计。
2. 参与企业级大数据仓库项目的落地开发。
3. 参与企业级主数据管理项目的实施落地。
4. 利用hadoop生态相关技术,负责大数据中心的数据处理流程,包括数据清洗、融合、统计、挖掘等。
任职要求
1. 熟悉数据仓库产品,对数据处理、维度建模、数据分析等有深刻认识,具备数据仓库架构设计、模型设计、ETL设计的相关经验、熟悉数据仓库架构,熟悉数据仓库项目的实施流程,有一个以上企业级数据仓库项目设计经验者优先;
2. 熟悉数据治理及主数据管理的理论知识,掌握主数据管理项目的实施方法和落地过程,至少参与过一个主数据管理项目的实施落地。
3. 精通JAVA、Python等编程语言;精通Oracle、Mysql等主流数据库,精通SQL;
4. 具备基于Hadoop大数据平台开发经验,熟悉hadoop生态体系,熟悉Hadoop、Hbase、Hive,Spark,Impala等常用组件,进行常用的ETL开发工作;
5. 熟悉常用的数据分析及数据挖掘方法及实现;
6. 具备较强的代码能力,有较强的数据分析能力;具备优秀的沟通能力、学习能力;
7. 相关专业硕士以上学历,或本科学历相关工作经验超过2年,具有智能制造领域相关经验或背景者优先,能力突出者可适当放宽要求。
数据仓库工程师的岗位职责表述2
职责:
1、负责制定数据仓库平台技术体系架构、数据架构及规范;
2、负责设计和实施公司业务数据的实时/离线数据ETL架构方案;
3、负责调度架构设计与开发;
4、负责数据仓库平台运维以及日常数据运营等管理;
5、负责关键技术攻关;
岗位要求:
1、计算机、数学、统计等相关专业本科及以上学历,3年以上数据仓库项目开发经验,参与过数据仓库架构设计,对ETL开发流程、调度架构有深入理解;
2、精通mysql等数据库,丰富的SQL性能调优经验;
3、熟练使用Java、Shell等脚本语言;
4、熟悉数据治理理论,数据质量、元数据管理流程和方法;
5、了解Hadoop/Hive/HBase/Spark/Storm等技术及其生态圈;
6、沟通能力好、责任心强,具有良好的团队合作精神和敬业精神;
数据仓库工程师的岗位职责表述3
职责:
1、负责建设数据仓库架构,包括元数据管理、ETL调度、数据集成、OLAP等子系统的设计和开发;
2、搭建和维护数据仓库表,解决业务人员在仓库系统流程、工具使用、数据处理等遇到的问题;
3、基于对数据的理解和业务需求,对数据进行整理、分析和挖掘。
任职资格:
1、做事耐心,有强烈的责任心;
2、计算机,数学,统计学相关专业本科及以上学历,
3、熟悉主流的关系型数据库及MPP数据库,至少精通一门数据库,熟悉Gbase优先;
4、熟练使用SQL语言,具有2年及以上数据仓库、报表系统等ETL开发、维护经验;
5、熟悉Hadoop/Spark/Hive/Hbase等大数据技术者优先;
6、逻辑清晰、对数据敏感,良好的沟通能力和协作能力,敢于接受挑战,能够承受压力;
7、有公安相关业务经验者优先考虑。
数据仓库工程师的岗位职责表述4
职责:
1.负责业务的数仓\数据集市的建设,能提炼通用需求,数仓标准,实现高质量的数据互通共享
2.对海量数据进行统计与分析,产品效果评估与分析,为产品策略优化迭代提供强有力的数据支持
3.和业务团队紧密合作推动数据产品与服务的落地,具备良好的沟通协调能力
任职要求:
1.计算机 数学 统计, 金融等相关专业的本科或以上学历;从事数仓领域至少3年以上,具备海量数据的DW模型设计与ETL开发经验 2.熟悉数仓领域知识, 包括但不局限于:数据质量,元数据管理,主数据管理,数据开发测试工具与方法;
3.掌握Greenplum,Oracle,Teradata,Mysql 等至少一种,灵活运用SQL实现海量数据ETL加工处理;有Greenplum经验优先
4.具有数据仓库相关开发经验,如ETL,建模,BI,数据产品等,熟悉数仓模型
5.掌握一门或多门开发语言,不限于java/python/scala等,熟悉Linux/Unix 平台上的开发环境
6、主导过大型数据仓库架构或模型设计经验者优先;
7、较好的沟通理解能力,性格乐观,态度踏实,积极上进;
数据仓库工程师的岗位职责表述5
职责:
1. 负责数据ETL开发,根据数仓层级结构及主题域划分,规范清洗代码,提供准确数据
2. 负责数据质量治理,发现异常业务逻辑或数据质量问题,推动业务优化及改善。
3. 负责数据开发需求评审、结合数据分析体系制定ETL清洗方案;
任职要求:
1. 一年以上数据仓库ETL设计及开发经验,有BI经验者优先
2. 熟练使用 SQL,熟悉HQL常用内部函数,有一定的 HQL性能调优经验优先
3. 具备数据仓库架构设计、模型设计、ETL设计,调度的相关经验优先;
4. 对数据敏感,有较强数据分析和解决问题能力;
5. 积极沟通,主动了解业务需求,愿意尝试新的技术领域。
相关文章: