数据仓库工程师的具体职责文本
数据仓库工程师的具体职责文本
数据仓库工程师需要完善和梳理数据指标体系,完成和维护数据字典的工作。以下是学习啦小编整理的数据仓库工程师的具体职责文本。
数据仓库工程师的具体职责文本1
Responsibility
1、负责建设数据仓库架构,包括元数据管理、ETL调度、数据集成、OLAP等子系统的设计和开发;
2、制定和推广数据字典,建立完善的元数据管理规范,负责数据质量监控设计;
3、搭建和维护数据仓库表,解决业务人员在仓库系统流程、工具使用、数据处理等遇到的问题;
4、深入了解网易游戏、CC直播、藏宝阁、网易大神等业务,负责数据仓库和其它业务系统接口。
5、基于对数据的理解和业务需求,对数据进行整理、分析和用户画像搭建。
Requirements
1、计算机相关专业本科及以上学历,有2年以上数据仓库、ETL工作经验;
2、熟悉SQL、Shell等相关技术,有海量数据处理、ETL及任务调度优化、数据仓库建模等经验;
3、熟悉Linux环境,了解Java/Python服务端系统开发;
4、熟悉Hadoop/Spark/Hive/Hbase/Kafka/Flume等大数据技术者优先;
5、逻辑清晰、对数据敏感,良好的沟通能力和协作能力,敢于接受挑战,能够承受压力;
数据仓库工程师的具体职责文本2
职责:
1、学习并理解励步云学***业务及系统,根据业务部门需求对公司各项业务数据进行统计分析,出具相关报表;
2、进行数据仓库设计、模型开发、数据质量校验,报表开发;
3、进行数据差异分析,找出统计口径、数据错误、操作错误等造成的差异原因;
4、进行数据查询优化,解决跑数性能问题。
任职资格:
1、本科以上学历,数学、统计、计算机相关专业优先;
2、3年以上互联网相关行业数据开发经验;
3、精通数据仓库建设思路,并有相关实施经验,特别是通用汇总层建设经验;
4、较强的数据开发能力,熟悉Hadoop相关技术,深刻理解MapReduce原理和过程;
5、精通Hive SQL,进行数据处理及模型开发;
6、有较强的学习能力,能快速学习和理解业务知识及数据需求;
数据仓库工程师的具体职责文本3
职责:
1、负责数据仓库(HADOOP)ETL工作以及数据运营;
2、负责数据产品的业务需求梳理、数据开发以及维护;
3、负责数据仓库的维度建模以及设计相关的脚本调度;
4、负责维度模型的数据处理的脚本开发,程序开发以及接口对接。
职位要求:
1. 本科以上学历,信息管理、计算机相关专业,两年以上ETL、数据仓库和大数据相关经验;
2. 熟悉数据仓库架构,了解HADOOP等大数据平台;
3. 有ORACLE\DB2等大型的数据仓库的开发经验;
4. 能够用HIVE的SQL,HADOOP的MAPREDUCE和SPARK去处理数据;
5. 熟悉关系数据库,并有HIVE的SQL的开发经验;
6. 熟悉Linux的shell编程;
7. 有银行和运营商相关的大数据或者数据仓库相关经验的优先
8. 热爱技术工作,具有较强的团队协作意识,数据安全意识;
9. 工作严谨、责任心强,能承受工作压力。
数据仓库工程师的具体职责文本4
职责:
1、负责大数据平台搭建及数据仓库建模;
2、负责数据库管理及数据优化;
3、利用大数据相关技术实现对数据的分析、挖掘、处理、及数据可视化等相关工作;
4、维护大数据平台并能解决相关问题, 保障平台正常运行;
5、学习和研究新技术以满足系统需求。
任职资格:
1、本科及以上学历,计算机、通信等相关专业;
2、有相关工作经验者优先;
3、对互联网产品有见解,关注前沿技术,有较强的学习能力、分析能力和动手能力;
4、熟悉Linux操作系统及ORACLE、MySQL及MongoDB等数据库,了解SQL优化,熟悉ER模型和相关数据建模技术,能够熟练使用Java或Python、SHELL;
5、熟悉Hadoop的体系架构和运行原理,有大数据处理方面经验
6、具有大型数据仓库和ETL开发、HIVE经验优先
7、个性乐观开朗,沟通能力强,具备良好的团队协作精神,能利用自身技术能力提升团队整体研发效率。
数据仓库工程师的具体职责文本5
职责:
1、参与数据仓库建设,负责数据仓库模型设计;
2、开发高质量可扩展的底层数据仓库体系;
3、负责数据仓库系统与业务系统的接口设计和确认工作;
4、负责数据平台相关的管理工作,如数据研发规范、数据质量及稳定性保证等建设;
5、参与公司各个业务线BI、数据产品与应用的数据研发,发觉数据潜在价值。
岗位要求:
1.大学本科及以上学历,计算机、经济、金融、数学专业背景,有3年以上工作经验;
2.熟悉数据仓库建模理论,以及数仓数据层级关系,具备大型数仓逻辑模型和物理模型设计经验;
3.熟悉一种ETL开发工具(sqoop,datax等), 熟悉ETL开发实施流程和原理;
4.掌握CDH版的hadoop环境,掌握hiveQL,有调优经验;
5.有一定的编程语言基础,不限制于java,python,shell等;
6.有元数据管理、数据质量管理工作经验的优先考虑;
7.工作认真,负责,仔细,有良好的团队合作精神。
相关文章: