首页 > 办公 > 文秘 > 岗位职责 > 数据仓库工程师的工作职责(精选16篇)

数据仓库工程师的工作职责(精选16篇)

   来源:文书咖    阅读: 3.11W 次
字号:

用手机扫描二维码 在手机上继续观看

手机查看

数据仓库工程师的工作职责 篇1

职责

数据仓库工程师的工作职责(精选16篇)

1.负责数据ETL开发,优化ETL流程设计;

2.负责数据质量问题的分析、跟进、解决,进行数据质量监测、校验和提升;

3.负责ETL开发实施文档的编写;

4.负责梳理公司数据仓库/数据集市数据清单、数据映射关系,优化现有数据仓库模型;

5.完善和梳理数据指标体系,完成和维护数据字典的工作;

6.参与数据标准的制定、数据标准管理和数据安全管理工作;

7.参与公司大数据平台的建设,包括Sugar报表或神策接口配置,用户画像标签体系的开发等

任职要求:

1.有shell或Python脚本开发经验;

2.有传统数据库SQL Server和MySQL,有存储过程编写能力;

3.熟悉Hadoop生态相关技术并有相关实践经验,包括但不限于Sqoop、Hive、HBase、Kylin等开发经验;

4.有kettle、azkaban或oozie工作流调度经验;

5.熟悉Hive SQL或Flink SQL的开发;

6.有数据仓库模型设计,有使用kafka+Flink Streaming实时数据处理经验优先;

7.有Sugar、神策或Tableau使用经验,有用户画像或客户召回标签工作经验优先;

8.对数据挖掘和机器学习有所了解,包括常用的机器学习算法和数据建模过程的优先

数据仓库工程师的工作职责 篇2

职责:

1. 负责直播业务相关数据仓库的数据模型设计;

3. 参与数据仓库ETL流程设计、开发和优化,解决ETL过程相关技术问题;

3. 参与项目规划,数据采集设计,数据仓库开发,模型开发,报表开发等;

4. 总结数据仓库建模的方法,负责数据产品平台化和系统化;

任职资格:

1. 2年及以上的数据仓库/BI相关研发经验,对数据和业务敏感,有较好的数据模型设计能力;

2. 熟悉数据仓库各类模型建模理论,了解数据仓库数据分层架构,多维数据模型设计;

3. 熟练使用Hadoop/Spark/Hive/HBase/Mysql,有列式数据库/Kylin/ElasticSearch等经验者优先;

4. 有较强的编程能力和编程经验,至少熟悉Java/Scala/Python/PHP等其中一门编程语言;

5. 参与过大型数据仓库架构设计、模型设计、ETL设计,具备海量数据处理、性能调优经验;

6. 学习能力强,热衷开源技术,有团队观念,具备独立解决问题的能力;

数据仓库工程师的工作职责 篇3

职责:

1、负责数据源导入、清洗、集成等工作,优化ETL流程并解决ETL相关技术问题;

2、负责参与数据模型体系构建及数据主题设计和开发,数据仓库和业务数据集市的建设;

3、负责数据集市需求调研和需求分析;

4、基于阿里云Maxcompute,进行数据开发工作。

岗位要求:

1、3年或以上数据仓库开发和模型设计经验;

2、深入理解DW,BI相关的知识,包括:ETL、数据仓库、OLAP、多维数据模型等;

3、熟悉MapReduce、Hive原理;

4、精通SQL,能够熟练使用HiveSQL进行数据开发;

5、具有良好的团队协作精神和沟通能力,较强的逻辑思维,学习能力和解决问题的能力,可承担较大的工作压力;

6、熟悉阿里云大数据开发平台优先,如Maxcompute;

7、熟悉跨境电商及供应链业务优先。

数据仓库工程师的工作职责 篇4

职责:

1、 参与数据仓库及ETL基础架构规划、安全规划制定;

2、 负责数据仓库及ETL的开发、测试和优化,并及时解决相关技术问题;

3、 负责相关数据准确性验证及报表等日常维护;

4、 报表性能优化:对存在性能问题的数据报表进行优化;

5、 数据运维:及时处理线上问题;

6、 完成上级交代的其他工作。

岗位要求:

1.计算机相关专业本科及以上学历,2年以上ETL开发或数仓相关工作经验;

2.熟练使用Oracle、MySQL、PostgreSQL等主流数据库,具有较强的SQL编写、优化能力,熟悉存储过程编写;

3.熟悉数据仓库数据处理流程,有一定的数据建模能力;

4.具有良好的沟通理解能力,能根据业务提出的需求,快速理解并落地实施;

5.有Kettle、Greenplum开发经验者优先。

数据仓库工程师的工作职责 篇5

职责:

1. 负责数据仓库架构设计与开发

2. 根据业务调研,设计信息模型与数据模型,负责大数据建模、ETL、数据产品及平台的设计与开发

3. 满足业务数据需求,设计面向业务的数据集市模型

4. 需求的沟通与数据开发项目管理

5. 基于Hadoop生态的程序设计、开发和维护

岗位要求:

1.熟悉SQL语言,至少熟悉Oracle、MySQL、SQL sever一种及以上

2.精通数据库系统(Oracle、SQL、mysql等):精通熟悉Oracle数据库体系结构,基础扎实;精通熟悉DataGuardRAC等高可用技术,能顺利的配置和管理dataGuard;精通熟悉Oracle的备份与恢复技术;熟悉SQL和PLSQL,能编写日常维护需要的脚本

3. 从事过数仓逻辑模型、物理模型设计与实施等工作

4. 有使用Hive、Hbase、kettle等相关应用经验更佳

数据仓库工程师的工作职责 篇6

职责:

1. 文档编写:根据项目经理的要求,参与开发设计文档的编写,

2. 代码编写:根据项目需求 按时完成程序代码编写,

3. 代码测试:做好自己开发的单元测试或部分集成测试工作。

岗位要求:

1. 1到3年工作经验,计算机或相关专业大学本科及以上学历 ,

2. 熟悉postgresql MySQL mongodb等数据库基本操作,

3. 有较强的sql处理能力,

4. 熟练掌握linux常用命令,有shell脚本处理能力,

5. 有python基础能力优先,有数据实时处理能力优先。

数据仓库工程师的工作职责 篇7

职责:

1、税务系统数据按照甲方需求的分析、加工、查询、统计等;

2、BIEE报表前台展现工具的基础应用;

3、后台ORACLE数据库库表结构的维护优化;

4、ETL工具(ODI)的基础使用;

岗位要求

1、计算机相关专业本科学历,或有一年以上数据库相关工作经验专科学历;

2、较好的沟通、学习能力和团队协作精神;

3、熟练使用ORACLE等数据库相关技术;

4、熟练掌握PL/SQL等开发工具;

5、具有较强的问题分析和解决能力,能独立完成需求分析;

6、有大型数据库使用维护经验者优先;

7、责任心强,有较好的敬业精神,工作积极,有较强的自主学习能力;

8、有数据库工作经验者优先;

9、有税务行业、财务行业开发管理经验者优先;我们提供双休、生日礼金、 五险一金以及带薪年假,发展前景广阔。

数据仓库工程师的工作职责 篇8

1、熟悉国土调查生产作业的各项处理规范,并能够整体把控各项目执行过程;

2、能够独立带队开展三调成果内业数据核查工作;

3、科学制定工作计划,负责项目组任务分配,跟踪、检查项目组工作完成质量;

4、学习、发展新的测绘技术手段,不断完善生产工艺和技术创新,为提高项目生产效率提供技术支持。

数据仓库工程师的工作职责 篇9

1.负责公司各类模型(语音、计算机视觉、语义等)中某几项的模型训练、优化、测试等;

2.负责公司各类模型(语音、计算机视觉、语义等)所需数据的爬取、清洗、处理等;

3.协助完成研究中心的其他研发任务。

数据仓库工程师的工作职责 篇10

1. 负责来料检验员工作安排,提高工作效率;

2. 负责来料检验工作的规划和管理;

3. 对装配过程中出现的零件质量问题进行分析和跟踪处理;

4. 不断改进检验方法,提高来料检验质量;

5. 对供应商进行指导;

6. 负责来料检验员的培训。

数据仓库工程师的工作职责 篇11

1、负责电力营销业务需求分析及设计工作,可以独立完成电力营销业务需求调研、业务模型编制、需求说明书编制及制作业务需求原型等工作。

2、能够熟练及清晰的开展需求讲解,为开发人员概要设计和详细设计提供业务支持、及负责功能验收工作。

3、配合测试人员参与测试计划、测试用例、测试报告的编写、问题缺陷的发现及跟踪、用户手册编写等。

4、对系统需求变更进行影响分析,跟进批准后的需求变更在各个阶段的落实。

数据仓库工程师的工作职责 篇12

职责:

1、负责ETL开发、作业调度和数据平台建设

2、负责数据仓库的设计、开发和优化,建立结构层次合理、灵活可扩展的数据仓库

3、设计并研发BI分析相关的数据产品

4、结合对数据的理解和业务需求,对数据进行整理、分析和挖掘

任职要求

1、计算机相关专业本科及以上学历,有2年以上数据仓库、ETL工作经验

2、有海量数据处理、ETL及作业调度优化、数据仓库建模等经验

3、熟悉Linux、SQL、Python或Java、Shell脚本,有Hadoop/Hive/Spark/HBase/Kylin/Impala等大数据技术使用经验

4、逻辑清晰,对数据敏感,深入了解业务,具备自己独特的想法并能提出合理的建议

数据仓库工程师的工作职责 篇13

职责:

主动与用户进行业务需求沟通,准确理解客户需求,协助客户进行需求提出及分类,进行新需求维护;能及时的处理并解决用户反馈的业务问题或需求;

主动与用户建立并保持良好的沟通,与项目组其他成员(开发/测试人员等)进行良好的沟通;

按要求编写出高质量需求规格说明书;

协调组织相关客户及项目成员,按要求进行需求评审,协助各相关干系人准确理解客户的真实需求;

管理需求变更,跟踪需求使用情况。

岗位要求:

本科以上学历,计算机、软件工程、信息管理相关专业优先考虑;

3年以上软件需求分析工作经验,完成过至少2个项目的需求分析、交互设计,原型设计的工作;

掌握visio/axure等原型及流程设计工具,具备较强的需求分析和文档撰写能力,具备较强的逻辑思维能力;

有RPA(机器人流程自动化)项目经验的优先考虑;

具有良好的英语听说读写能力的优先考虑。

数据仓库工程师的工作职责 篇14

职责:

1、驻点项目,负责机房所有服务器(机架式,刀箱及塔式)和存储设备的日常维护。

2、负责虚拟化平台的管理及运维,并持续优化;

3、负责运维项目windows、linux、unix、aix系统的管理及运维;

4、协助运维项目服务器、存储、SAN网络的建设、管理及运维;

5、负责基本服务的日常维护。(DNS,DHCP,SAMBA,FTP和Mdaemon邮件等服务)

6、定期对系统和WEB应用做安全扫描,提供扫描报告和总结。对一些入侵或者其他安全事件提供技术支持和防御建议。

任职要求:

1、25~35岁,计算机相关专业统招本科及以上学历,3年以上服务器、存储及灾备系统建设管理经验;通过VMWARE VCP认证,能力较强者可适当放宽条件;

2、熟悉服务器、存储、SAN网络管理;有IBM、netapp存储运维经验者优先;对网络技术感兴趣,能自觉查找相关学习资料或故障手册;

3、掌握linux运维管理;具有IBM、oracle小型机运维;经验、熟悉AIX、solaris者优先;能独立搭建实验环境模拟现网;

数据仓库工程师的工作职责 篇15

1.根据产品前段设计线路或文件要求,按照工艺设计规则、设计产品的版图;

2.对产品版图进行规则检查,电路与版图匹配检查;

3.完成用于生产加工的产品最终设计。

数据仓库工程师的工作职责 篇16

1、参与产品调试及验证过程,协助完成产品调试说明书等生产调试文档,做好产品从科研到生产的衔接工作;

2、协助工程师,对产品在研制过程中出现的问题进行分析,并协同解决;

3、协助生产调试人员,完成产品的生产相关工作;

4、完成领导安排的其它工作。

秘书基础
写作指导
规章制度
谈判技巧
外贸信函
工商税务
新闻报道
个人写作