首页 > 工作职场 > 岗位职责

etl工程师岗位职责【优秀8篇】

发布时间

在当今社会生活中,接触到岗位职责的地方越来越多,岗位职责是一个具象化的工作描述,可将其归类于不同职位类型范畴。到底应如何制定岗位职责呢?差异网为您精心收集了8篇《etl工程师岗位职责》,希望朋友们参阅后能够文思泉涌。

etl工程师岗位职责 篇一

职责描述:

1、负责数据仓库建模和etl技术工作,参与数据项目各类数据源etl的`接口设计和文档、流程规范;

2、负责项目中数据清洗、数据处理、数据校验相关开发工作;

3、配合使用主流数据挖掘工具、etl工具、bi展现的设计和开发;

4、能够按照公司全面质量管理的要求,高质量地完成各类技术支持工作。

任职要求:

1、计算机相关专业本科以上学历,3年以上工作经验;

2、熟悉etl开发、数据仓库设计流程,熟悉mysql、oracle,mssqlserver等主流数据库,表结构设计,存储过程编写;

3、有一定的sql调优知识和经验,具有bi相关知识;

4、有hana、hive经验优先;

5、具备财务基础知识或者erp基础知识者优先;

etl工程师岗位职责 篇二

岗位职责:

1、根据概要设计,进行详细设计的文档编写;

2、负责etl过程的'设计/开发实施、单元测试;

3、负责项目中etl相关需求调研、源数据调研、整体设计;

4、负责项目中环境安装及配置;

5、维护和升级现有etl任务和存储过程,快速定位并修复现有系统缺陷。

职位要求:

1、大专及以上学历,计算机相关专业,3年以上etl工作经验。

2、熟悉etl开发流程,有hadoop和etl工作经验;有从传统数据库抽取数据到hive数据仓库经验,了解sqoop应用原理者优先。

3、熟悉主流数据库sqlserver、oracle、db2、mysql等;熟悉开源的etl工具。

4、有海量数据处理工作经验,数据分析和挖掘经验者优先;

5、做过数据仓库、ods项目,对数据治理、数据标准及元数据有很好理念及实施经验的优先;

6、熟练使用脚本语言:如perl、python、shell等任意一种以上;

7、熟悉linux系统指令和性能优化;

8、善于学习新技术,对新技术有较强的接受能力;工作认真细致,愿意于人交流沟通。

9、有大型数据仓库系统研发、设计经验者优先;

10、熟悉java语言或hadoop技术者优先;

岗位要求:

学历要求:大专

语言要求:不限

年龄要求:不限

工作年限:3-4年经验

etl工程师岗位职责 篇三

职位描述:

职责:

1、按业务分析需求进行建模;

2、进行数据仓库需求分析、方案设计、etl装载过程设计;

3、从业务数据库到数据仓库的etl开发;

4、结合业务流程和需求进行数据分析;

任职资格:

1、本科以上学历,计算机等信息技术相关专业;

2、有互联网金融相关工作经验,了解相关数据流和业务背景优先;

3、两年及以上数据仓库相关工作经验,对数据仓库系统架构具有良好的认识,熟悉数据仓库相关技术,如etl、报表开发,具备数据分析技术并具有相关项目经验;

4、具有hive、spark、mysql、oracle等至少一种大型数据库的应用开发经验,熟悉数据标准管理、元数据管理、数据质量管理;

5、具备python统计和数据挖掘相关基本开发能力;

6、沟通能力好,善于规划和总结,注重团队合作及知识共享,能承担一定的`工作压力;

etl工程师岗位职责 篇四

职位描述:

工作职责:

1、根据公司数据分析需求进行基于hadoop平台的项目开发;

2、根据需求进行数据仓库模型设计,熟练使用kettle工具进行etl程序的`开发;包括实时数据加工,计算,etl,管理,监控等;

3、负责针对源系统进行数据抽取、处理、分析等相关工作,及项目中涉及到的数据库创建、维护及提供数据接口工作;

4、负责设计并优化基于hive的数据仓库的建设;

5、制定数据库备份和恢复策略及工作流程与规范。

6、能出具消费品品牌制造行业应用的数据分析技术解决方案,并落地。

任职资格:

1、从事数据仓库领域至少2年以上,熟悉数据仓库模型设计与etl开发经验,具备海量数据加工处理相关经验;

2、熟悉数据仓库领域知识和技能者优先,包括但不局限于:元数据管理、数据开发测试工具与方法、数据质量、主数据管理;

3、有从事分布式数据存储与计算平台应用开发经验,熟悉hadoop生态相关技术并有相关实践经验着优先,重点考察hive、hdfs、hbase;

4、熟练掌握kettlesqoop、datax、airflow等;

5、有消费品品牌制造、零售行业经验,尤其快消品行业和财务领域数据项目经验者优先;

6、熟悉分布式计算presto/imapa优先;

7、有实时计算方面的经验的优先。

etl工程师岗位职责 篇五

岗位职责:

1、数仓开发、etl开发;

2、银行业数据模型的设计辅助、mapping和落地等;

3、shell脚本开发维护;

4、银行业务系统的数据调研和分析。

任职要求:

1、本科及以上学历,计算机或相关专业;

2、2年以上oracle、db2等数据库开发经验,熟悉数据库体系结构;

3、精通pl/sql编程,精通存储过程开发;

4、熟悉linux操作系统;

5、熟悉etl调度工具和前端工具;

6、软件基础理论知识扎实,具备良好的'数据结构、算法功底,有一定独立分析、技术研究能力;

7、良好的沟通能力、团队合作精神、乐于;

8、具备较强的自学能力,有一点抗压能力,能够接受出差性质的工作。

如有以下技术背景优先考虑:

1、有银行业系统开发经验;

2、参与过数仓项目开发、实施;

3、有数据治理项目经验的。

etl工程师岗位职责 篇六

1、5年以上做bi、数据仓库etl开发方向,行业不限;

2、过去做北京汽车项目;

3、英语能基本读写;

4、开发经验丰富,能迅速完成交办相关工作;

5、沟通能力良好,具备团队合作精神,能适应一定压力开展工作。1年以上做bi、数据仓库etl开发方向,行业不限;

2、过去做北京汽车项目;

3、英语能基本读写;

4、开发经验丰富,能迅速完成交办相关工作;

5、沟通能力良好,具备团队合作精神,能适应一定压力开展工作。

etl工程师岗位职责 篇七

工作职责:

1、独立完成产品的原型设计及最终视觉输出(APP、WEB、WAP),把握视觉设计整体方向;

2、具有APP、WEB端设计经验,持续优化界面,提出设计改善方案;

3、熟练使用Photoshop、Illustrator、CorelDRAW、Axure等必备专业软件;

4、熟练Android和IOS的平台特性及设计、开发适配工作;

5、能够积极配合研发人员对页面布局及样式进行调整;

6、善于沟通,具备良好的团队合作精神,能够承受较大的工作压力;

7、了解Html、CSS+DIV、JavaScript等。

任职要求:

1、本科及以上学历,美术、设计或相关专业(条件优秀者可放宽学历及专业限制)

2、2年以上web或移动APP界面设计经验,可以独立完成整个设计过程

3、精通Photoshop、Illustrator、Dreamweaver等软件,了解Justinmind、Axure等原型设计工具

4、熟悉windows、Android等平台的界面设计规范,了解Html、CSS、Javascript等

5、具备良好的`沟通交流、团队协作能力,工作主动、富有激情和责任感,能承受工作压力

6、有自己独立完成设计作品或优秀的应用于主流网站的设计案例者优先

etl工程师岗位职责 篇八

职责描述:

1、负责数据仓库建模,业务数据集市建设开发

2、负责数据仓库etl流程的优化及解决etl相关技术问题、etl流程监控,保障数据平台架构稳定性

3、建立数据分析指标体系,不断完善指标体系和分析模型;

4、通过专项分析,输出专项分析报告

5、负责数据分析相关需求和数据测试的工作

任职要求:

学历要求:

全日制统考类本科及以上学历,计算机、通信、电子、软件工程、统计学、应用数学、数据分析等相关专业

专业技能:

1、熟悉数据仓库各类模型建模理论,熟悉数据仓库数据分层架构和多维数据模型设计;

2、丰富的数据分析经验,熟练掌握sql、hql、sparksql,擅长运用其分析并完成复杂业务数据查询

3、掌握至少一种数据库开发技术:mysql/oracle/db2等,灵活运用sql实现海量数据etl加工处理;

4、熟悉hadoop生态(如:hdfs/mapreduce/hive/hbase等),并有相关实践经验;

5、熟练掌握一门或多门编程语言(如:python/shell/java/c++等),并有大型项目建设经验者优先;

素质:

1、敏锐的数据观察和分析能力,及时发现和分析其中隐含的变化和问题并给出建议;

2、良好的沟通能力和团队精神,较强的`学习能力,能承担一定的工作压力。

经验:

至少2年以上数据仓库(离线&实时)模型设计开发、etl设计开发的相关经验,有通信运营商o域/b域大数据、智慧城市大数据的数据仓库、etl设计研发经验者优先

上面内容就是差异网为您整理出来的8篇《etl工程师岗位职责》,希望可以启发您的一些写作思路,更多实用的范文样本、模板格式尽在差异网。

热点范文

最新范文

339 175632