etl工程师岗位职责【优秀5篇】

整理文档很辛苦,赏杯茶钱您下走!

免费阅读已结束,点击下载阅读编辑剩下 ...

阅读已结束,您可以下载文档离线阅读编辑

资源描述

好文档,供参考1/6etl工程师岗位职责【优秀5篇】【题记】这篇精编的文档“etl工程师岗位职责【优秀5篇】”由三一刀客最“美丽、善良”的网友上传分享,供您学习参考使用,希望这篇文档对您有所帮助,喜欢就下载分享吧!etl工程师岗位职责【第一篇】职责描述:1、负责大数据平台的设计以及开发工作,维护升级等等;2、负责离线/实时的数据存储和加工处理,保证数据质量,负责数据监体系的建立和维护;2、负责海量数据的清洗、处理和挖掘工作,支持数据分析师和算法工程师的数据需求;3、对数据敏感,基于海量数据进行业务分析,灵活运用可视化工具,参与产品与应用的数据研发,分析数据成因,发掘数据商业价值;4、研究前沿技术,解决实际场景中的业务问题,优化离线/实时大数据计算任务的性能。任职要求:1、计算机或相关专业本科及以上学历,3年以上大数据开发经验;2、熟悉linux/unix开发环境,精通好文档,供参考2/6python/java/scala/shell两种以上;3、熟悉常用开源分布式系统,对hadoop/hive/spark/storm/flink/hbase/kylin中的一项或多项有深入了解;,能够独立排查及解决分布式系统的`问题;4、良好的团队精神和合作意识,强烈的责任心,对工作有激情,良好的沟通能力,能吃苦耐劳;5、有2年以上的电商领域的优先。etl工程师岗位职责【第二篇】职位描述:职责:1、按业务分析需求进行建模;2、进行数据仓库需求分析、方案设计、etl装载过程设计;3、从业务数据库到数据仓库的etl开发;4、结合业务流程和需求进行数据分析;任职资格:1、本科以上学历,计算机等信息技术相关专业;2、有互联网金融相关工作经验,了解相关数据流和业务背景优先;3、两年及以上数据仓库相关工作经验,对数据仓库系统架构具有良好的认识,熟悉数据仓库相关技术,如etl、报表好文档,供参考3/6开发,具备数据分析技术并具有相关项目经验;4、具有hive、spark、mysql、oracle等至少一种大型数据库的应用开发经验,熟悉数据标准管理、元数据管理、数据质量管理;5、具备python统计和数据挖掘相关基本开发能力;6、沟通能力好,善于规划和总结,注重团队合作及知识共享,能承担一定的`工作压力;etl工程师岗位职责【第三篇】岗位职责:1、根据概要设计,进行详细设计的文档编写;2、负责etl过程的'设计/开发实施、单元测试;3、负责项目中etl相关需求调研、源数据调研、整体设计;4、负责项目中环境安装及配置;5、维护和升级现有etl任务和存储过程,快速定位并修复现有系统缺陷。职位要求:1、大专及以上学历,计算机相关专业,3年以上etl工作经验。2、熟悉etl开发流程,有hadoop和etl工作经验;有从传统数据库抽取数据到hive数据仓库经验,了解sqoop应用好文档,供参考4/6原理者优先。3、熟悉主流数据库sqlserver、oracle、db2、mysql等;熟悉开源的etl工具。4、有海量数据处理工作经验,数据分析和挖掘经验者优先;5、做过数据仓库、ods项目,对数据治理、数据标准及元数据有很好理念及实施经验的优先;6、熟练使用脚本语言:如perl、python、shell等任意一种以上;7、熟悉linux系统指令和性能优化;8、善于学习新技术,对新技术有较强的接受能力;工作认真细致,愿意于人交流沟通。9、有大型数据仓库系统研发、设计经验者优先;10、熟悉java语言或hadoop技术者优先;岗位要求:学历要求:大专语言要求:不限年龄要求:不限工作年限:3-4年经验etl工程师岗位职责【第四篇】职位描述:好文档,供参考5/6工作职责:1、根据公司数据分析需求进行基于hadoop平台的项目开发;2、根据需求进行数据仓库模型设计,熟练使用kettle工具进行etl程序的`开发;包括实时数据加工,计算,etl,管理,监控等;3、负责针对源系统进行数据抽取、处理、分析等相关工作,及项目中涉及到的数据库创建、维护及提供数据接口工作;4、负责设计并优化基于hive的数据仓库的建设;5、制定数据库备份和恢复策略及工作流程与规范。6、能出具消费品品牌制造行业应用的数据分析技术解决方案,并落地。任职资格:1、从事数据仓库领域至少2年以上,熟悉数据仓库模型设计与etl开发经验,具备海量数据加工处理相关经验;2、熟悉数据仓库领域知识和技能者优先,包括但不局限于:元数据管理、数据开发测试工具与方法、数据质量、主数据管理;3、有从事分布式数据存储与计算平台应用开发经验,熟悉hadoop生态相关技术并有相关实践经验着优先,重点考察hive、hdfs、hbase;4、熟练掌握kettlesqoop、datax、airflow等;好文档,供参考6/65、有消费品品牌制造、零售行业经验,尤其快消品行业和财务领域数据项目经验者优先;6、熟悉分布式计算presto/imapa优先;7、有实时计算方面的经验的优先。etl工程师岗位职责【第五篇】职位描述:1、负责数据仓库/数据集市etl设计开发;2、负责与业务部门数据需求的沟通与确认;任职资格:1、三以上工作经验;2、熟悉主流etl开发工具,如:ssis、kettle、datastage等;3、熟练掌握主流数据库的`使用,如:sqlserver、mysql、oracle,对sql查询优化有丰富的经验;4、熟悉主流报表工具,如:tableau、powerbi、cognos;5、良好的沟通技能,清晰的逻辑思维能力;6、工作认真仔细,积极主动,具备较强的自主学习、自我总结能力。

1 / 6
下载文档,编辑使用

©2015-2020 m.777doc.com 三七文档.

备案号:鲁ICP备2024069028号-1 客服联系 QQ:2149211541

×
保存成功