etl工程师岗位职责【优秀5篇】

好文档，供参考1/6etl工程师岗位职责【优秀5篇】【题记】这篇精编的文档“etl工程师岗位职责【优秀5篇】”由三一刀客最“美丽、善良”的网友上传分享，供您学习参考使用，希望这篇文档对您有所帮助，喜欢就下载分享吧！etl工程师岗位职责【第一篇】职责描述：1、负责大数据平台的设计以及开发工作，维护升级等等；2、负责离线/实时的数据存储和加工处理，保证数据质量，负责数据监体系的建立和维护；2、负责海量数据的清洗、处理和挖掘工作，支持数据分析师和算法工程师的数据需求；3、对数据敏感，基于海量数据进行业务分析，灵活运用可视化工具，参与产品与应用的数据研发，分析数据成因，发掘数据商业价值；4、研究前沿技术，解决实际场景中的业务问题，优化离线/实时大数据计算任务的性能。任职要求：1、计算机或相关专业本科及以上学历，3年以上大数据开发经验；2、熟悉linux/unix开发环境，精通好文档，供参考2/6python/java/scala/shell两种以上；3、熟悉常用开源分布式系统，对hadoop/hive/spark/storm/flink/hbase/kylin中的一项或多项有深入了解；,能够独立排查及解决分布式系统的`问题；4、良好的团队精神和合作意识，强烈的责任心，对工作有激情，良好的沟通能力，能吃苦耐劳；5、有2年以上的电商领域的优先。etl工程师岗位职责【第二篇】职位描述：职责：1、按业务分析需求进行建模；2、进行数据仓库需求分析、方案设计、etl装载过程设计；3、从业务数据库到数据仓库的etl开发；4、结合业务流程和需求进行数据分析；任职资格：1、本科以上学历，计算机等信息技术相关专业；2、有互联网金融相关工作经验，了解相关数据流和业务背景优先；3、两年及以上数据仓库相关工作经验，对数据仓库系统架构具有良好的认识，熟悉数据仓库相关技术，如etl、报表好文档，供参考3/6开发，具备数据分析技术并具有相关项目经验；4、具有hive、spark、mysql、oracle等至少一种大型数据库的应用开发经验，熟悉数据标准管理、元数据管理、数据质量管理；5、具备python统计和数据挖掘相关基本开发能力；6、沟通能力好，善于规划和总结，注重团队合作及知识共享，能承担一定的`工作压力；etl工程师岗位职责【第三篇】岗位职责：1、根据概要设计，进行详细设计的文档编写；2、负责etl过程的'设计/开发实施、单元测试；3、负责项目中etl相关需求调研、源数据调研、整体设计；4、负责项目中环境安装及配置；5、维护和升级现有etl任务和存储过程，快速定位并修复现有系统缺陷。职位要求：1、大专及以上学历，计算机相关专业，3年以上etl工作经验。2、熟悉etl开发流程，有hadoop和etl工作经验；有从传统数据库抽取数据到hive数据仓库经验，了解sqoop应用好文档，供参考4/6原理者优先。3、熟悉主流数据库sqlserver、oracle、db2、mysql等；熟悉开源的etl工具。4、有海量数据处理工作经验，数据分析和挖掘经验者优先；5、做过数据仓库、ods项目，对数据治理、数据标准及元数据有很好理念及实施经验的优先；6、熟练使用脚本语言：如perl、python、shell等任意一种以上；7、熟悉linux系统指令和性能优化；8、善于学习新技术，对新技术有较强的接受能力；工作认真细致，愿意于人交流沟通。9、有大型数据仓库系统研发、设计经验者优先；10、熟悉java语言或hadoop技术者优先；岗位要求：学历要求：大专语言要求：不限年龄要求：不限工作年限：3-4年经验etl工程师岗位职责【第四篇】职位描述：好文档，供参考5/6工作职责：1、根据公司数据分析需求进行基于hadoop平台的项目开发；2、根据需求进行数据仓库模型设计，熟练使用kettle工具进行etl程序的`开发；包括实时数据加工，计算，etl，管理，监控等；3、负责针对源系统进行数据抽取、处理、分析等相关工作，及项目中涉及到的数据库创建、维护及提供数据接口工作；4、负责设计并优化基于hive的数据仓库的建设；5、制定数据库备份和恢复策略及工作流程与规范。6、能出具消费品品牌制造行业应用的数据分析技术解决方案，并落地。任职资格：1、从事数据仓库领域至少2年以上，熟悉数据仓库模型设计与etl开发经验，具备海量数据加工处理相关经验；2、熟悉数据仓库领域知识和技能者优先，包括但不局限于：元数据管理、数据开发测试工具与方法、数据质量、主数据管理；3、有从事分布式数据存储与计算平台应用开发经验，熟悉hadoop生态相关技术并有相关实践经验着优先，重点考察hive、hdfs、hbase;4、熟练掌握kettlesqoop、datax、airflow等；好文档，供参考6/65、有消费品品牌制造、零售行业经验，尤其快消品行业和财务领域数据项目经验者优先；6、熟悉分布式计算presto/imapa优先；7、有实时计算方面的经验的优先。etl工程师岗位职责【第五篇】职位描述：1、负责数据仓库/数据集市etl设计开发；2、负责与业务部门数据需求的沟通与确认；任职资格：1、三以上工作经验；2、熟悉主流etl开发工具，如：ssis、kettle、datastage等；3、熟练掌握主流数据库的`使用，如：sqlserver、mysql、oracle,对sql查询优化有丰富的经验；4、熟悉主流报表工具，如：tableau、powerbi、cognos;5、良好的沟通技能，清晰的逻辑思维能力；6、工作认真仔细，积极主动，具备较强的自主学习、自我总结能力。