数据仓库工程师的主要职责.docx
《数据仓库工程师的主要职责.docx》由会员分享,可在线阅读,更多相关《数据仓库工程师的主要职责.docx(21页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、数据仓库工程师的主要职责数据仓库工程师的主要职责(精选16篇) 数据仓库工程师的主要职责 篇1 职责:1.建设公司级数据仓库,并依据业务改变持续迭代和优化;2.对业务数据进行梳理和抽象,建设数据仓库的数据模型;3.对业务数据进行采集、清洗、转换和存储;4.支撑BI、用户数据、用户运营、用户画像、房源数据、举荐系统等核心数据平台产品;5.探讨大数据前沿技术,不断持续优化大数据平台,为业务供应价值。任职资格:1.本科及以上计算机、统计学、数据库、机器学习等相关专业,5年以上数据相关工作;2.对业务数据有敏锐的理解实力,并能快速梳理和分析业务数据;3.娴熟驾驭SQL语言、熟识MySQL,对Shell
2、、Java(主要开发语言)、Python编程特别熟识;4.熟识常用的ETL技术和原则;精通数据仓库数据库设计规范和实操;5.熟识Hadoop、Hive、HBase、Spark、Storm等开源平台者优先;6.具有较强的分析和解决问题的实力,良好的学习实力和团队合作精神,追求价值实现,认同目标管理和灵敏。 数据仓库工程师的主要职责 篇2 职责:1.参加传统数仓和大数据数仓日常开发工作;2.参加大数据仓库设计、规划和开发;3.参加日常工作的优化,提出建设性看法;4.负责管理项目,负责板块内的资源协调、进度管理、交付管理;5.参加数据仓库、数据集市体系架构的设计、规划与开发, 参加大数据、ETL开发
3、,sql性能优化。任职要求:1.全日制本科,计算机等相关专业。3年以上数仓开发阅历,有银行、金融从业阅历者优先。2.2年以上项目管理阅历,具备PMP证书优先.3.熟识oracle/hive/spark,熟识数据处理和性能优化,有UDF自定义函数、MR开发阅历优先;4.熟识常用ETL工具,熟识常用的Linux指令,熟识shell/python随意一种脚本语言。 数据仓库工程师的主要职责 篇3 职责:1、负责制定数据仓库平台技术体系架构、数据架构及规范;2、负责设计和实施公司业务数据的实时/离线数据ETL架构方案;3、负责调度架构设计与开发;4、负责数据仓库平台运维以及日常数据运营等管理;5、负责
4、关键技术攻关;任职要求:1、5年以上数据仓库项目开发阅历,参加过数据仓库架构设计,对ETL开发流程、调度架构有深化理解;2、精通mysql、 oralce 、greenplum等至少一种数据库,丰富的SQL性能调优阅历;3、娴熟运用Java、Shell、Python、Perl等至少一种脚本语言;4、熟识数据治理理论,数据质量、元数据管理流程和方法;5、了解Hadoop/Hive/HBase/Spark/Storm等技术及其生态圈;6、沟通实力好、责任心强,具有良好的团队合作精神和敬业精神; 数据仓库工程师的主要职责 篇4 职责:1.负责企业级数据仓库设计、规划、建设、实施、管理,数据仓库架构设
5、计与数据开发,创建数据仓库、数据集市2.熟识数据仓库领域学问,从架构和技术层面参加建设数据仓库,包括元数据管理、数据质量、主数据管理、性能优化和调优。3.负责数据仓库平台相关数据管理工作,如研发规范、质量规范、保障规范的制定与推动实施落地4.协作和帮助数据分析/数据挖掘形成底层/中间层的业务逻辑切片任职资格:1. 本科或硕士以上学历,计算机工程相关专业2. 熟识大数据相关技术实力(Hadoop/MapReduce/Hive/Hbase等),娴熟进行数仓Hive建设和软件架构,较强的数据抽象实力3.精通SQL,具备海量数据处理和Hive/Spark性能调优阅历,3年以上大规模分布式数据仓库建设阅
6、历4.娴熟运用Druid/Kylin之一进行数据挖掘模型设计,娴熟驾驭Java/Scala之一,具备良好的coding素养和习惯,了解脚本语言,如Python、Shell等5.剧烈的责任心,工作看法主动主动,有较好的团队精神和沟通实力,工作细致仔细 数据仓库工程师的主要职责 篇5 职责:1、负责ETL开发、作业调度和数据平台建设2、负责数据仓库的设计、开发和优化,建立结构层次合理、敏捷可扩展的数据仓库3、设计并研发BI分析相关的数据产品4、结合对数据的理解和业务需求,对数据进行整理、分析和挖掘任职要求1、计算机相关专业本科及以上学历,有2年以上数据仓库、ETL工作阅历2、有海量数据处理、ETL
7、及作业调度优化、数据仓库建模等阅历3、熟识Linux、SQL、Python或Java、Shell脚本,有Hadoop/Hive/Spark/HBase/Kylin/Impala等大数据技术运用阅历4、逻辑清楚,对数据敏感,深化了解业务,具备自己独特的想法并能提出合理的建议 数据仓库工程师的主要职责 篇6 职责:1、负责公司业务部门的需求调研,收集、分析、整理产品需求,编写具体需求文档,跟踪需求在设计、编码和测试阶段的完成状况;2、基于业务的理解,开展数据分析,发掘数据价值,撰写数据分析报告和数据应用方案,为业务部门等供应数据支持;3、负责优化主数据管理流程及质量监控,跨部门合作横向沟通解决数据
8、质量问题;4、与相关团队协作为业务供应数据挖掘、模型及算法等相关服务,推动业务部门的数据化运营。任职资格:1、大专以上学历,2年以上数据管理或需求分析相关工作阅历,制造业或消费定制行业从业者佳;2、熟识产品设计的各种设计工具(MindManager、PPT、Visio等),了解需求用例的编制过程,有CRM、ERP、供应链阅历优先3、具有制造业中营销、供应链、产品企划、财务、人力等至少一个方面的行业阅历;4、对工作充溢热忱,富有创新精神,能承受较大的工作压力,优秀的理解分析实力、沟通合作和资源协调实力。 数据仓库工程师的主要职责 篇7 职责:1. 设计和搭建嬉戏服务器端的技术架构;2. 负责嬉戏
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 数据仓库 工程师 主要职责
限制150内