2023年大数据技术岗位职责篇.docx

《2023年大数据技术岗位职责篇.docx》由会员分享，可在线阅读，更多相关《2023年大数据技术岗位职责篇.docx（17页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、2023年大数据技术岗位职责篇 书目 第1篇大数据技术架构专家岗位职责职位要求 第2篇大数据平台技术经理岗位职责 第3篇大数据技术开发岗职位描述与岗位职责任职要求 第4篇架构师/技术专家（云平台、大数据方向）职位描述与岗位职责任职要求 第5篇大数据技术经理岗位职责 第6篇大数据技术经理岗位职责任职要求 第7篇大数据技术总监职位描述与岗位职责任职要求 第8篇大数据技术经理职位描述与岗位职责任职要求 第9篇实时大数据研发工程师/数据技术专家（p6-p8）职位描述与岗位职责任职要求 第10篇高级实时大数据研发工程师/数据技术专家职位描述与岗位职责任职要求 大数据技术经理职位描述与岗位职责任职要求 职

2、位描述： 岗位职责： 1，管理项目团队整体技术，依据业务需求分析实施方案和数据计算 2，指导团队成员， 负责项目团队成员的建设和管理 3，负责完成项目相关技术的方案设计，参加团队项目代码评审 4，规划项目团队的大数据技术体系和团队成员技术成长 职位要求： 1，本科及以上学位，计算机，数学，工程学相关专业，硕士学位优先 2，5年以上大数据开发阅历或数据仓库/模型/报表开发阅历 3，丰富的大中型大数据架构/数据仓库项目的规划、方案设计、实施等相关阅历 4，熟识hadoop生态圈的各组件，系统及引擎 5，参加过商业项目的大数据平台建设的优先 6，良好的学习实力，对技术前沿的发展有很大的新奇心 7，逻

3、辑思维实力强，思路清楚， 良好的沟通协调实力 大数据技术经理岗位职责 大数据技术经理 工作职责: 1、 参加打造数据中内容的规划、设计、开发和优化工作,实现高质量数据的互通与共享; 2、 参加数据模型体系构建及数据主题设计和开发,搭建离线、实时数据公共层; 3、 参加数据产品与应用的数据研发,发掘数据商业价值,打造良好体验的数据产品; 4、 深化理解数据产品的运用场景,为业务方在可用性、成本上做更好的设计做参考。; 5、 团队成员的搭建与培育,任务划分,进度监控,代码规范,质量保证。 任职要求: 1、 熟识数据仓库建模理论,5年以上相关领域实践阅历; 2、 hadoop、hive、hbase、

4、storm、spark等技术框架; 3、 精通java、python、scala、go等开发语言中的1到2种; 4、 娴熟运用python/java/scala或其他语言进行困难业务逻辑的数据处理工作,具备海量数据处理以及性能优化的实力; 5、 对mysql、redis、hbase等数据库有肯定的了解和运用阅历; 6、 对olap,多维分析及kylin熟识的更好; 7、 思路清楚,具备良好的沟通实力和理解实力,较强的学习实力以及快速解决问题的实力; 8、 对新技术,新事物有很好的探究和求知欲; 9、 熟识常规的机器学习算法:降维(pca、svd)、svm、逻辑回来(logistics regr

5、ession)、决策树(gbdt、randomforest)、关联规则(apriori、fp-growth)、聚类(k-means)等优先。 工作职责: 1、 参加打造数据中内容的规划、设计、开发和优化工作,实现高质量数据的互通与共享; 2、 参加数据模型体系构建及数据主题设计和开发,搭建离线、实时数据公共层; 3、 参加数据产品与应用的数据研发,发掘数据商业价值,打造良好体验的数据产品; 4、 深化理解数据产品的运用场景,为业务方在可用性、成本上做更好的设计做参考。; 5、 团队成员的搭建与培育,任务划分,进度监控,代码规范,质量保证。 任职要求: 1、 熟识数据仓库建模理论,5年以上相关领

6、域实践阅历; 2、 hadoop、hive、hbase、storm、spark等技术框架; 3、 精通java、python、scala、go等开发语言中的1到2种; 4、 娴熟运用python/java/scala或其他语言进行困难业务逻辑的数据处理工作,具备海量数据处理以及性能优化的实力; 5、 对mysql、redis、hbase等数据库有肯定的了解和运用阅历; 6、 对olap,多维分析及kylin熟识的更好; 7、 思路清楚,具备良好的沟通实力和理解实力,较强的学习实力以及快速解决问题的实力; 8、 对新技术,新事物有很好的探究和求知欲; 9、 熟识常规的机器学习算法:降维(pca、

7、svd)、svm、逻辑回来(logistics regression)、决策树(gbdt、randomforest)、关联规则(apriori、fp-growth)、聚类(k-means)等优先。 大数据平台技术经理岗位职责 大数据平台高级技术经理 招银 招银金融租赁有限公司,招银,招银 职责描述: 1. 负责租赁行业大数据平台架构规划、技术落地、与开发团队协同实施; 2. 负责需求调研、需求分析,编写需求分析说明书,负责项目全周期管理; 3. 组织uat测试方案制定、测试案例打算,负责测试环境搭建、以及对项目进行验收测试 。 任职要求: 1. 计算机软件或信息系统相关专业硕士以上学历; 2.

8、 具有三年及以上大数据系统架构规划及系统建设相关的工作阅历; 3. 精通大数据平台存储、计算及算法相关技术,精通机器学习相关模型与算法、或nlp或计算机图像识别等相关理论及技术,熟识精益(灵敏)项目管理、瀑布式项目管理流程,有项目阅历者优先; 4. 有剧烈的技术思维及自我突破的欲望,性特别向、擅长组织沟通、文字表达实力强。 大数据技术总监职位描述与岗位职责任职要求 职位描述： 职责描述： 1、负责大数据工作坊部门管理工作，组建、管理和带领团队担当公司大数据技术研发相关工作； 2、负责牵头探讨制定跨域多维平台城市级大数据技术体系规划、数据标准制定及建模等；制定大数据技术路途； 3、负责牵头探讨制

9、定大横琴科技企业级大数据技术体系规划、数据标准制定及建模等； 4、参加跨域多维城市大数据云平台项目，全面负责大数据平台系统搭建、关键技术选型及落地实施等工作； 5、负责数据建模相关的关键算法探讨，及核心代码实现； 6、负责城市及企业数据资产建设，包括采集、清洗、管理、对外共享服务； 7、负责数据资产运营，挖掘数据资产价值，对外供应数据服务； 8、负责大数据前沿技术的追踪及探讨，跟踪行业平台产品和相关解决方案。 任职要求： 1、教化背景：数学/统计学/计算机相关专业硕士探讨生以上学历优先； 2、工作阅历：5年以上大数据/人工智能相关工作阅历，有10人以上团队管理阅历，具有2个以上大规模数据平台落

10、地实施阅历者优先； 3、学问技能： （1）对业务数据和业务敏感，有紧密跟踪业务运营和发展的数据运营阅历，比如bi、数据分析和挖掘；在用户行为日志采集、海量数据处理、数据建模、业务理解方面有丰富阅历； （2）对业务数据模型、数据仓库、数据分析、数据挖掘等整个大数据系统的架构有清楚的思路和落地执行的方案，对数据服务、数据产品的模式有清楚的理解，并能带领团队实施； （3）至少熟识一种编程语言，如：java、python、r、shell、sql等；熟识当前主流的开源数据平台和工具以及数据云服务，如：hadoop、hbase、spark等；并具有hand-on实力； （4）具备特别强的学习实力、较好的逻

11、辑思维实力，较强的抽象、概括、总结实力；较好的沟通沟通实力，擅长主动思索和行动，乐于解决具有挑战性的问题； 高级实时大数据研发工程师/数据技术专家职位描述与岗位职责任职要求 职位描述： 职责描述： 基于flink开源大数据计算平台，在集团整体业务场景下， 1. 研发实时流计算数据研发平台，支持包括核心电商、云计算、大文娱、创新业务在内的等各个综合业务板块务； 2. 研发实时olap（elasticsearch，druid）赋能业务 3. 研发实时智能化（算法加工程）赋能业务 任职要求： 1.具备扎实的计算机理论基础， 对数据结构及算法有较强的功底 2.精通java语言编程，具备优秀的系统deb

12、ug/profiling实力和阅历 3. 熟识常见的面对对象设计模式，具备优秀的系统架构设计实力 4.熟识hadoop/hbase/flink/spark streaming等开源大数据技术，在开源社区活跃者优先 5.熟识elasticsearch/druid 等olap开源技术优先 6.具备实际的大数据业务开发阅历以及良好的项目沟通和协调实力 7. 具备实时流计算数据开发阅历、全栈开发阅历优先 大数据技术开发岗职位描述与岗位职责任职要求 职位描述： 职责描述： 1、负责面对各业务条线，与业务部门沟通，分析处理业务相关数据； 2、负责专项数据的业务逻辑分析和数据挖掘，充分理解挖掘用户需求，负责

13、构建数据挖掘模型； 3、负责大数据应用、数据采集加工、数据分析等领域的开发工作； 4、参加大数据应用项目的建设，包括项目开发及项目管理等工作； 5、跟踪大数据领域的技术应用趋势，进行技术，加强大数据应用实力。 任职要求： 1、高校本科及以上学历，计算机相关专业； 2、3年以上相关行业工作阅历，2年以上软件开发阅历；有互联网金融、金融行业、大数据行业开发阅历优先； 3、娴熟驾驭一种编程语言，java、vc、python等，熟识当下互联网前沿的技术，并具有肯定运用实践阅历，娴熟运用tomcat，nginx服务器，linux常用吩咐。了解或熟识数据仓库建模，擅长业务系统的数据分析；具备证券从业资格；

14、 4、有良好的职业心态，包括高度的责任心、踏实的工作作风、较强的学习实力、良好的团队合作精神、敢于接受压力和挑战、具有较强的沟通表达实力、组织协调实力和文档编制实力，擅长总结阅历，开拓思路勇于创新等。 架构师/技术专家（云平台、大数据方向）职位描述与岗位职责任职要求 职位描述： 职责描述： 1. 负责研发网络、系统平安评估和平安加固产品； 2. 负责对客户的应用系统进行渗透测试和代码审计； 3. 开发平安攻防产品，对流量攻击、web方向、软件逆向方向和软件平安周期绽开探讨； 4. 在出现网络攻击或平安事务时，为运维供应紧急响应支撑服务，开发调查取证 任职要求： 1、学历：本科及以上 2、专业：

15、计算机、软件工程、电子信息、网络空间平安、信息平安等 3、年龄：2840 4、性别：不限 5、工作阅历：510年 6、其他要求：无 大数据技术架构专家岗位职责职位要求 职责描述： 1、负责企业级数据中台规划、架构设计、组件封装以及疑难技术问题解决 2、深化理解企业级数据中台需求，进行整体架构设计、技术选型、关键核心模块的研发以及疑难问题解决 3、针对详细业务需求提出合适的算法解决方案，应用先进的统计建模、数据挖掘，机器学习等方法建立数据模型，优化算法，推动该方案在业务系统的实现。算法包括但不限于机器学习，举荐算法，自然语言处理等； 4、负责大数据应用项目的模型技术设计、数据提取清洗、数据衍生变

16、换、模型开发、模型验证评估到最终模型实施的项目全生命周期，解决不同场景下的业务问题，包含但不限于客户画像、精准营销、业务预料、路由规划、线路优化等 任职资格： 1、精通java、scala、python、sql、r等开发语言中至少2到3种 2、精通cdh、ambari、yarn/mesos、zookeeper等安装配置与参数调优，并在中大型项目中有trouble shooting的实际阅历 3、娴熟驾驭hadoop、spark、storm、flink、kylin、druid等大数据计算技术，并在中大型项目中有trouble shooting的实际阅历 4、娴熟驾驭hdfs、hbase、hive

17、、elasticsearch、casandra、mongodb等大数据存储技术的安装配置与性能调优，并在中大型项目中有trouble shooting的实际阅历 5、娴熟驾驭kafka、nifi、flume、sqoop等大数据集成技术的安装配置与性能调优，并在中大型项目中有trouble shooting的实际阅历 6、娴熟驾驭redis、ignite、geode等分布式缓存和数据网格技术的安装配置与性能调优，并在中大型项目中有trouble shooting的实际阅历 7、娴熟驾驭impala、spark sql、drill等大数据即席查询技术，并在中大型项目中有trouble shooti

18、ng的实际阅历 8、娴熟驾驭数据库技术，对mysql等数据库有肯定的了解和运用阅历 9、熟识docker/kubernetes等大数据分布式集群技术的安装配置与性能调优者优先 10、熟识jmx大数据监控管理技术，并具有相关开源监控管理组件的运用阅历者优先 11、有企业数据中台建设实施开发阅历者优先 12、有zepplin、jupyter note等实际应用开发阅历者优先 13、有janusgraph、opentsdb等实际应用开发阅历者优先 14、有tensorflow安装配置调优以及实际应用开发阅历者优先 15、具有良好的商业敏感度、数据敏感度和优秀的数据分析技能，能够开发创新而实际的分析方

19、法以解决困难的商业问题，注意业务逻辑与数据逻辑相结合，接地气意识和落地实力都要强 16、熟识常用机器学习和数据挖掘算法，包括但不限于gbdt、随机森林、支持向量机、logistic回来以及深度学习等算法 17、良好的沟通实力和团队合作精神，能够协同工作，乐于在技术上指导帮助团队成员 18、优先考虑具备bat或知名互联网或高科技公司数据挖掘以及大型数据系统或平台的架构设计者阅历 19、向开源社区贡献过 patch 者优先 岗位要求： 学历要求：大专 语言要求：不限 年龄要求：不限 工作年限：8-9年阅历 大数据技术经理岗位职责任职要求 大数据技术经理岗位职责 大数据技术经理职位描述: 1、主要负

20、责产品和项目的开发管理工作，带领团队保质保量完成开发任务; 2、参加产品需求分析、架构设计、技术选型等工作，参加技术框架构建; 3、负责项目开发进程管理，核心代码编写; 4、负责制定相关技术解决方案，解决开发中的技术问题; 5、负责对外的产品技术支持 任职要求: 1、有2-3年的技术管理阅历，参加过企业级产品研发过程; 2、精通java、熟识spring mvc开发架构 3、精通hadoop生态圈中常用技术，如hbase、hive、zookeeper、storm、spark等，有华为fi、腾讯tbds、cdh或hdp实际应用阅历; 4、精通linux平台，熟识shell、python其一或多种

21、; 5、熟识系统部署、开发、测试、维护过程与方法; 6、能够刚好地跟进项目进度、管理项目风险，刚好发觉并解决项目问题，推动项目团队朝目标前进; 7、综合素养高，具有良好的执行力和责任心，有较强的组织实力和沟通实力; 8、具有pmp证书优先。 职位描述: 1、主要负责产品和项目的开发管理工作，带领团队保质保量完成开发任务; 2、参加产品需求分析、架构设计、技术选型等工作，参加技术框架构建; 3、负责项目开发进程管理，核心代码编写; 4、负责制定相关技术解决方案，解决开发中的技术问题; 5、负责对外的产品技术支持 任职要求: 1、有2-3年的技术管理阅历，参加过企业级产品研发过程; 2、精通jav

22、a、熟识spring mvc开发架构 3、精通hadoop生态圈中常用技术，如hbase、hive、zookeeper、storm、spark等，有华为fi、腾讯tbds、cdh或hdp实际应用阅历; 4、精通linux平台，熟识shell、python其一或多种; 5、熟识系统部署、开发、测试、维护过程与方法; 6、能够刚好地跟进项目进度、管理项目风险，刚好发觉并解决项目问题，推动项目团队朝目标前进; 7、综合素养高，具有良好的执行力和责任心，有较强的组织实力和沟通实力; 8、具有pmp证书优先。 大数据技术经理岗位 实时大数据研发工程师/数据技术专家（p6-p8）职位描述与岗位职责任职要求

23、 职位描述： 职责描述： 基于flink开源大数据计算平台，在阿里集团整体业务场景下， 1. 研发实时流计算数据研发平台，支持包括核心电商、云计算、大文娱、创新业务在内的等各个综合业务板块务； 2. 研发实时olap（elasticsearch，druid）赋能业务 3. 研发实时智能化（算法加工程）赋能业务 任职要求： 1.具备扎实的计算机理论基础， 对数据结构及算法有较强的功底 2.精通java语言编程，具备优秀的系统debug/profiling实力和阅历 3. 熟识常见的面对对象设计模式，具备优秀的系统架构设计实力 4.熟识hadoop/hbase/flink/spark streaming等开源大数据技术，在开源社区活跃者优先 5.熟识elasticsearch/druid 等olap开源技术优先 6.具备实际的大数据业务开发阅历以及良好的项目沟通和协调实力 7. 具备实时流计算数据开发阅历、全栈开发阅历优先