大数据架构师发展前景【实用8篇】

整理文档很辛苦,赏杯茶钱您下走!

免费阅读已结束,点击下载阅读编辑剩下 ...

阅读已结束,您可以下载文档离线阅读编辑

资源描述

1/9大数据架构师发展前景【实用8篇】在日常的学习、工作、生活中,肯定对各类范文都很熟悉吧。写范文的时候需要注意什么呢?有哪些格式需要注意呢?以下是我为大家搜集的优质范文,仅供参考,一起来看看吧大数据架构师发展前景【第一篇】职责:1.负责大数据基础平台、海量数据存储/处理分布式平台、数据分析系统架构设计和研发;2.负责实时计算平台基础架构设计、部署、监控、优化升级;3.制定项目/数据仓库设计及实现规范,指导设计研发和部署;4.协助策略和算法团队工作,保障数据挖掘建模和工程化;5.深入研究大数据相关技术和产品,跟进业界先进技术;任职要求:1.全日制本科及以上学历,5年以上软件和分布式系统研发经验,3年以上大数据系统架构经验;2.精通hadoop/hbase/spark/storm/redis技术及其生态圈;3.具备良好的系统分析能力、故障诊断能力;2/94有大数据策略、算法、可视化经验优先。大数据架构师发展前景【第二篇】职责:1、负责大数据平台架构的评估、规划和设计;负责海量数据采集、处理及存储、应用方案的技术选型及架构实现;2、开发大数据平台的核心代码,负责大数据平台的搭建,完成系统调试、集成与实施,技术难题的解决,保证大数据产品的上线运行;3、根据业务需求持续优化数据架构,保证产品的可靠性、稳定性;4、指导开发人员完成数据模型规划建设,分析模型构建及分析呈现,分享技术经验;5、负责大数据平台的架构评审,代码评审,上线评审;参与数据应用需求、设计、审核和评审;6、深入研究大数据相关技术和产品,跟进业界先进技术;任职资格:1.本科及以上学历,数学或计算机相关专业毕业,不少于5年的工作经验,具有扎实的计算机基础理论知识;2.有3年以上hadoop、spark、hbase平台性能调优经验;熟悉sparkstreaming等实时计算技术3.熟悉hive、hbase、storm、mahout、flume、elasticsearch、spark、kafka等,具备实际项目设计及开发3/9经验;4.熟悉sparkstreaming等相关的实时计算技术;5.熟悉大规模数据挖掘、机器学习、自然语言处理、分布式计算中一项或多项技术,并具备多年的实际工作经验;6.熟悉主流关系型数据库(oracle、mysql)、nosql数据库,熟悉pl/sql编程;精通linux操作系统,熟练使用java;熟悉常用框架.如spring、mybatis等;7.具有较强的执行力,高度的责任感、很强的学习、沟通能力,能够在高压下高效工作;大数据架构师发展前景【第三篇】职责1、负责公司大数据平台的整体架构设计,包含数据收集、数据存储、数据挖掘、数据输出;2、负责规划从数据源到数据应用的整体流程,并参与用户产品和数据产品的决策;3、负责海量数据分析、用户行为分析,构建用户数据模型;4、负责解决核心技术问题,对技术方案进行决策;5、技术团队管理。6、熟悉手机ios、安卓系统app开发任职资格1、计算机相关专业毕业,本科以上学历;4/92、5年以上相关工作经验,具备软件产品架构设计经验,熟练掌握高性能、高扩展性架构设计方法;3、熟练掌握java或c++任意一门语言、熟悉linux操作系统;4、熟悉hadoop/mr/hbase/mahout/spark等大数据技术,并能够基于上述项目开发大数据相关应用;5、熟悉基本数据挖掘方法和技术;6、强烈的敬业精神,良好的沟通与协调能力,能有效组织协调团队完成各类开发工作;7、热爱技术,相信数据的价值,对大数据有深刻的理解。大数据架构师发展前景【第四篇】职责:1、负责大数据项目技术架构评估与设计;2、负责关键功能的开发,技术难题的解决,以及输出代码的关键把控;3、负责对使用关键技术的预研和选型,完成poc;4、指导工程师完成开发工作,并能分享技术经验。任职要求:1、3年以上相关工作经验,其中具有1年以上架构设计经验2、熟悉商业智能系统相关技术,如etl、数据仓库、olap开发;5/93、精通设计模式,熟悉面向服务架构(soa)以及其它常用软件架构思想,有soa方案设计、开发实施的实际经验,要具备实际的服务规划、服务粒度划分经验;并且要善于设计可重用组件和可定制化产品。4、相关技术栈:java/scala/flume/hive/kafka/hbase/spark/storm/redis;5、有扎实的计算机基础,熟悉java等编程语言;大数据架构师发展前景【第五篇】职责:1.能够带领技术人员基于hadoop平台进行海量数据应用系统开发;2.负责结构化和非结构化数据的解析和清洗,海量数据查询和报表展现;3.负责超大规模数据平台的搭建、维护和优化;4.负责大数据采集、存储框架研究,参与在线或离线数据存储模型设计;5.负责大数据平台新技术的开发使用和性能优化,测试。任职资格:1.计算机相关专业本科及以上学历;2.熟悉hadoop相关各种开源项目,比如hdfs/hive/hbase等有实际应用。(5年以上开发经验者优先);3.两年以上熟练编写mapreduce代码经验,有三年以上网6/9络日志分析、etl经验。熟悉日志分析框架chukwa,flume,scribe者优先;4.两年以上海量数据存储的安装部署、优化、二次开发经验,对大规模数据存储、传输、处理等有丰富的经验;5.在数据挖掘、数据密集型处理、分布式计算、网格计算领域有深入理论基础;6.具有较强的文档撰写能力,较强的团队精神和合作精神,对工作有热情,能承受压力。大数据架构师发展前景【第六篇】职责:1、大数据平台架构规划与设计;2、负责大数据平台技术框架的选型与技术难点攻关;3、能够独立进行行业大数据应用的整体技术框架、业务框架和系统架构设计和调优等工作,根据系统的业务需求,能够指导开发团队完成实施工作;4、负责数据基础架构和数据处理体系的升级和优化,不断提升系统的稳定性和效率,为相关的业务提供大数据底层平台的支持和保证;5、培养和建立大数据团队,对团队进行技术指导。任职要求:1、计算机相关专业的背景专业一类院校毕业本科、硕士学位,8年(硕士5年)以上工作经验(至少拥有3年以上大数7/9据项目或产品架构经验);2、精通java,j2ee相关技术,精通常见开源框架的架构,精通关系数据库系统(oraclemysql等)和nosql数据存储系统的原理和架构;3、精通sql和mapreduce、spark处理方法;4、精通大数据系统架构,熟悉业界数据仓库建模方法及新的建模方法的发展,有dw,bi架构体系的专项建设经验;5、对大数据体系有深入认识,熟悉kafka、hadoop、hive、hbase、spark、storm、greenplum、es、redis等大数据技术,并能设计相关数据模型;6、很强的学习、分析和解决问题能力,可以迅速掌握业务逻辑并转化为技术方案,能独立撰写项目解决方案、项目技术文档;7、具有较强的内外沟通能力,良好的团队意识和协作精神;8、机器学习技术、数据挖掘、人工智能经验丰富者优先考虑;9、具有能源电力行业工作经验者优先。大数据架构师发展前景【第七篇】职责:1.负责公司新业务方向平台大数据基础架构的搭建及后期数据处理体系的升级和优化,不断提升系统的稳定性和效率。8/9为公司未来方向性产品提供大数据底层平台的支持和保证。2.负责制定大数据平台调用约束和规范;3.负责大数据方向技术难题的解决,以及代码质量的把控;4.作为大数据开发团队的leader,负责大数据系统平台开发团队建设与人才梯队培养,分享技术经验,撰写相关技术文档指导和培训工程师。任职要求:1.热衷于大数据技术,并能平衡大数据性能、稳定性、扩展性多重要素进行设计和优化;2.熟悉服务器基本知识,能够评估系统硬件性能瓶颈;3.掌握linux操作系统的配置,管理及优化,能够独立排查及解决操作系统层的各类问题,并能提供解决问题的理论依据;4.精通java服务器编程,熟悉jvm原理,对数据结构和算法设计有较为深刻的理解;5.精通elasticsearch、redis、hadoop、kafka、zookeeper、yarn、hbase、spark底层架构,熟悉原理、源码、集群部署,包括参数优化、bug修复,贡献过代码或提交过bug者优先6.具备数据中心资源管理、监控、调度等系统研发经验者优先,具备分布式系统研发经验者优先;7.具有应用大数据技术处理的项目开发、维护超过两年的经验者优先;8.具有良好的文档编写能力,可进行方案设计、架构设计。9/9大数据架构师发展前景【第八篇】职责:1.负责公司大数据底层框架的整体架构设计,结合公司实际业务情况进行技术选型及大数据战略规划;2.负责统一数据平台项目的整体评估、设计、架构及关键模块的开发,不断提升系统的稳定性和效率;3.负责架构优化及系统关键模块的设计开发,协助团队解决开发过程中的技术难题;4.建立良好的公司内外的业界技术影响力;有效辅导团队,提升数据研发能力;任职要求:1.从事大数据项目相关开发和设计2年以上经验;有作为技术负责人系统化解决问题的成功案例;有海量数据实践经验优先;2.拥有一定的算法和数据结构基础;有很强的数据设计抽象能力,善于从复杂的数据问题中找到关键路径;3.熟悉目前正在发展的大数据分布式平台前沿技术的应用;包括但不仅仅限于:hadoop、storm、spark、等;4.良好的逻辑思维能力,良好的业务解读能力,懂电力或通信业务优先;5.具有钻研精神,乐于接受挑战;

1 / 9
下载文档,编辑使用

©2015-2020 m.777doc.com 三七文档.

备案号:鲁ICP备2024069028号-1 客服联系 QQ:2149211541

×
保存成功