1/7大数据架构工程师是干嘛的精选5篇在日常学习、工作或生活中,大家总少不了接触作文或者范文吧,通过文章可以把我们那些零零散散的思想,聚集在一块。那么我们该如何写较为完美的范文呢?这里我分享的“大数据架构工程师是干嘛的精选5篇”,希望对您的写作有所帮助,下面我们就来了解一下吧。大数据架构工程师是干嘛的【第一篇】职责:1.参与公司数据平台系统规划和架构工作,主导系统的架构设计和项目实施,确保项目质量和关键性能指标达成;2.统筹和推进制造工厂内部数据系统的构建,搭建不同来源数据之间的逻辑关系,能够为公司运营诊断、运营效率提升提供数据支持;3.负责数据系统需求对接、各信息化系统数据对接、软件供应商管理工作5.根据现状制定总体的数据治理方案及数据体系建立,包括数据采集、接入、分类、开发标准和规范,制定全链路数据治理方案;深入挖掘公司数据业务,超强的数据业务感知力,挖掘数据价值,推动数据变现场景的落地,为决策及业务赋能;6.定义不同的数据应用场景,推动公司的数据可视化工作,提升公司数据分析效率和数据价值转化。2/7任职要求:1.本科以上学历,8年以上软件行业从业经验,5年以上大数据架构设计经验,熟悉bi平台、大数据系统相关技术架构及技术标准;2.熟悉数据仓库、熟悉数据集市,了解数据挖掘、数据抽取、数据清洗、数据建模相关技术;3.熟悉大数据相关技术:hadoop、hive、hbase、storm、flink、spark、kafka、rabbitmq;4.熟悉制造企业信息化系统及相关数据库技术;5.具备大数据平台、计算存储平台、可视化开发平台经验,具有制造企业大数据系统项目开发或实施经验优先;6.对数据敏感,具备优秀的业务需求分析和报告展示能力,具备制造企业数据分析和数据洞察、大数据系统的架构设计能力,了解主流的报表工具或新兴的前端报表工具;7.有较强的沟通和组织协调能力,具备结果导向思维,有相关项目管理经验优先。大数据架构工程师是干嘛的【第二篇】职责:1、负责大数据仓库、数据集市的规划及实现,负责大数据中台的设计和核心开发工作;2、负责数据基础架构和数据处理体系的升级和优化,不断提升系统的稳定性和效率,为公司的业务提供大数据底层平3/7台的支持和保证;3、大数据平台的数据采集、处理、存储以及挖掘分析的架构实现;4、研究未来数据模型和计算框架的创新与落地,包括但不限于以下领域:大规模数据实时化、研发模式敏捷化、数据计算框架轻量化、数据模型组织方式业务化等方面,参与制定并实践团队的技术发展路线任职资格:1、精通数据建模、数据标准管理、元数据管理、数据质量管理;2、有作为技术负责人系统化解决问题的成功案例;有海量数据实践经验优先;3、熟悉目前正在发展的大数据分布式平台前沿技术的应用;包括但不仅仅限于:hadoop、flink、spark等;4、性格积极乐观,诚信,能自我驱动,有较强的语言表达能力;具备强烈的进取心、求知欲及团队合作精神;具有良好的沟通、团队协作、计划和创新的能力;在数据业界有一定的影响力优先,具有风控经验背景的人优先;5、具备独立的深度思考能力,给出结合实际情况的较为理想的技术解决方案。大数据架构工程师是干嘛的【第三篇】职责:4/71.能够带领技术人员基于hadoop平台进行海量数据应用系统开发;2.负责结构化和非结构化数据的解析和清洗,海量数据查询和报表展现;3.负责超大规模数据平台的搭建、维护和优化;4.负责大数据采集、存储框架研究,参与在线或离线数据存储模型设计;5.负责大数据平台新技术的开发使用和性能优化,测试。任职资格:1.计算机相关专业本科及以上学历;2.熟悉hadoop相关各种开源项目,比如hdfs/hive/hbase等有实际应用。(5年以上开发经验者优先);3.两年以上熟练编写mapreduce代码经验,有三年以上网络日志分析、etl经验。熟悉日志分析框架chukwa,flume,scribe者优先;4.两年以上海量数据存储的安装部署、优化、二次开发经验,对大规模数据存储、传输、处理等有丰富的经验;5.在数据挖掘、数据密集型处理、分布式计算、网格计算领域有深入理论基础;6.具有较强的文档撰写能力,较强的团队精神和合作精神,对工作有热情,能承受压力。大数据架构工程师是干嘛的【第四篇】5/7职责:负责公司大数据产品架构的设计与实现;配合大数据产品经理完成产品的快速研发与交付;负责大数据产品架构的持续优化设计;负责大数据产品核心组件设计;负责大数据相关数据架构规划、数据建模、数据库设计以及大数据产品研发工作;为应用开发团队提供技术支撑。及时向上级反馈工作进度、遇到的问题或者对现有工作的建议等;完成上级领导交办的其它各项工作。任职资格:985/211本科及以上学历,3年以上的大数据开发经验、2年以上大数据架构设计经验;丰富的java研发经验,精通java,熟悉pythonscala等编程语言;具备深厚的分布式系统或数据库系统的理论基础,熟悉分布式计算系统的工作机制,具有分布式文件系统、分布式数据库系统、集群存储系统等架构设计经验;熟悉整个大数据的完整处理流程(数据的采集、清洗、预处理、存储、分析挖掘、机器学习和数据可视化);精通各种大数据相关技术体系:hadoop、spark、storm、elasticsearch、kafka;有数据挖掘、机器学习相关应用或研究背景;6/7沟通能力较好,积极主动意识较强,责任心较强。具备优秀的逻辑思维能力,对解决挑战性问题充满热情,善于解决问题和分析问题;良好的团队合作精神,较强的沟通能力和学习能力;大数据架构工程师是干嘛的【第五篇】职责:1、负责公司的大数据处理框架的研发设计工作,梳理可实现方案和技术规范;2、开发、完善公司大数据平台;参与公司离线、实时大数据处理系统的设计、开发、测试及多个业务模块的自动化集成;3、负责业务平台数据统计分析模块的设计与规划;4、负责公司产品研发过程中的数据及存储设计;5、带领和培养团队完成组织分解的目标;任职要求:1、统招本科及以上学历,计算机、软件工程相关专业,至少8年以上工作经验,5年以上大数据开发经验;2、熟悉java、hadoop、hdfs、hive、hbase、spark、storm、flume等相关技术的基础架构3、熟悉数据仓库,数据算法,分布式计算技术理论,具有大数据整体系统架构设计经验;4、熟悉linux系统,熟练使用shell/perl/python脚本处理问题;7/75、对深度学习框架(tensorflow)和机器学习(svm随机深林贝叶斯等)有一定了解的优先;6、能够组织项目开发组协同工作,包括团队沟通、计划、开发环境管理等