大数据平台架构师 篇1
1、负责公司大数据处理框架研发工作，设计与开发分布式存储、数据处理与分析架构。
2、负责大数据平台与产品和相关技术的追踪及研究。
3、负责大数据的处理工作，以及业务数据提取、加载、转换处理流程的开发和优化。
4、利用大数据平台工具对数据维护。
5、负责相关项目的技术支持和服务。
6、持续对系统的技术架构进行改进和优化。
大数据平台架构师岗位职责 篇2
1、建设大数据平台，主要技术为k8s, docker;
2、跟进开源社区的更新，阅读文档，验证feature;
3、阅读容器生态圈各组件的开源项目代码，开发新功能;
4、持续提升平台的性能和稳定性。
大数据平台架构师岗位职责 篇3
1. 负责数澜大数据平台的架构设计和研发，建立数据生态服务，解决海量数据面临的挑战;
2. 管理和优化Hadoop、Spark等集，计算作业的调优，保证集和平台的高效和稳定;
3. 负责Hadoop、Spark、Flink的功能、性能和扩展，解决并实现业务需求;
4. 负责大数据产品的自动化、离线与实时计算、即席计算、数据质量、数据安全、机器学习等平台的设计和开发;
5. 调研和把握当前的最新技术，将其中的先进技术引入到自己的平台中，改善产品，提升竞争力;
大数据平台架构师岗位职责 篇4
1、负责大数据平台资源规划、权限控制、运维架构设计，为各产品业务提供稳定、高效、安全的运行环境;
2、负责实时，离线数据分析处理及实时平台的建设和搭建
3、熟悉 Flink 流式计算引擎的使用以及源码原理，并且有相关的流式处理平台的经验。
4、Java基础扎实，熟练掌握垃圾回收，网络，多线程编程，了解 python 或 scala
5、负责大数据平台技术架构、数据架构的分析与设计;
大数据平台架构师岗位职责 篇5
1. 负责大数据项目整体架构规划，包括应用架构、技术架构、物理架构和数据架构等;
2. 负责指导工程师进行技术验证与实现，核心技术问题的攻关，解决项目开发过程中的技术难题;
3. 负责项目对外技术沟通，具有较强的沟通，表达和文档撰写能力;
4. 根据公司项目和业务发展特点，负责研究相关大数据前沿技术;
大专可以考什么证书5. 推动技术能力的沉淀。
大数据平台架构师岗位职责 篇6
广东教育厅职责：
1.负责过多个大数据项目的架构;
2.精通Hadoop、Spark, HBase等主流的大数据平台、精通各组件优化设计原理;
3.精通大数据实时流式处理的设计和应用;
3.熟悉大数据平台调优，具备大数据生产平台调优经验;
4.金融行业，运营商行业大数据架构经验更优;
5.研究大数据技术的最新发展，并引入到公司技术架构;
6.指导大数据工程师的日常工作，并培养技术骨干。
河北农村信用社招聘条件任职资格：
1.计算机相关专业本科或以上学历;
2.具有5年以上大数据相关开发经验;
3.具有2年以上带团队经验
4.对Hadoop/Hive/Spark/HBase/ES等等大数据常用技术有深刻理解，能够带领团队进行技术攻坚，完成中间件的实施、改造、调优;
5.精通海量数据和实时数据的分析处理，能对线上的数据处理性能问题做调优;
6.精通数据仓库以及维度建模原理，有大型数据仓库建设经验;
7.精通关系型数据库和NoSQL数据库的使用，熟悉相关理论;
8.沟通顺畅，重点突出，高效。
大数据平台架构师岗位职责 篇7
职责：
1、负责相关开源系统/组件的性能、稳定性、可靠性等方面的深度优化;
2、负责解决项目上线后生产环境的各种实际问题，保障大数据平台在生产上的安全、平稳运行;
3、推动优化跨部门的业务流程， 参与业务部门的技术方案设计、评审、指导;
4、负责技术团队人员培训、人员成长指导。
5、应项目要求本月在锦江区金石路316号新希望中鼎国际办公，月底项目结束后在总部公司办公
任职要求：
1、熟悉linux、JVM底层原理，能作为技术担当，解决核心技术问题;
2、3年以上大数据平台项目架构或开发经验，对大数据生态技术体系有全面了解，如Yarn、Spark、HBase、Hive、Elasticsearch、Kafka、PrestoDB、Phoenix等;
3、掌握git、maven、gradle、junit等工具和实践， 注重文档管理、注重工程规范优先;
4、熟悉Java后台开发体系，具备微服务架构的项目实施经验，有Dubbo/Spring cloud微服务架构设计经验优先;
5、性格开朗、善于沟通，有极强的技术敏感性和自我驱动学习能力，注重团队意识。
大数据平台架构师岗位职责 篇8
考公务员是考什么内容职责：
1.参与公司数据平台系统规划和架构工作，主导系统的架构设计和项目实施，确保项目质量和关键性能指标达成;
2.统筹和推进制造工厂内部数据系统的构建，搭建不同来源数据之间的逻辑关系，能够为公司运营诊断、运营效率提升提供数据支持;
3.负责数据系统需求对接、各信息化系统数据对接、软件供应商管理工作
5.根据现状制定总体的数据治理方案及数据体系建立，包括数据采集、接入、分类、开发标准和规范，制定全链路数据治理方案;深入挖掘公司数据业务，超强的数据业务感知力，挖掘数据价值，推动数据变现场景的落地，为决策及业务赋能;
6.定义不同的数据应用场景，推动公司的数据可视化工作，提升公司数据分析效率和数据价值转化。
任职要求：
1.本科以上学历，8年以上软件行业从业经验，5年以上大数据架构设计经验，熟悉BI平台、大数据系统相关技术架构及技术标准;
2.熟悉数据仓库、熟悉数据集市，了解数据挖掘、数据抽取、数据清洗、数据建模相关技术;
3.熟悉大数据相关技术：Hadoop、Hive、Hbase、Storm、Flink、Spark、Kafka、RabbitMQ;
4.熟悉制造企业信息化系统及相关数据库技术;
5.具备大数据平台、计算存储平台、可视化开发平台经验，具有制造企业大数据系统项目开发或实施经验优先;
6.对数据敏感，具备优秀的业务需求分析和报告展示能力，具备制造企业数据分析和数据洞察、大数据系统的架构设计能力，了解主流的报表工具或新兴的前端报表工具;
7.有较强的沟通和组织协调能力，具备结果导向思维，有相关项目管理经验优先。
发布评论