2023年大数据架构师岗位的职责内容新编.docx

大数据架构师岗位的职责内容 大数据架构师岗位的职责内容1 职责： 1、大数据平台架构规划与设计; 2、负责大数据平台技术框架的选型与技术难点攻关; 3、能够独立进行行业大数据应用的整体技术框架、业务框架和系统架构设计和调优等工作，根据系统的业务需求，能够指导开发团队完成实施工作; 4、负责数据根底架构和数据处理体系的升级和优化，不断提升系统的稳定性和效率，为相关的业务提供大数据底层平台的支持和保证; 5、培养和建立大数据团队，对团队进行技术指导。 任职要求： 1、计算机相关专业的背景专业一类院校毕业本科、硕士学位，8年（硕士5年）以上工作经验（至少拥有3年以上大数据工程或产品架构经验）; 2、精通相关技术，精通常见开源框架的架构，精通关系数据库系统（oraclemysql等）和nosql数据存储系统的原理和架构; 3、精通sql和mapreduce、spark处理方法; 4、精通大数据系统架构，熟悉业界数据仓库建模方法及新的建模方法的开展，有dw，bi架构体系的专项建设经验; 5、对大数据体系有深入认识，熟悉kafka、hadoop、hive、hbase、spark、storm、greenplum、es、redis等大数据技术，并能设计相关数据模型; 6、很强的学习java，j2ee、分析和解决问题能力，可以迅速掌握业务逻辑并转化为技术方案，能独立撰写工程解决方案、工程技术文档; 7、具有较强的内外沟通能力，良好的团队意识和协作精神; 8、机器学习技术、数据挖掘、人工智能经验丰富者优先考虑; 9、具有能源电力行业工作经验者优先。 大数据架构师岗位的职责内容2 职责： 1、负责大数据仓库、数据集市的规划及实现，负责大数据中台的设计和核心开发工作; 2、负责数据根底架构和数据处理体系的升级和优化，不断提升系统的稳定性和效率，为公司的业务提供大数据底层平台的支持和保证; 3、大数据平台的数据采集、处理、存储以及挖掘分析的架构实现; 4、研究未来数据模型和计算框架的创新与落地，包括但不限于以下领域：大规模数据实时化、研发模式敏捷化、数据计算框架轻量化、数据模型组织方式业务化等方面，参与制定并实践团队的技术开展路线 任职资格： 1、精通数据建模、数据标准管理、元数据管理、数据质量管理; 2、有作为技术负责人系统化解决问题的成功案例;有海量数据实践经验优先; 3、熟悉目前正在开展的大数据分布式平台前沿技术的应用;包括但不仅仅限于：hadoop、flink、spark等; 4、性格积极乐观，诚信，能自我驱动，有较强的语言表达能力;具备强烈的进取心、求知欲及团队合作精神;具有良好的沟通、团队协作、方案和创新的能力;在数据业界有一定的影响力优先，具有风控经验背景的人优先; 5、具备独立的深度思考能力，给出结合实际情况的较为理想的技术解决方案。 大数据架构师岗位的职责内容3 职责： 1、对业务需求深入分析，从而进行大数据平台核心应用的架构设计、开发和技术支持; 2、规划业务应用系统和根底平台的技术架构，参与需求分析、建模、架构设计、技术决策以及详细设计; 3、把握复杂系统的设计，确保系统的架构质量，编写核心局部代码; 4、带着团队攻克例如大数据量、高并发、高稳定性等带来的各种挑战及技术难关; 5、在大数据平台建设路线图指导下，进行架构实施和交付物投递，同时确保研发质量和方向的准确性; 6、进行团队技术的培训和梯队建设岗位要求; 任职条件： 1、本科或以上学历，计算机相关专业，8年以上研发经验，3年以上大数据平台相关工作经验; 2、精通java开发技术，熟悉shell、scala语言和python优先; 3、编程根底扎实，熟悉i/o、多线程、集群等根底框架和原理，熟悉分布式、缓存、消息等机制; 4、熟悉常用设计模式，代码评审规那么，单元测试，持续集成; 5、熟悉aws云效劳或阿里云效劳; 6、熟悉容器技术原理、生态系统，熟悉docker、mesos、kubernetes等容器系统、大规模容器资源调度系统、分布式应用生命周期。 大数据架构师岗位的职责内容4 职责： 1）负责大数据平台系统架构设计、核心开发工作（hadoopamp;spark技术方向），基于业务场景设计最优的系统解决方案。 2）构架支持大数量级的数据的大数据平台系统，及相关监控，拓展系统设计及实现。 3）利用hadoop、spark等大数据技术对海量数据进行处理，支持bi和数据科学（建模）的应用实现。 4）对现有系统的进行架构深入分析及系统优化，进一步提升系统的性能及数据处理能力。 任职资格 1）统招本科或以上学历，计算机相关专业，5年以上软件开发经验、3年以上大数据工程经验。 2）具备较丰富的大数据平台相关构建，维护及调优经验，有大数据量级下的大数据集市相关经验。 3）具备较丰富的基于hadoop或hive或spark等大数据处理工程经验，具备一定的数据挖掘经验。 4）具有阿里云的emr（emapreduce）的经验者优先考虑。 5）具有良好的业务理解、沟通和协作能力，具有较强的学习和总结能力。 6）优秀的团队合作精神、老实、勤奋、严谨，敢于接受挑战。 7）机器学习技术、数据挖掘经验丰富者优先考虑。 大数据架构师岗位的职责内容5 职责： 负责大数据平台的规划和搭建、完成大数据平台的日常运营工作，为数据分析和展现提供支持; 对系统框架相关技术和业务进行培训，并负责核心代码编写，指导团队开发及解决出现的系统问题; 参与基于大数据平台的创新业务场景进行数据产品的架构设计，负责数据产品的研发交付; 负责处理大数据平台的疑难问题，为数据团队提供可靠的技术支持; 负责数据质量、稳定性等数据管理，数据内部共享融通的数据平台，让数据标准更标准、数据获取更高效; 及时跟进大数据领域新技术并分享，提升团队技术能力。 任职要求： 本科或以上学历，5年以上数据系统建设经验，3年以上大数据架构设计经验; 精通java，python，scala等一种大数据开发语言，熟悉hadoop生态圈，包括但不限于hdfs，hive，spark，有丰富的大数据工程的实践经验; 具备创新精神，条理清晰，沟通表达和逻辑思维能力强; 熟悉数据仓库的设计和开发，对数据架构有深入的了解和具备相关的工程实践经验优先; 对sqlonhadoop的开源查询引擎（如presto、apachedrill）原理有深入研究优先; 有敏捷大数据和数据可视化实践经验优先。