您的当前位置:首页大数据平台架构师岗位职责

大数据平台架构师岗位职责

来源:锐游网

  职责:

  1、负责大数据平台架构的评估、规划和设计 ;负责海量数据采集、处理及存储、应用方案的技术选型及架构实现;

  2、开发大数据平台的核心代码,负责大数据平台的搭建,完成系统调试、集成与实施,技术难题的解决,保证大数据产品的上线运行 ;

  3、根据业务需求持续优化数据架构,保证产品的可靠性、稳定性 ;

  4、指导开发人员完成数据模型规划建设,分析模型构建及分析呈现 ,分享技术经验;

  5、负责大数据平台的架构评审,代码评审,上线评审;参与数据应用需求、设计、审核和评审;

  6、深入研究大数据相关技术和产品,跟进业界先进技术;

  任职资格:

  1.本科及以上学历,数学或计算机相关专业毕业,不少于5年的工作经验,具有扎实的计算机基础理论知识;

  2.有3年以上Hadoop、Spark、Hbase平台性能调优经验;熟悉sparkstreaming等实时计算技术

  3.熟悉hive、hbase、storm、mahout、flume、ElasticSearch、Spark、Kafka等,具备实际项目设计及开发经验;

  4.熟悉sparkstreaming等相关的实时计算技术;

  5.熟悉大规模数据挖掘、机器学习、自然语言处理、分布式计算中一项或多项技术,并具备多年的实际工作经验;

  6.熟悉主流关系型数据库(Oracle、MySql)、NoSql数据库,熟悉pl/sql编程;精通Linux操作系统,熟练使用Java;熟悉常用框架.如Spring、MyBatis等;

  7.具有较强的执行力,高度的责任感、很强的学习、沟通能力,能够在高压下高效工作;

因篇幅问题不能全部显示,请点此查看更多更全内容

Top