任职要求:1、有大型分布式系统设计经验,负责过海量数据平台上高可用、高性能分布式系统的架构设计;2、精通任意一门编程语言,对大数据基础架构和平台底层原理有深度理解和丰富开发经验, 对复杂系统的性能优化和稳定性提升有一线实战经验,具备相关产品(Hadoop、Hive、HBase、Kafka、MapReduce、Spark等)项目应用研发经验;3、深入理解Hadoop ecosystem,及各种大数据计算框架,熟练使用Storm、Hadoop、Spark、HDFS、Hbase、Kafka、ElasticSearch、Solr,有优化经验者优先;4、熟悉分布式存储和NoSQL数据库技术(如MonogoDB、Redis、Cassandra等),有实际生产项目应用经验;5、具有一定的项目规划和决策能力,善于捕捉业务需求、架构设计存在的问题,并给出有效的解决措施和方法。
岗位职责:1、负责基于Hadoop/Spark等生态系统的大数据平台的架构设计、技术选型、搭建、开发、管理、监控和性能调优,保证集群高效稳定运行,对数据应用提供数据存储、查询引擎、实时计算、元数据管理的架构设计;2、系统核心部分代码编写、指导和培训工程师、不断进行系统优化;3、跨团队/部门协作,系统分析并解决各类大数据平台相关的运行或数据问题;
粤公网安备 44030502001156号