大数据工程师

工作职责
  • 负责大数据分析平台的系统部署、运行和系统维护工作

  • 负责hadoop/Spark集群的稳定性维护、性能调优

  • 负责大数据分析平台的系统监控、应急响应和故障排除

  • 负责系统运维、监控、部署相关的功能开发和技术文档编写

任职要求
  • 本岗位需要用到主要技术有:hadoop/spark, Linux操作系统和shell,SQL,docker,ansible,Mysql、Redis、Mongodb、python、nginx等,其中最重要的是hadoop/spark、Linux操作系统和shell

  • 精通Linux操作系统、熟悉Shell,有一定解决系统问题的能力

  • 熟悉hadoop/Spark, 能独立部署分布式系统,有一定问题定位和性能优化的能力

  • 熟悉星环、华为或CDH之一的优先

  • 熟悉docker,Mysql优先

  • 有较强的学习能力,逻辑思维清晰,具有较强的问题排查能力,有很强的责任心,有较强沟通能力

  • 能接受经常性的短期出差


分享到: