大数据工程师

ScienceSoft正在寻找大数据工程师。

访问我们的 软件 开发服务页面 了解我们团队的方法和能力,并了解潜在项目。

职责范围

  • 选择和集成提供所需功能所需的任何大数据工具和框架;
  • 实施ETL流程;
  • 监控性能并建议必要的基础架构更改;
  • 定义数据保留策略。

技能和资格

  • 技术英语;
  • 2年以上Python / Scala / 爪哇经验;
  • 精通分布式计算原理;
  • 具有整合来自多个数据源的数据的经验;
  • 了解Lambda架构及其优缺点;
  • 具有构建流处理系统的经验;
  • 熟悉RDBMS;
  • 有NoSQL数据库(HBase \ Cassandra \ MongoDB)的经验;
  • 了解Hadoop v2,MapReduce,HDFS(Cloudera \ MapR \ Hortonworks发行版);
  • 大数据查询工具知识(Pig \ Hive \ Impala);
  • 风暴\火花流的知识;
  • 了解各种ETL技术和框架;
  • 具有各种消息传递系统(Kafka \ RabbitMQ)的经验;
  • 有Spark经验;
  • 具有Linux \ Docker \ Git \ Jenkins的经验。

很高兴有

  • 了解AWS,Azure;
  • 机器学习经验。

我们提供

  • 专业自我实现的机会;
  • 友好团结的团队;
  • 带薪假期天数;
  • 100%带薪病假;
  • 体育节目​​;
  • 语言课程和其他公司课程;
  • 医疗保险;
  • 有竞争力的(官方)薪水。

申请此职位