高级软件集成后端工程师

关于客户
客户是一家软件公司，旨在解决人们与他们每天互动的公司之间基本的脱节问题。我们赋予人们一个强大的集体声音，以分享经验，通知公司，并影响我们世界的变化。
项目描述
我们正在寻找一位高级软件集成工程师加入我们的团队。这个职位是为世界级的工程师而设，他们希望将位置、在线和交易数据理解提升到一个新的前沿。我们需要从多个AWS云集成数据，构建新的数据分类算法和可视化，在我们的不同DMP和DSP上发布我们的细分，并生成分析报告。
职责

 
设计并开发数据产品，以及与之相关的数据管道，以高性能、高效能和高可靠性的标准进行工程化。
 
制定数据管理策略和数据仓库架构，为内部和外部客户提供单一真实数据集的来源。
 
确保数据质量，对产品和管道级别进行测试。
 
实现数据管道和软件发布的自动化。
 
与内部团队合作，收集数据产品的需求。
 
提供一些持续的支持、监控和维护部署的产品。

必须具备

 
与Rest API集成的后端和前端模块。
 
在所有环境中构建和部署应用程序。（首选AWS，GCP也可以，Azure作为最后的选择）
 
具有Python的专业开发经验
 
有在AWS上使用EMR和ECS等服务的经验（如果有AWS云经验的话。如果没有，没问题）
 
有在UNIX/Linux环境中使用Bash/Python脚本的经验。
 
有分布式系统的经验：EMR、Hbase、Cassandra和RDBMS（PostgreSQL）。

加分项

 
Spark开发经验。
 
Ruby开发经验。
 
Scala开发经验。
 
具有Scala的经验是非常理想的。