Staff Data Engineer at Catalyst Software 在催化剂软件公司的员工数据工程师

**职位：员工数据工程师**

**地点：纽约市或远程**

**催化剂公司简介**

催化剂是一家快速成长的B2B SaaS公司，致力于帮助组织将客户成功转变为全公司范围内的愿景。我们的软件由一支经验丰富的行业领导者团队构建，与客户成功团队已经使用的所有必要工具集成，提供客户数据的集中视图。我们现代且直观的仪表板帮助客户成功领导者开发有影响力的工作流程，并采取正确的行动，以了解客户健康、预防流失、增加采用率和推动扩展。

**职位概述**

洞察力和智能是我们产品提供的核心。我们从各种来源摄取和处理大量数据，帮助用户在客户旅程的每个阶段了解其客户的总体健康状况。作为员工数据工程师，您将直接负责设计和实施下一代数据架构，该架构建立在Databricks、Fivetran和TiDB之上。

**您将要做的工作**

- 领导基于现代、一流的数据堆栈构建的高影响力、跨功能数据工程项目，使用各种开源和云技术
- 解决大规模和高容量的有趣且独特的数据问题
- 构建和优化批处理、流式传输和基于队列的解决方案的性能，包括Kafka和Apache Spark
- 定义数据架构的长期愿景和战略（单租户/多租户、双向实时同步、支持各种客户用例的数据模型等）
- 与来自不同团队的利益相关者合作，推动数据路线图的前进
- 帮助根据后端能力定义面向客户的基于数据的应用程序功能
- 设置和实施数据保留、安全和治理标准
- 与所有工程团队合作，建立所有权和自助数据处理的框架和最佳实践
- 为催化剂建立数据工程的标准、指南、工具和最佳实践
- 指导其他数据工程师，并在数据方面推动教育和倡导
- 倡导数据质量、成本效益的可扩展性和分布式系统的可靠性，并建立自动化机制以改进这些
- 与应用程序工程师、SRE、产品、数据分析师、数据科学家和机器学习工程师跨功能合作

**您需要的条件**

- 5年以上成功实施现代数据架构的经验
- 强大的项目管理技能
- 展示使用Apache Spark在Python和SQL中实现ETL管道的经验
- Python或其他语言熟练度
- 深入理解SQL，以及关系数据存储，如Postgres或Mysql
- 对识别的问题有强烈的所有权愿望，并证明能够授权他人做得更多
- 有使用Redshift、Snowflake和Databricks Delta Lake等数据仓库和湖泊的经验
- 有使用Kafka和Spark Structured Streaming等分布式流工具的经验
- 熟悉Airflow、dbt和Delta Live表等工作流工具
- 有分布式系统的自动化测试经验（单元测试、端到端测试、QA、CI/CD、数据期望监控）
- 与应用程序工程师、产品和数据科学家合作的经验
- 领导项目的经验
- 有使用ElasticSearch等其他数据存储的经验

**为什么您会喜欢在这里工作！**

- 每月心理健康日和每年两次心理健康周
- 高竞争力的薪酬包，包括股权
- 全面的福利，包括高达100%的医疗、牙科和视力保险覆盖您和您的亲人
- 开放的休假政策，鼓励您休息所需的时间
- 年度教育津贴，确保您不断扩展技能集
- 每月健康津贴，确保您照顾好身体和心理健康
- 每月远程团队建设活动，包括游戏之夜、智力竞赛、烹饪/调酒课程等！

**薪资信息：**

该职位的估计基本薪资范围为162,000-220,000美元。此外，我们还提供有竞争力的股权包和全面福利。实际薪酬基于候选人的技能、资格、经验和地点等因素。

**催化剂是一家平等机会雇主，这意味着我们不会基于种族、宗教、国籍、性别认同、年龄、性取向或任何其他受保护的类别进行歧视。我们相信多样性不仅仅是好意，我们致力于为所有员工创造一个包容的环境。**