软件工程师，ETL

**职位描述**

Spokeo 是一家人员搜索引擎，它既启发了我们的客户，也赋予了他们力量。我们拥有超过120亿条记录，每月有1800万访客，我们重新连接朋友，团聚家庭，预防欺诈，等等。

作为 Spokeo 的 ETL 软件开发人员，您将负责使用各种数据源实施和维护 ETL 流程。这可能包括定位和分析源数据，创建数据流以提取、分析和存储摄入的数据，定义和实施数据清洗，将数据映射到公共模式，转换数据以满足业务规则，以及在 AWS 中使用 Pentaho、Python、Spark、S3、EMR 等验证内容。

**职责**（包括估计平均每周花费在每项任务上的时间。这可能会有所变化）：

- 25% - 与利益相关者合作，定义源到目标数据映射和集成工作流程的业务逻辑。
- 25% - 开发源到目标数据映射和转换以支持业务需求。
- 25% - 与数据工程师合作，增强和优化 ETL 管道中的新组件。
- 15% - 领导数据分析，必要时进行数据异常的临时调查，并维护技术文档。
- 10% - 使用数据治理、质量、清洗和其他 ETL 相关活动的最佳实践。

**要求**：

- 3年以上 ETL 和数据工程的专业经验，最好是在大数据领域使用 ETL 工具，如 Pentaho AEL 或等效工具，如 Talend、DataStage 和 Informatica。
- 先进的 SQL 编码技能，用于数据转换、分析和查询任务。具有 Python、Scala 和/或 shell 脚本的实际编码经验是一个加分项。
- 偏好在高度可扩展的分布式系统和集群架构（例如 AWS、EMR、Spark 等）中开发经验。
- 有处理大型数据集（>10M+ 记录）的经验。
- 在敏捷环境中的经验，如 scrum 和 Kanban。
- 计算机科学、信息系统或相关领域的学士学位优先（接受外国教育同等学历）。

Spokeo 向成功完成选拔流程的候选人提供书面录用通知。Spokeo 的录用通知包括基本工资、参与公司奖金计划、股票期权和全面福利。最终的录用通知将取决于多个因素，包括但不限于：市场竞争、工作级别、候选人的经验、技能等。

候选人隐私通知：[https://www.spokeo.com/recruiting-policy](https://www.spokeo.com/recruiting-policy)

Spokeo 是一家平等机会雇主。申请者将获得不考虑种族、肤色、宗教、性别、国籍、性取向、性别认同、残疾或受保护的退伍军人身份的就业考虑。Spokeo 培养了一个商业文化，来自所有人的想法和决策帮助我们成长、创新、创造最好的产品，并在快速变化的世界中保持相关性。

招聘人员或人才代理机构：Spokeo 没有义务向任何外部招聘人员或搜索公司支付费用，如果他们向 Spokeo 员工介绍候选人或其简历或个人资料，而没有 1) 一份当前、完全执行的协议存档，以及 2) 通过我们的申请跟踪解决方案被分配到开放职位（作为搜索）。