数据质量监控工具/组件/平台

¥ 2000

¥ 2000 码市 Technology & Programming China
975 days ago

Description

开发组件/工具/平台
需求
1）对批处理ETL(airflow上的)进行数据质量的监测/监控/检查，
2）以及对数据库/表数据质量进行监测。
3）同时收集使用改工具的日志信息和数据。
参考项目（只需要参考项目里的小部分功能即可）：
1）https://docs.getmontecarlo.com/
2）https://www.soda.io/
3）阿里DataWorks（数据质量部分的部分功能）
https://help.aliyun.com/document_detail/73660.html
4）https://juejin.cn/post/6976236619988729886

Go Now
关注公众号,不定期副业成功案例分享
Follow WeChat

Success story sharing

Want to stay one step ahead of the latest teleworks?

Subscribe Now

Similar Teleworks

招聘岗位：程序开发与设计专才（需具备 ArcGIS REST API 概念） 我们正在寻找 3-5名 多技能的程序开发人员，参与一个具备地理信息系统（GIS）功能的外包项目。此岗位适合拥有丰富经验且高效开发能力的技术人才。 注意：若无 ArcGIS REST API 概念，请勿投递简历。 岗位要求及技能： 1. 程序开发与设计： Python开发： 精通 Python 语言，能够编写清晰且可维护的代码。 任务调度框架： 熟悉 APScheduler 或 Airflow，能够设计、开发和管理自动化任务。 HTTP请求： 熟练使用 Python 的 requests 库，能够高效发送 HTTP 请求至 ArcGIS REST Services。 网页自动化： 熟悉 Selenium，用于网页自动化和网页截图操作。 地理几何处理： 熟练使用 Shapely 处理地理几何数据。 地理空间数据： 熟悉 GeoPandas 进行地理空间数据处理。 2. 地理信息系统（GIS）： ArcGIS REST API： 必须具备 ArcGIS 概念，熟悉 ArcGIS REST API 规范及其使用方法，能够按需进行地理数据查询和处理。 坐标系转换： 熟悉 pyproj，能够处理 GIS 应用中的坐标系转换问题。 3. 数据库管理： MySQL： 熟悉关系型数据库操作，能够高效完成数据访问与查询。 SQLAlchemy： 熟练使用 Python ORM 框架，有优化数据库操作的经验。 4. 监控相关（加分项）： Grafana： 熟悉监控可视化平台，能够实现系统运行状态的可视化展示。 Prometheus： 熟悉监控指标收集系统，能够配置和维护监控环境。 5. 其他辅助技能（加分项）： 单元测试： 熟悉 pytest，能够保障代码质量。 容器化部署： 熟悉 Docker，能够设计和优化容器化环境。 岗位优势： 我们希望找到具备上述技能的工程师，能够独立开发并与团队协作。如果您满足以上 1-5项 中任一技能要求，并拥有相关经验，欢迎加入我们，共同开发高质量的地理信息系统应用。
¥ 10000-50000 Technology & Programming 开源众包 China
4 days ago
一、需求描述： 类别：区块链项目 进度：产品开发完成，近日上线。 1、定期调研区块链行业及受众，分析竞争对手，提交报告。 2、优化品牌定位，与内部团队协作确保一致，制定品牌定位陈述并有效传达。 3、规划内容策略，每周发布至少2~3 篇原创专业内容，优化搜索引擎排名，提升网站流量。 4、运营主流社交媒体账号，每周策划至少2次活动，提高粉丝活跃度和转化率。 5、监测舆情，分析品牌运营数据，依据市场反馈优化宣传与运营策略。 二、人才要求： 1、本科及以上，市场营销、广告等相关专业优先，5年以上运营经验，熟悉海外运营渠道，有区块链成功案例者优先。 1、深入了解区块链
¥ 20000 Technology & Programming 猿急送 China
4 days ago

HuntsBot,a one-stop outsourcing task, remote job, product ideas sharing and subscription platform, which supports DingTalk, Lark, WeCom, Email and Telegram robot subscription. The platform will push outsourcing task requirements, remote work opportunities, product ideas to every subscribed user with timely, stable and reliable.

简体中文 English

Platform

Support

Links

Contact US

Any questions or suggestions during use, you can contact us in the following ways:

Email: huntsbot@xinbeitime.com

Copyright© 2022-2023 www.huntsbot.com 浙ICP备2022000860号-4 All Rights Reserved.