[自研开源] MyData v0.8 数据集成案例分享

开源地址:gitee | github

详细介绍:MyData 基于 Web API 的数据集成平台

部署文档:用 Docker 部署 MyData

使用手册:MyData 使用手册

试用体验:https://demo.mydata.work

交流Q群:430089673

案例:电商场景 - 跨平台集成商品

案例背景

有用户在初创阶段建了两个商城,一个在trademe平台、另一个用WooCommerce自建商店,虽然是两个独立运作的商城系统 但商品库存是共享的;

前期通过手动方式分别维护两端的商品信息和更新库存,但随着商品种类增多、两个平台的订单量增长,需要简化两边库存的检测和同步工作;

集成方案

通过调研,两个平台都能提供API和web hook,可实现定时同步和实时同步;

  • 方案一:定制开发对接程序

    优点:可以根据用户的具体需求进行定制,确保最终产品能够完全满足用户的需求和期望;

    缺点:成本较高,包括前期的人员、资源,后续的维护、需求变更等方面,对初创用户代价较高;

  • 方案二:使用MyData集成

    MyData适用于HTTP(S)协议 API 的应用之间对接数据,入驻平台即可通过配置实现数据集成;

    优点:通过界面配置即可完成数据对接,且无需额外资源和维护升级成本;

    缺点:部分需求 平台暂时无法满足;

最终,选用MyData进行集成,通过分析需求 暂时无法满足的需求 可通过升级功能实现,既低成本地实现了用户需求 也升级了平台功能;

集成效果

通过界面配置应用API、数据标准和定时任务,实现定时拉取、合并数据和邮件推送;

  • 应用API配置

  • 集成管理,查看数据量、来源、去向、任务情况

  • 数据标准

  • 定时任务

  • 推送邮件

相关推荐
weixin_307779137 小时前
Azure Data Factory ETL设计与调度最佳实践
数据仓库·性能优化·云计算·azure·etl
星哥说事10 小时前
使用开源免费雷池WAF防火墙,接入保护你的网站
web安全·开源
机器视觉知识推荐、就业指导10 小时前
开源QML控件:进度条滑动控件(含源码下载链接)
前端·qt·开源·qml
DolphinScheduler社区10 小时前
白鲸开源WhaleStudio与崖山数据库管理系统YashanDB完成产品兼容互认证
数据库·开源·认证·崖山数据库·白鲸开源
心随_风动11 小时前
RHEL与CentOS:从同源到分流的开源操作系统演进
linux·开源·centos
RestCloud12 小时前
实时数据驱动未来:谷云科技CDC实时数据集成平台新版本发布
科技·数据安全·etl·cdc·数据集成·集成平台
DolphinScheduler社区12 小时前
白鲸开源与亚马逊云科技携手推动AI-Ready数据架构创新
人工智能·科技·开源·aws·白鲸开源·whalestudio
自由鬼14 小时前
开源AI开发工具:OpenAI Codex CLI
人工智能·ai·开源·软件构建·开源软件·个人开发
晴天彩虹雨14 小时前
Flink 数据清洗与字段标准化最佳实践
大数据·数据仓库·flink
韩仔搭建15 小时前
美乐迪电玩大厅加载机制与 RoomList 配置结构分析
游戏·小程序·开源·lua