搭建Serverless社交媒体分析平台,Dataxet运维成本降低50%

社交媒体平台发展如火如荼,据相关机构统计,2024年全球社交媒体活跃用户已占全球人口总数约62.5%。亚洲知名智能媒体公司Dataxet意识到社交媒体数据分析潜在商业价值,即推出全新的社交媒体分析平台DTX360,用于提供媒体监测、社交网络分析,旨在帮助媒体行业深入理解用户行为、趋势和舆论,从而制定更有效的营销策略。

随着业务规模的扩大和客户需求的日益复杂,Dataxet发现当前开发人力有限,难以支撑业务上线的紧急需求;同时社交媒体分析平台DTX360从消息队列中快速读取处理大量数据,需要快速弹性大量计算资源。如何降低运营成本并加速产品迭代成了Dataxet的难题。

2022年,Dataxet初识华为云FunctionGraph为核心的Serverless架构,华为云函数工作流FunctionGraph支持多种编程语言和框架,Dataxet开发团队可以使用熟悉的Python开发API服务,一个接口实现为一个函数,业务逻辑聚合又简单,可以快速上线并验证新功能是否满足客户需要。

对数据分析场景,Dataxet团队将数据分析任务拆分成多个独立的函数,通过事件驱动的方式按需组装业务处理流程,每个函数负责处理特定的数据加工任务。这些函数可以根据实际需求动态地分配计算资源,并在任务完成后自动释放资源,资源利用率大幅提高。

最后,通过多轮压测验证端到端的性能满足业务最初的设计,函数快速、全自动的弹性能力不仅保障了业务处理的时延,也大大减轻运维人员的工作量,运维人员只需聚焦分析业务运行的相关指标。

▲华为云函数工作流FunctionGraph解决方案

最终,Dataxet以较少的研发投入带来了研发效能明显提升,1个月内就构建上线了基于Serverless架构的社媒数据分析平台。

运营成本方面函数工作流FunctionGraph的弹性伸缩能力使得Dataxet能够根据业务实际需求动态调整计算资源,避免了资源的浪费和瓶颈出现,相对资源常驻方案成本降低远超50%。

系统稳定性方面函数工作流FunctionGraph保证了分析任务的稳定性和连续性, Dataxet新业务持续上量,函数从400万调用/天快速增长到5000万调用。

Serverless社交媒体分析平台的上线,也为Dataxet提供了更丰富的业务场景和能力:

  • **品牌声誉管理:**Dataxet实时监测社交媒体上的舆论、品牌提及、用户反馈,帮助企业及时发现并应对潜在危机,保护品牌声誉。
  • **用户行为分析:**通过分析社交媒体用户的行为数据,Dataxet能够建立用户兴趣偏好、消费习惯等关键信息模型,根据不同用户画像定向推送媒体信息,为企业提供精准营销服务。
  • **趋势预测与洞察:**利用大数据分析和机器学习技术,Dataxet能够预测社交媒体上的热门话题和趋势,帮助企业和品牌抢占先机,制定前瞻性的营销策略。

▲Dataxet首席技术官Amien Krisna

华为云函数工作流FunctionGraph发挥的高可靠性、资源弹性伸缩能力获得Dataxet好评。Dataxet首席技术官Amien Krisna表示,随着华为云Serverless的引入,Dataxet平台业务在性能、效率和用户体验方面均显著提升。

当前Dataxet利用混合虚拟机+Serverless搭建开发环境,我们计划后期全面拥抱云原生、事件驱动计算,使用华为云函数工作流FunctionGraph编排业务流程,加深与华为云的合作,迁移更多服务到华为云函数工作流FunctionGraph

相关推荐
q***441520 小时前
Nginx 缓存清理
运维·nginx·缓存
ascarl20101 天前
记录一下es节点掉线后修复好了的情况
运维·jenkins
safestar20121 天前
Elasticsearch深度实战:从分布式原理到生产环境踩坑全记录
运维·搜索引擎·全文检索·es
小兔薯了1 天前
7. LNMP-wordpress
android·运维·服务器·数据库·nginx·php
福尔摩斯张1 天前
Linux进程间通信(IPC)机制深度解析与实践指南
linux·运维·服务器·数据结构·c++·算法
不过普通话一乙不改名1 天前
Linux 网络发包的极致之路:从普通模式到 AF_XDP ZeroCopy
linux·运维·网络
x***13391 天前
如何在Linux中找到MySQL的安装目录
linux·运维·mysql
p***92481 天前
服务器部署,用 nginx 部署后页面刷新 404 问题,宝塔面板修改(修改 nginx.conf 配置文件)
运维·服务器·nginx
HarrySunCn1 天前
Rocky服务器部署前端静态项目的注意点
运维·服务器
w***37511 天前
Nginx 的 proxy_pass 使用简介
运维·nginx