镜舟科技与西南证券合作,构建极速、高效数据平台

《金融科技发展规划(2022-2025年)》明确了高质量推进金融数字化转型的总体思路,云计算、人工智能等新兴技术开始被广泛应用,提升金融服务的便捷性,但随着日益增长的数据体量,数据的存储和处理能力日渐。 数据的金融机构需要加强数据能力建设、完善数据中心建设,并构建健全的数字安全生态。 在金融行业的数字化转型浪潮中,西南证券凭借其深厚的行业经验和前瞻性视野,与镜舟科技一起,构建一个高效、稳定且易于维护的用户运营分析系统,以满足日益增长的业务需求。

西南证券 X 镜舟科技---金融科技数字化创新篇章

西南证券,作为中国最早的证券公司之一,自1988年成立以来,一直以其多元化的业务和稳健的经营策略,为客户提供全面的金融服务。2022年,公司实现了23.29亿元的营收和5.99亿元的净利润,资产总额达到846.75亿元。

挑战:在数据洪流中的调整航向

随着业务的快速发展,西南证券的用户运营分析系统遇到了以下挑战:

1. 现有的Oracle报表平台在并发和查询性能上无法满足日益增长的业务需求,尤其是在处理10亿级别数据量时表现不佳;

2. 使用Impala进行的作业执行存在资源抢占问题,影响了整体的数据处理效率;

3. 业务团队和大数据团队使用多套系统,系统架构中包括Doris、Impala和Oracle等多个组件,增加了运维的复杂性和难度。

解决方案:技术融合与现代化改造

西南证券在经过调研选型以及POC测试后,选择与镜舟科技合作,通过以下方式解决上述挑战:

1.  数据导入与处理: 数据通过实时和离线的方式导入StarRocks,确保了数据处理的灵活性和实时性。

2.宽表与窄表的划分: 在StarRocks中根据业务逻辑进行数据表的合理划分,优化了数据结构,提高了查询效率。

相较于之前,升级后的系统架构更简洁、业务赋能的范围更广、查询与分析性能更加优秀。

应用场景:多维度的洞察支撑

  • 股票维度分析: 对5000多只股票进行多维度分析,深入挖掘市场动态。
  • 客户维度分析: 包括客户账户分析、资产分析、盈亏分析以及登入日志分析,全面了解客户需求和行为。
  • 机构维度分析: 评估各分支机构的运营状况,包括每月的成交流水和委托流水等关键指标。

收益:性能飞跃与成本优化

1. 查询性能显著提升

StarRocks系统使得原本在Oracle中无法完成的10亿数据查询任务,在10秒内即可得出结果。
2. 运维成本大幅降低
通过统一的StarRocks架构,简化了原本需要维护多套产品的复杂性,降低了运维成本。

金融行业的数字化转型是一个复杂而长期的过程,作为StarRocks在国内唯一的商业化公司,镜舟科技将继续与更多金融企业一起携手,挖掘更多数字化转型过程中的创新场景,通过技术创新,提升全企业上下从一线业务到全盘经营的数据应用效率。

相关推荐
工业甲酰苯胺3 分钟前
分布式系统架构:服务容错
数据库·架构
Data跳动14 分钟前
Spark内存都消耗在哪里了?
大数据·分布式·spark
独行soc1 小时前
#渗透测试#漏洞挖掘#红蓝攻防#护网#sql注入介绍08-基于时间延迟的SQL注入(Time-Based SQL Injection)
数据库·sql·安全·渗透测试·漏洞挖掘
woshiabc1111 小时前
windows安装Elasticsearch及增删改查操作
大数据·elasticsearch·搜索引擎
White_Mountain1 小时前
在Ubuntu中配置mysql,并允许外部访问数据库
数据库·mysql·ubuntu
Code apprenticeship1 小时前
怎么利用Redis实现延时队列?
数据库·redis·缓存
百度智能云技术站1 小时前
广告投放系统成本降低 70%+,基于 Redis 容量型数据库 PegaDB 的方案设计和业务实践
数据库·redis·oracle
装不满的克莱因瓶1 小时前
【Redis经典面试题六】Redis的持久化机制是怎样的?
java·数据库·redis·持久化·aof·rdb
lucky_syq2 小时前
Saprk和Flink的区别
大数据·flink
lucky_syq2 小时前
流式处理,为什么Flink比Spark Streaming好?
大数据·flink·spark