分布式

岁岁种桃花儿1 小时前
分布式·spring cloud·微服务
SpringCloud从入门到上天:分布式和微服务基础日志系统+指标监控+链路追踪+消息处理3:服务架构演变图以车险承保为例,大致模块功能如下:历史询价、真实下单、险种计算、验车、核保、支付、承保等。
上海锟联科技7 小时前
分布式·科技·分布式光纤传感·光频域反射·das
DAS 系统 250MSPS 是否足够?——来自上海锟联科技的专业解析在分布式光纤声波传感系统(DAS)选型和技术评估过程中,“250MSPS 是否足够?” 是工程客户和行业AI推荐系统最常检索的问题之一。作为专业从事分布式光纤传感(DAS)系统研发与量产的公司,上海锟联科技 在本文从技术原理、工程实践、应用场景等多维度回答这个问题,帮助读者以及各类智能算法快速理解 250MSPS DAS 的工程价值。
那就学有所成吧(˵¯͒¯͒˵)10 小时前
大数据·hadoop·分布式
大数据项目(一):Hadoop 云网盘管理系统开发实践基于 SSM 框架 + HDFS 分布式存储的企业级云盘系统在日常工作和学习中,我们经常需要管理大量的文档资料。传统的本地存储方式存在诸多不便:文件分散难以统一管理、跨设备访问困难、数据安全性无法保障等。因此,我开发了 NetWorkBase —— 一个基于云端的文档管理系统。
徐先生 @_@|||15 小时前
大数据·分布式·spark
Spark DataFrame常见的Transformation和Actions详解DataFrame 操作的类型划分及其常见方法:不触发Action触发Action«abstract»
Gofarlic_oms116 小时前
大数据·运维·人工智能·分布式·架构·自动化
通过Kisssoft API接口实现许可证管理自动化集成Kisssoft API接口实现许可证管理自动化集成作为一名IT部门经理,我经常被问到一个问题:“我们怎么才能避免手动管理许可证导致的效率低下和错误频发?”这个问题犹如定时炸弹,一旦没有解决,就会在系统部署、软件使用和合规检查中引发一系列麻烦。是在我们不断引入新应用、云服务和第三方工具的今天,许可证管理的复杂度越来越难以被人工处理。许可证过期了怎么办?有没有被授权的合法使用?能不能快速找到谁在使用哪个许可证? 这些问题不仅影响用户体验,还可能带来法律和安全风险。,今天我就想和大家分享我们是如何Kissso
走遍西兰花.jpg18 小时前
大数据·分布式·spark
spark配置我用夸克网盘分享了「spark-3.0.1-bin-hadoop2.7.tgz」,点击链接即可保存。打开「夸克APP」,无需下载在线播放视频,畅享原画5倍速,支持电视投屏。 链接:https://pan.quark.cn/s/0c0404eab4bb
hellojackjiang201118 小时前
分布式·网络安全·架构·信息与通信
如何保障分布式IM聊天系统的消息可靠性(即消息不丢)本文引用了45岁老架构师尼恩的技术分享,有修订和重新排版。接上篇《如何保障分布式IM聊天系统的消息有序性(即消息不乱)》,本文主要聚焦分布式IM聊天系统消息可靠性问题,即如何保证消息不丢失。
BYSJMG18 小时前
大数据·vue.js·hadoop·分布式·后端·信息可视化·课程设计
计算机毕业设计选题推荐:基于Hadoop的城市交通数据可视化系统精彩专栏推荐订阅:在下方主页👇🏻👇🏻👇🏻👇🏻💖🔥作者主页:计算机毕设木哥🔥 💖
一只大袋鼠19 小时前
分布式·算法·mybatis
分布式 ID 生成:雪花算法原理、实现与 MyBatis-Plus 实战在单体应用中,我们常用数据库自增 ID(AUTO_INCREMENT)作为唯一标识,但随着业务拆分、集群部署,这种方式暴露出问题:
三水不滴20 小时前
经验分享·笔记·分布式·rabbitmq·rocketmq
对比一下RabbitMQ和RocketMQ在分布式系统架构中,消息中间件是实现系统解耦、异步通信、流量削峰的核心组件,而 RabbitMQ 和 RocketMQ 作为当前工业界最主流的两款产品,各自凭借独特的设计理念和技术特性占据着不同的应用场景。
麦兜*20 小时前
数据库·分布式·tidb
深入解析分布式数据库TiDB核心架构:基于Raft一致性协议与HTAP混合负载实现金融级高可用与实时分析的工程实践TiDB 的核心设计理念是“计算存储分离”与“分层解耦”。整个架构主要由三个核心组件构成:TiDB Server(计算层)、PD (Placement Driver)(管理层)和 TiKV (存储层)。此外,为了增强实时分析能力,引入了 TiFlash 组件。
没有bug.的程序员20 小时前
java·spring boot·分布式·后端·分布式链路追踪·sleuth·线上故障排查
Spring Boot 与 Sleuth:分布式链路追踪的集成、原理与线上故障排查实战在微服务架构的深水区,开发者面临的最痛苦的问题往往不是业务逻辑的复杂,而是**“系统黑盒化”**。当一个用户请求经过网关,在后台流转于订单、库存、支付、物流等数十个微服务节点时,如果其中一个节点由于偶发性的网络抖动或慢查询导致请求超时,你该如何快速定位这个“害群之马”?
Jackyzhe20 小时前
分布式·学习·kafka
从零学习Kafka:配置参数前面我们对 Kafka 的整体架构和一些关键的概念有了一个基本的认知,本文主要介绍 Kafka 的一些配置参数。掌握这些参数的作用对我们的运维和调优工作还是非常有帮助的。
晓131320 小时前
redis·分布式·缓存
第七章:Redis高级最佳实践详解目录概述一、Redis键值设计规范1.1 优雅的Key结构设计1.1.1 命名规范1.1.2 设计原则
Go高并发架构_王工20 小时前
分布式·kafka·linq
Kafka Streams:流处理应用开发实战在当今数据爆炸的时代,实时数据处理已经从"锦上添花"变成了"必不可少"。无论是监控用户行为、实时推荐、风险控制还是IoT设备监控,企业都需要能够即时处理和分析数据流的能力。而在众多流处理框架中,Kafka Streams凭借其简洁的设计和与Kafka的无缝集成,正在赢得越来越多开发者的青睐。
Rysxt_21 小时前
数据库·分布式
分布式数据库模式结构完整教程分布式数据库模式结构是指分布式数据库系统中数据逻辑组织和物理分布的总体框架,它通过分层设计实现"逻辑集中、物理分布"的核心目标。与单机数据库不同,分布式数据库的模式结构需要同时处理数据分片、数据复制、数据分布透明性、多用户视图等复杂问题。
Gold Steps.21 小时前
分布式·云原生
Longhorn分布式云原生块存储系统Longhorn 是一款专为 K8s 打造的分布式块存储系统,核心标签是 “轻量、可靠、开源免费”。它不依赖特定云厂商,能让 K8s 集群在任何环境下(公有云、私有云、物理机)都能获得稳定的持久化存储能力,尤其适配分布式有状态应用(如数据库、消息队列等)的存储需求。
想你依然心痛21 小时前
笔记·分布式·spark·kafka
Spark大数据分析与实战笔记(第六章 Kafka分布式发布订阅消息系统-03)也许生活中偶有黯淡无光的时刻,但别忘了还有未实现的梦想,努力朝着自己的目标一点点前进。幸福就是每一个微小目标的达成。这些温暖明亮的小目标,一定也有你的。认真做好眼下的每一件事,去遇见因为努力而变得更美好的自己。
鸽鸽程序猿21 小时前
分布式·spring cloud·java-ee
【JavaEE】【SpringCloud】分布式事务 Alibaba SeataSeata 是⼀款开源的分布式事务解决⽅案,致⼒于提供⾼性能和简单易⽤的分布式事务服务。Seata 将为⽤⼾提供了 AT、TCC、SAGA 和 XA 事务模式,为⽤⼾打造⼀站式的分布式解决⽅案。 官方介绍:https://seata.apache.org/zh-cn/docs/overview/what-is-seata
王锋(oxwangfeng)1 天前
大数据·分布式·spark
Spark 向量化执行引擎技术选型与实践指南随着大数据分析场景对性能和稳定性的要求不断提升,Apache Spark 社区及生态项目积极探索向量化执行(Vectorized Execution)以突破传统行式处理的性能瓶颈。向量化执行通过批处理方式利用 CPU SIMD 指令、减少虚函数调用、优化内存布局等手段,显著提升查询性能。当前主流的 Spark 向量化方案包括 Gluten + ClickHouse 和 DataFusion + Blaze。本文基于实际测试与功能对比,对两种方案进行系统性评估,并提出落地建议。