分布式

无心水25 分钟前
java·人工智能·分布式·架构·限流·分布式利器·腾讯tsf
【分布式利器:腾讯TSF】10、TSF故障排查与架构评审实战:Java架构师从救火到防火的生产哲学在微服务架构大规模落地的今天,腾讯微服务框架(TSF)凭借其一站式的服务治理、配置管理、可观测性能力,成为众多企业构建稳定微服务体系的核心选择。但生产环境的复杂性注定了故障难以完全避免——注册中心脑裂导致服务调用失败、限流规则未生效引发服务过载、链路追踪中断无法定位问题……这些场景往往让架构师陷入“救火式”的被动应对。
小北方城市网12 小时前
java·数据库·redis·分布式·python·缓存
分布式锁实战指南:从选型到落地,避开 90% 的坑在单体应用中,我们用本地锁(如 Java 的 synchronized、Python 的 threading.Lock)就能解决并发问题。但在分布式系统中,多个服务实例共享同一资源(如库存、订单号、分布式任务),本地锁完全失效 —— 因为本地锁只能控制单个进程内的线程,无法跨机器、跨进程同步。此时,分布式锁就成了解决分布式并发问题的核心工具。
范桂飓13 小时前
人工智能·分布式
大模型分布式训练框架 Megatron-LMMegatron-LM 最初于 2019 年发布,是由 NVIDIA 开发的 Transformer 大模型高效训练框架。它专为数千亿甚至数万亿参数的模型二设计,具有高度可扩展性和灵活的并行策略。Megatron-LM 已经成为许多大语言模型预训练任务的首选框架。
oMcLin17 小时前
分布式·mysql·debian
如何在Debian 11上通过配置MySQL 8.0的分布式架构,提升跨区域数据同步的效率与延迟?在全球化服务背景下,数据库跨区域数据同步已成为提升业务可用性、降低访问延迟、保障容灾能力的核心需求。传统主从复制在跨区域部署时往往因网络延迟、复制滞后而难以满足高实时性需求。A5数据聚焦在 Debian 11 环境下搭建 MySQL 8.0 原生分布式架构(以 Group Replication 与 InnoDB Cluster 为核心),从硬件选型、系统配置、架构设计、参数调整到性能测试与优化,全方位呈现一个可实战落地的解决方案。
一条咸鱼_SaltyFish18 小时前
java·大数据·经验分享·分布式·微服务·架构·ai编程
[Day15] 若依框架二次开发改造记录:定制化之旅 contract-security-ruoyi近期在开展基于若依框架的项目时,面临一些特定业务需求,需进行定制化二次开发。在此记录主要改造工作,为有类似需求的朋友提供参考。需强调的是,本模块基于若依项目二次开发,仅作学习用途,不用于盈利。
maozexijr1 天前
分布式·rabbitmq
注解实现rabbitmq消费者和生产者首先在 pom.xml 中添加 RabbitMQ 依赖:上面的代码里生产者需要知道exchange和routingkey,消费者除queue外,为什么也要知道exchange和routingkey?
IT 行者20 小时前
redis·分布式·spring
Spring Security 7 OAuth2 授权码分布式存储之Redis存储方案在分布式系统中,OAuth2 授权码模式需要多个服务节点协同工作。当用户通过授权码换取访问令牌时,任何一个服务节点都能正确处理该请求,这就要求授权码及其关联的授权信息必须存储在共享存储中,而非本地内存。
潇凝子潇20 小时前
分布式·kafka
kafka之监控告警https://kafka.apache.org/kafka uikafka-eaglekafkio通过kafka 对外提供的jar 来进行自研管理kafk
Light6021 小时前
大数据·分布式·spark
从“报告”到“能力”——构建智能化、可审计的数据治理闭环——领码 SPARK 数据质量平台白皮书在传统的数据质量管理中,报告往往以 PDF、Word 或静态表格的形式存在。这种模式存在口径分散、更新滞后、规则难以复用、审计链路薄弱等根本性缺陷,直接影响决策效率与业务执行力。
maozexijr21 小时前
分布式·rabbitmq
RabbitMQ Exchange Headers类型存在的意义?在绝大多数日常业务场景中,Headers 交换机确实几乎用不到,甚至可以说「非必需」—— 因为 Topic 交换机的灵活性已经能覆盖 99% 的路由需求。但它并非完全无意义,存在一些特殊且小众的场景,用 Headers 交换机会比其他类型更优雅、更贴合需求,接下来我会把这些场景讲清楚,同时告诉你为什么日常开发中我们几乎不用它。
还在忙碌的吴小二21 小时前
分布式
XXL-SSO 分布式单点登录框架XXL-SSO是一个分布式单点登录框架,让您只需一次登录即可访问所有可信应用。该框架具有"轻量级、高可扩展、进度可控"等特性,支持登录认证、权限认证、分布式会话认证、单点登出等多种功能。
独自破碎E21 小时前
分布式·rabbitmq
RabbitMQ的消息确认机制是怎么工作的?RabbitMQ的消息确认机制主要是用于确保消息的可靠传递,防止消息丢失。通过发布确认和消费者确认来实现。
潇凝子潇1 天前
分布式·安全·kafka
Kafka 实现集群安全认证与加密机制
Justice Young1 天前
大数据·分布式·flume
Flume笔记:Flume的基本介绍和使用Apache Flume是一种分布式服务,旨在有效地收集、聚合和移动大量日志数据到集中式存储系统,如HDFS。 它具有具有源、通道和接收器的灵活架构,支持来自各种来源的可靠数据流。 Flume具有高度可扩展性和可定制性,支持日志聚合和实时数据分析等多种用例。 它与Hadoop生态系统的集成使其成为大数据管道的关键工具,确保可靠高效的数据摄取和传输。
潇凝子潇1 天前
分布式·kafka·apache
Apache Kafka 跨集群复制实现方案MirrorMaker 2 是当前推荐的跨集群复制方案,提供了更完善的特性和更好的可靠性,适合大多数企业级应用场景。
Li_7695321 天前
数据库·redis·分布式
Redis 进阶(八)—— 分布式锁提到锁,我们就想到线程安全问题。当多个线程操作同一份资源时,由于多个线程是并发执行的,执行顺序不定,由此带来的随机性,就会引发问题,所以要加锁。
xwz小王子1 天前
分布式·光纤感知
AFM | 分布式光纤感知赋能水下智能柔顺抓取近日,实验室在国际权威期刊Advanced Functional Materials(中科院一区Top,影响因子 19.0)上发表题为 “A Function-Structure-Integrated Optical Fingertip with Rigid-Soft Coupling Enabling Self-Decoupled Multimodal Underwater Sensing”的研究论文。 该研究提出了一种功能-结构一体化的光学指尖传感器,通过刚柔耦合的仿生结构与分布式光纤布拉格光栅(FB
前端不太难2 天前
分布式·状态模式·harmonyos
从本地到多端:HarmonyOS 分布式数据管理实战详解大家好,我是 子玥酱,一名长期深耕在一线的前端程序媛 👩‍💻。曾就职于多家知名互联网大厂,目前在某国企负责前端软件研发相关工作,主要聚焦于业务型系统的工程化建设与长期维护。
Yeats_Liao2 天前
人工智能·分布式·深度学习·机器学习·华为·开源
MindSpore开发之路(二十五):融入开源:如何为MindSpore社区贡献力量恭喜你!跟随《MindSpore开发之路》系列走到了这里,你已经不再是一个 AI 框架的初学者。你掌握了 MindSpore 的核心概念,能够搭建、训练和部署模型,并能熟练使用 ModelZoo、Hub 等生态工具。你已经从 MindSpore 社区“索取”了足够多的知识和工具来武装自己。
我爱娃哈哈2 天前
spring boot·分布式·后端
SpringBoot + Seata + Nacos:分布式事务落地实战,订单-库存一致性全解析你是否曾在面对复杂的微服务架构时,为数据一致性问题而头疼不已?特别是在订单系统和库存系统分离的情况下,如何保证订单创建和库存扣减的原子性?今天我们就来深入探讨如何使用SpringBoot + Seata + Nacos这套黄金组合,完美解决分布式事务的一致性问题,让你的系统在高并发场景下依然保持数据的绝对一致! 原文链接