分布式

hyunbar16 分钟前
分布式·zookeeper·云原生
ZooKeeper 未授权访问漏洞:你做的 ACL 加固可能只是“假动作”在日常安全加固中,经常会收到基础架构或安全部门的反馈:ZooKeeper 存在未授权访问漏洞。很多同学拿到需求后的第一反应是“加个 ACL 就好了”,于是动手操作一轮:添加超级用户、给某个节点设置 IP 白名单、然后觉得超级用户碍事把它删掉,顺便禁掉四字命令。这一套“组合拳”打下来,是不是就算修复完成了?
卷毛的技术笔记38 分钟前
java·redis·分布式·后端·系统架构·sentinel·lua
双十一零点扛过10倍流量洪峰:Sentinel与Redis+Lua的分布式限流深度避坑指南导读:双十一零点,流量瞬间暴涨 10 倍,数据库连接池打满,服务超时,雪崩一触即发……限流不是可选项,是微服务的生命线。今天我们来聊聊,如何在分布式环境下优雅地“丢请求”,保核心系统。
Volunteer Technology41 分钟前
大数据·hadoop·分布式
Hadoop Federation 联邦从上图中,我们可以很明显地看出现有的HDFS数据管理,数据存储2层分层的结构。也就是说,所有关于存储数据的信息和管理是放在NameNode这边,而真实数据的存储则是在各个DataNode下。而这些隶属于同一个NameNode,所管理的数据都是在同一个命名空间下的“NS”,以上结构是一个NameNode管理集群中所有元数据信息。
书香门第1 小时前
分布式·系统架构·系统设计
系统设计练习 - 实时警员安全报警系统背景:警员佩戴body camera功能要求:1. 实时接收body cam视频流2. 自动检测危险事件
该昵称用户已存在1 小时前
分布式·开源
光储微网一体管控:MyEMS 开源平台打造分布式能源管理新底座在双碳战略纵深推进的当下,分布式能源正以前所未有的速度重构中国能源版图。光伏发电从屋顶走向车棚与立面,储能系统从备用电源升级为调峰核心,微电网从概念验证迈入工程化部署。这三股技术浪潮的交汇,催生了一个刚性需求:如何用一套统一的平台,实现光伏、储能、微电网的协同管控与优化调度。
庞轩px1 小时前
redis·分布式·缓存
第六篇:Redis Cluster——分布式缓存的进阶方案在上一篇文章中,我们拆解了主从复制和哨兵机制——它们解决了单机Redis的高可用问题。但哨兵方案有一个根本性局限:所有节点存的是同一份全量数据。如果数据量超过单机内存上限,哨兵也无能为力。
marsh02061 小时前
分布式·ai·编程·技术
44 openclaw分布式事务:跨服务数据一致性解决方案在 openclaw 做到多服务协同之后,分布式事务几乎是绕不开的问题。尤其是订单、库存、账户、积分这类业务,一旦拆成多个服务,原来单体应用里一个数据库事务能解决的问题,到了微服务架构下就会变成“跨服务数据一致性”。
卧室小白2 小时前
分布式·elk·kafka
ELK+Kafka实战ELK 是三个开源软件的缩写,分别代表 Elasticsearch, Logstash 和 Kibana。这三个工具常常被用来处理和分析日志数据。
麟听科技1 天前
分布式·华为·harmonyos
HarmonyOS 6.0+ 智能家电控制APP开发实战:分布式设备联动与场景化控制落地随着物联网技术的普及,智能家居设备呈现“多品牌、多协议、多终端”的碎片化特征,用户面临“设备操控分散、联动逻辑缺失、跨场景体验割裂”等痛点。传统单品牌控制APP局限于封闭生态,无法实现跨品牌设备协同;而通用控制平台多存在协议适配不足、响应延迟高等问题。在此背景下,具备统一设备管理、灵活场景联动能力的集中控制解决方案成为行业核心需求,能够显著提升用户操作效率与智能生活体验。
czlczl200209251 天前
数据库·分布式
分布式数据库分片自动扩展某个数据表,分片数量是固定的,如256当你执行 INSERT 或 SELECT 时,数据库(或中间件 Proxy)会拿到你指定的 Shard Key(分片键),然后丢进公式里:
天微微蓝sunny1 天前
分布式
存储系统知识全景:从一块磁盘到分布式块存储最近在看 AutoMQ 的源码,无意间被 WALUtil.isBlockDevice() 这个小函数勾起了一连串疑问:
铁皮哥1 天前
java·linux·数据库·分布式·kafka·rabbitmq·rocketmq
【后端开发】RabbitMQ、RocketMQ、Kafka 怎么选?我从业务场景重新梳理了一遍🔥 个人主页:铁皮哥(欢迎关注) 📌 作者简介:28届校招生,后端开发/Agent 方向在学 📚 学习内容:Java、Python、计算机视觉、大语言模型、Agent开发 📝 专栏内容:从零开始的Claude Code零代码生活(持续更新中) ✨不只背八股,更想搞懂为什么这样设计
phltxy1 天前
分布式·apache·skywalking
分布式链路追踪实战:Apache SkyWalking 从入门到精通在微服务架构日益普及的今天,随着业务规模的不断扩大,一次普通的用户请求往往需要跨越多个服务节点、多级调用链路才能最终完成。无论是用户下单、支付结算,还是数据查询、消息推送,背后都可能牵扯网关、微服务、数据库、消息队列等多个组件的协同工作。如何清晰观测请求的完整流转路径、快速定位系统中的性能瓶颈、高效排查分布式环境下的各类故障,成为研发与运维团队日常工作中的核心诉求,也是保障系统稳定运行的关键。本文将基于分布式链路追踪的核心理论,结合企业实战场景,深度解析Apache SkyWalking的核心原理、安装部
苍煜1 天前
分布式·kafka
Kafka消息零丢失核心全解:生产者acks机制+消费者offset机制在微服务分布式架构中,Kafka作为核心消息中间件,被广泛用于业务异步解耦、流量削峰填谷、数据实时同步等场景。线上绝大多数Kafka生产事故,比如消息莫名丢失、消息重复消费、业务对账不一致、重启后消息错乱,根源都只有两个:一是生产者发送消息可靠性没配置对(acks机制),二是消费者消费进度提交没管控好(offset机制)。
何中应2 天前
分布式·rabbitmq
RabbitMQ集群搭建本文介绍如何搭建 RabbitMQ 集群,使用 RabbitMQ-3.8.34 版本相关博客:服务器清单如下,我在本地创建了如下三台虚拟机
薪火铺子2 天前
java·redis·分布式·后端
Redis 分布式锁与 Redisson 原理深度解析分布式锁是分布式系统中保证资源互斥访问的核心技术。本文深入剖析 Redis 分布式锁的实现原理、Redisson 的看门狗机制、RedLock 算法与争议、以及生产环境中的最佳实践与避坑指南。
skilllite作者2 天前
java·大数据·开发语言·chrome·分布式·架构·rust
Deer-Flow 工作流引擎深度评测报告在构建复杂业务系统时,工作流引擎往往是决定系统灵活性与稳定性的核心组件。很多团队在选型初期容易陷入“功能列表对比”的误区,却忽略了实际运行中高并发下的调度延迟、复杂依赖链路的容错能力以及极端负载下的资源表现。Deer-Flow 作为近年来备受关注的工作流解决方案,宣称在架构设计与执行效率上有了显著突破,但纸面参数能否转化为生产环境的可靠性,仍需通过真实场景的打磨来验证。
摇滚侠2 天前
java·分布式·架构
Java 项目教程《黑马商城》微服务拆分 20 - 22【黑马程序员SpringCloud微服务开发与实战,java黑马商城项目微服务实战开发(涵盖MybatisPlus、Docker、MQ、ES、Redis高级等)】 https://www.bilibili.com/video/BV1S142197x7/?p=36&share_source=copy_web&vd_source=855891859b2dc554eace9de3f28b4528 课件在线文档地址 黑马商城项目 Gitee 地址 https://gitee.com/yangjunbo-jetli
乐之者v2 天前
分布式·kafka
Kafka 跨服数据同步本文档描述一种基于 Kafka 的跨区域(多机房/多地域)数据同步方案,重点讲解技术原理、实现细节与工程实践。
喜欢流萤吖~2 天前
分布式·elasticsearch·搜索引擎
分布式搜索引擎:Elasticsearch 从入门到实战微服务架构中,数据存储的选择越来越多样化。MySQL 擅长事务和关系查询,Redis 擅长缓存,但在全文搜索这个场景下,它们都不太够用。