分布式

Francek Chen2 小时前
大数据·数据库·分布式·hbase
【大数据存储与管理】实验3:熟悉常用的HBase操作【作者主页】Francek Chen 【专栏介绍】 ⌈ ⌈ ⌈大数据技术原理与应用 ⌋ ⌋ ⌋专栏系统介绍大数据的相关知识,分为大数据基础篇、大数据存储与管理篇、大数据处理与分析篇、大数据应用篇。内容包含大数据概述、大数据处理架构Hadoop、分布式文件系统HDFS、分布式数据库HBase、NoSQL数据库、云数据库、MapReduce、Hadoop再探讨、数据仓库Hive、Spark、流计算、Flink、图计算、数据可视化,以及大数据在互联网领域、生物医学领域的应用和大数据的其他应用。 【GitCode
七夜zippoe3 小时前
数据库·分布式·维度·dolphindb·数据写入
DolphinDB分布式表:创建与管理本文深入讲解DolphinDB分布式表的创建与管理。从分布式表原理到创建方法,从数据写入到查询优化,从分区管理到运维监控,全面介绍分布式表的核心操作。通过丰富的代码示例,帮助读者掌握分布式表的设计和管理技能。
KmSH8umpK3 小时前
数据库·redis·分布式
Redis分布式锁进阶第十七篇Redis分布式锁进阶第十七篇:分布式锁+网关层联动限流 + 锁前置削峰防护 + 大促入口全链路防击穿实战方案
fengxin_rou3 小时前
java·开发语言·jvm·分布式·rabbitmq
JVM 内存结构与内存溢出 / 泄漏问题全解析堆溢出(java.lang.OutOfMemoryError: Java heap space)通常发生在程序持续创建对象且无法被 GC 及时回收的场景下。
gQ85v10Db17 小时前
redis·分布式·微服务
Redis分布式锁进阶第十七篇:微服务分布式锁全局治理 + 跨团队统一规范落地 + 全链路稳定性提升方案Redis分布式锁进阶第十七篇:微服务分布式锁全局治理 + 跨团队统一规范落地 + 全链路稳定性提升方案
gQ85v10Db1 天前
redis·分布式·缓存
Redis分布式锁进阶第十八篇:本地缓存+分布式锁双锁架构 + 高并发削峰兜底 + 极致性能无损优化实战Redis分布式锁进阶第十八篇:本地缓存+分布式锁双锁架构 + 高并发削峰兜底 + 极致性能无损优化实战
小江的记录本1 天前
java·数据库·分布式·后端·缓存·kafka·rabbitmq
【Kafka核心】Kafka高性能的四大核心支柱:零拷贝、批量发送、页缓存、压缩本文全方位、结构化拆解Kafka高性能的四大核心支柱,从顶层设计逻辑、单特性深度原理、多特性协同机制、全链路闭环、场景化调优到避坑指南,构建完整的系统性知识体系。
gQ85v10Db1 天前
redis·分布式·架构
Redis分布式锁进阶第十四篇:全系列终局架构复盘 + 锁体系统一规范 + 线上全年零事故收官方案Redis分布式锁进阶第十四篇:全系列终局架构复盘 + 锁体系统一规范 + 线上全年零事故收官方案前面十三篇,我们把手写锁缺陷、Redisson原理、死锁排查、集群锁丢失、热点锁优化、联锁治理、监控巡检、混沌压测全部讲完。本篇进阶第十四篇(全系列终章),不新增知识点,只做全网可直接落地的**统一架构收口**,看完就能回团队统一锁规范、彻底锁治理闭环。
KmSH8umpK1 天前
数据库·redis·分布式
Redis分布式锁进阶第十二篇Redis分布式锁进阶第十二篇:锁监控告警全链路落地 + 异常死锁自动巡检 + 线上长效稳跑兜底方案第十一篇我们彻底解决了多资源联锁乱序导致的连环死锁。前面所有篇章,都是侧重怎么写对锁、怎么改bug、怎么应急排障。第十二篇进阶升级,不讲新加锁代码,只讲一件事:代码写好之后,如何全天候监控、自动发现死锁、提前拦截故障,做到锁问题不爆炸、不半夜告警、不临时救火。
gQ85v10Db1 天前
数据库·redis·分布式
Redis分布式锁进阶第十六篇:番外高阶避坑篇 + 隐性埋点锁故障深挖 + 疑难杂症终极兜底方案Redis分布式锁进阶第十六篇:番外高阶避坑篇 + 隐性埋点锁故障深挖 + 疑难杂症终极兜底方案十五篇主线已经全线收官,架构、规范、运维、复盘全部闭环。第十六篇做高阶番外补强,专门讲前面没提到、线上偶尔爆发、排查极难查的隐性锁疑难杂症。都是老架构师才懂的冷门坑,补齐最后一点短板,让分布式锁真正做到零盲区、零隐患。
KmSH8umpK1 天前
数据库·redis·分布式
Redis分布式锁从原生手写到Redisson高阶落地,附线上死锁复盘优化方案进阶第九篇Redis分布式锁进阶第九篇:手写锁底层缺陷深挖 + Redisson源码核心兜底 + 死锁常态化预防规范
gQ85v10Db1 天前
运维·redis·分布式
Redis分布式锁进阶第十五篇:全系列终极收官复盘 + 全站锁规范归档 + 生产零故障长期运维兜底总方案Redis分布式锁进阶第十五篇:全系列终极收官复盘 + 全站锁规范归档 + 生产零故障长期运维兜底总方案
_F_y1 天前
分布式·rabbitmq
仿RabbitMQ实现消息队列-服务端核心模块实现(5)信道模块是自研消息队列的会话层核心组件,基于 Muduo 网络库与 Protobuf 协议实现,作为客户端与服务端交互的唯一桥梁。负责接收并处理客户端全部业务请求:交换机声明删除、队列声明删除、队列绑定解绑、消息发布、消息确认、消费者订阅与取消订阅。
Lyyaoo.1 天前
数据库·redis·分布式
Redis实现分布式锁在单体应用中,我们可以使用 Java 的 synchronized 或 ReentrantLock 来保证多个线程对共享资源的互斥访问。这些锁都依赖于单一的 JVM 进程——锁监视器存在于同一个堆内存中,不同线程看到的是同一把锁。
KmSH8umpK2 天前
数据库·redis·分布式
Redis分布式锁从原生手写到Redisson高阶落地,附线上死锁复盘优化方案进阶第八篇一、核心前置:生产分布式锁四大刚性底线所有Redis分布式锁,必须同时达标,缺一不可上线:全局强互斥、宕机自动防死锁、禁止跨线程误删锁、集群切换高可用不丢锁。纯手写简易锁,线上必触发故障。
KmSH8umpK2 天前
数据库·redis·分布式
Redis分布式锁从原生手写到Redisson高阶落地,附线上死锁复盘优化方案进阶第七篇前面六篇我们吃透了Redis核心内核、持久化机制、主从哨兵集群架构、缓存三大经典问题击穿/穿透/雪崩、高频热点key治理、批量命令性能调优。本篇直接对标生产核心刚需,聚焦分布式锁全链路闭环落地。不堆砌理论、不空谈源码,先徒手从零写原生Redis分布式锁,逐行暴露手写版致命隐患,再平滑过渡Redisson生产级高阶锁全场景落地,最后补齐一线真实线上死锁事故全量复盘、根因定位、应急止血、长效整改全套方案,看完直接可对标架构师生产落地标准,适配秒杀、库存扣减、订单幂等、资金对账全核心链路。
_F_y2 天前
分布式·rabbitmq
仿RabbitMQ实现消息队列-服务端核心模块实现(4)路由模块是自研消息队列的核心基础模块,负责路由键合法性校验、绑定键合法性校验、交换机消息路由匹配三大核心能力。 适配直连(DIRECT)、广播(FANOUT)、主题(TOPIC)三种交换机类型,严格遵循 RabbitMQ 路由语义规范,同时做绑定键通配符语法合法性强校验,杜绝非法通配符格式,保障路由匹配逻辑严谨、无消息错配、漏配。
Albert Edison2 天前
分布式·rabbitmq·ruby
【RabbitMQ】发布确认模式(使用案例)作为消息中间件,都会面临消息丢失的问题。消息丢失大概分为三种情况:如下图所示:RabbitMQ 也对上述问题给出了相应的解决方案。问题 2 可以通过持久化机制,问题 3 可以采用消息应答机制。针对问题1,可以采用发布确认(Publisher Confirms)机制实现。
EXnf1SbYK2 天前
redis·分布式·架构
Redis分布式锁进阶第十二篇:全系列终极兜底复盘 + 锁架构巡检落地 + 线上零事故收尾方案Redis分布式锁进阶第十二篇:全系列终极兜底复盘 + 锁架构巡检落地 + 线上零事故收尾方案前面十一篇,我们从原生手写锁、死锁排查、Redisson源码、集群锁雪崩、热点锁治理全覆盖。第十二篇不讲新复杂原理,只做全链路收口、统一巡检标准、最后一轮高危漏洞兜底,看完直接可以牵头统一团队分布式锁架构规范。
EXnf1SbYK2 天前
数据库·redis·分布式
Redis分布式锁进阶第八篇:锁超时乱序深度踩坑 + 看门狗失效真实溯源 + 业务长耗时标准化兜底方案Redis分布式锁从原生手写到Redisson高阶落地,附线上死锁复盘优化方案(进阶第十篇)前面九篇,我们完成了原生锁手写迭代、Redisson底层原理拆解、多轮线上死锁复盘。本篇作为进阶系列收官前篇,不堆重复源码、不聊基础概念,重点解决线上最后一类高频疑难锁故障:锁超时错乱、网关断链死锁、集群跨实例锁漂移,同时统一全公司可用的分布式锁工程化落地规范,写完本篇,生产锁问题全部闭环。