分布式

Wang's Blog8 小时前
分布式·kafka
Kafka: 消费者核心机制1 ) 客户端演进与定位2 ) 基础消费流程1 ) 黄金规则2 ) 负载均衡示意图手动提交最佳实践:1 ) 方案1:基础消费者服务
学海_无涯_苦作舟10 小时前
分布式
分布式事务的解决方案分布式事务是指事务的参与者、支持事务的服务器、资源服务器以及事务管理器「分别位于不同的分布式系统的不同节点之上」。
ZePingPingZe12 小时前
java·分布式
秒杀-库存超卖&流量削峰这是所有噩梦的起点,超卖(卖出超过1000件)的根源。1. 逻辑:查询库存,如果够,就更新。2. 对应的简单SQL:
Wang's Blog14 小时前
分布式·https·kafka
Kafka: HTTPS证书申请集成指南1 ) 证书类型选择在云服务平台(如阿里云/腾讯云)的「SSL证书」模块,选择免费个人版证书,注意同一账户最多签发20张证书的限制。免费证书通常位于产品分类的"域名与网站" > "SSL证书"栏目。
Wang's Blog16 小时前
分布式·kafka
Kafka: 消费者高级实践之分区控制、多线程处理与 Offset 管理1 ) 问题场景:单个消费者处理多分区时效率低下,需实现分区级并行处理与独立提交机制,避免失败分区影响整体消费进度。
老鱼说AI17 小时前
人工智能·分布式·深度学习·神经网络·自然语言处理·nlp·transformer
经典论文精读第一期:DeepSeek-R1-Zero ——RL奇迹论文地址:https://arxiv.org/pdf/2501.12948通常我们训练 LLM 的范式流程是:Pretrain -> SFT (教会格式/指令) -> RLHF (对齐人类偏好)。
闲人编程18 小时前
分布式·wpf·trace·追踪·open telemetry·codecapsule
OpenTelemetry分布式追踪『宝藏代码胶囊开张啦!』—— 我的 CodeCapsule 来咯!✨写代码不再头疼!我的新站点 CodeCapsule 主打一个 “白菜价”+“量身定制”!无论是卡脖子的毕设/课设/文献复现,需要灵光一现的算法改进,还是想给项目加个“外挂”,这里都有便宜又好用的代码方案等你发现!低成本,高适配,助你轻松通关!速来围观 👉 CodeCapsule官网
BUTCHER518 小时前
分布式·zookeeper·云原生
【漏洞扫描】ZooKeeper 未授权访问以前打包安装zookeeper会有这么一行配置后来用户现场使用“绿盟科技网络安全漏洞扫描系统"发现有该端口引起的漏洞 关于这个端口:“zookeeper的admin.serverPort=8082配置用于指定Zookeeper管理控制台的端口号。默认情况下,Zookeeper会占用8080端口用于AdminServer,但通过配置admin.serverPort可以将其更改为其他端口(如8082),以避免端口冲突或安全风险。如果不需要AdminServer功能,可以注释掉该配置或在启动脚本中添加-Dzoo
苦学编程的谢18 小时前
分布式·rabbitmq
RabbitMQ_9_RabbitMQ应用问题幂等性是数学和计算机科学中某些运算的性质,它们可以被多次应用,而不会改变初始应用的结果。在应用程序中,幂等性就是指对一个系统进行重复调用(相同参数),不论请求多少次,这些请求对系统的影响都是相同的效果。
武子康18 小时前
大数据·分布式·后端
大数据-192 DataX 3.0 架构与实战:Reader/Writer 插件模型、Job/TaskGroup 调度、speed/errorLimit 配置速DataX是阿里巴巴集团自主研发并在内部广泛使用的一款高性能离线数据同步工具/平台。作为阿里大数据生态体系中的重要组件,它专门用于解决企业级数据集成过程中的异构数据源同步难题。
虫小宝19 小时前
分布式
拼多多返利app分布式锁设计:解决高并发下的佣金超发问题大家好,我是省赚客APP研发者阿可!在省赚客APP(juwatech.cn)中,用户通过拼多多商品链接下单后,系统需根据订单状态发放佣金。由于拼多多回调存在重复通知、网络重试等场景,在高并发下若无强一致性控制,极易导致同一订单多次发放佣金——即“佣金超发”。为彻底杜绝该问题,我们基于 Redis + Lua 实现了高性能、可重入、自动续期的分布式锁机制,并将其封装为通用组件 juwatech.cn.lock.DistributedLock。
Wang's Blog20 小时前
分布式·微服务·kafka
Kafka: 分布式配置动态更新之微服务总线实现1 ) 服务总线的本质与作用服务总线(Service Bus)是微服务架构中的公共通信层,为所有微服务提供统一的消息集成通道。在 NestJS 生态中,通过 @nestjs/microservices 模块集成 Kafka,实现:
老马聊技术20 小时前
数据库·分布式·hbase
HBase完全分布式集群搭建详细教程hadoop完全分布式的搭建环境例如三个节点:hadoop101、hadoop102、hadoop103
wtrees_松阳20 小时前
redis·分布式·zookeeper
分布式锁实战指南:Redis、ZooKeeper、etcd 三大方案深度对比与避坑指南(附代码)摘要:本文用“百人抢厕所”的经典场景,彻底讲透分布式锁核心原理!通过秒杀系统实战案例,手把手对比Redis/ZooKeeper/etcd三大方案的性能差异,揭秘超卖事故背后的锁陷阱,并提供可直接复用的防坑代码模板。文末附2025年最新选型决策树,帮你5分钟锁定最优方案!
Slow菜鸟20 小时前
java·开发语言·分布式
Java基础架构设计(四)| 通用响应与异常处理(单体/分布式通用增强方案)验证方式验证方式验证方式验证方式
..空空的人20 小时前
服务器·开发语言·c++·分布式·rabbitmq·protobuf
C++基于protobuf实现仿RabbitMQ消息队列---服务器模块认识1项目git链接:mq/mqdemo/muduo/protobuf/protobuf_client.cpp · 耀空/项目mq - 码云 - 开源中国
yumgpkpm20 小时前
大数据·hadoop·分布式·hdfs·flink·kafka·cloudera
Hadoop如何用Flink支持实时数据分析需求Hadoop如何支持实时数据分析需求Cloudera CMP 7.3(Cloud Data AI Platform)通过集成流处理引擎、低延迟存储系统与实时分析工具链,构建了一套端到端的实时数据分析能力体系。尽管其核心基于 Hadoop 生态,但通过组件组合与架构优化,可有效支撑金融、电信、零售等行业的毫秒至秒级实时分析需求。
武子康21 小时前
java·分布式·性能优化·消息队列·系统架构·rabbitmq·java-rabbitmq
Java-208 RabbitMQ Topic 主题交换器详解:routingKey/bindingKey 通配符与 Java 示例使用 topic 类型的交换器时,队列通过 bindingKey 绑定到交换器,其中 bindingKey 可以包含通配符进行灵活匹配。交换器在路由消息时,会将消息的 routingKey 与队列的 bindingKey 进行模式匹配,从而实现更细粒度的消息分发。
..空空的人2 天前
分布式·rabbitmq
C++基于protobuf实现仿RabbitMQ消息队列---项目设计前言:项目git链接:mq/mqdemo/muduo/protobuf/protobuf_client.cpp · 耀空/项目mq - 码云 - 开源中国
毕设源码-赖学姐2 天前
大数据·分布式·spark
【开题答辩全过程】以 基于Spark的电商用户行为分析系统为例,包含答辩的问题和答案个人简介一名14年经验的资深毕设内行人,语言擅长Java、php、微信小程序、Python、Golang、安卓Android等