分布式

_waylau15 小时前
分布式·华为·架构·架构师·harmonyos·鸿蒙
鸿蒙架构师修炼之道-面向对象的分布式架构在基于对象的分布式系统中,对象的概念在分布式实现中起着极其关键的作用。从原理上来讲,所有的一切都可以被作为对象抽象出来,而客户端将以调用对象的方式来获得服务和资源。
Francek Chen17 小时前
大数据·数据库·分布式·nosql
【大数据存储与管理】NoSQL数据库:03 NoSQL与关系数据库的比较【作者主页】Francek Chen 【专栏介绍】 ⌈ ⌈ ⌈大数据技术原理与应用 ⌋ ⌋ ⌋专栏系统介绍大数据的相关知识,分为大数据基础篇、大数据存储与管理篇、大数据处理与分析篇、大数据应用篇。内容包含大数据概述、大数据处理架构Hadoop、分布式文件系统HDFS、分布式数据库HBase、NoSQL数据库、云数据库、MapReduce、Hadoop再探讨、数据仓库Hive、Spark、流计算、Flink、图计算、数据可视化,以及大数据在互联网领域、生物医学领域的应用和大数据的其他应用。 【GitCode
FeBaby20 小时前
java·redis·分布式
Java 高并发场景下 Redis 分布式锁(UUID+Lua)最佳实践一款可靠的分布式锁需满足以下 4 点核心要求,否则易引发死锁、锁误删、数据不一致等问题:互斥性:同一时间只有一个线程能持有锁,杜绝并发竞争;
richard_yuu1 天前
分布式
工控场景落地|分布式协调与动态重配置管理,如何实现产线不停机升级?在工控领域,“连续运行”是核心底线——汽车总装线、半导体晶圆加工、窑炉传动系统、机器人协同产线,一旦停机,每小时损失可能达数万元甚至数十万元。而随着工业4.0推进,产线柔性化、多设备协同、参数动态优化的需求日益迫切,传统“停机改配置、重启生效”的模式,早已无法适配现代工控系统的高效运转需求。
MoFe11 天前
分布式·rabbitmq·.netcore
【.net core】【RabbitMq】rabbitmq在.net core中的简单使用使用示例:假设订单需要设置订单时效为15秒,超时后自动修改订单状态,使用rabbitmq进行实现。参照https://blog.csdn.net/MoFe1/article/details/160134395?spm=1011.2415.3001.5331
何中应1 天前
分布式·消息队列·rabbitmq
在windows本地部署RabbitMQ本地开发,如果连接测试环境的 RabbitMQ,会导致本地产生的 MQ 消息被测试环境的服务或者其他同事的服务消费
Wild API1 天前
分布式·微服务·架构
按任务轻重做模型分流的实战思路很多团队做多模型,最开始都会先问:Claude、GPT、Gemini 谁更强?但真到工程落地,问题很快就会变成另一种问法:哪些任务该走重模型,哪些任务该走轻模型。
低客的黑调1 天前
分布式·rabbitmq
RabbitMQ-从入门到生产落地RabbitMQ 是一个开源的、基于 AMQP 协议的、高性能的消息队列中间件。它是目前 Java 生态中最流行的消息队列之一,被广泛应用于各大互联网公司。
宸津-代码粉碎机1 天前
java·大数据·spring boot·分布式·后端·python
Spring Boot 4.0虚拟线程实战续更预告:高阶技巧、监控排查与分布式场景落地指南摘要:前文已分享Spring Boot 4.0+虚拟线程基础实战、压测数据及线上5大避坑指南,收到大量开发者反馈,希望获取进阶配置、混合使用、监控排查及分布式场景的实战方案。本文正式预告后续虚拟线程实战系列更新方向,聚焦生产级落地细节,每篇均提供可复现代码、场景分析及问题解决方案,助力开发者高效、稳定地应用虚拟线程优化高并发IO场景。
霖霖总总1 天前
数据库·redis·分布式
[Redis小技巧32]Redis分布式锁的至暗时刻:从原理演进到时钟跳跃的终极博弈分布式锁的实现并非一蹴而就,它经历了一个由简入繁、由脆弱到健壮的过程。青铜时代:SETNX + EXPIRE 早期的做法是利用 SETNX (SET if Not eXists) 命令。
ZC跨境爬虫1 天前
分布式·爬虫·python·scrapy
Scrapy分布式爬虫(单机模拟多节点):豆瓣Top250项目设置与数据流全解析在爬虫开发中,面对大规模数据爬取场景,分布式架构是提升效率、突破单机性能瓶颈的核心方案。本文基于豆瓣Top250电影爬取项目,详解如何在单台电脑上模拟多台电脑的分布式爬虫场景,重点拆解Scrapy项目空间的核心配置、分布式改造关键要点,以及全流程数据流流转逻辑,面向有Scrapy基础的开发者,跳过新手入门细节,直击分布式爬虫的核心实现与优化思路。
ZC跨境爬虫2 天前
redis·分布式·爬虫·python·scrapy
通俗易懂讲解分布式爬虫基础概念(附Scrapy-Redis实操教程)很多接触爬虫有一段时间的小伙伴,在掌握了基础的单机爬虫后,一听到“分布式爬虫”就觉得高深莫测,甚至望而却步。其实分布式爬虫本质上就是“多人协作干活”,核心逻辑非常简单,今天就用最接地气的语言,把分布式爬虫的基础概念、核心原理、必备工具(Redis)以及实操部署,一次性讲明白,新手也能轻松理解,看完就能上手模拟部署。
小红的布丁2 天前
分布式
雪花算法:高并发场景下的分布式唯一ID生成方案解析雪花算法将64位整数划分为时间戳(41位)、机器ID(10位)和序列号(12位),结合高位位移运算实现毫秒级ID生成,单机每秒可承载超400万次请求。其核心逻辑通过时间有序性确保ID单调递增,同时借助机器ID的分段设计支持横向扩展。然而,时钟回拨问题可能威胁算法的可靠性,为此衍生了多种容错策略,例如短暂等待、备份机器切换及容错序列复用等,兼顾了灵活性与鲁棒性。
鲸能云2 天前
分布式
电力安全监管新规技术解读:分布式新能源电站数字化监控体系建设实践2026年7月1日起,国家发改委第41号令《电力重大事故隐患判定标准及治理监督管理规定》正式施行。该规定从技术监管角度,对新能源电站的涉网性能、监控报警系统、隐患排查治理制度提出明确的数字化能力要求。
8Qi82 天前
java·大数据·分布式·elasticsearch·搜索引擎·中间件
Elasticsearch 初识篇:核心概念与环境搭建整理自黑马程序员《SpringCloud微服务开发与实战》Day08-Elasticsearch 课程 核心目标:掌握 ES 基础概念、安装部署、倒排索引原理及 IK 分词器配置。
互联网散修2 天前
分布式·harmonyos·跨端迁移
鸿蒙实战:分布式数据对象实现本地、网络视频跨端迁移续播附完整源码:DistributedObjectDemo前一篇《用 want.param 实现网络视频播放器跨端迁移续播》解决了在线视频的进度迁移,但本地视频文件(相册中的 MP4、拍摄的视频)动辄几十 MB,无法通过 want.param 传输。HarmonyOS 提供了分布式数据对象 + 资产同步能力,让大文件也能像普通变量一样自动跨设备迁移。 本文通过完整的代码示例,手把手教你实现视频跨端续播本地资产同步的核心要点,在文章最后附上踩坑经验以及分布式数据对象完整使用流程总结。
Albert Edison2 天前
分布式·rabbitmq
【RabbitMQ】发布 / 订阅模式(使用案例)在发布 / 订阅模型中,多了一个 Exchange 角色。Exchange 常见有三种类型,分别代表不同的路由规则:
Ulyanov2 天前
分布式·python·信号处理·系统仿真·雷达电子对抗
ZeroMQ在分布式雷达仿真中的应用ZeroMQ(ØMQ/0MQ)作为一款高性能、异步的消息传递库,在分布式系统通信中表现出卓越的性能和灵活性。本文将深入探讨ZeroMQ在雷达电子战仿真中的实际应用,从基础概念到高级特性,从简单示例到复杂架构,全面解析如何利用ZeroMQ构建高效、可靠的分布式雷达仿真系统。我们将重点分析ZeroMQ的四种核心通信模式在雷达仿真场景下的适用性,设计并实现一个完整的基于ZeroMQ的通信框架,并通过实际案例验证其性能。本文旨在为雷达电子战仿真开发者提供一个实用的ZeroMQ应用指南,解决大规模分布式仿真中的通信
身如柳絮随风扬2 天前
redis·分布式·zookeeper
分布式锁深度剖析:ZooKeeper(CP)与 Redis(AP)的实现原理与对比在分布式系统中,锁是协调多个进程对共享资源互斥访问的基础工具。本文将深入分析 ZooKeeper 和 Redis 两种主流分布式锁的实现方案,结合 CAP 理论对比它们的特性,并探讨极端情况下的问题与对策。
_下雨天.2 天前
分布式·zookeeper·kafka
Zookeeper+Kafka消息队列单节点与集群部署Kafka 是 Apache 旗下开源的分布式消息队列系统(也称为分布式流处理平台)最初由 LinkedIn 开发并开源 核心作用是实现分布式系统中 “生产者 - 消费者” 模式的消息传递 解决高并发场景下的数据异步传输 解耦 削峰填谷问题