分布式

rit843249912 小时前
分布式
单向拓扑结构下异构车辆排的分布式模型预测控制(DMPC)车辆排(Platooning)技术通过车辆间协同控制,以较小车间距保持稳定队形行驶,可显著提高道路通行效率(提升20-30%)、降低能耗(减少10-20%)并增强行车安全性。然而,实际交通环境中车辆类型多样(燃油车、电动车、混合动力车混编),形成异构车辆排,其动力学特性差异给协同控制带来严峻挑战。
我要用代码向我喜欢的女孩表白14 小时前
大数据·分布式·spark
在spark集群上在部署一套spark环境,不要影响过去环境为啥呢?有这种需求,比如舍不得开资源。A工具,需要spark环境,但是A是spark3.1,B工具,需要spark环境,但是B是spark3.4。那这样咋搞,于是就有了这种情况。 首先复制新的过来
2603_9547083116 小时前
网络·人工智能·分布式·物联网·架构·系统架构
多微电网系统架构:集群协同与能量互济的网络设计在新型电力系统建设与 “双碳” 目标推进的进程中,单个微电网的 “孤岛效应” 逐渐凸显 —— 高比例新能源消纳能力有限、能量调配灵活性不足、故障时供电保障能力薄弱,难以适配区域级能源协同需求。多微电网系统通过整合多个异构微电网(交流、直流、混合架构),构建“集群协同、能量互济” 的网络体系 ,打破单个微电网的资源壁垒,实现跨区域、跨类型的能量互补与协同调度,成为提升区域能源利用效率、保障供电可靠性、推动能源转型落地的核心载体。网络设计是多微电网系统的核心骨架,其科学性直接决定集群协同的效率与能量互济的可行
8Qi816 小时前
java·分布式·微服务·中间件·rabbitmq·springcloud
RabbitMQ高级篇:消息可靠性、幂等性与延迟消息整理自黑马程序员《SpringCloud微服务开发与实战》项目 对应课程章节:MQ高级(消息可靠性、LazyQueue、死信交换机、延迟插件)
互联网散修17 小时前
分布式·wpf·harmonyos
鸿蒙跨设备实时绘图同步:从零到一实现分布式画板完整代码以整理:DrawTogether你是否想过:手机A上随手画一笔,平板B立刻显示相同的笔迹,就像两块画布被神奇地连接在了一起?这个场景常见于远程辅导、在线会议、设计协作等。传统做法需要搭建WebSocket、处理设备发现、解决网络抖动……繁琐且容易出错。
REDcker17 小时前
分布式·rabbitmq
RabbitMQ系列03 - AMQP分层与协议流转RabbitMQ 客户端与 Broker 之间使用 AMQP 0-9-1:命令在信道(Channel)上收发,底层由帧在 TCP 上传输。本文从协议分层理解「业务命令 → 会话 → 传输」,并梳理建连、发消息、消费、确认阶段的典型方法/命令对应关系(非完整规范抄录)。
一点 内容17 小时前
分布式·爬虫·scrapy
Scrapy框架深度解析:高效构建分布式爬虫的实战指南在数据驱动的时代,爬虫技术已成为获取公开信息的重要工具。然而,面对反爬机制、大规模数据抓取和分布式部署等挑战,如何高效、稳定地构建爬虫系统?今天,我将结合实战经验,分享基于 Scrapy 框架的爬虫开发技巧,涵盖反反爬策略、分布式架构和性能优化,助你轻松应对复杂场景。
Rany-17 小时前
分布式
分布式光纤传感:新一代管网探漏监测技术摘要:长期以来,长距离地埋管网的探漏一直是个大难题 —— 人工探漏盖不全、响应慢,定点传感器又只能盯着几个点,很多漏损都得等到路面冒水了才被发现。近年来,分布式光纤传感技术的成熟应用,给这个行业带来了颠覆性的改变。本文将通过分布式光纤的核心技术原理,重点介绍 DAS+BOTDR 一体化方案在自来水管网泄漏监测和防外破中的实际应用,看看这条 “光纤神经” 是如何实现管网全程实时监测、精准定位隐患的。
硅基诗人19 小时前
java·jvm·分布式
Java后端高并发核心瓶颈突破(JVM+并发+分布式底层实战)前言:高并发系统的核心,从来不是“堆机器”,而是“突破底层瓶颈”。很多Java后端开发者,能熟练使用Spring Boot、Redis、MySQL开发业务,但面对高并发场景(如秒杀、峰值流量),依然会陷入“接口超时、系统宕机、数据错乱”的困境——本质是对Java底层原理、并发机制、分布式架构的理解不够深入,只会“用框架”,不会“调框架、优底层”。
Albert Edison19 小时前
分布式·rabbitmq·ruby
【RabbitMQ】工作队列模式(使用案例)咱们在前面学习了简单模式的写法,接下来学习另外几种工作模式的写法。快速入门程序就是简单模式。此处省略。
MoFe119 小时前
分布式·rabbitmq
【Rabbitmq】windows环境下搭建与使用Erlang安装https://www.erlang.org/patches/OTP-26.2下载安装包后一直下一步安装(可选择安装路径)
qq_2975746719 小时前
分布式·kafka·linq
【Kafka系列·进阶第三篇】流处理与数据治理实战:Streams实时计算+Schema校验+多租户管控大家好,在上一篇进阶第二篇中,我们完成了Kafka全链路性能调优,让集群实现高吞吐+低延迟的双达标,彻底解决了高并发场景下的性能瓶颈。但很多同学会发现,普通的生产消费模式,只能实现消息的简单传输,无法满足实时数据清洗、聚合计算、动态过滤等业务需求;同时随着团队接入增多,消息格式混乱、权限管控缺失,也成了生产环境的新痛点。
新缸中之脑20 小时前
大数据·分布式·spark
Meta新模型Muse Spark上手体验Meta发布了Muse Spark,这是他们自Llama 4几乎整整一年前以来的首个模型发布。它是托管的,不是开放权重,API目前"仅向选定用户开放私人预览",但你今天就可以在meta.ai上试用(需要Facebook或Instagram登录)。
Rick199320 小时前
分布式·kafka
Kafka 的 ISR 是什么ISR = In-Sync Replicas 中文叫:同步副本集合它是 Kafka 保证消息不丢失、高可用的核心机制。
Thomas214320 小时前
大数据·分布式·spark
pyspark 新接口 DataSource V2 写法 写入paimon为例动态覆盖的分区表 且表可能不存在
REDcker21 小时前
分布式·rabbitmq
RabbitMQ系列04 - 流控与信用机制当生产速率持续高于消费与落盘能力时,Broker 必须先保护自己,否则可能 OOM 或磁盘打满。RabbitMQ 上常见两类手段:一是内存/磁盘水位触发的全局阻塞;二是进程间基于「信用」的反压,从慢环节一路传导到网络读端。本文区分二者并说明其关系;阈值与指标以当前版本文档为准。
謓泽21 小时前
分布式·电赛
2022年江西省大学生电子设计竞赛 H 题 — 分布式监控系统题目编号:H 题完成时间:2022 年 7 月主控芯片:双 STC89C52RC开发语言:C 语言上位机平台:Labview
rannn_11121 小时前
java·redis·分布式·后端·缓存·lua·openresty
【Redis|高级篇2】多级缓存|JVM进程缓存、Lua语法、多级缓存实现(OpenResty)、缓存同步(Canal)接下来继续学习Redis的高级篇,内容包含:分布式缓存、多级缓存、Redis最佳实践相关内容 本篇主要是介绍Redis的多级缓存,为了减轻了 Redis 的网络 I/O 压力和 Tomcat(业务应用)的 CPU/处理压力,具体有:JVM进程缓存,Lua语法,多级缓存实现(OpenResty)以及缓存同步(Canal) 欢迎大家一起学习,共同进步🥰
Rick19931 天前
数据库·redis·分布式
Redis 分布式锁:核心使用场景Redis 分布式锁的核心作用:在分布式、多实例、多线程环境下,保证同一时间只有一个进程执行某段代码,避免并发冲突、数据错乱、重复操作。
墨北小七2 天前
分布式
小说大模型的分布式训练——数据并行架构设计与实现## 一、小说生成场景下的分布式训练需求分析### 1.1 小说训练数据的特殊性小说生成场景的分布式训练面临与传统NLP任务显著不同的数据特征。小说文本具有天然的**长序列特性**,单部小说动辄数万甚至数十万字,导致训练数据的序列长度分布极不均衡——大部分数据为短序列(如对话段落、场景描写),小部分为长序列(如完整章节、情节连贯段落)。这种长短序列混合的数据集给分布式训练带来了严峻挑战。