分布式

长不胖的路人甲3 小时前
分布式·rabbitmq
RabbitMQ 死信队列 DLQ一条消息无法被正常消费,会变成死信,触发转发逻辑,只有满足下面三种情况之一才会成为死信:死信不会直接丢弃,而是交给预先绑定的DLX 死信交换机,由交换机路由到专门的死信队列(DLQ)。
可乐ea3 小时前
数据库·redis·分布式·面试题·redis八股
【Redis八股|第8篇】Redis 分布式锁原理与 Redisson 使用前面我们学习了 Redis 的数据类型、缓存问题、过期策略、内存淘汰和持久化。这一篇进入 Redis 在项目实战中非常常见的场景:分布式锁。
千逐689 小时前
分布式·华为·harmonyos
鸿蒙实战:ArkData 数据持久化管理全景解析——从 Preferences 到分布式数据同步我们要构建一个"跨设备待办清单"应用。用户在手机上新建的待办,能实时同步到平板、智慧屏;应用的主题、字号等偏好设置需要长期保存;待办条目本身数量可能上千条,需要支持按状态筛选、按时间排序、模糊搜索。这三类数据的特征截然不同,因此不能用一种存储方案"一把梭"。
BD_Marathon7 小时前
大数据·分布式·spark
什么是SparkApache Spark是目前最流行的大规模数据处理系统之一,提供支持多种编程语言的API,并且具有大量内置库和第三方库的支持
BD_Marathon10 小时前
大数据·分布式·spark
Spark浅析Spark应用程序由一个驱动器进程和一组执行器进程组成。驱动进程运行main()函数,位于集群中的一个节点上,它负责三件事:维护Spark应用程序的相关信息;回应用户的程序或输入;分析任务并分发给若干执行器进行处理。驱动器是必须的,它是Spark应用程序的核心,它在应用程序执行的整个生命周期中维护着所有相关信息。
xian_wwq7 小时前
笔记·分布式·学习·ai
【学习笔记】分布式推理:TP / PP / EP / CP 并行策略详解(20/35)这一篇是部署服务化篇的收官,主题是大多数工程师在 70B+ 模型部署时都会被问到的问题:并行怎么切?这是一个看似简单实则复杂的问题。前面几篇我们已经多次提到 TP、PP、EP、CP,但都是浅尝辄止。今天我们把它们一次性讲透。
记忆停留w8 小时前
大数据·人工智能·redis·分布式·缓存·架构·wpf
Celery+Redis 分布式异步任务队列工程落地业务逻辑传统接口同步执行模式下,所有逻辑跟随用户请求串行执行,线上长期暴露四类核心故障:引入Celery+Redis分布式队列后,将耗时、延时、周期性逻辑从主业务请求链路剥离,实现解耦、削峰、分布式调度、统一任务管理。
LitchiCheng9 小时前
大数据·分布式·spark
DGX Spark部署ComfyUI(一键安装脚本)视频链接:https://www.bilibili.com/video/BV1tfN36cEr4/?vd_source=5ba34935b7845cd15c65ef62c64ba82f
草莓熊Lotso9 小时前
数据库·人工智能·redis·分布式·缓存
【Redis 初阶】 从分布式演进背景到环境搭建全解析🎬 博主简介:做后端开发的朋友,没人能绕开 Redis。面试里它是八股重灾区,工作中它是性能救命稻草。但很多人上手就背命令、记数据结构,却很少停下来想:我们到底为什么需要 Redis?它在整个分布式架构里,处于什么位置?本文顺着技术发展的逻辑,从单机架构的演进讲起,带你理解 Redis 诞生的技术背景,拆解它的核心特性与适用场景,再一步步完成 Linux 环境的搭建与验证。全文兼顾原理与实战,既是入门指南,也能帮你梳理面试高频考点。
AI-好学者10 小时前
redis·分布式·缓存·架构
Redis高可用与分布式架构Redis 的高可用体系是层层递进的,每一层解决不同的问题:四层关系:持久化是基础,复制是前提,哨兵依赖复制,集群是最完整的方案。
ACP广源盛139246256731 天前
大数据·人工智能·分布式·单片机·嵌入式硬件
IX8024 PCIe4.0 交换芯片@ACP# RK3588:嵌入式 AI PC 标准化扩展方案在轻量化离线 AI PC、边缘智能主机、工业 AI 终端、嵌入式数字人设备赛道,瑞芯微 RK3588 是市场普及度最高的国产 8nm Arm 主控芯片。8 核 A76+A55 架构、6TOPS 独立 NPU、原生 8K 编解码、最高 32GB LPDDR5 内存,依托 RKNN 工具链可流畅运行轻量化大模型、多路视频结构化检测,是低成本嵌入式 AI PC 核心算力底座。
ACP广源盛139246256731 天前
大数据·人工智能·分布式·单片机·嵌入式硬件
IX9104 PCIe5.0 交换芯片@ACP#国产高端 AI PC 全搭配方案IX9104 是国产自研104 通道 PCIe 5.0 全无阻塞交换芯片,单通道速率 32GT/s,总双向超高带宽,向下兼容 PCIe4.0/3.0,支持 SR-IOV 虚拟化、GPU P2P 直传、设备热插拔、多主机 NTB 非透明桥,PIN TO PIN 替代进口 PEX89104,彻底解决海外芯片交期长、管制、价格高昂痛点。 作为高端 AI PC、AI 工作站、分布式推理集群的高速算力交换中枢,IX9104 可把此芯 P1/ClawCore 螯芯 AI CPU 有限原生 PCIe 通道成倍拓展,同时
珠***格1 天前
人工智能·分布式·安全·能源·边缘计算
边缘计算+轻量化AI:台区储能四可装置的“智能大脑”在新型配电台区智能化升级进程中,传统储能管控设备普遍存在策略固化、响应滞后、适配性差、依赖云端等短板,仅能依靠固定程序完成简单充放电控制,无法适配台区负荷波动、新能源间歇性出力、电网动态调压调频的复杂工况,更难以实现主动预判、智能优化。
冷咖啡离1 天前
分布式
分布式 Agent 如何把断点恢复、审计策略和执行调度收进同一条链路一条 可恢复、可审计、可扩展 的执行链把事情串起来。AX 放在技术栈的哪个位置 先看它在技术栈里的位置。AX 既不是模型层,也不是某个具体框架的替代品。 它插在 Agent 应用和底层基础设施中间,负责把上层的任务意图翻译成一套可追踪的执行过程。 mermaid-01.png
ljs6482739511 天前
大数据·hadoop·分布式
Hadoop集群部署常见问题很多小伙伴搭建Hadoop集群时,总会卡在环境配置、进程启动、集群通信、权限报错等各种问题上,反复踩坑、耗时耗力。本文整理了Hadoop3.x 集群部署最常见的10类故障,涵盖SSH免密、HDFS启动、YARN异常、端口冲突、配置报错等场景,所有命令可直接复制使用,适合新手部署、线上集群排错、面试复盘。
她说可以呀1 天前
分布式·rabbitmq·ruby
RabbitMQ Publisher_Confirms(发布确认)在简单工作队列中,生产者把消息 basicPublish 出去就认为发送成功。但这条消息可能在中途丢失:
牛奶咖啡132 天前
大数据·hadoop·分布式·hadoop是什么?有啥用?·hadoop的适用与不适用场景·hadoop伪分布式的安装部署·hadoop分布式存储操作
大数据Hadoop运维应用实践——Hadoop大数据平台基础与架构(hadoop伪分布式的安装部署)Hadoop 是 Apache 基金会维护的开源分布式存储与分布式计算框架。支持在普通商用服务器集群上,依托简易编程模型对海量数据集进行分布式处理;集群可单机横向扩展至上千台节点;不在硬件层面追求高可用,而是在应用层自动检测、处理故障,实现廉价集群上的可靠分布式运算。
豆瓣鸡2 天前
java·spring boot·分布式
Leaf 分布式 ID 生成实战——美团 Leaf 从原理到落地分库分表后自增主键废了、雪花算法机器号怎么分配、两步一个 ID 的数据库方式扛不住高并发——美团 Leaf 专治这些。号段模式用双 Buffer 预加载把 DB 查 ID 从两步优化到近零步,雪花模式用 ZooKeeper 自动分配 Worker ID 解决机器号冲突。本文从两种模式的原理讲起,到 DB 建表、部署配置。
2603_954708312 天前
服务器·网络·数据库·人工智能·分布式·安全
全维度容错设计,打造微电网安全运行屏障在工业园区、智能制造基地、零碳产业园的微电网运行场景中,光伏、储能、充电桩、柔性负荷多设备高密度耦合,电网工况动态波动、设备运行频次高、现场工况复杂多变。相较于普通民用电力场景,工业微网最大的核心诉求并非单纯的节能降本,而是安全、连续、稳定、不停机。