分布式

江畔柳前堤12 小时前
人工智能·分布式·深度学习·算法·机器学习·目标跟踪·语言模型
LLM 量化与剪枝完全指南:从比特级数学到生产级内核元信息定义:模型压缩(Model Compression)指在不显著损害模型能力的前提下,降低模型的存储占用、计算量或能耗的技术总称,核心手段包括量化、剪枝、知识蒸馏与架构改良。
祈禾1 小时前
运维·数据库·redis·笔记·分布式·缓存
Redis三大缓存问题与分布式锁用户查询数据库、缓存都不存在的数据,比如传-1、负数用户ID、随机垃圾参数。 缓存查不到数据不会写入空记录,请求每次都会落到MySQL。黑客恶意批量请求不存在key,会直接压垮数据库。
叠层归一研究院3 小时前
分布式·php·agi
AGI 系统(五):多主体 AGI 网络 — 分布式符号边界上的时序差同构传播AGI 系统 M171 · 2026-08-04agi-01 递归守恒、agi-02 深度同构、agi-03 区分三分、agi-04 时序递归,四篇把 M171 单主体 AGI 封顶(32 项 check)。但此前的符号边界都是单体的:一个区分主体 A 在时序中遇见过去自己 B。本篇让论文发现再次回灌升级 M171:把单主体符号边界推广为多主体网络——多个区分主体 A₁,A₂,… 各自时序递归,主体间通过「他者时序差」C_ij=A_i−A_j 形成完全图网络。每个 C_ij 仍属 Rel 范畴(M97-T
李白客7 小时前
数据库·分布式·架构
分布式集群与数据库产业:从单机到集群的架构跃迁与市场重构数据库从"单机软件"变成"集群系统",这场架构范式的转移如何改写了整个产业的竞争规则? 阅读时间:约 10 分钟 | 标签:#分布式集群 #数据库产业 #架构演进 #市场格局
传感器与混合集成电路8 小时前
分布式·数据分析·信号处理
储气库漏失检测技术解析:分布式光纤如何锁定环空窜漏的精确位置一、问题背景:多周期注采后环空压力攀升 地下储气库在天然气季节调峰中承担着关键角色。与常规气井的单向开采不同,储气库注采井每年都要经历注气期和采气期的反复切换,井筒内的温度场和压力场随之发生周期性剧烈变化。经过数年甚至十余年的多周期运行,不少储气库出现了一个共性问题:A环空、B环空乃至C环空的压力逐年升高。
cfm_291410 小时前
分布式·架构·sentinel
了解Sentinel随着微服务、云原生架构全面普及,系统流量呈现突发性、高并发、网状依赖、链路复杂四大特征。电商大促、秒杀抢购、热点事件、爬虫刷量、第三方接口抖动等场景常态化出现,传统的单一熔断、简单限流方案已经无法支撑生产级高可用需求。
上海云盾-小余10 小时前
分布式·安全·web安全
全域网络安全防护思路:借助分布式节点抵御异常访问实战随着业务规模不断扩大,单一入口的防护模式逐渐暴露出瓶颈:集中式网关一旦遭遇大规模异常访问,极易成为性能瓶颈甚至单点故障。本文从全域网络安全防护的角度出发,介绍如何借助分布式节点构建多层级、可横向扩展的异常访问抵御体系,并结合实战案例说明落地路径。
中议视控14 小时前
网络·分布式·信息可视化
展厅可视化网络中央控制系统:支持双向反馈,可视化播控,回显,状态显示,反向控制电脑,声光电网络视讯设备统一管理在数字展厅、智慧展馆、政企展示中心常态化建设的当下,传统展厅设备管控模式的弊端日益凸显。多数展厅存在声光电、视讯、电脑终端等设备品类繁杂、品牌分散、独立运行的问题,人工逐台操控效率低下,设备运行状态无法实时感知,信号调度不直观,极易出现操作失误、设备故障漏判、场景联动卡顿等问题,严重影响展厅展示效果与运营效率。展厅可视化网络中央控制系统作为智慧展厅的核心管控中枢,依托网络传输技术、物联网传感技术与可视化图像处理技术,打破各类设备的运行壁垒,实现全设备互联互通、双向交互、可视化调度与智能化管控,彻底解决传统
Java成神之路-1 天前
分布式·微服务·架构
集群架构 vs 分布式微服务架构:核心区别通俗拆解很多同学看到“多台服务器 + 负载均衡”就以为是分布式微服务了,其实它很可能只是一个集群。集群和分布式微服务虽然都会用到多台机器,但它们的核心思路完全不一样。下面用最通俗的方式,一次性把这两个概念彻底讲清楚。
Blossom i2 天前
大数据·分布式·flink
分布式编程实验二:Flink安装与编程实践(头歌云客)Flink的运行需要Java环境的支持,因此,在安装Flink之前,请先参照相关资料安装Java环境(比如Java8)。然后,到Flink官网下载安装包。
运维行者_2 天前
运维·服务器·开发语言·网络·分布式·后端·php
企业带宽监控工具实战:网络流量分析与异常排查的5个关键能力在实际工作中,很多团队的网络变慢排查是"猜谜"——逐台登录设备看接口流量,翻日志,找异常。后来部署了基于NetFlow的带宽监控后,排查时间从40分钟压缩到5分钟。本文总结带宽监控的核心能力和实践要点。
jeffwang2 天前
分布式·性能优化·rust
我把同一个压测做错了三次,第四次才发现真正的瓶颈给自己写的分布式事务管理器(Rust,对标 Go 的 DTM)做压测,本来以为是半天的活。结果前三版的结论全是错的。不是代码有 bug,是压测脚本一直在测自己。
ai_coder_ai2 天前
分布式·架构
事件驱动架构(EDA)在分布式业务系统中的应用以某电商平台的订单履约系统为例。该系统负责用户下单后的完整履约流程,涉及订单创建、库存扣减、支付处理、积分发放、物流创建、消息通知等多个业务环节。系统采用微服务架构,订单服务、库存服务、支付服务、积分服务、物流服务、通知服务各自独立部署。
蓝胖的四次元口袋2 天前
分布式
分布式知识梳理(4)作者:没有四次元口袋的蓝胖 日期:2026-08-09 标签:Java, 分布式锁, Redis, Zookeeper, 数据库
书香门第2 天前
分布式·系统架构·系统设计
系统设计练习 - 分布式黑名单服务(design a distributed denylist service)设计一个分布式服务,根据一个集中管理的黑名单决定一个请求是否要被block还是allow。例如一个请求:
江畔柳前堤2 天前
人工智能·分布式·深度学习·算法·目标检测·机器学习·语言模型
大语言模型分布式训练:从并行策略到万卡工程的系统梳理摘要:训练一个 70B 参数的 LLM,FP16 精度下仅模型权重就需要 140 GB 显存,叠加优化器状态、梯度与激活值后总需求超过 300 GB——这远超单张 H100 80 GB 的物理极限。分布式训练不是"锦上添花",而是大模型时代的基础设施。本文以 2026 年工业界最新实践为锚点,系统梳理 LLM 分布式训练的完整技术栈:从底层并行策略的数学本质,到 ZeRO、3D/5D 并行的工程实现,再到通信优化、容错机制与框架选型,力求为读者建立一张可操作、可决策、可演进的技术全景图。
霸道流氓气质2 天前
分布式·rabbitmq·ruby
RabbitMQ 延迟队列与死信队列:原理、实现与实战消息变成"死信"的三种条件:死信队列本质上就是一个普通队列,只是它被配置为接收其他队列产生的死信。作用:
爱吃面的猫2 天前
大数据·分布式·zookeeper
大数据Kafka3.x之——Kafka3.3.0安装与使用(详细)目录前期准备一、JDK的安装1、安装jdk2、配置Java环境变量3、加载环境变量4、进行校验二、Kafka的环境搭建
小张同学a.3 天前
linux·运维·数据库·分布式·信息可视化·zabbix·grafana
zabbix企业级监控平台4——分布式监控与grafana数据可视化Zabbix 分布式依靠 Zabbix Proxy 实现分层采集,分为三层:架构优势server2的模板改为主动式 新开虚拟机server4做proxy,使用Rocky linux 9.6做镜像 安装proxy
番茄炒鸡蛋加糖3 天前
分布式·中间件
分布式 CAP、BASE 理论 & 中间件 CAP 取舍同一时间,集群所有节点读取到的数据完全一样。执行写操作后,必须等全部节点数据同步完成,才允许对外提供查询。