分布式

前端世界14 分钟前
分布式·架构·harmonyos
鸿蒙分布式权限管理实战指南:架构原理 + 可运行 Demo随着鸿蒙系统分布式能力的不断完善,多设备协同已经不再是概念层面的东西,而是真正落地到手机、平板、手表、车机和 IoT 设备的日常使用中。 但设备一多,问题也随之而来:设备之间到底能不能互相访问?权限怎么管?会不会被滥用?
西***634728 分钟前
分布式·音视频
「技术筑基 医疗提质」—— 分布式视频通讯系统在医疗领域的应用解析医学的发展改变了医生医治病人的方式,视频通讯系统则使医生共享信息的方式发生了改变。随着国家对医疗卫生人才培养力度的加大,手术示教和医疗观摩系统逐步成为近年来医院信息化建设的一个热点。
小李独爱秋44 分钟前
运维·服务器·分布式·计算机网络·ddos
计算机网络经典问题透视:拒绝服务(DoS)与分布式拒绝服务(DDoS)攻击全景解析在当今高度互联的数字社会,我们的生活、工作和娱乐几乎完全依赖于稳定可靠的网络服务。从在线购物、社交媒体到关键的国家基础设施,服务的可用性是其价值的基石。然而,网络世界并非一片净土,一群被称为“网络攻击者”的黑客,掌握着一种能够瞬间瘫痪任何在线服务的强大武器——拒绝服务(Denial of Service, DoS)攻击。
qq_12498707531 小时前
大数据·分布式·爬虫·python·spark·毕业设计·数据可视化
基于spark的西南天气数据的分析与应用(源码+论文+部署+安装)气象数据涵盖温度、湿度等多元信息,广泛影响日常生活、农业、交通、能源等多个领域。西南地区地形复杂、受季风影响显著,天气多变,其气象条件不仅关乎当地生态、农业与交通发展,还对下游水资源分配、防洪抗旱至关重要,提升该区域气象预报准确率与数据分析深度具有迫切现实需求。随着科技发展,气象数据量激增,传统处理方法难以应对,而 Spark 作为高效的分布式大数据处理框架,具备内存计算、并行处理等优势,可快速处理海量气象数据。在此背景下,开发基于 Spark 的西南天气数据分析系统,旨在通过大数据技术挖掘气象数据价值,
心止水j1 小时前
大数据·分布式·spark
spark rdd从实战代码中提炼出通用 RDD 数据处理流程:RDD创建 → 数据清洗 → 数据转换/合并/运算 → 数据筛选 → 结果输出(如违章记录处理:读取 HDFS 文件 → 去表头清洗 → union 合并 → map 切分 + filter 筛选 → 格式化打印)
前端世界1 小时前
分布式·华为·harmonyos
鸿蒙分布式通信安全实践:中间人攻击原理与防御实现这几年随着鸿蒙分布式能力越来越成熟,设备之间直接通信已经变成了很常见的开发场景,比如手机和手表互联、手机控制平板、智能家居联动等。但设备一多、通信一复杂,安全问题就绕不开了,其中最典型、也最容易被忽视的就是中间人攻击(MITM)。
无限大.1 小时前
分布式·微服务·架构
为什么“微服务“架构流行?——从集中式到分布式大家好,我是无限大,欢迎收看十万个为什么系列文章希望今天的内容能对大家有所帮助想象一下:你打开手机里的外卖APP,点餐、支付、查看配送状态——这背后其实是几十个独立的服务在协同工作!而支撑这些服务高效运转的,正是现在最火的"微服务架构"。
小股虫1 小时前
大数据·分布式·微服务·架构·报表·团队建设
打造跨服务数据的“可信视图”:实验效果报表的架构演进本文是「架构师的技术基石」系列的第2-3篇。查看系列完整路线图与所有文章目录:【重磅系列】架构师技术基石全景图:以「增长中台」贯穿16讲硬核实战
啊吧怪不啊吧1 小时前
网络·数据库·redis·分布式·架构
从单主机到多主机——分布式系统的不断推进目录1. 单机架构核心特点2. 什么叫分布式系统核心特点2.1 负载均衡2.2 数据库分离2.2.1 数据库读写分离
Augustvic14 小时前
分布式·kafka
消息队列KafkaRecordBatch是Kafka消息传输的最小“协议单元”,结构如下:(字段长度单位:字节)PartitionLeaderEpoch用于解决 Leader 切换时数据一致性问题,它是一个单调递增的整数,与分区的 Leader 副本绑定,本质是 Leader 副本的 “版本号”。
java1234_小锋16 小时前
分布式·zookeeper·云原生
Zookeeper分布式锁如何实现?大家好,我是锋哥。今天分享关于【Zookeeper分布式锁如何实现?】面试题。希望对大家有帮助;超硬核AI学习资料,现在永久免费了!
飞Link20 小时前
大数据·linux·hadoop·分布式
【Hadoop】Linux(CentOS7)下安装Hadoop集群三台一起执行三台一起执行如果密码太简单了就输入两次,死犟死犟的一天三台一起执行三台一起执行https://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-3.4.2/hadoop-3.4.2.tar.gz
倚肆20 小时前
java·分布式·kafka
Kafka部署指南:单机开发模式与集群生产模式( 4.1.1 版本)Apache Kafka 4.1.1 是一个高性能的分布式流处理平台,自 4.0 版本开始完全采用 KRaft 模式(不再依赖 ZooKeeper)。本文档详细介绍 Kafka 4.1.1 的两种部署模式:单机开发模式(适用于开发、测试环境)和集群生产模式(适用于高可用生产环境)。
@淡 定21 小时前
分布式·wpf
分布式事务解决方案定义:跨多个服务或数据库的事务,需要保证所有操作要么全部成功,要么全部失败。电商场景示例:必须满足二选一
大厂技术总监下海1 天前
分布式·设计模式
为何顶尖科技公司都依赖它?解码 Protocol Buffers 背后的高性能、可演进设计模式Protocol Buffers 的核心是一个 接口定义语言(IDL) 及一套 代码生成工具和运行时库。其工作流程可概括为:
回家路上绕了弯1 天前
分布式·后端
分布式系统幂等性详解:从理论到落地的完整指南在分布式系统中,“重复执行”是无法避免的常态——网络抖动导致的请求重试、消息队列的重复消费、用户误操作的重复提交、服务重启后的任务重放,都可能让同一操作被多次执行。如果系统不具备“幂等性”,这些重复操作会引发严重的数据异常:重复扣减余额、重复创建订单、重复发放积分……而幂等性,正是应对这些问题的核心保障。今天,我们就全面拆解幂等性的核心逻辑、实现方案、落地实践与避坑要点,搞懂如何让分布式系统在重复操作下依然保持数据一致。
rustfs1 天前
分布式·安全·docker·rust·开源
RustFS x Distribution Registry,构建本地镜像仓库容器镜像仓库是应用容器化部署的必选项,顶级玩家 Dockerhub 由于网络原因,在国内使用不是很顺畅,因此搭建一个企业专属的私有化镜像仓库就成为了企业云原生转型的关键。现在市面上有很多类似的解决方案,比如 Harbor, GitLab Container Registry, GitHub Container Registry 等,但是这些项目都用到了开源项目 Distribution,这个项目的主要产品就是为使用 OCI Distribution 规范的容器镜像仓库提供一个开源的 Registry 实现
lifewange1 天前
分布式·kafka
Kafka 是什么?Kafka 是一款高吞吐量、分布式的发布 - 订阅消息队列系统,核心用于在系统间异步传输大量数据流。它常被用在日志收集、实时数据处理、消息解耦、流数据管道等场景,比如将用户行为日志实时传输给分析系统,或是在微服务架构中实现服务间的异步通信,能轻松支撑百万级别的消息吞吐,且具备高容错性和可扩展性。
西敏寺的乐章1 天前
分布式·学习·zookeeper
ZooKeeper 系统学习总结学习背景:一句话定义:ZooKeeper 是一个用于维护分布式系统中一致性状态的协调系统。它不是:它解决的是: