分布式

Wang's Blog13 小时前
分布式·搜索引擎·kafka·elastic search
Elastic Stack梳理:Logstash Input插件详解与Codec插件应用指南之文件监控、多行日志处理与Kafka集成Input插件基础功能Input插件指定数据输入源,单个Pipeline可配置多个插件 Logstash支持丰富的数据源接入(如文件、Kafka、标准输入等)
int WINGsssss13 小时前
pytorch·分布式·python
【无标题】说明: 重点围绕:distributed_c10d.py、后端注册、init_process_group、collective 调用链、ProcessGroup 抽象类、NCCL 后端。
小安同学iter14 小时前
java·开发语言·spring boot·分布式·后端·spring cloud·微服务
天机学堂day05接口地址:/admin/questions/{id}/hidden/{hidden}请求方式:PUT请求参数: 路径占位符参数
孟意昶14 小时前
大数据·数据库·分布式·sql·mysql·doris
Doris专题27-mysql兼容性与join连接Apache Doris高度兼容MySQL协议和语法,但存在一些重要差异。理解这些差异对于从MySQL迁移到Doris或进行混合部署至关重要。
Wang's Blog15 小时前
分布式·elastic search
Elastic Stack梳理:Logstash线程模型与多实例部署解析线程模型与批处理机制Logstash采用多线程架构实现高效数据处理,其核心由三类线程组成:核心线程架构
西岭千秋雪_15 小时前
java·数据库·分布式·mysql·oracle
MySQL日志梳理(存储引擎层)本文为个人学习笔记整理,仅供交流参考,非专业教学资料,内容请自行甄别。本篇主要介绍InnoDB 存储引擎层的重做日志和回滚日志,上述两个日志,是InnoDB 存储引擎特有的核心组件,是实现 ACID 特性的核心依赖
小白|15 小时前
分布式·flutter
OpenHarmony + Flutter 混合开发进阶:构建支持离线优先、边缘同步与冲突解决的分布式数据应用在电力巡检、野外勘探、应急救灾等场景中,网络不稳定甚至完全中断是常态。传统“先联网再操作”的模式极易导致:
张人玉16 小时前
大数据·hadoop·分布式·hbase
大数据hadoop系列——在ubuntu上安装HBase 伪分布式虚拟机系统:UbuntuHadoop 安装模式:伪分布式(单节点)Hbase 安装模式:伪分布式安装包:
闲人编程17 小时前
分布式·python·wpf·限流·集群·令牌·codecapsule
API限流、鉴权与监控『宝藏代码胶囊开张啦!』—— 我的 CodeCapsule 来咯!✨写代码不再头疼!我的新站点 CodeCapsule 主打一个 “白菜价”+“量身定制”!无论是卡脖子的毕设/课设/文献复现,需要灵光一现的算法改进,还是想给项目加个“外挂”,这里都有便宜又好用的代码方案等你发现!低成本,高适配,助你轻松通关!速来围观 👉 CodeCapsule官网
苦学编程的谢17 小时前
分布式·rabbitmq
RabbitMQ_4_高级特性(1)生产者发送消息之后,到达消费端可能会有以下两种情况:RabbitMQ向消费者发送消息之后,就会把这条消息删掉,那么第二种情况就会造成消息丢失。那么如何确保消费端已经成功接受了,并正确处理了呢?
回家路上绕了弯18 小时前
分布式·后端
技术团队高效协作:知识分享与协作的落地实践指南在技术团队中,“知识孤岛” 和 “协作壁垒” 是影响效率的两大核心痛点 —— 新人入职后因文档缺失摸索数月,老员工重复踩前人的坑,跨模块协作因信息不对称频繁返工。其实,高效的知识分享与协作从不是 “靠自觉”,而是一套可设计、可落地的机制体系。本文结合多年团队管理经验,拆解从 “零散分享” 到 “体系化协作” 的全流程方法,帮你打造 “知识互通、协作无间” 的技术团队。
小熊officer18 小时前
分布式·rabbitmq
RabbitMQ简介RabbitMQ 是一个开源的消息代理软件,实现了 AMQP(高级消息队列协议)标准。简单说,它就像一个邮局系统,负责在不同应用程序之间可靠地传递消息。
张人玉18 小时前
大数据·hadoop·分布式
大数据hadoop系列——在ubuntu上安装hadoop完分布式Xshell安装包Xftp7安装包虚拟机安装包Ubuntu镜像源文件Hadoop包Java包分布式集群至少需要 1 个 Master 节点(NameNode/ResourceManager) + N 个 Slave 节点(DataNode/NodeManager),先规划节点:
明达智控技术18 小时前
分布式·物联网·自动化
MR30分布式IO在污水处理厂的应用随着污水处理行业朝着智能化、高效化方向发展,传统集中式 IO 控制系统在复杂污水处理场景中逐渐显现出布线繁琐、扩展性差、维护成本高等问题。MR30 分布式 IO 模块凭借其灵活的分布式架构、稳定的通信性能以及强大的环境适应性,在污水处理工艺中实现了对各类传感器、执行器的数据采集与控制指令下发,有效解决了传统系统的痛点。
山南有清风19 小时前
数据库·redis·分布式·分布式任务
基于Redis的分布式任务调用框架实现Redis 5.0+版本后,Stream的支持可以使得Redis在轻度场景,作为消息队列使用。最近尝试借用该功能,实现一个基于消息调用的分布式任务框架的Demo,记录下学习内容。
太阳伞下的阿呆19 小时前
分布式·mysql·kafka·db·高吞吐
kafka高吞吐持久化方案(1)kafka消费消息丢入线程池,upsert数据库(mysql)。随着线程池并发加大,mq tps升高,锁冲突会加剧
Light6019 小时前
大数据·分布式·spark
Spark OA 系统深度分析与改造报告(整合版 + 领码 SPARK 改造计划 + 功能缺口)现有模块概览:关键缺口(平台底座类):权限联动(RBAC+ABAC+PBAC):审批联动(状态机 + DSL):
生成论实验室1 天前
人工智能·分布式·科技·神经网络·信息与通信
即事是道:一种基于生成论的分布式体验存在论周林东.即事是道:一种基于生成论的分布式体验存在论.哲学社会科学预印本平台:https://zsyyb.cn/abs/202512.00974.[PSSXiv:202512.00974V1]
无心水1 天前
人工智能·分布式·架构·kitex·分布式利器·字节跳动分布式·byteps
【分布式利器:大厂技术】4、字节跳动高性能架构:Kitex+Hertz+BytePS,实时流与AI的极致优化字节跳动的分布式技术,是“低延迟、高吞吐”的代名词——支撑抖音的亿级日活、剪映的AI特效、直播的实时弹幕,字节的方案始终围绕“实时流+AI”场景优化,主打“轻量、高性能、云原生”。
爬山算法1 天前
redis·分布式·缓存
Redis(167)如何使用Redis实现分布式缓存?使用Redis实现分布式缓存是一种常见且有效的提高系统性能和可扩展性的方法。Redis作为一个高性能的内存数据库,支持丰富的数据类型和操作,可以很好地满足分布式缓存的需求。