分布式

qq_124987075311 小时前
大数据·人工智能·hadoop·分布式·信息可视化·毕业设计·计算机毕业设计
基于Hadoop的信贷风险评估的数据可视化分析与预测系统的设计与实现(源码+论文+部署+安装)随着社会经济快速发展,信贷业务规模持续扩大,信贷风险(尤其是信用风险)的识别、评估与控制难度日益增加,传统人工评估方式已无法满足现代金融机构的风控需求。数据可视化分析与预测技术的兴起,为信贷风控提供了新的解决方案——通过将复杂信贷数据直观呈现,结合数据分析与预测模型,可实现信贷风险的前瞻性评估。在此背景下,基于Java语言,融合Hadoop大数据处理技术、Spring Boot框架及MySQL数据库,开发一套信贷风险评估的数据可视化分析与预测系统,助力金融机构提升风控效率与准确性,减少不良贷款损失,保障信
Coder_Boy_13 小时前
人工智能·spring boot·分布式·spring
基于Spring AI的分布式在线考试系统-事件处理架构实现方案基于上述分布式在线考试系统设计,演示可直接运行的最小化工程示例(聚焦核心的「考试提交→AI评分→通知」流程),工程采用多模块Maven结构,涵盖考试服务、评分服务、通知服务三大核心服务,以及公共模块(存放通用事件、DTO、配置)。
袁煦丞 cpolar内网穿透实验室14 小时前
运维·分布式·kafka·远程工作·内网穿透·cpolar
远程调试内网 Kafka 不再求运维!cpolar 内网穿透实验室第 791 个成功挑战在家远程办公,刚接了个 Kafka 新业务模块的调试需求,结果发现:公司测试环境的 Kafka 集群藏在内网,没公网 IP,9092 端口被防火墙锁得死死的。想创建个测试 Topic?连不上 Broker;想跑个生产者发消息?本地终端直接报错;想验证消费逻辑?只能提交代码等 CI/CD 部署,或者卑微求运维临时开端口 —— 一套流程走下来,半天时间没了,喝口水的功夫,隔壁同事都写完 3 个接口了。
人间打气筒(Ada)14 小时前
分布式·虚拟化·kvm·高可用·glusterfs·热迁移
GlusterFS实现KVM高可用及热迁移本章案例主要使用之前章节所学的 KVM 及 Glusterfs 技术,结合起来从而达到 kvm 高可用和热迁移环境。利用 Glusterfs 的分布式复制卷,对 kvm 虚拟机磁盘镜像文件进行分布存储和冗余功能。
xu_yule14 小时前
数据库·redis·分布式
Redis存储(15)Redis的应用_分布式锁_Lua脚本/Redlock算法在一个分布式的系统中,也会涉及到多个节点访问同一个公共资源的情况,此时就需要通过锁来做互斥控制, 避免出现类似于 “线程安全” 的问题。
難釋懷19 小时前
分布式
分布式锁的原子性问题很多开发者认为,只要用 SET key value NX EX 加锁,再用 DEL key 解锁,就实现了“安全”的分布式锁。
ai_xiaogui20 小时前
服务器·分布式·架构·分布式架构·panelai·开源面板·ai工具开发
【开源前瞻】从“咸鱼”到“超级个体”:谈谈 Panelai 分布式子服务器管理系统的设计架构与 UI 演进人如果没有梦想,那跟咸鱼有什么区别?深夜 1:33,我还在打磨 Panelai 的子项目列表原型。虽然追梦的过程很累,但在 AI 的加持下,这个“梦想的种子”正在茁壮成长。
凯子坚持 c20 小时前
分布式
如何基于 CANN 原生能力,构建一个支持 QoS 感知的 LLM 推理调度器cann组织链接:https://atomgit.com/cann ops-nn仓库链接:https://atomgit.com/cann/ops-nn 并在 ge/shmem/hcll 栈上实现 多优先级 Continuous Batching。
飞升不如收破烂~20 小时前
数据库·redis·分布式
Redis 分布式锁+接口幂等性使用+当下流行的限流方案「落地实操」+用户连续点击两下按钮的解决方案自用总结针对用户连续点击注册按钮或脚本接口攻击的问题,核心解决方案是幂等性设计与流量控制,以下是具体的答案和实现方案:
无心水20 小时前
服务器·人工智能·分布式·后端·spring·架构·wpf
分布式定时任务与SELECT FOR UPDATE:从致命陷阱到优雅解决方案(实战案例+架构演进)在微服务架构中,分布式定时任务已成为业务处理的核心组件。然而,许多开发者从单体应用迁移到分布式环境时,仍然沿用传统"线程池+SELECT FOR UPDATE"方案,导致订单重复关闭、数据库连接池耗尽等严重故障。
Lansonli21 小时前
大数据·分布式·spark
大数据Spark(八十):Action行动算子fold和aggregate使用案例文章目录Action行动算子fold和aggregate使用案例一、fold使用案例二、aggregate使用案例
invicinble1 天前
分布式
对于分布式的原子能力当springboot的单体处理能力不足,我们需要上机器来处理的时候,就需要去使用微服务,以及相关的组件,来帮助我们提升后端处理数据的能力。
心态还需努力呀1 天前
分布式·cann
CANN仓库通信库:分布式训练的梯度压缩技术cann组织链接:https://atomgit.com/cannops-nn仓库链接:https://atomgit.com/cann/ops-nn
Coder_Boy_1 天前
java·spring boot·分布式·ddd
基于SpringAI的在线考试系统-相关技术栈(分布式场景下事件机制)以RocketMQ(国内主流、易集成Spring Boot)为例,实现最基础的「用户考试报名事件」处理场景:
程序员泠零澪回家种桔子2 天前
分布式
分布式事务核心解析与实战方案分布式事务是分布式系统中保障跨服务、跨数据库操作“原子性”的核心技术,核心目标是解决“多个独立操作要么全成功、要么全回滚”的一致性问题。以下结合应用场景、TCC 模式核心异常(空回滚/防悬挂)、Elasticsearch 实现方案三大维度,展开深度解析:
凯子坚持 c2 天前
分布式
CANN 生态中的分布式训练利器:深入 `collective-ops` 项目实现高效多卡协同cann组织链接:https://atomgit.com/cann ops-nn仓库链接:https://atomgit.com/cann/ops-nn 随着大模型时代的到来,单设备算力已难以满足训练需求。分布式训练成为标配,而通信效率直接决定了集群的扩展能力与训练速度。CANN 开源生态中的 collective-ops 项目,正是为解决 NPU 集群下的高性能通信问题而设计——它基于 HCCL(HuaWei Collective Communication Library)构建,提供 AllReduc
惊讶的猫2 天前
分布式·rabbitmq
rabbitmq实践小案例使用下面的语句在阿里云linux上创建一个rabbitmq docker实例。1、首次访问需要登录,默认的用户名和密码在配置文件中已经指定了。(即上面的docker命令指定了)
禁默2 天前
分布式·重构·aigc
打破集群通信“内存墙”:手把手教你用 CANN SHMEM 重构 AIGC 分布式算子目录前言一、 架构深剖:为什么 SHMEM 比传统通信更快?二、 实战演练:用 SHMEM 写一个“环形同步”算子
惊讶的猫2 天前
分布式·rabbitmq
rabbitmq初步介绍同步调用是一种请求 - 等待的交互模式:当服务 A 调用服务 B 时,A 会暂停自身执行,直到 B 返回结果后,A 才会继续处理后续逻辑。