分布式

Absinthe_苦艾酒5 小时前
分布式·微服务·eureka
SpringCloud之Eureka基础认识-服务注册中心Eureka 是 Netflix 开源的服务发现组件,后来被集成到 Spring Cloud 生态中,成为 Spring Cloud Netflix 的核心模块之一。它主要用于解决分布式系统中服务注册与发现的问题。
giser@20116 小时前
分布式·zookeeper·云原生
ZooKeeper工作机制与应用场景本文主要讲述ZooKeeper工作机制与应用场景,关于ZooKeeper的核心概念、主要特征等内容请参考构建分布式系统的一致性基石之ZooKeeper简介这篇博文。
玄武后端技术栈7 小时前
分布式·rabbitmq
RabbitMQ消息的重复消费问题如何解决?在RabbitMQ中,消息重复消费是一个常见问题,它通常发生在消费者处理消息时出现网络波动、节点故障或消费者自身处理逻辑异常,ACK 失败等情况,都会导致RabbitMQ 不能够正确感知消息已被成功处理,从而重新投递消息。以下是几种常见的解决RabbitMQ消息重复消费问题的方法:
小杜-coding9 小时前
java·spring boot·redis·分布式·spring·java-ee·mybatis
黑马点评day04(分布式锁-setnx)分布式锁:满足分布式系统或集群模式下多进程可见并且互斥的锁。分布式锁的核心思想就是让大家都使用同一把锁,只要大家使用的是同一把锁,那么我们就能锁住线程,不让线程并行,让程序串行执行,这就是分布式锁的核心思路
小猪写代码11 小时前
分布式·架构
分布式处理架构分布式处理架构是一种将计算任务分散到多台计算机或服务器上协同完成的系统设计方法。这种架构通过将工作负载分配到多个节点(可以是物理机、虚拟机或容器)来提高性能、可靠性和可扩展性。下面我将从多个角度详细解释这一概念:
吴爃14 小时前
大数据·hadoop·分布式
了解HadoopHadoop 是 Apache 基金会开发的一个开源分布式计算平台,主要用于存储和处理大规模数据集。 它能让用户在不了解分布式系统底层细节的情况下,轻松进行分布式程序的开发,将应用程序自动部署到由大量普通机器组成的集群上进行高效运算。下面为你详细介绍其应用场景和作用 hadoop生态系统包含了很多组件,主要的一个生态系统体系:
rit843249914 小时前
java·分布式·缓存
Java中的分布式缓存与Memcached集成实战分布式缓存是提升系统性能和扩展性的关键技术之一。Memcached作为一种高性能的分布式内存对象缓存系统,在许多场景下被广泛使用。本文将深入探讨如何在Java项目中集成Memcached,实现高效的分布式缓存。
lix的小鱼17 小时前
大数据·分布式·spark
Spark集群搭建之Yarn模式Spark on YARN(Yet Another Resource Negotiator)是 Spark 框架在 Hadoop 集群中运行的一种部署模式,它借助 Hadoop YARN 来管理资源和调度任务。
一刀到底21118 小时前
java·分布式·高并发
java 多核,多线程,分布式 并发编程的现状 :从本身的jdk ,到 spring ,到其它第三方。Java 在多核、多线程和高性能编程领域提供了丰富的现成框架和工具,既有标准库中的并发组件,也有第三方框架。以下是一些关键框架及其应用场景的总结:便于后面我们站在巨人的肩膀上,继续前行
hnlucky18 小时前
数据库·分布式·学习·adb·zabbix·集成学习·proxy模式
《Zabbix Proxy分布式监控实战:从安装到配置全解析》注意:实验所需的zabbix服务器的搭建可参考博客zabbix 的docker安装_docker安装zabbix-CSDN博客
it-搬运工19 小时前
分布式·rabbitmq
Rabbitmq安装下载地址:http://www.rabbitmq.com/download.html下载:https://erlang.org/download/ 安装:
一切顺势而行21 小时前
分布式·面试·kafka
kafka 面试总结Kafka的幂等性是一种机制,确保生产者发送的每条消息在Broker端只被持久化一次,即使生产者因网络问题等原因重试发送,也不会导致消息重复。
曾经的三心草1 天前
分布式·rabbitmq·高级特性
RabbitMQ-高级特性1提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档确认又分为自动确认和手动确认 自动确认就是消息送到了消费者,就把消息删除,就认为消息确认了,不管消费者是否收到 手动确认就是消费者确认了队列才会删除消息
玄武后端技术栈1 天前
分布式·rabbitmq
RabbitMQ事务机制在RabbitMQ中,生产者为了确保消息发送成功,一种是使用 confirm 确认机制,另一种就是使用事务机制,事务机制就是允许生产者在发送消息时,将多个消息操作作为一个原子单元进行处理,要么所有操作都成功执行,要么都不执行。
搞不懂语言的程序员1 天前
分布式·zookeeper·kafka
Kafka的核心组件有哪些?简要说明其作用。 (Producer、Consumer、Broker、Topic、Partition、ZooKeeper)注:Kafka 3.0+ 开始支持去ZooKeeper的KRaft模式,通过内置元数据控制器提升集群稳定性
麻芝汤圆1 天前
大数据·hadoop·分布式·spark·mapreduce
深入探索 Spark RDD 行动算子:功能解析与实战应用在大数据处理领域,Apache Spark 以其高效的分布式计算能力脱颖而出,而 RDD(弹性分布式数据集)作为 Spark 的核心概念,为数据处理提供了强大的抽象。行动算子(Action)是触发 RDD 实际计算的关键,它将分布在集群中的数据经过一系列转换后,最终以具体的形式返回结果或保存数据。本文将详细解析 Spark RDD 中的行动算子,并结合实际案例阐述其应用场景,帮助读者全面掌握这些算子的使用方法。
widder_1 天前
大数据·hadoop·分布式
大数据处理利器:Hadoop 入门指南在大数据时代,处理海量数据需要强大的技术支撑,Hadoop 应运而生。Apache Hadoop 是一个开源的分布式计算框架,致力于为大规模数据集提供可靠、可扩展的分布式处理能力。其核心设计理念是通过简单的编程模型,将数据分布在集群中的多台计算机上进行并行计算,即使单个节点出现故障,也能通过应用层的容错机制保证服务的高可用性。
predisw1 天前
分布式·kafka
kafka records deletion policy就是保存partition records 一定时间后删除。 这个是默认的策略,需要配置 cleanup.policy=delete 和 retention.ms。 retention.ms 的默认值是 604800000 ms (7 days)。 这些是默认设置。
夏天吃哈密瓜1 天前
大数据·分布式·spark
Spark-core-RDD入门Resilient Distributed Dataset 叫做弹性分布式数据集,是Spark中最基本的数据抽象,是分布式计算的实现载体,代表一个不可变,可分区,里面的元素并行计算的集合。
肥宅小叽2 天前
分布式
【shardingsphere分布式主键无效】分布式主键配置文件都配置好了,但是执行插入的时候没生效,报了错误配置需要注意,我得表名是00开头到09开头的,配置表达式的时候需要按照以下的方式去配置,不然会识别不到