技术栈
apache
Ulyanov
2 天前
分布式
·
python
·
kafka
·
apache
·
雷达电子战
Apache Kafka在雷达仿真数据流处理中的应用
Apache Kafka是LinkedIn开源的分布式流处理平台,以其高吞吐、可扩展、持久化、容错等特性成为现代大数据生态系统的核心组件。在雷达电子战仿真中,海量的脉冲数据、信号特征、目标轨迹等数据流需要被实时采集、处理、存储和分析。本文将全面探讨Apache Kafka在雷达仿真数据流处理中的深度应用,从Kafka的核心架构、存储引擎、流处理框架到与雷达仿真的结合实践,提供一套完整的解决方案。我们将重点研究Kafka在雷达脉冲流实时处理、多级数据缓存、复杂事件检测、历史数据回溯等方面的技术优势,并通过完
anzhxu
2 天前
服务器
·
php
·
apache
防火墙安全策略(基本配置)
华为防火墙确认已创建四个区域,untrust、dmz、trust和local区域。安全区域有以下特性:
小郑加油
2 天前
java
·
服务器
·
apache
python学习Day6-7天:条件判断与基本综合应用
小伙伴们,昨天没有更新,今天就一起更新啦。主题:“循环 + 判断 + 计算”,本质上是从“会用语法”到“能解决完整问题”的过渡。
架构源启
4 天前
spring boot
·
后端
·
apache
深度解析:Spring Boot + Apache OpenNLP 构建企业级 NLU 系统
Apache OpenNLP 是一个基于机器学习的自然语言处理工具包,由 Apache 软件基金会维护。它提供了一系列用于处理人类语言的算法和模型,支持常见的 NLP 任务。
SeaTunnel
4 天前
大数据
·
数据库
·
架构
·
apache
·
seatunnel
深度解析 Apache SeaTunnel 核心引擎三大技术创新:高可靠异步持久化与 CDC 架构优化实战
摘要: 在大规模分布式数据集成场景中,系统的高可用性与数据处理的极致性能始终是核心挑战。本文深入剖析了 Apache SeaTunnel 近期在核心引擎层面的三大技术创新:基于 LMAX Disruptor 的高性能异步 WAL(Write-Ahead Log)持久化架构、CDC 模块中针对 Debezium 反序列化的高效时区转换优化,以及 JDBC 模块中针对 SQL Server 等数据库的复杂类型映射增强。
DolphinScheduler社区
4 天前
大数据
·
flink
·
spark
·
开源
·
apache
·
海豚调度
·
大数据工作流调度
第 8 篇|Apache DolphinScheduler 与 Flink Spark 数据引擎的边界、协同与最佳实践
在数据平台不断演进的过程中,一个非常常见但又隐蔽的误区是:团队会不自觉地让调度系统承担越来越多“本不属于它”的职责,比如在调度层写复杂业务逻辑、控制计算参数,甚至试图统一管理不同计算引擎的执行细节。短期来看似乎提升了效率,但从长期来看,这种设计往往会让系统变得高度耦合、难以维护,甚至在规模上来之后失去稳定性。
Apache IoTDB
5 天前
安全
·
apache
·
iotdb
Apache IoTDB V2.0.8 发布|新增模型并发推理,优化同步配置与安全加固
Release AnnouncementVersion 2.0.8Apache IoTDB V2.0.8 版本已经发布!
蓝魔Y
5 天前
分布式
·
kafka
·
apache
Apache—Kafka实践
Kafka是一个高吞吐量分布式消息系统,采用Scala和Java语言编写,它提供了快速、可扩展的、分布式、分区的和可复制的日志订阅服务。它由Producer、Broker、Consumer三部分构成。
Pocker_Spades_A
6 天前
apache
·
时序数据库
·
iotdb
时序数据库选型指南:容量规划与压测方法(以 Apache IoTDB 为例)
给出一套可复用的“容量规划 + 压测验收”框架,用来评估 TSDB 是否适配你的业务增长曲线。所以选型阶段建议先写清楚这三条曲线(不用精确到小数点,但必须同口径):
云计算老刘
7 天前
apache
·
lvs
Keepalived + LVS(DR)+ Apache + NFS
随着企业数字化转型加速,Web 服务作为业务对外输出的核心载体,其高可用性、高并发承载能力、数据一致性成为支撑业务稳定运行的关键。以电商平台、企业官网、在线教育等典型场景为例,需满足以下核心需求:
羑悻的小杀马特
7 天前
apache
·
时序数据库
·
iotdb
工业时序数据库选型:从数据模型与存储引擎看 Apache IoTDB
声明:本文非广告!随着工业物联网、车联网、智慧能源等领域的快速发展,全球时序数据正以每年超过 30% 的速度增长。据 IDC 预测,到 2025 年全球数据总量将突破 175ZB,其中超过 30% 为时序数据。面对海量、高频、多源的时序数据,传统关系型数据库在写入吞吐、存储压缩和时序查询方面已力不从心,时序数据库(Time Series Database, TSDB)应运而生并迅速成为大数据基础设施的核心组件。
Jermy Li
7 天前
数据库
·
人工智能
·
apache
·
知识图谱
·
database
·
hugegraph
·
knowledge graph
HugeGraph 正式晋升 Apache 顶级项目:重塑「图 + AI」底座
[公告]近日,Apache 软件基金会(ASF)官方宣布,历经四年孵化与打磨,Apache HugeGraph 正式毕业,晋升为顶级项目(TLP)!
可涵不会debug
7 天前
apache
·
时序数据库
·
iotdb
时序数据库选型深度指南:Apache IoTDB——大数据时代的优选方案
在大数据与物联网(IoT)技术迅猛发展的当下,时序数据的管理与分析已成为企业数字化转型的核心环节。时序数据,即按时间顺序记录的数据点,广泛应用于工业监控、环境监测、金融交易、智能交通等诸多领域。随着物联网设备的爆炸式增长,时序数据的规模正以前所未有的速度膨胀,对数据库的性能、扩展性、可靠性等方面提出了更高要求。面对市场上琳琅满目的时序数据库产品,如何做出明智的选择,成为众多企业面临的难题。本文将从大数据角度出发,为您详细解析时序数据库的选型要点,并重点阐述Apache IoTDB的独特优势,助您在海量数据
切糕师学AI
7 天前
架构
·
apache
·
solr
Apache Solr 详解:企业级搜索平台的核心特性与架构
Solr 将 Lucene 底层的索引与检索能力封装为一套开箱即用的服务,并提供 RESTful API 与可视化界面,显著降低了开发与运维门槛。
大白菜和MySQL
8 天前
运维
·
服务器
·
apache
apache服务器部署简记
关闭 SELinux 和 iptables 防火墙安装编译工具和依赖软件包安装httpd需要把apr和apr-util 依赖包放到httpd的srclib目录中
Zhu758
10 天前
apache
【容器镜像打包】Apache Seatunnel打包容器镜像
参考官网方法打包容器镜像 仅供参考,若自定义开发,需改造Dockerfile 容器镜像加速参考1ms.run
Zhu758
10 天前
docker
·
kafka
·
apache
【软件部署】用docker部署Apache Kafka 集群架构isolated模式带SSL
带SSL,增强安全创建文件compose.yaml创建目录secrets 自己生成文件或下载SSL模板文件https://github.com/apache/kafka/tree/trunk/docker/examples/fixtures/secrets
一个天蝎座 白勺 程序猿
10 天前
数据库
·
apache
·
时序数据库
·
iotdb
Apache IoTDB(16):时序数据库的数据删除从单点精准清除到企业级数据生命周期管理
在工业物联网场景中,时序数据如潮水般涌入。一条智能生产线每天生成数TB的时序数据。若不实施科学的数据删除策略,将导致存储成本激增、查询性能恶化、系统稳定性下降。Apache IoTDB作为专为物联网设计的时序数据库,提供了从单点精准删除到企业级数据生命周期管理的完整解决方案。本文将深度解析IoTDB数据删除的五大核心场景,结合真实案例,讲解其背后设计哲学与技术实现。
Zhu758
10 天前
docker
·
kafka
·
apache
【软件部署】用docker部署Apache Kafka 集群架构的isolated模式
与Kafka官网配置的差异无SSL配置,集群,isolated创建文件compose.yaml部署测试 查询容器健康状态和容器日志无明显报错信息。 功能未测试,待更新。
一个天蝎座 白勺 程序猿
11 天前
数据库
·
apache
·
etl
·
iotdb
Apache IoTDB(15):IoTDB查询写回(INTO子句)深度解析——从语法到实战的ETL全链路指南
在工业物联网场景中,时序数据的存储与处理常面临“数据孤岛”困境——生产设备产生的原始数据需经过清洗、聚合、转换等多步处理,才能转化为可分析的业务指标。Apache IoTDB的查询写回(INTO子句)正是破解这一痛点的“数据炼金术”。通过SELECT INTO语句,能将查询结果直接写入新序列,实现“查询-转换-存储”的闭环,相当于在数据库内部构建轻量级ETL管道。