apache-doris安装兼datax-web配置

Doris安装

官方快速开始链接

  1. 下载2.1.10,解压。我这边个人服务器CPU是J1900,是没有
    avx2的,所以选no
  2. 配置JAVA_HOME,这里没有配置的要配置下,注意要Oracle的jdk,openjdk没有jps等工具集,后面跑datax-web用不了。
  3. 先启动FE,再启动BE。启动FE后配置BE节点mysql -uroot -P9030 -h127.0.0.1ALTER SYSTEM ADD BACKEND "127.0.0.1:9050";一般来说第一次启动FE成功的时候会打印ip,如果后续启动有问题,注意将fe.conf的priority_networks配置一下。重新启动就没问题了。

DataX

  1. 下载压缩包,解压,DataX

DataX-Web

  1. 下载压缩包,解压,Datax-Web
  2. 修改application.yml,配置下数据库的连接信息
  3. 执行configure.sh,初始化下数据库,默认的数据库是dataxweb,如果没有执行到,自己去bin目录下找datax_web.sql在数据库执行
  4. 执行start-all.sh启动两服务。
  5. 官方安装文档说python3的话要替换datax的bin目录下3个文件,这个记得替换

注意点:

  • 端口记得放行
  • 这几个都是java应用,启动最好配置下内存,我这个小机子为了测试配置单个服务都是不超过1g
相关推荐
james的分享5 天前
大数据领域核心 SQL 优化框架Apache Calcite介绍
大数据·sql·apache·calcite
莫寒清5 天前
Apache Tika
java·人工智能·spring·apache·知识图谱
归叶再无青5 天前
web服务安装部署、性能升级等(Apache、Nginx)
运维·前端·nginx·云原生·apache·bash
忙碌5446 天前
OpenTelemetry实战指南:构建云原生全链路可观测性体系
ios·flink·apache·iphone
悠闲蜗牛�6 天前
Apache Flink实时计算实战指南:从流处理到数据湖仓一体的架构演进
架构·flink·apache
2301_816997887 天前
Apache Commons工具类
apache
心雨⁢⁢⁣7 天前
RocketMq(Apache RocketMQ 5.2.1-SNAPSHOT)消息消费流程
apache·rocketmq·java-rocketmq
切糕师学AI7 天前
Apache ZooKeeper 简介
分布式·zookeeper·apache
忙碌5447 天前
实时流处理架构深度剖析:Apache Flink在实时数仓与风控系统的工程实践
架构·flink·apache
x***r15110 天前
phpstudy_x64_8.1.1.3安装教程(含Apache/MySQL启动与端口修改)
数据库·mysql·apache