apache-doris安装兼datax-web配置

Doris安装

官方快速开始链接

  1. 下载2.1.10,解压。我这边个人服务器CPU是J1900,是没有
    avx2的,所以选no
  2. 配置JAVA_HOME,这里没有配置的要配置下,注意要Oracle的jdk,openjdk没有jps等工具集,后面跑datax-web用不了。
  3. 先启动FE,再启动BE。启动FE后配置BE节点mysql -uroot -P9030 -h127.0.0.1ALTER SYSTEM ADD BACKEND "127.0.0.1:9050";一般来说第一次启动FE成功的时候会打印ip,如果后续启动有问题,注意将fe.conf的priority_networks配置一下。重新启动就没问题了。

DataX

  1. 下载压缩包,解压,DataX

DataX-Web

  1. 下载压缩包,解压,Datax-Web
  2. 修改application.yml,配置下数据库的连接信息
  3. 执行configure.sh,初始化下数据库,默认的数据库是dataxweb,如果没有执行到,自己去bin目录下找datax_web.sql在数据库执行
  4. 执行start-all.sh启动两服务。
  5. 官方安装文档说python3的话要替换datax的bin目录下3个文件,这个记得替换

注意点:

  • 端口记得放行
  • 这几个都是java应用,启动最好配置下内存,我这个小机子为了测试配置单个服务都是不超过1g
相关推荐
小小龙学IT4 天前
Apache Airflow 2.x 深度指南:用 Python 编排一切的现代化工作流引擎
开发语言·python·apache
Shepherd06194 天前
【IT 运维】Apache 使用 mod_remoteip 恢复 Cloudflare 后的真实访客 IP
运维·tcp/ip·apache
isyangli_blog4 天前
SDN 基本应用实践 —— 使用命令行实现简易防火墙功能实验报告
服务器·php·apache
小小龙学IT5 天前
Apache Pulsar 深度解析:从架构设计到生产落地
apache
Full Stack Developme6 天前
Apache Tika 教程
java·开发语言·python·apache
laplaya6 天前
C++大型项目组件通信与依赖管理实践
c++·log4j·apache
万岳科技7 天前
教育培训小程序如何构建线上线下一体化教学体系
小程序·apache
yyuuuzz7 天前
云服务器软件部署的几个常见问题
运维·服务器·开发语言·网络·云计算·php·apache
分布式存储与RustFS7 天前
Apache Iceberg数据湖轻量化搭建:基于Rust开源存储方案
开源·apache·iceberg·rustfs·ai存储·ai memory·s3 table
睡不醒男孩0308237 天前
中启乘数 CLup 6.x Apache Doris 存算一体集群管理技术文档
apache·doris·clup