Docker环境下的Apache NiFi安装实践踩坑记录

引言:由于最近用到数据同步,故打算采用中间件工具来做数据同步,谁知第一步部署Apache NiFi环境就耽搁了好久,其中遇到一些问题,故记录下来部署成功记录
  • 问题1:HTTPS访问 HTTP ERROR 400 Invalid SNI
  • 问题2:openssl创建的证书需要导入到浏览器中
  • 问题2:HTTPS 和双向 TLS 身份验证保护的独立实例时,证书正常了,访问后提示Insufficient Permissions,这个问题目前还没解决,如果哪位朋友知道怎么处理,麻烦告知一下,感谢!!!

开始走入正题

1.拉取镜像

bash 复制代码
sudo docker pull apache/nifi

2.运行容器

bash 复制代码
# 运行
sudo docker run --restart=always --name nifi -p 8443:8443 -itd apache/nifi

# 进入容器,复制配置到目录,做持久化
# 注意复制配置文件的时候记得查看日志是否启动成功,要启动成功后进行复制
sudo  docker  cp nifi:/opt/nifi/nifi-current/conf  /opt/nifi
# 移除nifi 容器
sudo docker rm -f nifi

3.创建PKCS12证书

bash 复制代码
# 进入文件目录
cd /opt/nifi

# 删除旧证书
rm -rf *.p12

#生成RSA私钥
openssl genpkey -algorithm RSA -out nifi.key
# 创建证书签名请求CSR
openssl req -new -key nifi.key -out nifi.csr

# 填写信息
Country Name (2 letter code) [AU]: CN   # 国家/地区名称(必须填写,使用两位字母代码,如CN代表中国)
State or Province Name (full name) [Some-State]: Hunan   # 省份或州名称(必须填写,填写完整名称)
Locality Name (eg, city) []: Changsha   # 城市名称(可选,如果不填,字段为空)
Organization Name (eg, company) [Internet Widgits Pty Ltd]: Jisheyun   # 组织名称(必须填写,通常为公司名称)
Organizational Unit Name (eg, section) []: IT Department   # 组织部门名称(可选)
Common Name (e.g. server FQDN or YOUR name) []:192.168.1.9    # 服务器主机名或IP地址(必须填写)
Email Address []: admin@jishe.com   # 电子邮件地址(可选)
Please enter the following 'extra' attributes
to be sent with your certificate request
A challenge password []: <留空>   # 挑战密码(可选,可以留空)
An optional company name []: <留空>   # 可选的公司名称(可选,可以留空)

# 使用私钥和CSR创建自签名证书,有效期为3650天
openssl x509 -req -days 3650 -in nifi.csr -signkey nifi.key -out nifi.crt

# 将私钥和证书合并为 PKCS12 格式文件
openssl pkcs12 -export -in nifi.crt -inkey nifi.key -out nifi.p12 -name nifi -password pass:jisheyun123456


# 修改目录文件权限(注意需要设置权限否则会导致读取不到配置文件信息)
# 文件权限也可以修改为755,但是运行容器需要加-u 0 
chmod -R 777 /opt/nifi/

4.修改配置文件信息

bash 复制代码
# 编辑文件
sudo vim nifi.properties

# 修改服务器地址和端口
nifi.web.https.host=192.168.1.9
nifi.web.https.port=8443

# 配置加密参数
nifi.sensitive.props.key=jisheyun123456
nifi.sensitive.props.algorithm=NIFI_PBKDF2_AES_GCM_256
nifi.security.autoreload.enabled=false
nifi.security.autoreload.interval=10 secs

# 配置证书路径和密码
nifi.security.keystore=./conf/nifi.p12
nifi.security.keystoreType=PKCS12
nifi.security.keystorePasswd=jisheyun123456
nifi.security.keyPasswd=jisheyun123456
nifi.security.truststore=./conf/nifi.p12
nifi.security.truststoreType=PKCS12
nifi.security.truststorePasswd=jisheyun123456

5.重新新运行容器

bash 复制代码
# 运行新容器
sudo docker run --name nifi  --restart=always \
  -p 8443:8443 \
  -itd \
  -v /opt/nifi:/opt/nifi/nifi-current/conf \
  -e SINGLE_USER_CREDENTIALS_USERNAME=admin \
  -e SINGLE_USER_CREDENTIALS_PASSWORD=jisheyun123456 \
 registry.cn-qingdao.aliyuncs.com/jisheyun/apache_nifi:2.3.0

6.另外一种方式使用容器化参数运行(这种方式只映射证书不映射其他配置信息

bash 复制代码
# 运行容器
docker run --name nifi --restart=always \
  -v /opt/nifi:/opt/certs \
  -p 8443:8443 \
  -e SINGLE_USER_CREDENTIALS_USERNAME=admin \
  -e SINGLE_USER_CREDENTIALS_PASSWORD=jisheyun123456 \
  -e KEYSTORE_PATH=/opt/certs/nifi.p12 \
  -e KEYSTORE_TYPE=PKCS12\
  -e KEYSTORE_PASSWORD=jisheyun123456 \
  -e TRUSTSTORE_PATH=/opt/certs/nifi.p12 \
  -e TRUSTSTORE_PASSWORD=jisheyun123456 \
  -e TRUSTSTORE_TYPE=PKCS12\
  -e INITIAL_ADMIN_IDENTITY='subject=C = CN, ST = Hunan, L = Changsha, O = Jisheyun, OU = IT Department, CN = 192.168.1.9' \
  -e NIFI_WEB_PROXY_HOST='192.168.1.9' \
  -itd \
 registry.cn-qingdao.aliyuncs.com/jisheyun/apache_nifi:2.3.0

7.浏览器访问

bash 复制代码
# 先把证书导出然后再导入到浏览器中
切记!切记!切记!需要导入证书,否则访问正常访问
# 刷新访问
https://192.168.1.9:8443/nifi


相关推荐
Gss77743 分钟前
Docker 公有仓库使用、Docker 私有仓库(Registry)使用总结
docker·容器
暴富奥利奥1 小时前
完成docker方式的ros环境配置
linux·学习·docker·容器
红尘客栈22 小时前
K8S基本命令操作
linux·容器·kubernetes
我好饿12 小时前
部署k8s集群+containerd+dashboard
云原生·容器·kubernetes
hello_2502 小时前
动手模拟k8s网络-vxlan模式
网络·容器·kubernetes
海海思思3 小时前
解决Docker "exec format error":架构不匹配问题分析
docker·容器
小马爱打代码3 小时前
Kubernetes:控制器 - ReplicaSet
容器·kubernetes
帅帅梓4 小时前
docker网络
网络·docker·php
lifallen4 小时前
从Apache Doris 学习 HyperLogLog
java·大数据·数据仓库·算法·apache
Lv-D-J5 小时前
mac下Docker安装nacos
docker