Hadoop----Azkaban的使用与一些报错问题的解决

1.因为官方只放出源码,并没有放出其tar包,所以需要我们自己编译,通过查阅资料我们可以使用gradlew对其进行编译,还是比较简单,然后将里面需要用到的服务文件夹进行拷贝,完善其文件夹结构,通常会缺少几个,需要自己创建一个,然后再从其他目录中复制几个到目标服务。再配置各个服务的xml文件即可。

2.需要用到MySQL,需要创建azkaban数据库,在构建好的项目中,有一个sql脚本(带start字眼),在mysql中执行source命令即可导入。

3.启动Executor,在启动Web服务,在浏览默器中输入

https://node1:8443

node1为自己的启动机器,8443也是可以在xml中指定的,如果用配置ssl的key,可以使用https进行访问,弹出警告只需要点击已经了解风险即可访问网页:

4.在启动web服务时,会报错!

  1. Error injecting constructor, azkaban.executor.ExecutorManagerException: No active executor found

问题时已经启动了,executor为何会说不活跃?

需要多加一步,打开MySQL:

mysql -u root -p

输入密码进入mysql客户端,输入以下sql:

update azkaban.executors set active=1;

将数据库表中的active的值改为1则为active状态。

注意:在启动服务中,都会在对应的目录下生成日志文件,要去打开查看,才会知道有没有报错,如出现Java的异常报错如xxxException那就要去根据问题去找问题,去百度。

相关推荐
数研小生7 分钟前
关键词搜索京东列表API技术对接指南
大数据·数据库·爬虫
星辰_mya9 分钟前
Elasticsearch之下
大数据·elasticsearch·搜索引擎
2601_9483745738 分钟前
商用电子秤怎么选
大数据·python
jdyzzy1 小时前
什么是 JIT 精益生产模式?它与传统的生产管控方式有何不同?
java·大数据·人工智能·jit
Elastic 中国社区官方博客1 小时前
跳过 MLOps:通过 Cloud Connect 使用 EIS 为自管理 Elasticsearch 提供托管云推理
大数据·数据库·人工智能·elasticsearch·搜索引擎·ai·全文检索
数研小生1 小时前
1688商品列表API:高效触达批发电商海量商品数据的技术方案
大数据·python·算法·信息可视化·json
dingzd952 小时前
AI 代理购物落地后,真正的“增量岗位”叫——商品数据工程
大数据·人工智能·跨境电商·内容营销·跨境
無森~2 小时前
HBase Java API
java·大数据·hbase
sensen_kiss2 小时前
Jupter Notebook 使用教程
大数据·人工智能·python·学习·数据分析
m0_687399842 小时前
telnet localhost 15672 RabbitMQ “Connection refused“ 错误表示目标主机拒绝了连接请求。
分布式·rabbitmq