Linux和Hadoop的学习

目录

    • [1. Linux的常用快捷键](#1. Linux的常用快捷键)
    • [2. Hadoop集群部署问题汇总](#2. Hadoop集群部署问题汇总)

1. Linux的常用快捷键

复制:Ctrl+shift+C

粘贴:Ctrl+shift+V

TAB:补全命令

编写输入:i

退出编写:esc

保存并退出:shift+:

2. Hadoop集群部署问题汇总

1.常见出错点:

  • 权限未正确设置
  • 配置文件错误
  • 未格式化

2.解决问题思路:看日志log

步骤1:
cd /export/server/hadoop/logs/

步骤2:(也可以查看secondarynamenode的日志,视情况而定)
tail -100 hadoop-hadoop-namenode-node1.log


3.错误举例
问题1:Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password)

这是免密互通没有设置成功,可以通过ssh [节点]来查看是具体哪个节点没有设置成功,然后就对应的节点的免密通信进行重新设置。

第一步:切换到需要设置免密通信的用户

复制代码
su - [用户]

第二步:生成公钥私钥

复制代码
ssh-keygen -t rsa -b 4096

第三步:将SSH公钥信息复制给对应服务器

复制代码
ssh-copy-id node1
ssh-copy-id node2
ssh-copy-id node3
相关推荐
Gain_chance44 分钟前
35-学习笔记尚硅谷数仓搭建-DWS层最近n日汇总表及历史至今汇总表建表语句
数据库·数据仓库·hive·笔记·学习
Zach_yuan1 小时前
深入浅出 JSONCpp
linux·服务器·网络·c++
Ziky学习记录2 小时前
从零到实战:React Router 学习与总结
前端·学习·react.js
北京迅为2 小时前
《【北京迅为】itop-3568开发板NPU使用手册》- 第 7章 使用RKNN-Toolkit-lite2
linux·人工智能·嵌入式·npu
Dragon~Snow2 小时前
Linux Centos9 安装 Elasticsearch
linux·elasticsearch·jenkins
熊延2 小时前
麒麟V10系统安装部署elasticsearch
linux·运维·服务器·elasticsearch·搜索引擎·全文检索
sensen_kiss2 小时前
INT303 Coursework1 爬取影视网站数据(如何爬虫网站数据)
爬虫·python·学习
Jia ming2 小时前
跟踪器与事件使用举例
linux·事件·跟踪器
生活很暖很治愈3 小时前
Linux——基础IO&软硬链接
linux·ubuntu
2401_858936883 小时前
【Linux C 编程】标准 IO 详解与实战:从基础接口到文件操作实战
linux·c语言