Linux和Hadoop的学习

目录

    • [1. Linux的常用快捷键](#1. Linux的常用快捷键)
    • [2. Hadoop集群部署问题汇总](#2. Hadoop集群部署问题汇总)

1. Linux的常用快捷键

复制:Ctrl+shift+C

粘贴:Ctrl+shift+V

TAB:补全命令

编写输入:i

退出编写:esc

保存并退出:shift+:

2. Hadoop集群部署问题汇总

1.常见出错点:

  • 权限未正确设置
  • 配置文件错误
  • 未格式化

2.解决问题思路:看日志log

步骤1:
cd /export/server/hadoop/logs/

步骤2:(也可以查看secondarynamenode的日志,视情况而定)
tail -100 hadoop-hadoop-namenode-node1.log


3.错误举例
问题1:Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password)

这是免密互通没有设置成功,可以通过ssh [节点]来查看是具体哪个节点没有设置成功,然后就对应的节点的免密通信进行重新设置。

第一步:切换到需要设置免密通信的用户

复制代码
su - [用户]

第二步:生成公钥私钥

复制代码
ssh-keygen -t rsa -b 4096

第三步:将SSH公钥信息复制给对应服务器

复制代码
ssh-copy-id node1
ssh-copy-id node2
ssh-copy-id node3
相关推荐
梦境虽美,却不长4 小时前
算法 学习 排序 2025年6月16日10:25:37
数据结构·学习·排序算法
Edingbrugh.南空4 小时前
Hive 3.x数据静态脱敏与加密
数据仓库·hive·hadoop
speop4 小时前
【datawhale组队学习】共读AI新圣经
人工智能·学习
K·Herbert4 小时前
最新CentOS 7 yum源失效的解决方案(2025年6月)
linux·运维·centos
羑悻的小杀马特4 小时前
从信息孤岛到智能星云:学习助手编织高校学习生活的全维度互联网络
c++·学习·生活·api
别骂我h5 小时前
部署KVM虚拟化平台
linux·运维·服务器
繢鴻5 小时前
紧急救援!Ubuntu崩溃修复大赛
linux·服务器·ubuntu
春马与夏6 小时前
多参表达式Hive UDF
数据仓库·hive·hadoop
ThisIsClark6 小时前
什么是Hive
数据仓库·hive·hadoop
Edingbrugh.南空6 小时前
Hive 3.x集成Apache Ranger:打造精细化数据权限管理体系
hive·hadoop·apache