Linux和Hadoop的学习

目录

    • [1. Linux的常用快捷键](#1. Linux的常用快捷键)
    • [2. Hadoop集群部署问题汇总](#2. Hadoop集群部署问题汇总)

1. Linux的常用快捷键

复制:Ctrl+shift+C

粘贴:Ctrl+shift+V

TAB:补全命令

编写输入:i

退出编写:esc

保存并退出:shift+:

2. Hadoop集群部署问题汇总

1.常见出错点:

  • 权限未正确设置
  • 配置文件错误
  • 未格式化

2.解决问题思路:看日志log

步骤1:
cd /export/server/hadoop/logs/

步骤2:(也可以查看secondarynamenode的日志,视情况而定)
tail -100 hadoop-hadoop-namenode-node1.log


3.错误举例
问题1:Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password)

这是免密互通没有设置成功,可以通过ssh [节点]来查看是具体哪个节点没有设置成功,然后就对应的节点的免密通信进行重新设置。

第一步:切换到需要设置免密通信的用户

复制代码
su - [用户]

第二步:生成公钥私钥

复制代码
ssh-keygen -t rsa -b 4096

第三步:将SSH公钥信息复制给对应服务器

复制代码
ssh-copy-id node1
ssh-copy-id node2
ssh-copy-id node3
相关推荐
那年窗外下的雪.几秒前
AIDC 学习日志|第 21 天|EVPN 多归属故障演练与中断窗口定位
网络·git·学习
wuyk5555 分钟前
从零吃透 MQTT 通信|第 5 章 MQTT 心跳保活机制深度优化,断线检测与智能自动重连
c语言·开发语言·stm32·学习
幼儿园蛋小黄7 分钟前
基于 TCP 的嵌入式网络通信学习总结
网络协议·学习·tcp/ip
云泽80816 分钟前
Linux 系统编程实战:从零手写一个高性能终端进度条
linux·运维·服务器
~kiss~19 分钟前
大模型的四类Cache - KV, Prefix, Prompt and Semantic Caching
学习
Mapleay23 分钟前
设备树/ACPI 与 fwnode 内核基础设施
linux
Ray Wang34 分钟前
RAG学习
学习
励志不掉头发的内向程序员1 小时前
【LibreCAD 2D架构】从鼠标点击到图形创建:RS_ActionDrawLine交互流程与状态机解析
开发语言·c++·qt·学习·系统架构·计算机外设·交互
Htr_1 小时前
Reflexio 使用指南:让 AI 智能体从每次交互中持续学习
人工智能·学习·交互
waiting9711181 小时前
Ubuntu 26.04 + Android14安装与编译教程
android·linux·ubuntu