Linux和Hadoop的学习

目录

    • [1. Linux的常用快捷键](#1. Linux的常用快捷键)
    • [2. Hadoop集群部署问题汇总](#2. Hadoop集群部署问题汇总)

1. Linux的常用快捷键

复制:Ctrl+shift+C

粘贴:Ctrl+shift+V

TAB:补全命令

编写输入:i

退出编写:esc

保存并退出:shift+:

2. Hadoop集群部署问题汇总

1.常见出错点:

  • 权限未正确设置
  • 配置文件错误
  • 未格式化

2.解决问题思路:看日志log

步骤1:
cd /export/server/hadoop/logs/

步骤2:(也可以查看secondarynamenode的日志,视情况而定)
tail -100 hadoop-hadoop-namenode-node1.log


3.错误举例
问题1:Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password)

这是免密互通没有设置成功,可以通过ssh [节点]来查看是具体哪个节点没有设置成功,然后就对应的节点的免密通信进行重新设置。

第一步:切换到需要设置免密通信的用户

复制代码
su - [用户]

第二步:生成公钥私钥

复制代码
ssh-keygen -t rsa -b 4096

第三步:将SSH公钥信息复制给对应服务器

复制代码
ssh-copy-id node1
ssh-copy-id node2
ssh-copy-id node3
相关推荐
望获linux2 小时前
【Linux基础知识系列】第一百一十篇 - 使用Nmap进行网络安全扫描
java·linux·开发语言·前端·数据库·信息可视化·php
爱隐身的官人6 小时前
爬虫基础学习-爬取网页项目(二)
前端·爬虫·python·学习
Ysn07198 小时前
pytorch_grad_cam 库学习笔记—— Ablation-CAM 算法的基类 AblationCAM 和 AblationLayer
pytorch·笔记·学习
花小璇学linux8 小时前
imx6ull-驱动开发篇42——Linux I2C 驱动框架简介
linux·驱动开发·嵌入式软件
凌肖战8 小时前
编写Linux下设备驱动时两种方案:内核态驱动开发和用户态驱动开发
linux·驱动开发
小清兔8 小时前
c#基础知识
开发语言·数据库·学习·unity·c#·游戏引擎·.net
霜绛8 小时前
Unity笔记(七)——四元数、延迟函数、协同程序
笔记·学习·unity·游戏引擎
2006yu9 小时前
从零开始学习单片机13
单片机·嵌入式硬件·学习
lifallen9 小时前
Hadoop MapReduce 任务/输入数据 分片 InputSplit 解析
大数据·数据结构·hadoop·分布式·算法
风和日丽 随波逐流9 小时前
java18学习笔记
笔记·学习·java18