Linux和Hadoop的学习

目录

    • [1. Linux的常用快捷键](#1. Linux的常用快捷键)
    • [2. Hadoop集群部署问题汇总](#2. Hadoop集群部署问题汇总)

1. Linux的常用快捷键

复制:Ctrl+shift+C

粘贴:Ctrl+shift+V

TAB:补全命令

编写输入:i

退出编写:esc

保存并退出:shift+:

2. Hadoop集群部署问题汇总

1.常见出错点:

  • 权限未正确设置
  • 配置文件错误
  • 未格式化

2.解决问题思路:看日志log

步骤1:
cd /export/server/hadoop/logs/

步骤2:(也可以查看secondarynamenode的日志,视情况而定)
tail -100 hadoop-hadoop-namenode-node1.log


3.错误举例
问题1:Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password)

这是免密互通没有设置成功,可以通过ssh [节点]来查看是具体哪个节点没有设置成功,然后就对应的节点的免密通信进行重新设置。

第一步:切换到需要设置免密通信的用户

复制代码
su - [用户]

第二步:生成公钥私钥

复制代码
ssh-keygen -t rsa -b 4096

第三步:将SSH公钥信息复制给对应服务器

复制代码
ssh-copy-id node1
ssh-copy-id node2
ssh-copy-id node3
相关推荐
守望时空3310 分钟前
Linux挂载NTFS分区指南
linux
逆小舟1 小时前
【C/C++】指针
c语言·c++·笔记·学习
shan~~1 小时前
linux达梦数据库操作
linux·数据库·chrome
liliangcsdn1 小时前
LLM时代基于unstructured解析非结构化pdf
linux·服务器·数据分析
Codigger官方2 小时前
Linux 基金会牵头成立 React 基金会:前端开源生态迎来里程碑式变革
linux·前端·react.js
武文斌772 小时前
项目学习总结:LVGL图形参数动态变化、开发板的GDB调试、sqlite3移植、MQTT协议、心跳包
linux·开发语言·网络·arm开发·数据库·嵌入式硬件·学习
爱吃喵的鲤鱼2 小时前
仿mudou——Connection模块(连接管理)
linux·运维·服务器·开发语言·网络·c++
递归不收敛2 小时前
吴恩达机器学习课程(PyTorch适配)学习笔记:1.3 特征工程与模型优化
pytorch·学习·机器学习
让子弹飞022 小时前
永久解决ubuntu网络连接问题
linux·运维·ubuntu
郝学胜-神的一滴2 小时前
使用Linux的read和write系统函数操作文件
linux·服务器·开发语言·数据库·c++·程序人生·软件工程