大数据学习教程：Linux 高级教程（上）

一、Linux用户与权限

1. 用户和权限的基本概念

1.1、基本概念

用户 是Linux系统工作中重要的一环, 用户管理包括 用户 与 组

管理 在Linux系统中, 不论是由本级或是远程登录系统, 每个系统都必须拥有一个账号, 并且对于不同的系统资源拥有不同的使用权限

对 文件 / 目录 的权限包括:

权限	英文	缩写	数字序号
读	read	r	4
写	write	w	2
执行	execute	x	1
无权限		-	0

在 Linux中 ,可以指定 每一个用户 针对 不同的文件或者目录 的 不同权限

1.2、组

为了方便用户管理, 提出了 组 的概念, 如下图所示

1.3、ls -l扩展

ls -l 可以查看文件夹下文件的详细信息, 从左到右 依次是:

权限, 第一个字符如果是 d 表示目录

硬链接数, 通俗的讲就是有多少种方式, 可以访问当前目录和文件

拥有者, 家目录下 文件 / 木兰路 的拥有者通常都是 当前用户

组, 在linux中, 很多时候, 会出现组名 和 用户名 相同的情况, 后续会讲

大小

时间

名称

2. 终端命令：组管理

本质: 给 同一类型用户 分配权限

命令	作用
groupadd 组名	添加组
groupdel 组名	删除组
cat /etc/group	确认组信息
chgrp 组名 文件/目录名	修改文件/目录的所属组 ---R递归

提示：

• 组信息保存在 /etc/group 文件中

我们以root:x:0:root,linuxsir 为例：用户组root，x是密码段，表示没有设置密码，GID是0,root用户组下包括root、linuxsir以及GID为0的其它用户。

在实际应用中, 可以预先针对 组 设置好权限, 然后 将不同的用户添加到对应的组中, 从而不用依次为每一个用户设置权限

演练目标：

1、在 指定目录下 创建 aaa 目录

2、新建 dev 组

3、将 aaa 目录的组修改为 dev chgrp dev aaa

3. 终端命令：用户管理

3.1 创建用户 、 设置密码 、删除用户

命令	作用	说明
useradd -m -g 组 新建用户名	添加新用户	-m 自动建立用户家目录
-g 指定用户所在的组, 否则会建立一个和同名的组
passwd 用户名	设置用户密码	如果是普通用户, 直接用 passwd可以修改自己的账号密码
userdel -r 用户名	删除用户	-r 选项会自动删除用户家目录
cat /etc/passwd | grep 用户名	确认用户信息	新建用户后,用户信息会保存在 /etc/passwd文件夹中

提示:

• 创建用户时, 默认会创建一个和用户名同名的组名

• 用户信息保存在 /etc/passwd 文件中

/etc/passwd 文件存放的是用户的信息, 由6个分好组成的7个信息, 分别是

1. 用户名

2. 密码 (x, 表示加密的密码)

3. UID (用户标志)

4. GID(组标志)

5. 用户全名或本地账号

6. 家目录

7. 登录使用的Shell, 就是登录之后, 使用的终端命令

3.2 查看用户信息

命令	作用
id [用户名]	查看用户UID 和 GID 信息
who	查看当前所有登录的用户列表
whoami	查看当前登录用户的账户名

3.3 su切换用户

• 因为 普通用户 不能使用某些权限, 所以需要 切换用户

• su 不接用户名, 可以切换到 root , 但是不推荐使用, 因为不安全

• exit 示意图如下:

3.4 sudo

• 虽然 通过 su -u root 可以切换到 root用户, 但是 存在严重的 安全隐患

• linux系统中的 root 账号通常 用于系统的维护和管理, 对操作系统的所有资源 具有访问权限

• 如果不小心使用 rm -rf ... ... , 就可能将系统搞瘫痪

• 在大多数版本的linux中, 都不推荐 直接只用 root 账号登录系统

• sudo 命令用来以其他身份来执行命令, 预设的身份为 root

• 用户使用 sudo 时, 必须先输入密码, 之后5分钟的有效期限, 超过期限则必须重新输入密码

提示: 若其未经授权的用户企图使用 sudo, 则会发出警告邮件给管理员

3.4.1 给 指定用户 授予 权限

• 本质: 通知 服务器 给 特定用户 分配 临时管理员权限

visudo

默认存在: root用户 具备所有的权限

root ALL=(ALL) ALL

授予 zhangsan 用户 所有的权限

zhangsan ALL=(ALL) ALL

3.4.2 使用 用户 zhangsan 登录, 操作管理员命令

• 本质: 使用临时管理员权限

不切换root用户, 也可以完成 添加用户的功能

sudo useradd -m -g dev zhaoliu

4. 修改用户权限

命令	作用
chmod	修改权限

准备工作: 使用root用户操作

清空目录中的内容

rm -rf /root/test_tar/*

创建测试目录

mkdir -p /root/test_tar/aaa/

创建测试文件

touch /root/test_tar/aaa/01.txt /root/test_tar/aaa/02.txt

查看指定目录内容

tree /root/test_tar

4.1 方式一

• chmod 可以修改 用户/组 对 文件/目录 的权限

• 命令格式如下:

chmod +/- rwx 文件名|目录名 #+表示新增权限 #-表示删除权限

提示: 已上方式会一次向修改 拥有者 / 组权限

目标演练:

1. 使用 root 删除目录的可读 可写 可执行权限

chmod a-rwx aaa/

2. 使用 其他用户如 zhangsan 无法切换到 这个目录

3. 使用 root 增加目录的执行权限, 再次 使用 zhangsan 切换到目录试试

4.2 方式二

• 虽然 方式一 直接修改文件|目录的 读|写|执行 权限, 但是不能精确到 拥有者|组|其他 权限

• 命令格式如下:( u 表示所属用户 / g 表示所属组 / o 表示其他)

chmod -R u=rwx,g=rx,o=rwx 文件|目录

序号	权限	英文	缩写	数字序号
01	读	read	r	4
02	写	write	w	2
03	执行	execute	x	1
04	无权限		-	0

4.3 方式三

• 第一个数字 是 拥有者权限, 第二个数字 是 组权限, 第三个数字 是 其他用户权限

二、Linux系统信息

本节内容主要是为了方便通过远程终端维护服务器时, 查看服务器上当前 系统日期和时间 / 磁盘空间占用情况 /程序执行情况

本小结学习终端命令都是查询命令, 通过这些命令对系统资源的使用情况有个了解

1. 时间和日期

1.1. date时间

命令	作用
date	查看系统时间(默认)
date +"%Y-%m-%d %H:%M:%S"	查看系统时间(指定格式)
date -s "时间字符串"	设置系统时间

第一步: 显示当前时间

显示时间

date

按照指定格式显示时间

date +"%Y-%m-%d %H:%M:%S"

第二步：设置系统时间

date -s "时间字符串"

1.2. cal日历

命令	作用
cal	查看当前月的日历
cal -y	查看当前年的日历
cal 2020	查看2020年的日历
cal 10 2020	查看2020年10月的日历

2. 磁盘、内存信息

命令	作用
df -h	disk free 显示磁盘剩余空间
du -h [目录名]	disk usage 显示目录下的目录大小
free -h	显示内存使用情况

选项说明

参数	含义
-h	以人性化的方式显示文件的大小（把字节换算为相应的kb/mb/gb）

3. 进程信息

命令	作用
ps aux	process status 查看进程的详细情况
top	动态显示运行中进程并且排序
kill [-9] 进程代号	终止指定代号的进程 -9 表示强行终止

ps 默认只会显示当前用户通过终端启动的应用程序

Linux下显示系统进程的命令ps，最常用的有ps -ef 和ps aux。这两个到底有什么区别呢？两者没太大差别，讨论这个问题，要追溯到Unix系统中的两种风格，System Ｖ风格和BSD 风格，ps aux最初用到Unix Style中，而ps -ef被用在System V Style中，两者输出略有不同。现在的大部分Linux系统都是可以同时使用这两种方式的。

ps 选项说明功能

选项	含义
a	显示终端上的所有进程,包括其他用户的进程
u	显示进程的详细状态
x	显示没有控制终端的进程

提示: 使用kill命令时, 最好只终止由当前用户开启的进程, 而不要终止root身份开启的进程, 否则可能导致系统崩溃

要退出 top 可以直接输入 q

三、Linux软件安装

1. rpm软件包管理器

rpm（英文全拼：redhat package manager） 原本是 Red Hat Linux 发行版专门用来管理 Linux 各项软件包的程序，由于它遵循GPL规则且功能强大方便，因而广受欢迎。逐渐受到其他发行版的采用。RPM 套件管理方式的出现，让Linux易于安装升级，间接提升了 Linux的适用度。

命令格式：rpm -参数 软件包名

参数	英文	含义
-q	query	使用询问模式，当遇到任何问题时，rpm指令会先询问用户。
-a	all	查询所有软件包
-i	info	显示软件包的概要信息
-l	list	显示软件包中的文件列表
-f	file	文件，显示文件对应rpm包(查找文件所属的rpm包)

示例1：查询已安装的rpm列表，通常通过管道命令配合grep进行查找

rpm -qa | grep tree

示例2：查询软件包信息

rpm -qi 软件包名称

示例3：显示软件包中的文件列表 rpm -ql 软件包名称

示例4：查看指定文件归属于哪个软件包 rpm -qf 文件绝对路径

1.1. rpm包的卸载

rpm卸载命令：

命令	英文	含义
rpm -e 软件包名称	erase清除	卸载rpm软件包
rpm -e --nodeps 软件包名称	don't check dependencies	卸载前跳过依赖检查

示例：卸载tree

[root@itheima ~]# rpm -qa | grep tree

tree-1.5.3-3.el6.x86_64

[root@itheima ~]# rpm -e --nodeps tree-1.5.3-3.el6.x86_64

[root@itheima ~]#

[root@itheima ~]# tree /home

-bash: /usr/bin/tree: No such file or directory

[root@itheima ~]#

1.2. rpm包的安装

rpm包安装命令：

命令	含义
rpm -ivh rpm包名称	安装rpm包

安装命令参数：

参数	英文	含义
-i	install	安装
-v	verbose	打印提示信息
-h	hase	显示安装进度

2. yum软件包管理器

yum（ Yellow dog Updater, Modified）是一个在 Fedora 和 RedHat中的 Shell 前端软件包管理器。基于RPM包管理，能够从指定的服务器自动下载 RPM 包并且安装，可以自动处理依赖性关系，并且一次安装所有依赖的软件包，无须繁琐地一次次下载、安装。

yum 提供了查找、安装、删除某一个、一组甚至全部软件包的命令，而且命令简洁而又好记。

yum 语法：

yum [options] [command] [package ...]

options：可选，选项包括-h（帮助），-y（当安装过程提示选择全部为 "yes"），-q（不显示安装的过程）等等、command：要进行的操作、package：安装的包名。

2.1. yum常用命令

1. 列出所有可更新的软件清单命令：yum check-update

2. 更新所有软件命令：yum update

3. 仅安装指定的软件命令：yum install

4. 仅更新指定的软件命令：yum update

5. 列出所有可安裝的软件清单命令：yum list

6. 删除软件包命令：yum remove

7. 查找软件包命令：yum search

8. 列出当前可用仓库信息：yum repolist all

9. 清楚仓库缓存信息：yum clean all

2.2. yum在线安装软件案例

2.3. yum在线删除软件案例

3. Linux安装JDK

3.1. 统一软件安装路径

理论上来说，可以把软件安装在Linux的任意路径下，但是企业为了规范化管理，通常会设置约束相关的目录用来安装软件、存储软件运行的数据、日志。

/export/server #软件安装目录

/export/software #安装包的目录

/export/data #软件运行数据保存的目录

/export/logs

mkdir -p /export/server

mkdir -p /export/software

mkdir -p /export/data

3.2. JDK安装

#上传安装包到/export/server下

jdk-8u241-linux-x64.tar.gz

解压到当前目录

tar zxvf jdk-8u241-linux-x64.tar.gz

删除红色安装包（可选）

rm -rf jdk-8u241-linux-x64.tar.gz

配置环境变量

vim /etc/profile #G + o

export JAVA_HOME=/export/server/jdk1.8.0_241

export PATH=PATH:JAVA_HOME/bin

export CLASSPATH=.:JAVA_HOME/lib/dt.jar:JAVA_HOME/lib/tools.jar

重新加载环境变量文件 让配置生效

source /etc/profile

[root@node1 ~]# java -version

java version "1.8.0_241"

Java(TM) SE Runtime Environment (build 1.8.0_241-b07)

Java HotSpot(TM) 64-Bit Server VM (build 25.241-b07, mixed mode)

4. Linux安装、卸载MySQL

4.1. 安装MySQL

step1:安装MySQL:

mkdir /export/software/mysql

上传mysql-5.7.29-1.el7.x86_64.rpm-bundle.tar 到上述文件夹下 解压

tar xvf mysql-5.7.29-1.el7.x86_64.rpm-bundle.tar

执行安装

yum -y install libaio

[root@node3 mysql]# rpm -ivh mysql-community-common-5.7.29-1.el7.x86_64.rpm mysql-community-libs-5.7.29-1.el7.x86_64.rpm mysql-community-client-5.7.29-1.el7.x86_64.rpm mysql-community-server-5.7.29-1.el7.x86_64.rpm

warning: mysql-community-common-5.7.29-1.el7.x86_64.rpm: Header V3 DSA/SHA1 Signature, key ID 5072e1f5:

NOKEY Preparing... ################################# [100%]

Updating / installing...

1:mysql-community-common-5.7.29-1.e################################# [ 25%]

2:mysql-community-libs-5.7.29-1.el7################################# [ 50%]

3:mysql-community-client-5.7.29-1.e################################# [ 75%]

4:mysql-community-server-5.7.29-1.e################ ( 49%)

step2:初始化MySQL:

初始化

mysqld --initialize

更改所属组

chown mysql:mysql /var/lib/mysql -R

启动mysql

systemctl start mysqld.service

查看生成的临时root密码

cat /var/log/mysqld.log

[Note] A temporary password is generated for root@localhost: o+TU+KDOm004

step3:修改root密码 授权远程访问 设置开机自启动

[root@node2 ~]# mysql -u root -p

Enter password: #这里输入在日志中生成的临时密码

Welcome to the MySQL monitor. Commands end with ; or \g.

Your MySQL connection id is 3

Server version: 5.7.29

Copyright (c) 2000, 2020, Oracle and/or its affiliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or its affiliates.

Other names may be trademarks of their respective owners.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

mysql>

更新root密码 设置为hadoop

mysql> alter user user() identified by "hadoop";

Query OK, 0 rows affected (0.00 sec)

授权

mysql> use mysql;

mysql> GRANT ALL PRIVILEGES ON . TO 'root'@'%' IDENTIFIED BY 'hadoop' WITH GRANT OPTION;

mysql> FLUSH PRIVILEGES;

mysql的启动和关闭 状态查看

systemctl stop mysqld

systemctl status mysqld

systemctl start mysqld

建议设置为开机自启动服务

[root@node2 ~]# systemctl enable mysqld

Created symlink from /etc/systemd/system/multi-user.target.wants/mysqld.service to /usr/lib/systemd/system/mysqld.service.

查看是否已经设置自启动成功

[root@node2 ~]# systemctl list-unit-files | grep mysqld mysqld.service enabled

4.2. 卸载MySQL

关闭mysql服务

systemctl stop mysqld.service

查找安装mysql的rpm包

[root@node3 ~]# rpm -qa | grep -i mysql

mysql-community-libs-5.7.29-1.el7.x86_64

mysql-community-common-5.7.29-1.el7.x86_64

mysql-community-client-5.7.29-1.el7.x86_64

mysql-community-server-5.7.29-1.el7.x86_64

卸载

[root@node3 ~]# yum remove mysql-community-libs-5.7.29-1.el7.x86_64 mysql-community-common-5.7.29-1.el7.x86_64 mysql-community-client-5.7.29-1.el7.x86_64 mysql-community-server-5.7.29-1.el7.x86_64

查看是否卸载干净

rpm -qa | grep -i mysql

查找mysql相关目录 删除

[root@node1 ~]# find / -name mysql /var/lib/mysql /var/lib/mysql/mysql /usr/share/mysql

[root@node1 ~]# rm -rf /var/lib/mysql

[root@node1 ~]# rm -rf /var/lib/mysql/mysql [root@node1 ~]# rm -rf /usr/share/mysql

删除默认配置 日志

rm -rf /etc/my.cnf

rm -rf /var/log/mysqld.log