Hadoop大数据处理技术-安装配置篇

2024/4/16

  1. ​Hadoop学习前的准备

1)首先安装虚拟机

VMWare 虚拟机:因为它不是一个硬件 而是用软件做出来的 模拟真机 所以叫做虚拟机 但实际上它里面也可以安装Linux和Windows 实际它的实现

虚拟机中想要实现某个操作时 将需求发给Windows 调用Windows的CPU Windows完成以后 再将结果返回给虚拟机 然后在虚拟机显示出来 实际上虚拟机起了一个中间人的作用

将虚拟机安装完成后 我们打开 如果需要输入密钥 我们填一下

  • ZF3R0-FHED2-M80TY-8QYGC-NPKYF

  • YF390-0HF8P-M81RQ-2DXQE-M2UT6

  • ZF71R-DMX85-08DQY-8YMNC-PPHV8

以上密钥如果不能使用 请及时联系小编

2)然后我们开始安装Linux

我们创建一个普通用户 可以使用自己的名字 密码一定要记住

点击选择最小安装 然后开始安装 安装完成后会自动重启

然后 我们使用root用户登录 输入密码 开始配置

复制代码
输入vi /etc/sysconfig/network-scripts/ifcfg-ens33​vi 相当于Windows下双击打开文件修改原有内容并添加以下内容​

然后 我们修改一下主机名 关闭一下防火墙及其自启动

复制代码
hostnamectl set-hostname centos1 //修改主机名​systemctl stop firewalld.service  //停止防火墙​systemctl disable firewalld.service #禁止firewall开机启动​hostname 查看计算机名

配置好以后我们关闭虚拟机 配置一下网络

Linux通过这个IP就可以访问Windows了 所以两者必须一致 我们要修改虚拟网络适配器

上述操作全部完成 我们现在打开cmd 输入ping(心跳) +Linux的ip地址 能够ping通 说明我们可以进行通信了 配置成功

相关推荐
武子康2 小时前
大数据-98 Spark 从 DStream 到 Structured Streaming:Spark 实时计算的演进
大数据·后端·spark
阿里云大数据AI技术2 小时前
2025云栖大会·大数据AI参会攻略请查收!
大数据·人工智能
代码匠心5 小时前
从零开始学Flink:数据源
java·大数据·后端·flink
Lx3527 小时前
复杂MapReduce作业设计:多阶段处理的最佳实践
大数据·hadoop
武子康10 小时前
大数据-100 Spark DStream 转换操作全面总结:map、reduceByKey 到 transform 的实战案例
大数据·后端·spark
expect7g11 小时前
Flink KeySelector
大数据·后端·flink
阿里云大数据AI技术1 天前
StarRocks 助力数禾科技构建实时数仓:从数据孤岛到智能决策
大数据
Lx3521 天前
Hadoop数据处理优化:减少Shuffle阶段的性能损耗
大数据·hadoop
努力的小郑1 天前
从一次分表实践谈起:我们真的需要复杂的分布式ID吗?
分布式·后端·面试
武子康1 天前
大数据-99 Spark Streaming 数据源全面总结:原理、应用 文件流、Socket、RDD队列流
大数据·后端·spark