云计算作业一hadoop:问题解决备忘

教程地址:https://blog.csdn.net/qq_53877854/article/details/142412784

修改网络配置文件

复制代码
vim /etc/sysconfig/network-scripts/ifcfg-ens33

在root用户下编辑

静态ip地址配置后查看ip与配置不符

注意:确保在这之前已经在VMware的编辑>虚拟网络编辑器调整过NAT的配置 具体步骤可以看这个帖子的第三步:

https://blog.csdn.net/weixin_63721954/article/details/130792569

在/etc/sysconfig/network-scripts/ifcfg-ens33配置了IPADDR=192.168.186.129

但是用ifconfig查看老是186.128,后来用

复制代码
sudo systemctl disable NetworkManager

命令停用了NetworkManager,重启了一下就好了

另外,如果用ifconfig查看没有ens33接口,尝试使用这条语句获取一个ip地址

复制代码
sudo dhclient ens33

集群搭建具体参考

老师发的教程有些地方跳过了,比如克隆虚拟机,虚拟网络配置

更详细:https://blog.csdn.net/weixin_63721954/article/details/130792569

home目录

波浪号(~)的特殊性:

在大多数Unix和Linux shell中,波浪号(~)被用作当前用户家目录的简写。

当你输入 ~ 时,shell会自动将其替换为当前用户的家目录路径,这通常是在 /home 目录下以用户名命名的子目录。不能直接用/home访问当前用户(非root)的home目录

2.2 通过Java 项目访问HDFS

注意程序中修改端口和ip地址,与你之前配置的保持一致

如:

3.2 WordCount示例运行提示加载不出主类

记得加上上个实验的依赖:

xml 复制代码
    <dependencies>
       <dependency>
           <groupId>org.apache.hadoop</groupId>
           <artifactId>hadoop-client</artifactId>
       </dependency>
       <dependency>
           <groupId>junit</groupId>
           <artifactId>junit</artifactId>
           <scope>test</scope>
       </dependency>
   </dependencies>

注意hadoop-minicluster要与client版本一致

hbase下载

版本很老的镜像下载很慢,选择一个稳定版下载即可,我下载的2.5.10

相关推荐
TTBIGDATA26 分钟前
【Ambari-Metrics监控】Grafana+Infinity快速构建DEMO-插件安装
hadoop·ambari·hdp·grafana·cdh·bigtop·ambari-metrics
diablobaal2 小时前
云计算学习100天-第31天
学习·云计算
腾讯云开发者8 小时前
腾讯云 MCP 场景征集计划 | 你的方案,正在定义开发新范式
云计算·腾讯云
杏花春雨江南8 小时前
腾讯云 CVM 上的 SpringBoot 应用避免非法访问
spring boot·云计算·腾讯云
项目題供诗10 小时前
Hadoop(六)
大数据·hadoop·分布式
艾小米10 小时前
AWS申请增加弹性IP配额流程
云计算·aws
观测云21 小时前
阿里云 ECS 可观测性最佳实践
阿里云·云计算
chenglin01621 小时前
阿里云——云存储与数据库服务
数据库·阿里云·云计算
项目題供诗1 天前
Hadoop(四)
大数据·hadoop·github
似水流年 光阴已逝1 天前
腾讯云重保流程详解:从预案到复盘的全周期安全防护
安全·云计算·腾讯云