关于hbase的搭建,个人觉得关于zookeeper的搭建是habse的关键,在关于zookeeper的搭建过程中,自己遇到了以下几种问题,
- 没有正确理解myid的存在价值和意义
- 配置zookeerper需要再次添加环境Java的环境变量
- 启动的时候,需要使用命令对其增加相关的权限。
这些基础的内容一定要从其中能够明白和知晓:
自己需要明白和注意的几个内容:(01)搭建zookerper的时候一定要明白这个关键性因素:
zookerper一般使用奇数点,奇数各节点使用的节点的目的只有两个节点同时出现故障的情况下,zookerper机型才不可用,而使用偶数数量节点时,只有当一个节点出现故障的情况下,zookerper机型才会不可用。
zookeeper的集群节点数量越多,这个zookeeper的集群的容错能力也就会越大。
hbase shell
可以快速知道相关的交互式命令:
一些经验分享:
(01)在采用这些基础的内容的时候,可以先尝试使用xshell查看其是否可以连接成功。
方法掌握的关键信息:节省时间
(02运用成功之后,尝试使用jps一下就可以知道其后台的运行程序
(03)spark必须构建在hadoop的基础上面,hbase的基础数仓结构和理论,大数据在线处理平台,卡夫卡,采用的基础是开源式的处理内容。
(04)编程能力/web开发能力(数据可视化的采用和运用)/a。大数据平台的架构维护/b。能够进行简单的计算维护开发。
(05)非结构化的数据转换为结构化的数据方式:ai的智能转换/通过ai的智能转换可以将非结构化的数据转换称为结构化数据,这是一个不得不进行忽略的常识和基础性知识。
(06)对于数据的思维的思维模式:你不创新和使用,其他人就会开始采用和使用,对于技术:你不对技术采用,不代表其他人采用对于技术保持一种封闭的态度。
(07) 大数据时代,首先对于自己而言,自己就是要想办法不断地从其中,自己对于自己的想法,自己要做的事情,产业结构改革和产业转型升级必须依靠大数据,个人成长也可以通过大数据来不断地提升自己的基本能力。
(08)自己思维里面不能和有一点保守的内容,自己要想办法从其中不断地进行开源,进行学习,把思维对于自己的思维内容进行公示,不要害怕,知性为自然立法,你学习的越发认真,你所能够得到和了解的知识,你可以听到的知识也就越发的深远。
(09)按照基础的时代来进行划分:未来大体会划分为大数据时代/中数据时代/小数据时代(没有数据的时代。)
(10)自己还是想办法使自己数据能够得到一个基础的可视化内容,自己不断地公式的数据就是:自己存储的数据就可以给自己不断地提供各种各样的反馈,这些反馈或许可以促进自己的学习,自己的感知,计算,仿真,模拟,传播等活动产生了大量的数据,所以自己对于自己的数据的产生不受任何外界影响和限制。
(11)大数据未来十年的时间,就是一个革命性的技术,以前可能是技术革命,但是现在,只是一个数据革命,技术革命/数据革命,保持"技术革命/数据革命",数据革命在于两个关键点:数据工具的使用(数据工具的革命),数据理念的更新(十分考验一个人的基础思维,一个人的思维活性越强,其创造性也就越强。)。
(12)国家对于数据结构的运用,就是一个人综合能力,一个人对于自己的数据的运用就是这个人对于个人的数据能力的强化和增强。传统的计算机已经不可能再处理这么多的数据,必须采用分布式的计算机才能搭建,自己要进行关注的点,就是自己开始自己卷自己,自己给自己的技术进行开源,因为对于自己的技术进行开源之后,才是属于自己的技术,同时不要觉得这样的方法,对于自己是一种刺激,因为对于自己而言,在这个无人的森林中,自己要想办法的点就是,就是自己按照自己开始不断地学习的点,进行学习。
(13)自己的眼界不能狭隘,自己可以尝试看一下,抖音视频每天会有多少视频在其中进行更新,传统行业的数据收集器和采集器都可以得到不断地加强,自己的收集工具也可以不断地进行加强和利用。
(14)新浪微博每天都有数十亿的外部网页和api接口访问需求,每天都会有大量数据开始进行上升。