hdfs

vivo互联网技术

vivo HDFS EC 大规模落地实践作者：Gu Ruinan - 互联网大数据团队- Zhao YongxiangErasure Coding(简称EC)，是一种纠删码。EC编码能够对部分缺失的数据进行数据恢复，广泛应用于存储与通信领域。在Hadoop3.0版本中，作为一种新的冗余存储的方式引入进来。使用EC编码的方式替代原来的三副本存储，保证数据可靠性的同时可以节约存储。相应地，付出的代价是读取性能的下降，对于访问频率不高的数据，使用EC编码很合适。

vivo互联网技术

vivo HDFS EC大规模落地实践作者：Gu Ruinan - 互联网大数据团队- Zhao YongxiangErasure Coding(简称EC)，是一种纠删码。EC编码能够对部分缺失的数据进行数据恢复，广泛应用于存储与通信领域。在Hadoop3.0版本中，作为一种新的冗余存储的方式引入进来。使用EC编码的方式替代原来的三副本存储，保证数据可靠性的同时可以节约存储。相应地，付出的代价是读取性能的下降，对于访问频率不高的数据，使用EC编码很合适。

洛克大航海

Ubuntu中使用Hadoop的HDFS和MapReduce本文主要讲解 Hadoop 的 HDFS 和 MapReduce 组件，具体情况如下所示。安装 Hadoop 请参考网址：https://editor.csdn.net/md/?articleId=153209992

Elasticsearch（ES）简介与入门作者介绍：简历上没有一个精通的运维工程师。请点击上方的蓝色《运维小路》关注我，下面的思维导图也是预计更新的内容和当前进度(不定时更新)。

笨蛋少年派

HDFS简介目录概述HDFS特点HDFS三个角色HDFS副本机制HDFS基准测试HDFS的web界面：localhost：9870

weixin_52593633

金融大数据处理与分析本实验采用贵州茅台公司从2005年1月4日到2025年9月30日期间的每日股票行情数据，并搭建伪分布式Hadoop环境，使用HDFS存储数据，Spark处理数据，最后采用Matplotlib做数据可视化结果展示

十三、格式化 HDFS 文件系统、启动伪分布式集群Hadoop 生态中的文件系统 HDFS 类似一块磁盘，初次使用硬盘需要格式化，让存储空间明白该按什么方式组织存储数据。

计算机毕设残哥

紧跟大数据技术趋势：食物口味分析系统Spark SQL+HDFS最新架构实现🍊作者：计算机毕设匠心工作室 🍊简介：毕业后就一直专业从事计算机软件程序开发，至今也有8年工作经验。擅长Java、Python、微信小程序、安卓、大数据、PHP、.NET|C#、Golang等。擅长：按照需求定制化开发项目、源码、对代码进行完整讲解、文档撰写、ppt制作。 🍊心愿：点赞 👍 收藏 ⭐评论 📝 👇🏻 精彩专栏推荐订阅 👇🏻 不然下次找不到哟~ Java实战项目 Python实战项目微信小程序|安卓实战项目大数据实战项目 PHP|C#.NET|Golang实战项目 ?

【HDFS实战】HADOOP 机架感知能力-HDFSHDFS集群的服务器会分布在不同的机架，通过交换机进行网络通信。同一个机架内的数据节点通信的网络速度高于跨机架的数据节点的通信速度，网络通信的数据受上层交换机的带宽影响。

计算机编程小央姐

企业级大数据技术栈：基于Hadoop+Spark的全球经济指标分析与可视化系统实践💖💖作者：计算机编程小央姐 💙💙个人简介：曾长期从事计算机专业培训教学，本人也热爱上课教学，语言擅长Java、微信小程序、Python、Golang、安卓Android等，开发项目包括大数据、深度学习、网站、小程序、安卓、算法。平常会做一些项目定制化开发、代码讲解、答辩教学、文档编写、也懂一些降重方面的技巧。平常喜欢分享一些自己开发中遇到的问题的解决办法，也喜欢交流技术，大家有技术代码这一块的问题可以问我！ 💛💛想说的话：感谢大家的关注与支持！ 💜💜

Hadoop HDFS-认证（Kerberos）部署与配置作者介绍：简历上没有一个精通的运维工程师。请点击上方的蓝色《运维小路》关注我，下面的思维导图也是预计更新的内容和当前进度(不定时更新)。

HDFS和MapReduce——Hadoop的两大核心技本文介绍了了Hadoop中两个非常核心的技术——HDFS和MapReduce。Hadoop是一个分布式系统基础架构，它主要是通过HDFS来实现对分布式存储的底层支持，以及通过MapReduce来实现对分布式并行任务处理的程序支持。本文分别介绍了HDFS和MapReduce体系结构的相关技术。

Hadoop HDFS-回收站（Trash）作者介绍：简历上没有一个精通的运维工程师。请点击上方的蓝色《运维小路》关注我，下面的思维导图也是预计更新的内容和当前进度(不定时更新)。

计算机编程小央姐

GitHub热门大数据项目：基于人体生理指标管理的可视化分析系统技术解析💖💖作者：计算机编程小央姐 💙💙个人简介：曾长期从事计算机专业培训教学，本人也热爱上课教学，语言擅长Java、微信小程序、Python、Golang、安卓Android等，开发项目包括大数据、深度学习、网站、小程序、安卓、算法。平常会做一些项目定制化开发、代码讲解、答辩教学、文档编写、也懂一些降重方面的技巧。平常喜欢分享一些自己开发中遇到的问题的解决办法，也喜欢交流技术，大家有技术代码这一块的问题可以问我！ 💛💛想说的话：感谢大家的关注与支持！ 💜💜

Hadoop HDFS-读写流程作者介绍：简历上没有一个精通的运维工程师。请点击上方的蓝色《运维小路》关注我，下面的思维导图也是预计更新的内容和当前进度(不定时更新)。

Hadoop HDFS-高可用集群部署作者介绍：简历上没有一个精通的运维工程师。请点击上方的蓝色《运维小路》关注我，下面的思维导图也是预计更新的内容和当前进度(不定时更新)。

hadoop的api操作对象存储

奋斗的蛋黄

HDFS（Hadoop 分布式文件系统）知识点梳理一、HDFS 基础认知1. 定义与起源- 起源：源自 Google 2003 年发表的 GFS（Google File System）论文，是 GFS 的开源克隆版。

Java 大视界 -- 基于 Java 的大数据分布式存储在智慧城市时空大数据管理与应用中的创新实践（408）亲爱的 Java 和大数据爱好者们，大家好！我是CSDN（全区域）四榜榜首青云交！去年深秋在某新一线城市（2023 年 GDP 1.2 万亿）的智慧交通指挥中心，运维组长老李攥着鼠标垫跟我急得直跺脚：“早高峰 7 点到 9 点，2000 个路口的摄像头每秒钟往服务器灌 300MB 轨迹数据，单机存储撑了 3 天就报‘磁盘满’！更要命的是，交警查昨天早高峰的拥堵溯源，查 1 条浙 A 车牌的轨迹要等 5 秒，指挥中心的电话都被打爆了！”

计算机毕设残哥

HDFS存储农业大数据的秘密是什么？高级大豆数据分析与可视化系统架构设计思路🍊作者：计算机毕设匠心工作室 🍊简介：毕业后就一直专业从事计算机软件程序开发，至今也有8年工作经验。擅长Java、Python、微信小程序、安卓、大数据、PHP、.NET|C#、Golang等。擅长：按照需求定制化开发项目、源码、对代码进行完整讲解、文档撰写、ppt制作。 🍊心愿：点赞 👍 收藏 ⭐评论 📝 👇🏻 精彩专栏推荐订阅 👇🏻 不然下次找不到哟~ Java实战项目 Python实战项目微信小程序|安卓实战项目大数据实战项目 PHP|C#.NET|Golang实战项目 ?