技术栈
hadoop
yumgpkpm
10 小时前
大数据
·
hadoop
·
分布式
·
华为
·
zookeeper
·
开源
·
cloudera
Iceberg在Hadoop集群使用步骤(适配AI大模型)
Iceberg在Hadoop集群使用步骤在 Cloudera Data Platform(CDP) 集群中使用 Apache Iceberg,需结合 CDP 的集成能力(如 Spark 3、Hive Metastore、Catalog 支持等)。以下是 完整、可操作的使用步骤(适用于 CDP Private Cloud Base/Experience 7.1.7+ 或 CDP Public Cloud,截至 2025 年):
清平乐的技术专栏
14 小时前
hive
·
hadoop
·
sql
Hive SQL中COALESCE 函数和NVL()函数、IFNULL函数区别
在 Hive SQL 中,COALESCE()、NVL()和IFNULL()都是用于处理NULL 值的函数,但在参数数量、语法兼容、功能范围等方面存在显著区别。
爱吃大芒果
15 小时前
开发语言
·
hive
·
hadoop
·
flutter
·
华为
Flutter 列表优化:ListView 性能调优与复杂列表实现
列表是 Flutter 应用中最常用的组件之一,用于展示大量有序数据(如商品列表、消息记录、新闻流等)。但在处理海量数据或复杂列表项(包含图片、动画、多组件嵌套)时,容易出现卡顿、滚动不流畅等性能问题。本文将从 ListView 核心原理出发,深入讲解性能调优的核心手段,并结合实战案例实现复杂列表(如异构列表、下拉刷新/上拉加载、列表项动画),帮助开发者构建高性能、流畅的列表界面。 作者:爱吃大芒果
Yore Yuen
15 小时前
数据仓库
·
hive
·
hadoop
Hive内表修改字段类型及注意事项
例如,我们需要一个t1表,在创建的时候,理所当然的认为了 hit_count 是一个整型类型创建了一个内表。
梦里不知身是客11
15 小时前
数据仓库
·
hive
·
hadoop
yarn向hive提交队列的方式
在YARN集群中,向Hive任务指定提交队列的方式主要通过以下步骤实现:此配置对所有Hive会话生效。
Direction_Wind
17 小时前
数据仓库
·
hive
·
hadoop
Iceberg 与 Hive 用法区别
hive 和 iceberg 使用 ddl 建表语法基本类似,iceberg 需要指定 using iceberg。
fvafuc
17 小时前
数据仓库
·
hive
·
hadoop
常用odps(hive)语法
-- 基本查询 SELECT col1, col2 FROM table;-- 别名 SELECT col1 AS name1, col2 name2 FROM table;
爱吃大芒果
2 天前
开发语言
·
javascript
·
hive
·
hadoop
·
flutter
·
华为
·
harmonyos
Flutter 本地存储方案:SharedPreferences、SQFlite 与 Hive
在 Flutter 应用开发中,本地存储是实现数据持久化的核心需求,广泛应用于保存用户配置、缓存网络数据、存储离线信息等场景。当前 Flutter 生态中,SharedPreferences、SQFlite、Hive 是最主流的三种本地存储方案,它们分别基于不同的存储原理,适配不同的数据规模与业务场景。本文将从核心原理、实战实现、优缺点分析、横向对比及选型建议五个维度,全面解析这三种方案,帮助开发者快速选择适配自身项目的本地存储方案。 作者:爱吃大芒果
shjita
2 天前
大数据
·
hadoop
·
分布式
hadoop运行jar包的相关配置参考!
core-site.xml<property> <name>fs.defaultFS</name> <value>hdfs://master:9820</value> </property>
yumgpkpm
2 天前
大数据
·
人工智能
·
hadoop
·
华为
·
spark
·
kafka
·
cloudera
AI大模型手机的“简单替换陷阱”与Hadoop、Cloudera CDP 7大数据底座的关系探析
AI大模型手机的“简单替换陷阱”与Hadoop、Cloudera CDP 7大数据底座的关系探析建议由CDH迁移到CMP 7.13 平台(类Cloudera CDP,如华为鲲鹏 ARM 版)可以做到无缝切换平缓迁移
yumgpkpm
2 天前
大数据
·
hive
·
hadoop
·
分布式
·
华为
·
开源
·
cloudera
Cloudera CDP 7.3下载地址、方式,开源适配 CMP 7.3(或类 CDP 的 CMP 7.13 平台,如华为鲲鹏 ARM 版)值得推荐
Cloudera CDP 7.3下载方式,开源适配 CMP 7.3(或类 CDP 的 CMP 7.13 平台,如华为鲲鹏 ARM 版)值得推荐
yumgpkpm
3 天前
hive
·
hadoop
·
mysql
·
zookeeper
·
flink
·
kafka
·
hbase
hadoop集群搭建 (超详细) 接入Impala、Hive,AI 大模型的数据底座
目录一、 安装准备......................................................................................................... 2
励志成为糕手
3 天前
大数据
·
hadoop
·
分布式
·
mapreduce
·
yarn
MapReduce工作流程:从MapTask到Yarn机制深度解析
🌟 你好,我是 励志成为糕手 ! 🌌 在代码的宇宙中,我是那个追逐优雅与性能的星际旅人。 ✨ 每一行代码都是我种下的星光,在逻辑的土壤里生长成璀璨的银河; 🛠️ 每一个算法都是我绘制的星图,指引着数据流动的最短路径; 🔍 每一次调试都是星际对话,用耐心和智慧解开宇宙的谜题。 🚀 准备好开始我们的星际编码之旅了吗?
编织幻境的妖
3 天前
大数据
·
hadoop
·
分布式
Hadoop核心组件及其作用概述
Hadoop的核心组件可以概括为“两大基础”和一个“核心大脑”,它们共同构成了分布式数据处理的基石。作用:负责存储。它是一个高可靠、高扩展性的分布式文件系统,能将超大规模数据集(TB/PB级)拆分成多个数据块,并分散存储在集群的多个普通服务器上。
梦里不知身是客11
4 天前
数据仓库
·
hive
·
hadoop
hive中metastore 服务的意义
Hive中的Metastore服务是元数据管理的核心组件,其意义主要体现在以下几个方面:Metastore集中管理所有Hive表、分区、列、存储格式等元数据信息。例如:
计算机毕业编程指导师
4 天前
大数据
·
hadoop
·
python
·
计算机
·
spark
·
django
·
电影评分人气
【Python大数据选题】基于Spark+Django的电影评分人气数据可视化分析系统源码 毕业设计 选题推荐 毕设选题 数据分析 机器学习
⭐⭐个人介绍:自己非常喜欢研究技术问题!专业做Java、Python、小程序、安卓、大数据、爬虫、Golang、大屏等实战项目。 ⛽⛽实战项目:有源码或者技术上的问题欢迎在评论区一起讨论交流! ⚡⚡有什么问题可以在主页上或文末下联系咨询博客~~ ⚡⚡Java、Python、小程序、大数据实战项目集](https://blog.csdn.net/2301_80395604/category_12487856.html)
梦里不知身是客11
4 天前
数据仓库
·
hive
·
hadoop
hive让分区关联数据的三种方式
在Hive中,通过分区关联数据是优化查询性能的重要手段。以下是三种主要实现方式及其应用场景:语法特点示例
m0_74004373
5 天前
数据仓库
·
hive
·
hadoop
Spring_全面详解入门
web 服务器,就是一个运行 web 项目的容器servlet 是运行在服务器上的程序,作用演示记住 web 开发流程 **[重点]**
皓空揽月
5 天前
hadoop
·
windows
windows安装hadoop2.7.2教程(单机版)
2025 年 Windows 10/11 最稳最全版 Hadoop 2.7.2 单机伪分布式完整安装教程(细节到每个配置文件)
阿杰同学
7 天前
大数据
·
hadoop
·
分布式
Hadoop 面试题及答案整理,最新面试题
1、设置MapReduce任务内存参数: 调整mapreduce.map.memory.mb和mapreduce.reduce.memory.mb参数来分配给map和reduce任务的内存大小。这样可以避免任务因内存不足而失败。