spark sql 环境安装,java 默认路径和 安装配置!

yum安装java 查看默认路径

update-alternatives --config java

复制代码
# Java 环境变量 

export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.412.b08-1.el7_9.x86_64/jre

export PATH=$JAVA_HOME/bin:$PATH

# Spark 环境变量 

export SPARK_HOME=/home/vagrant/soft/spark

export PATH=$SPARK_HOME/bin:$SPARK_HOME/sbin:$PATH

编辑 .bashrc 文件 source

测试使用

文本获取

json获取

参考

Spark Shell | Spark 编程指南简体中文版

Spark基础实验五------Spark SQL编程初级实践 - 伽澄 - 博客园

相关推荐
MQ_SOFTWARE3 小时前
文件权限标记机制在知识安全共享中的应用实践
大数据·网络
白鹭3 小时前
基于LNMP架构的分布式个人博客搭建
linux·运维·服务器·网络·分布式·apache
不辉放弃4 小时前
kafka的消费者负载均衡机制
数据库·分布式·kafka·负载均衡
花下的晚风4 小时前
模拟flink处理无限数据流
大数据·flink
小悟空4 小时前
[AI 生成] Flink 面试题
大数据·面试·flink
livemetee4 小时前
Flink2.0学习笔记:Stream API 常用转换算子
大数据·学习·flink
AutoMQ5 小时前
技术干货|为什么越来越多企业放弃 Flink/Spark,用 AutoMQ 替代传统 ETL?
大数据
java叶新东老师6 小时前
三、搭建springCloudAlibaba2021.1版本分布式微服务-springcloud loadbalancer负载均衡
分布式·spring cloud·微服务
zxsz_com_cn7 小时前
智能化设备健康管理:中讯烛龙预测性维护系统引领行业变革
大数据·架构
沉下去,苦磨练!7 小时前
kafka的部署和jmeter连接kafka
分布式·jmeter·kafka