spark sql 环境安装,java 默认路径和 安装配置!

yum安装java 查看默认路径

update-alternatives --config java

复制代码
# Java 环境变量 

export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.412.b08-1.el7_9.x86_64/jre

export PATH=$JAVA_HOME/bin:$PATH

# Spark 环境变量 

export SPARK_HOME=/home/vagrant/soft/spark

export PATH=$SPARK_HOME/bin:$SPARK_HOME/sbin:$PATH

编辑 .bashrc 文件 source

测试使用

文本获取

json获取

参考

Spark Shell | Spark 编程指南简体中文版

Spark基础实验五------Spark SQL编程初级实践 - 伽澄 - 博客园

相关推荐
teak_on_my_way25 分钟前
使用C#写的一个Kafka的使用工具
分布式·kafka
涤生大数据5 小时前
探索Doris:日志分析的新宠,是否能取代老牌ES?
大数据·elasticsearch·doris
阿巴阿巴拉6 小时前
Scala相关知识学习总结4
大数据·scala
码界筑梦坊7 小时前
基于Django的二手交易校园购物系统
大数据·后端·python·信息可视化·django
郭涤生8 小时前
Chapter 10: Batch Processing_《Designing Data-Intensive Application》
笔记·分布式
花和尚_鲁智深8 小时前
数据仓库:规范
大数据
郭涤生10 小时前
微服务系统记录
笔记·分布式·微服务·架构
马达加斯加D10 小时前
MessageQueue --- RabbitMQ可靠传输
分布式·rabbitmq·ruby
小诸葛的博客10 小时前
es基本概念
大数据·elasticsearch·搜索引擎
青云交11 小时前
Java 大视界 -- Java 大数据机器学习模型在金融衍生品定价中的创新方法与实践(166)
java·大数据·金融·数据采集·机器学习模型·java 大数据·金融衍生品定价