java spark环境配置文件_JAVA, SCALA, HADOOP, SPARK里的JAVA

/etc/profile里添加的内容：

export JAVA_HOME=/jdk

export HADOOP_HOME=/hadoop

export SCALA_HOME=/scala

export SPARK_HOME=/spark

export PATH=$PATH:$JAVA_HOME/bin

export PATH=$PATH:$SPARK_HOME/bin

export PATH=$PATH:$HADOOP_HOME/bin

export PATH=$PATH:$SCALA_HOME/bin

export PATH=$PATH:$SPARK_HOME/sbin

export CLASSPATH=.:$JAVA_HOME/lib

/jdk为jdk的安装目录，/hadoop为hadoop的安装目录，/scala为scala的安装目录，/spark为spark的安装目录。

hadoop里需要添加的JAVA_HOME

hadoop文件夹下的/etc/hadoop/hadoop-env.sh

export JAVA_HOME=/jdk

spark里需要添加的JAVA_HOME

spark文件夹下的sbin/spark-config.sh

export JAVA_HOME=/jdk

spark文件夹下的conf/spark-env.sh

export JAVA_HOME=/jdk

export SCALA_HOME=/scala

export HADOOP_HOME=/hadoop

标签：JAVA,SCALA,HADOOP,hadoop,export,HOME,PATH,spark

来源： https://blog.csdn.net/Python_Billy/article/details/104790131

java spark环境配置文件_JAVA, SCALA, HADOOP, SPARK里的JAVA_HOME和环境变量设置相关推荐

Scala+Hadoop+Spark开发
去实习,发现工业界用的大多用这种大数据处理方式. 一些自己的理解: Spark是基于内存计算的大数据分布式计算框架,提高了数据处理的实时性,同时保证了高容错性和高可伸缩性. Hadoop是一种分布式系 ...
idea写java spark程序,Spark : 在IDEA中用scala编写Spark的WordCount程序并提交运行
使用IDEA新建maven工程,添加相关依赖: 1.8 1.8 2.11.11 2.3.0 2.7.7 utf-8 org.scala-lang scala-library ${scala.versi ...
java 开发环境配置文件_Java 开发环境配置
在本章节中我们将为大家介绍如何搭建Java开发环境.Windows 上安装开发环境 Linux 上安装开发环境安装 Eclipse 运行 Java window系统安装java 下载JDK 首先我们 ...
java原子更新类_Java内部具有原子更新的动态热交换环境
java原子更新类有人可能会争辩说上述标题可以简称为OSGi ,我想在一开始就放弃这种思考过程. 对于OSGi而言,这没有什么冒犯的,它是一个很棒的规范,在实现层或可用性层上都搞砸了,这就是我对OS ...
java中使用配置文件_Java中使用Properties配置文件的简单方法
Java中使用Properties配置文件的简单方法 properties Properties文件是java中的一种配置文件,文件后缀为".properties",文件的内容格式 ...
java的classpath配置文件_Java Classpath及.properties配置文件
private static final String CONFIG_FILE = "logmonitor.properties"; ClassLoader cl =ClassLo ...
Java读取propertise配置文件_JAVA读取PROPERTIES配置文件
项目经常用到json,xml,properties,文本文件等,作为配置文件.用来存储连接字符串或其他配置参数等. 本文记录properties. properties文件,存储格式键=值.例如新建 ...
java jar包配置文件_java 导入jar包中配置文件
spring项目只能识别到项目内的xml配置文件,无法识别jar中xml配置文件解决思路: 在启动初始化期间,将jar包内部的文件拷贝到jar包外部相对路径中.//jarFullFileName: ...
java maven 读取配置文件_Java项目和maven项目中如何获取设置配置文件中的属性
通常情况下,我们会在一些配置文件文件中配置一些属性.如: indexPath = E\:\\Tomcat_7.0\\webapps\\ipost_stage\\lucene\\index imgUpl ...

java spark环境配置文件_JAVA, SCALA, HADOOP, SPARK里的JAVA_HOME和环境变量设置

java spark环境配置文件_JAVA, SCALA, HADOOP, SPARK里的JAVA_HOME和环境变量设置相关推荐

最新文章

热门文章