ubuntu 14.04下spark简易安装
java安装
首先需要上oracle的网站下载
在lib目录下建立一个jvm文件夹
sudo mkdir /usr/lib/jvm
然后解压文件到这个文件夹
sudo tar zxvf jdk-8u40-linux-i586.tar.gz -C /usr/lib/jvm
进入解压文件夹
cd /usr/lib/jvm
然后为了方便改个名字
sudo mv jdk1.8.0_40 java
打开配置文件
sudo gedit ~/.bashrc
加入以下设置
export JAVA_HOME=/usr/lib/jvm/java
export JRE_HOME=${JAVA_HOME}/jre
export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib
export PATH=${JAVA_HOME}/bin:$PATH
使之生效:
source ~/.bashrc
完成
安装spark
下载prebuild的spark安装包
解压
tar -xzf spark-1.2.0-bin-hadoop2.4.tgz
然后其实这个时候spark的python模式就可以使用了。只要cd进去运行bin目录下的pyspark就可以了。但是我们下面要做的就是链接和选择一个好些的位置存放文件
链接
先把文件岁半换个地方放
sudo mv spark-1.2.1-bin-hadoop2.4 /srv/
然后设个链接
sudo ln -s /srv/spark-1.2.1-bin-hadoop2.4/ /srv/spark
再修改下~/.bash_profile就可以了
export SPARK_HOME=/srv/spark
export PATH=$SPARK_HOME/bin:$PATH
完成
命令行直接执行pyspark
转载于:https://www.cnblogs.com/MrLJC/p/4355417.html
ubuntu 14.04下spark简易安装相关推荐
- linux命令行安装libxml,Ubuntu 14.04下libxml2的安装和使用
Ubuntu 14.04下libxml2库的安装方法: sudo apt-get install libxml2 sudo apt-get install libxml2-dev 利用以上命令安装完软 ...
- 安装使用简单的linux,Ubuntu 14.04下autojump的安装和简单使用
autojump的安装和简单使用(环境:Ubuntu 14.04) 一.autojump的安装 1.安装oh-my-zsh 一.sudo apt-get install zsh //第二步执行时可能会 ...
- ubuntu 14.04 下通过apt-get 安装jdk
为什么80%的码农都做不了架构师?>>> Installing default JRE/JDK sudo apt-get update sudo apt-get install ...
- Ubuntu 14.04下 Redis MongoDB安装及使用
2019独角兽企业重金招聘Python工程师标准>>> 1.Redis 1.1下载 wget http://download.redis.io/releases/redis-2.8. ...
- ubuntu14.04安装linux公社,Ubuntu 14.04下安装IT++
Ubuntu 14.04 下安装 IT++(itpp)(官方二进制包安装版) 温馨提示:虽然没有尝试,不过直接运行最后一步应该也可以成功. 另外,既然有简单的方法,不到破不得以还是不要尝试麻烦的方法了 ...
- Ubuntu 14.04 下安装Skype
操作1: Ubuntu 14.04 下安装Skype,使用 Ctr+Alt+T组合键打开终端Terminal,输入如下即可: wget -O skype.deb http://download.sky ...
- Ubuntu 14.04 下安装Skype聊天工具
Ubuntu 14.04对语音啦视频等支持还是不太好,而且我们常用的通讯工具是QQ,官方给出的Linux For QQ版本在Ubuntu中显得那样脆弱,而且功能也少,所以还是需要一款可以视频聊天的工具 ...
- [转]Ubuntu 14.04下安装文本编辑软件 CherryTree 0.33.0
文本编辑软件 CherryTree 0.33.0 已经发布,下面说说Ubuntu下安装方法. CherryTree是一款文本编辑器,拥有先进的编辑功能,如语法高亮.拼写检查.导出到HTML.密码保护. ...
- linux qt4 音乐播放器,Ubuntu 14.04下安装音乐播放器 Clementine 1.2.3
Clementine 是一款非常不错的自由开源音乐播放器,支持很多国外的云空间,比如box.com.Clementine使用qt4编写,灵感来自Amarok 1.4.Clementine还是一款跨平台 ...
最新文章
- Kotlin基本语法和使用
- PostgreSQL_case when
- 数据结构源码笔记(C语言):二路归并排序
- oracle触发器 select into,Oracle触发器中selectinto报错no_data_found异常处理
- 大话数据结构第四章栈的应用
- JavaScript——创建运动框架
- 泄漏 iOS 关键源码的人,居然是苹果的一个实习生
- 第四篇、Python文件处理
- Mac OS X 安装ruby环境
- 录录录屏(video321)--1款亲测好用的免费高清录屏软件。你一定无法拒绝(附使用教程)
- Windows下SVN提交模板制作及应用
- Mysql监控工具–mytop
- 去健身房健身戴什么耳机好、最适合运动健身的健身房耳机推荐
- css firefox火狐浏览器下的兼容性问题
- #Revit二次开发#内部单位转化
- 53所高校研究生补贴一览表
- babylonjs 分部加载模型_基于babylon3D模型研究3D骨骼动画(1)
- 基于Strongswan的IPSec部署
- 51Nod 1631 小鲨鱼在51Nod小学 【 扫描线 】
- 图像处理——相位恢复(GS,TIE,改进型角谱迭代法)(已更新代码)
热门文章
- Android 开发中的View事件监听机制
- Git的冲突解决过程
- ASPNET登陆总结
- Dynamic CRM 2013学习笔记(一)插件输入实体参数解析
- [Ubuntu] 启动gvim时,怎样设置一个项目的文件为打开状态
- 怎样查看CMD下exe文件的命令行参数输入格式?
- dao加service加mysql实例_SpringBoot项目整合mybatis的方法步骤与实例
- mysql审计权限_MySQL对普通用户(没有super)开启审计功能
- leetcode算法题--骑士拨号器
- leetcode算法题--二维区域和检索 - 矩阵不可变