CDH修改PySpark默认的Python版本

前言

PySpark一直使用的是Linux默认的Python2.7.5版本，感觉超级不爽，于是想升个级，可怎么升啊？于是又开始了万年的Google

操作步骤

安装Python3.X参考
配置全局变量

sudo vim /etc/profile
export PATH=/usr/bin/python3:$PATH
source /etc/profile

打开CDH Web配置spark-env.sh文件如下：

即添加：

export PYSPARK_PYTHON=/usr/bin/python3
export PYSPARK_DRIVER_PYTHON=/usr/bin/python3

重启CDH过时服务
然后就就可以开心的玩耍咯

参考

CDH修改PySpark默认的Python版本相关推荐

修改linux下默认的python版本
首先在终端输入:python --verison 查看本机默认采用的python 版本接着进入/usr/local/lib 目录查看当前系统中安装了多少个python版本如果只有一个,就安装你需要 ...
linux怎么复制java版本,如何修改linux默认的jdk版本
摘要腾兴网为您分享:如何修改linux默认的jdk版本,中国人保,政务易,有道英语,小度等软件知识,以及wampserver,火影忍者ol,守护永恒之树,网易云音乐插件,烦恼表情包,总管,禹州新民生 ...
Ubuntu下切换默认的python版本
Ubuntu系统自带python2.7(默认)和python3.5,所以不需要自己安装python 可以使用命令 python --version 来查看默认的python版本 smile@smile ...
修改Linux中默认的python版本
文章目录 1. 正常操作 1.1 环境说明 1.2 下载安装你需要的python版本 1.3 查看新的python文件位置 1.4 修改软链接指向 2. Linux中文件颜色和一些标志说明 2.1 文 ...
Mac 技术篇-修改默认的python版本，mac最新版Python3.7.4的安装配置
第一部分:Python 的安装首选在官网下载我们最新版的python. python官网下载第二部分:Python 默认版本设置安装后我们打开终端发现python的默认版本还是2.7呢.这是py ...
python怎么恢复默认设置_centos 下怎么恢复为默认的python版本
展开全部安装完CentOS6.5(Final)后,执行#Python与#python -V,版本号是2.6,由于python3.X和2.X有很62616964757a686964616fe59b9e ...
修改ubuntu默认的Python版本号
ubuntu默认的Python是2.7版本的,键入Python3 就可以使用Python3.X版本. 1.删除/usr/bin 下的Python链接 sudo rm /usr/bin/python 2 ...
如何修改python代码,如何更改默认的python版本？
I have installed python 3.2 in my mac. After I run /Applications/Python 3.2/Update Shell Profile.com ...
QT: 使用qtchooser修改ubuntu默认的qmake版本
在安装使用QT5.10的时候,出现了qmake指向错误, qmake版本为 wishchin-HP-ENVY-Laptop-13-ad1xx:~$ qmake -v QMake version 2.0 ...

CDH修改PySpark默认的Python版本

前言

操作步骤

CDH修改PySpark默认的Python版本相关推荐

最新文章

热门文章