windows安装spark工具记录

首先安装java

然后安装scala

继续安装intelli idea与sbt

继续安装spark(直接是编译好的)，需要手动添加环境变量

继续安装hadoop（直接是编译好的），需要手动添加环境变量

最后，运行一个样例wordcount；

注意事项，需要手动添加库（jar文件)；

使用机器学习库需要导入breeze库

使用spark的很多库，需要导入：

windows安装spark工具记录相关推荐

windows 安装 spark 及 pycharm 调试 TopN 实例
2019独角兽企业重金招聘Python工程师标准>>> 首先声明本文搭建的环境为:windows8.1 + spark1.6.0 + python2.7 + jdk8,spark o ...
【Tools】Windows安装CMake工具
00. 目录文章目录 00. 目录 01. CMake简介 02. CMake特点 03. CMake下载 04. CMake安装 05. 附录 01. CMake简介 CMake这个名字是&quo ...
PC端Windows安装adb工具和使用
在Windows下安装adb工具环境:Windows 10 1.下载和解压缩下载地址: https://developer.android.google.cn/studio/releases/pl ...
[How TO]-windows安装wget工具
windows安装wget 点击此处下载wget-1.11.4-1-setup.exe 载后双击安装,全部默认安装(C:\Program Files (x86)\GnuWin32) 设置系统环境变量 ...
linux redis图形界面,linux安装redis和windows安装可视化工具
Redis的安装本文使用的是redis-4.x的版本,因为有些新技能,所以还是想试试下载redis的安装包: wget http://download.redis.io/releases/redi ...
Windows安装pycrypto失败记录
Windows 10家庭中文版,Python 3.6.4, 180824测试前端加密文本在后台揭秘,查询后发现,可以使用pycrypto模块实现,那么,安装它(pip),结果安装失败了. 本文暂时记录 ...
【笔记】windows安装fish工具
fish工具是Linux下的一个工具,可以记忆敲过的命令行,在你敲了部分命令后,自动在后面提示最接近的命令行,并可以快速补全. 一.需要先在windows下安装ubuntu子系统 1.命令行中输入以下 ...
windows安装pscp工具,通过命令行上传到linux服务器
三步完成: 下载pscp工具 http://www.chiark.greenend.org.uk/~sgtatham/putty/download.html 拷贝到 C:\Windows\System ...
windows 安装 pip工具
setuptools 安装 https://pypi.org/project/setuptools/#files pip安装 https://pypi.org/project/pip/#files p ...

windows安装spark工具记录

windows安装spark工具记录相关推荐

最新文章

热门文章