py4j.protocol.Py4JJavaError错误

py4j.protocol.Py4JJavaError: An error occurred while calling o30.toDebugString.
: org.apache.hadoop.mapred.InvalidInputException: Input path does not exist: hdfs://192.168.1.84:9000/user/root/shakespeare.txt

原因:

 text = sc.textFile("shakespeare.txt")

spark默认去hdfs寻找，然而我的放在本地，应该改为：

 text = sc.textFile("file:///root/shakespeare.txt")

py4j.protocol.Py4JJavaError错误相关推荐

Spark: py4j.protocol.Py4JJavaError: An error occurred while calling o91.showString.
@创建于:2022.06.15 @修改于:2022.06.15 利用Spark的yarn模式(把.py文件上传到hadoop平台),执行过程中发现了下面的问题.py4j.protocol.Py4JJa ...
py4j.protocol.Py4JJavaError: An error occurred while calling o90.save
环境: Ubuntu19.10 anaconda3-python3.6.10 scala 2.11.8 apache-hive-3.0.0-bin hadoop-2.7.7 spark-2.3.1-b ...
from py4j.protocol import Py4JError ModuleNotFoundError 错误
from py4j.protocol import Py4JError ModuleNotFoundError: No module named 'py4j'报错了!!! 学习林子雨老师的pySpar ...
成功解决raise Py4JError py4j.protocol.Py4JError: py4j.protocol.Py4JError: Could not find py4j jar at
成功解决raise Py4JError("Could not find py4j jar at {0}".format(jarpath)) py4j.protocol.Py4JEr ...
linux中浏览器连不上网络,在Linux中修复Firefox浏览器“Network Protocol Error”错误的方法...
本文介绍在Linux中修复Mozilla Firefox浏览器上的Network Protocol Error错误,即网络协议错误.安装Firefox可以参考在Debian 9 Stretch系统上安 ...
spark运行出现py4j.protocol.Py4JError异常
spark配置启动过程中出现:py4j.protocol.Py4JError: An error occurred while calling None.None. Trace: Authentica ...
挂载本地目录到Virtualbox并解决[mounting failed with the error: Protocol error]错误
https://zhidao.baidu.com/question/187704694.html 把文件发到VirtualBox的方法有很多,下面推荐两种: 1.把要共享的文件夹挂载到虚拟机某一个文件 ...
Diffie-Hellman Key Agreement Protocol 资源管理错误漏洞（CVE-2002-20001）
资源管理错误漏洞(CVE-2002-20001)修复项目在等保漏洞扫描时扫描出来了"资源管理错误漏洞",实操修复 Diffie-Hellman Key Agreement Pro ...
检查DISPLAY设置时Xlib出现No protocol specified错误
退出到root用户,执行xhost +命令后,再次切换到Oralce用户,执行runInstaller命令,错误消失转载于:https://www.cnblogs.com/coffeebox/p/3 ...

py4j.protocol.Py4JJavaError错误

py4j.protocol.Py4JJavaError错误相关推荐

最新文章

热门文章