spark map函数中使用println无法输出

 // 每个点为hardData中的一个Arrayval hardData = spark.read.textFile(args(0)).rdd.map(_.split(" ").map(_.toDouble).toArray).cache()hardData.map(a => println(a(0).toString + " " + a(1).toString +" " + a(3).toString))

结果中没有输出
解决

参考 https://stackoverflow.com/questions/33225994/spark-losing-println-on-stdout

由于spark面向大数据量和分布式，在使用map函数输出时存在各种问题：可能输出到各个主机、数据量过大等问题。

因此，spark在设计时使map函数中不能使用println输出信息流

将map函数改为foreach则有输出…
或者在后面加个foreach函数

spark map函数中使用println无法输出相关推荐

Map函数中的compute简单使用-----记录
Map函数中的compute简单使用参考文章:参考 1. Map.compiter使用是将最新的map存储的键值返回 example: //获取一个字符串中的字符出现频率String str = ...
ACMNO.26 C语言-字符统计2 编写一函数，由实参传来一个字符串，统计此字符串中字母、数字、空格和其它字符的个数，在主函数中输入字符串以及输出上述结果。只要结果，别输出什么提示信息。
题目描述编写一函数,由实参传来一个字符串,统计此字符串中字母.数字.空格和其它字符的个数, 在主函数中输入字符串以及输出上述结果. 只要结果,别输出什么提示信息. 输入一行字符串输出统计数据, ...
【C】编写一个函数，由实参传来一个字符串，统计此字符串中字母、数字、空格和其他字符的个数，在主函数中输入字符串以及输出上述的结果。
//编写一个函数,由实参传来一个字符串,统计此字符串中字母.数字.空格和其他字符的个数, //在主函数中输入字符串以及输出上述的结果. #include <stdio.h> #includ ...
【python作业】编写一个函数，由实参传来一个字符串，统计此字符串中字母和数字的个数，在主函数中输入字符串并输出上述的结果。
编写一个函数,由实参传来一个字符串,统计此字符串中字母和数字的个数,在主函数中输入字符串并输出上述的结果. def fun(s):count1 = 0count2 = 0for i in s:if i ...
编写一函数，由实参传来一个字符串，统计此字符串中字母、数字、空格和其它字符的个数，在主函数中输入字符串以及输出上述结果。只要结果，别输出什么提示信息。
题目描述编写一函数,由实参传来一个字符串,统计此字符串中字母.数字.空格和其它字符的个数,在主函数中输入字符串以及输出上述结果. 只要结果,别输出什么提示信息. 输入一行字符串输出统计数据,4 ...
7.9编写一个函数，由实参传来一个字符串，统计此字符串中字母、数字、空格和其他字符的个数，在主函数中输入字符串以及输出上述的结果。
//C程序设计第四版(谭浩强) //章节:第七章用函数实现模块化程序设计 //题号:7.9 //题目:编写一个函数,由实参传来一个字符串,统计此字符串中字母.数字.空格和其他字符的个数, //在主函 ...
编写一个函数，由实参传来一个字符串，统计次字符串中字母、数字、空格和其他字符的个数，在主函数中输入字符串以及输出上述的结果
/*编写一个函数,由实参传来一个字符串,统计次字符串中字母.数字.空格和其他字符的个数,在主函数中输入字符串以及输出上述的结果*/#include <stdio.h> #include ...
C语言程序设计联系题编写一个函数，由实参传来一个字符串，统计此字符串中的字母、数字、空格和其他字符的个数，在主函数中输入字符串以及输出上述结果。
编写一个函数,由实参传来一个字符串,统计此字符串中的字母.数字.空格和其他字符的个数,在主函数中输入字符串以及输出上述结果. #include<stdio.h> #include<s ...
(17)编写一个函数，由实参传来一个字符串，统计此字符串中字母、数字、空格和其他字符的个数，在主函数中输入字符串以及输出上述结果。
编写一个函数,由实参传来一个字符串,统计此字符串中字母.数字.空格和其他字符的个数,在主函数中输入字符串以及输出上述结果. #include<stdio.h> #include<m ...
写一函数,求一个字符串的长度。在main函数中输入字符串,并输出其长度。
写一函数,求一个字符串的长度.在main函数中输入字符串,并输出其长度. 解题思路: 字符串以\0作为结尾,则从第一个字符开始向后移动遇到\0认为字符串结束. 答案: #include <std ...

spark map函数中使用println无法输出

spark map函数中使用println无法输出相关推荐

最新文章

热门文章