spark value $ is not a member of StringContext

问题描述:


Error:(61, 40) value $ is not a member of StringContextval click= df.filter($"e_type" === "click")

解决办法

在创建的SparkSession对象后,引入【implicits._】


val spark = SparkSession.builder().master("local[*]").appName(s"${this.getClass.getName}").getOrCreate()val df = spark.read.json(inputPath)import spark.implicits._val click: Dataset[Row] = df.filter($"e_type" === "click")

问题解决,开发继续向下进行

spark value $ is not a member of StringContext相关推荐

  1. phoenix+hbase+Spark整合,Spark处理数据操作phoenix入hbase,Spring Cloud整合phoenix

    1 版本要求 Spark版本:spark-2.3.0-bin-hadoop2.7 Phoenix版本:apache-phoenix-4.14.1-HBase-1.4-bin HBASE版本:hbase ...

  2. value toDF is not a member of org.apache.spark.rdd.RDD[People]

    编译如下代码时,出现value toDF is not a member of org.apache.Spark.rdd.RDD[People]  错误 val rdd : RDD[People]= ...

  3. scala学习-Description Resource Path Location Type value toDF is not a member of org.apache.spark.rdd.R

    编译如下代码时,出现value toDF is not a member of org.apache.Spark.rdd.RDD[People] 错误 val rdd : RDD[People]= s ...

  4. Spark SQL入门:创建SparkSession时import spark.implicits._ 报错: error: value implicits is not a member of...

    Spark SQL入门:创建SparkSession时import spark.implicits._ 报错: error: value implicits is not a member of... ...

  5. spark报错:value xxx is not a member of Any

    df1.rdd.filter(x=>x(1).contains("腾讯")).take(5) 遇到这个问题 此时可以先做类型转换: df1.rdd.filter(x=> ...

  6. Spark RDD/Core 编程 API入门系列之动手实战和调试Spark文件操作、动手实战操作搜狗日志文件、搜狗日志文件深入实战(二)...

    1.动手实战和调试Spark文件操作 这里,我以指定executor-memory参数的方式,启动spark-shell. 启动hadoop集群 spark@SparkSingleNode:/usr/ ...

  7. spark源码解析之scala基本语法

    1. scala初识 spark由scala编写,要解析scala,首先要对scala有基本的了解. 1.1 class vs object A class is a blueprint for ob ...

  8. 【核心API开发】Spark入门教程[3]

    本教程源于2016年3月出版书籍<Spark原理.机制及应用> ,在此以知识共享为初衷公开部分内容,如有兴趣,请支持正版书籍. Spark综合了前人分布式数据处理架构和语言的优缺点,使用简 ...

  9. Scala,Spark和IDEA学习笔记

    目录 distinct和dropDuplicates的区别联系 IDEA下载Git项目 解决A master URL must be set in your configuration错误 Intel ...

最新文章

  1. 防屏蔽浏览器_彻底解决安卓手机通知管理难题,顺便还实现了聊天消息防撤回!...
  2. 11组软件工程组队项目失物招领系统——进度汇报和下周目标
  3. 千分之三用计算机怎么算,浓度换算计算器(浓度单位换算器在线使用)
  4. 高效的企业测试-结论(6/6)
  5. Visual Studio 2003/Visual Studio 2005常用快捷键(快捷方式)
  6. spring-boot(2)--环境搭建
  7. Elasticsearch--进阶-match_phrase短语匹配---全文检索引擎ElasticSearch工作笔记012
  8. MS SQL SERVER2005更新触发器
  9. Java降落伞_使用DJI Onboard SDK进行降落伞部署
  10. 计算机sci转让,sci论文有没有转让的
  11. 计算机网络基础之互联网总结
  12. c语言最简单的程序流程图,高手帮忙画个流程图简单的俄罗斯方块C语言程 – 手机爱问...
  13. zabbix告警配置
  14. Vue 项目中使用Lodop进行打印
  15. js通过字节长度截取中英文混合字符串
  16. mysql 启动时,服务无法启动:发生系统错误1067.
  17. 如何快速完成事业单位继续教育
  18. 目标检测中的数据增强:mosaic,mixup,cutout,cutmix
  19. ATtiny13与Proteus仿真-PWM生成报警声音仿真
  20. 发布一个智能密码钥匙内部证书导出工具ExportCert

热门文章

  1. 校验手机号和获取验证码
  2. 基于 Traefik 的 ForwardAuth 配置
  3. 微信小程序数据 \n 换行符失效解决办法
  4. c语言生日快乐爱心,C语言 生日快乐
  5. Android——电话拨号器
  6. 语义分割,将RGB三通道的lable转为单通道
  7. 新郑计算机培训机构排名前十,新郑美术培训中心排名
  8. 【历史上的今天】8 月 30 日:首台通用电子计算机的发明者诞生;谷歌推出第一个涂鸦
  9. AngularJS 精妙绝伦的控制器
  10. Win11任务栏怎么透明?Win11任务栏全透明设置教程