SparkSQL转换报错 value toDS is not a member of org.apache.spark.rdd.RDD

阅读: 评论:0

SparkSQL转换报错 value toDS is not a member of org.apache.spark.rdd.RDD

SparkSQL转换报错 value toDS is not a member of org.apache.spark.rdd.RDD

问题详情

问题原因

因为需要进行类型转换(隐式转换),样例类位置放错了。。。

解决方法

改变样例类位置(放于 main 方法之外)

总结

  1. 启用隐式转换时,需要在 main 函数中自行创建 SparkSession 对象,然后使用该对象来启用隐式转换,而非在 object 对象之前启用。
  2. case class 类的声明需要放在 main 函数之外。

本文发布于:2024-02-04 19:02:17,感谢您对本站的认可!

本文链接:https://www.4u4v.net/it/170714275558601.html

版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。

标签:报错   member   toDS   SparkSQL   org
留言与评论(共有 0 条评论)
   
验证码:

Copyright ©2019-2022 Comsenz Inc.Powered by ©

网站地图1 网站地图2 网站地图3 网站地图4 网站地图5 网站地图6 网站地图7 网站地图8 网站地图9 网站地图10 网站地图11 网站地图12 网站地图13 网站地图14 网站地图15 网站地图16 网站地图17 网站地图18 网站地图19 网站地图20 网站地图21 网站地图22/a> 网站地图23