Spark2.4报value foreach is not a memeber of Object错
一.原因分析
根据是使用java集合还是scala数据集原因也不尽相同。
1.java集合
因为 Java 集合类型在 Scala 操作时没有 foreach 方法。
2.scala数据集
一般为scala版本与spark版本不兼容导致!
二.解决方案
1.java集合
需要将其转换为Scala的集合类型, 因此需要在代码中加入如下内容(Scala支持与Java的隐式转换):
import scala.collection.JavaConversions._
2.scala数据集
调整scala版本。spark1.x一般使用scala2.10.x,spark2.x一般使用scala2.11.x。
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 基于Microsoft.Extensions.AI核心库实现RAG应用
· 10年+ .NET Coder 心语 ── 封装的思维:从隐藏、稳定开始理解其本质意义
· 地球OL攻略 —— 某应届生求职总结
· 提示词工程——AI应用必不可少的技术
· Open-Sora 2.0 重磅开源!
· 周边上新:园子的第一款马克杯温暖上架
2019-05-18 MapReduce1.x与MapReduce2.x差异