cost 334 ms
spark 构建路径与 Scala (2.11.0) 的不兼容版本交叉编译 - spark build path is cross-compiled with an incompatible version of Scala (2.11.0)

我在 Scala IDE 中观察到一些构建错误。 虽然我知道如何修复,但我仍然不明白它是如何工作的。 我首先详细说明我的情况,并在最底部提出问题。 环境:mac spark version 2.4.5: brew info apache-spark returns apache-spark: st ...

如何使用 VS Code 和 Metals 运行现有的 Scala 项目? - How to run an existing Scala project using VS Code and Metals?

我是 Scala 的新手,我发现Scala IDE在我的机器上执行基本操作(例如搜索代码库和编辑代码)的速度非常慢。 我习惯了 Visual Studio Code,很高兴找到这个 metal 扩展。 我能够“导入构建”并修复问题,例如在我的项目中提高 Scala 版本,但我不确定如何重现此步骤以 ...

为什么eclipse认为df.as [CaseClass]是Scala Spark程序中的错误? - Why eclipse thinks df.as[CaseClass] as an error in Scala Spark program?

我正在尝试使用语法将数据框转换为数据集 所以我的代码看起来像 但是,蚀将.as[Rule]突出显示为错误。 屏幕截图如下。 如何解决这个问题? 我知道这不是Scala的问题,因为它可以在命令行上运行。 环境(如Eclipse中): Scala-2.11. ...

如何一起使用Scala格式和替换插值? - How to use Scala format and substitution interpolation together?

我是scala和spark的新手,并且要求我在一个println语句中同时使用格式和替换。 这是代码: 其中结果是具有结构(stationId,Temperature)的RDD。 现在我想将此代码转换为一个衬垫。 我尝试了以下代码: 它工作正常,但我无法格式化元组中 ...

Scala工作表不评估REPL并在右侧打印结果 - Scala worksheet not evaluating the REPL and printing the result on right side

我正在学习spark,并使用eclipse ScalaIDE,在其中创建一个新的工作表。 由于在保存文件时会评估scala中的工作表,并且结果将打印在右侧,但是当我在工作表中进行某些更改时,这不会发生。 这是我的scala工作表: 有什么我想念的吗? ...

使用Maven测试Spark Scala错误:java.lang.NoClassDefFoundError - Test Spark Scala with Maven Got Error: java.lang.NoClassDefFoundError

我尝试使用Maven在Scala IDE(eclipse)上测试Spark Scala,但始终出现错误: 我尝试的程序是Spark文档中的快速入门代码: 我使用Spark 2.2.0和Scala 2.11.7。 pom.xml文件是: 我遵循了另一个线程的解决方案: 执 ...

使用Scala重命名相对于另一个数据框的数据框的列名 - Rename column names of a dataframe with respect to another dataframe using scala

我正在尝试根据另一个数据框重命名数据框的列。 如何使用Scala做到这一点? 本质上我的数据看起来像 我有另一个表,看起来像这个DataFrame2 我想相对于其他数据框重命名我的第一个数据框的列。 因此预期的输出应如下所示: 我已经尝试过使用PySpark的代 ...


 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM