簡體 English 中英

將scala-spark文件編譯為jar文件

[英]compile scala-spark file to jar file

原文 2017-03-29 10:10:07 2 2 eclipse/ scala/ apache-spark/ sbt

我正在處理頻繁項目集的項目，並且我使用的是FP-Growth算法，我依賴於Scala-Spark中開發的版本

https://github.com/apache/spark/blob/v2.1.0/mllib/src/main/scala/org/apache/spark/mllib/fpm/FPGrowth.scala

我需要修改此代碼並將其重新編譯為一個jar文件，可以將其包含到Spark-shell中，並在spark中調用其功能

問題是spark-shell是un解釋器，它在此文件中發現錯誤，我已經用eclipse嘗試了Sbt，但是沒有成功。 我需要的是可以使用最新版本的scala和spark-shel庫將該文件編譯為jar文件的編譯器。

2 個解決方案

現在有您的問題！

您需要做的就是針對要使用自己的jar的計算機添加依賴項jar（scala，java等）。 稍后將罐子添加到spark-shell中，您可以像下面那樣使用它，

spark-shell --jars your_jar.jar

請按照以下步驟操作：

簽出Spark存儲庫
修改要修改的文件
建立專案
運行./dev/make-distribution.sh腳本，該腳本位於Spark存儲庫中
從您的Spark發行版運行Spark Shell

在Scala-Spark中進行Maven構建時出錯

[英]Error during maven build in Scala-Spark

如何在Windows上創建Scala jar文件（在Eclipse中）

[英]How to create a Scala jar file (in Eclipse) on Windows

在Java jar文件中運行Scala程序

[英]run scala program in java jar file

scala從scala-io生成jar文件以包含在eclipse中

[英]scala generating jar file from scala-io to include in eclipse

.Jar文件反編譯時出現編譯錯誤，但可以正常工作

[英].Jar File Has Compile Errors When Decompiled But Works Properly

在Eclipse中編譯項目，獲取war或ear或jar文件

[英]Compile a project in eclipse, get a war or ear or jar file

Scala和Eclipse：導出為Jar文件，但找不到主要方法

[英]Scala and Eclipse: Export as Jar File, but cannot find main method

在不使用Sbt或Maven的情況下從Scala項目創建jar文件

[英]Creating a jar file from Scala project without using Sbt or Maven

如何在Scala語言IDE中使用Java jar文件？

[英]How to use java jar file in scala language IDE?

如何從.scala文件創建（或運行）.jar文件？

[英]how to create (or run) .jar file from .scala files?

暫無

暫無

聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

相關問題 在Scala-Spark中進行Maven構建時出錯如何在Windows上創建Scala jar文件（在Eclipse中）在Java jar文件中運行Scala程序 scala從scala-io生成jar文件以包含在eclipse中 .Jar文件反編譯時出現編譯錯誤，但可以正常工作在Eclipse中編譯項目，獲取war或ear或jar文件 Scala和Eclipse：導出為Jar文件，但找不到主要方法在不使用Sbt或Maven的情況下從Scala項目創建jar文件如何在Scala語言IDE中使用Java jar文件？如何從.scala文件創建（或運行）.jar文件？

相關標簽

粵ICP備18138465號 © 2020-2024 STACKOOM.COM