簡體   English   中英

在scala intellij IDE中加載文件

[英]load file in scala intellij IDE

我有以下代碼:

  def main(args: Array[String]): Unit = {

//  Creation of Spark Session
    implicit val sparkSession = SparkSession.builder().appName("seco_trial").getOrCreate()
    println("test")

    val df = sparkSession.read.format("csv").option("header", "true").load("D:/Userfiles/mir/Downloads/extract_sec_mav2.csv")

    println("test2")

我在其中創建val df的行給了我以下錯誤:

2018-09-17 14:27:24 WARN FileStreamSink:66-查找元數據目錄時出錯 線程“主”中的異常java.io.IOException:方案無文件系統:org.apache.hadoop.fs.FileSystem.createFileSystem(org.apache.hadoop.fs.FileSystem.getFileSystemClass(FileSystem.java:2660)處的D FileSystem.java:2667)[...]

讓我們排除錯誤的路徑是一個問題。 我的文件正確具有擴展名.csv

你能告訴我是什么問題嗎? 為什么我不能加載文件?

我不確定為什么,但是我必須在前面添加“ fie:///”。

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM