堆栈内存溢出
  简体   繁体   English

java.lang.NoSuchMethodError 尝试读取 Apache Spark 中的 avro 文件

[英]java.lang.NoSuchMethodError trying to read avro files in Apache Spark

 原文  2021-09-18 17:22:34  1   1    java/ apache-spark/ avro

问题描述

Trying to read avro files in Apache Spark, I was receiving this error:尝试读取 Apache Spark 中的 avro 文件时，我收到此错误：

java.lang.NoSuchMethodError: 'boolean org.apache.spark.sql.internal.SQLConf.avroFilterPushDown()' java.lang.NoSuchMethodError: 'boolean org.apache.spark.sql.internal.SQLConf.avroFilterPushDown()'

1 个解决方案

解决方案1
 1  2021-09-18 17:22:34

This error happened for me because I was using an older version (3.0.1) on that doesn't exist this new configuration.这个错误发生在我身上，因为我使用的是旧版本 (3.0.1)，它不存在这个新配置。 After I upgrade my local spark version to 3.1.2 fixed the problem在我将我的本地 spark 版本升级到 3.1.2 后解决了这个问题

暂无
暂无

声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

相关问题 尝试读取 .xlsm 文件时出现 java.lang.NoSuchMethodError - java.lang.NoSuchMethodError when trying to read .xlsm file java.lang.NoSuchMethodError 尝试读取.xlsx excel 文件时 - java.lang.NoSuchMethodError when trying to read .xlsx excel file Apache点燃并引发迭代错误java.lang.NoSuchMethodError：org.apache.spark.sql.SQLContext.createDataFrame - Apache ignite and spark itegration error java.lang.NoSuchMethodError: org.apache.spark.sql.SQLContext.createDataFrame Apache POI java.lang.NoSuchMethodError - Apache POI java.lang.NoSuchMethodError 如何解决java.lang.NoSuchMethodError org.apache.spark.ml.util.SchemaUtils $ .checkColumnType - How to resolve java.lang.NoSuchMethodError org.apache.spark.ml.util.SchemaUtils$.checkColumnType java.lang.NoSuchMethodError：org.apache.spark.sql.DataFrameReader.parquet - java.lang.NoSuchMethodError: org.apache.spark.sql.DataFrameReader.parquet java.lang.NoSuchMethodError： - java.lang.NoSuchMethodError: java.lang.NoSuchMethodError - java.lang.NoSuchMethodError java.lang.NoSuchMethodError：org.apache.spark.ui.SparkUI.addStaticHandler（Ljava / lang / String; Ljava / lang / String; - java.lang.NoSuchMethodError: org.apache.spark.ui.SparkUI.addStaticHandler(Ljava/lang/String;Ljava/lang/String; java.lang.NoSuchMethodError：org.apache.commons.io.IOUtils.read with Tika（检测方法） - java.lang.NoSuchMethodError: org.apache.commons.io.IOUtils.read with Tika (detect method)
相关标签
 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM