我正在尝试读取一个 CSV 文件,以使用 Spark Scala API 作为准备数据的一部分。运行同一个文件时出现以下问题。2024-09-12 11:26:46,0484 错误 JniCommon fc/jni_MapRClient.c...
我正在尝试读取 CSV 文件以使用 Spark Scala API 作为准备数据的一部分。
运行同一个文件时我遇到以下问题。
2024-09-12 11:26:46,0484 ERROR JniCommon fc/jni_MapRClient.cc:795 Thread: 12962582528 Mismatch found for java and native libraries java build version 6.1.0.20180926230239.GA, native build version 6.1.0.20171109191718.GA java patch vserion $Id: mapr-version: 6.1.0.20180926230239.GA 9008f798f53897bea861, native patch version $Id: mapr-version: 6.1.0.20171109191718.GA 2227eb16eb6dc79ffe87
2024-09-12 11:26:46,0484 ERROR JniCommon fc/jni_MapRClient.cc:812 Thread: 12962582528 Client initialization failed.
Could not create FileClient
java.io.IOException: Could not create FileClient
系统 - MacOS 和 Java 8 作为编译器。
以下是使用的代码。
def readDataCSV(): DataFrame = {
var filePath = "/user/library/com/src/test/spark-test/param.csv"
spark.read.format("com.databricks.spark.csv").option("header", "true").option("delimiter", ",").load(filePath)
}