Databricks - 从文件夹中读取 CSV 文件

【问题标题】：Data Bricks - Read CSV file from folderDatabricks - 从文件夹中读取 CSV 文件
【发布时间】：2022-10-21 21:59:26
【问题描述】：

选择 * 从dbfs:/FileStore/shared_uploads/prasanth/Company.csv

我正在尝试从 azure 数据块中的文件夹中选择记录，但我正面临着这个问题错误SQL 语句：AnalysisException：未找到表或视图

【问题讨论】：

标签： azure databricks

【解决方案1】：

试试这个方法。

# in Python
flightData2015 = spark
.read
.option("inferSchema", "true")
.option("header", "true")
.csv("/data/flight-data/csv/2015-summary.csv")


// in Scala
import org.apache.spark.sql.types.{StructField, StructType, StringType, LongType}
val myManualSchema = new StructType(Array(
new StructField("DEST_COUNTRY_NAME", StringType, true),
new StructField("ORIGIN_COUNTRY_NAME", StringType, true),
new StructField("count", LongType, false)
))
spark.read.format("csv")
.option("header", "true")
.option("mode", "FAILFAST")
.schema(myManualSchema)
.load("/data/flight-data/csv/2010-summary.csv")
.show(5)

【讨论】：