我想要将一个.txt文件写入数据帧并在控制台上打印它
我尝试过以与通过dataframes将.csv文件打印到控制台相同的方式进行打印
def txtreader():DataFrame={
val loadTxt=spark.read
.format("txt")
.option("header","true")
.load("C:\\Users\\1591532\\Spark-Learning-Workspace\\Text Files\\abc.txt")
return loadTxt我收到一个错误"Failed to find data source: txt.“
发布于 2019-08-22 16:13:54
对于Spark 1.6和更高版本,您可以使用csv数据源:
val df = spark.read.csv("file.txt")对于您的情况,您还可以指定标题选项、分隔符等,例如:
val df = spark.read.option("header", "true").option("delimiter", ";").csv("file.txt")发布于 2019-08-22 14:36:37
请找到下面的代码来读取文本文件。
scala> spark.read.text("sample.txt")
res34: org.apache.spark.sql.DataFrame = [value: string]
scala> res34.show
+-----+
|value|
+-----+
| abc|
+-----+https://stackoverflow.com/questions/57602124
复制相似问题