西西嘛呦
pyspark之从HDFS上读取文件、从本地读取文件
关注作者
腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
西西嘛呦
社区首页
>
专栏
>
pyspark之从HDFS上读取文件、从本地读取文件
pyspark之从HDFS上读取文件、从本地读取文件
西西嘛呦
关注
发布于 2020-08-26 09:55:59
发布于 2020-08-26 09:55:59
7.1K
0
举报
文章被收录于专栏:
数据分析与挖掘
数据分析与挖掘
hdfs上的路径:
代码语言:
javascript
复制
path="hdfs:///主机名:端口号/地址"
本地上的路径:
代码语言:
javascript
复制
path"file:///本地地址"
读取文件:
代码语言:
javascript
复制
rdd=sc.textFile(path)
本文参与
腾讯云自媒体同步曝光计划
,分享自作者个人站点/博客。
原始发表:2020-08-11 ,如有侵权请联系
cloudcommunity@tencent.com
删除
前往查看
hdfs
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档