spark 可以直接向hdfs 输入数据吗

spark 可以直接向hdfs 输入数据吗,第1张

默认是从hdfs读取文件,也可以指定sc.textFile("路径").在路径前面加上hdfs://表示从hdfs文件系统上读本地文件读取 sc.textFile("路径").在路径前面加上file:// 表示从本地文件系统读,如file:///home/user/spark/README.md

存放二进制文件的数据要使用字节型数组,不能是字符型数组:

Dim DAT() As Byte

Dim FileSize As Long '文件长度

FileSize = FileLen(文件名) '获取文件长度

ReDim DAT(FileSize - 1) As Byte

Open 文件名 For Binary As #1

Get #1, , DAT

Close

数据已经在DAT数组中了,你可以进行任意处理


欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/sjk/10067283.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2023-05-04
下一篇 2023-05-04

发表评论

登录后才能评论

评论列表(0条)

保存