亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全,請及時綁定郵箱和手機立即綁定

扣丁學堂大數據開發JavaAPI操作HDFS之文件上傳實現

標簽:
Hadoop

  今天扣丁学堂老师给大家介绍一下关于JavaAPI操作HDFS之文件上传实现的详细介绍,希望对同学们学习大数据有所帮助,下面我们一起来看一下吧。

webp

  HDFS核心类简介

  Configuration类:处理HDFS配置的核心类。

  FileSystem类:

  处理HDFS文件相关操作的核心类,包括对文件夹或文件的创建,删除,查看状态,复制,从本地挪动到HDFS文件系统中等。

  Path类:处理HDFS文件路径。

  IOUtils类:处理HDFS文件读写的工具类。

  核心类中重要方法简介

  1.FileSystemget(URIuri,Configurationconf)

  根据HDFS的URI和配置,创建FileSystem实例

  2.publicbooleanmkdirs(Pathf)throwsIOException

  根据路径创建HDFS文件夹

  3.FSDataOutputStreamcreate(Pathf,booleanoverwrite)

  根据具体的路径创建文件,并且知名是否以重写的方式

  4.abstractbooleandelete(Pathf,booleanrecursive)

  根据路径删除文件

  5.abstractFileStatus[]?listStatus(Pathf)

  根据路径,返回该路径下所有文件夹或文件的状态。

  6.VoidmoveFromLocalFile(Pathsrc,Pathdst)

  将本地路径下的文件,挪动到HDFS的指定路径下

  7.FSDataInputStreamopen(Pathf)

  打开指定路径下的文件内容

  关键步骤说明

  第一步:开发环境准备,包括JDK、开发工具的安装

  第二步:创建项目,配置jar依赖pom.xml文件

  第三步:编写核心代码

  具体代码实战

webp

  最后可通过HDFS的UI界面查看、Hadoopshell两种方式查看文件是否上传到文件系统,以上就是关于JavaAPI操作HDFS之文件上传实现的详细介绍,希望本文对同学们有所帮助。



作者:扣丁学堂
链接:https://www.jianshu.com/p/1c23032b116e


點擊查看更多內容
TA 點贊

若覺得本文不錯,就分享一下吧!

評論

作者其他優質文章

正在加載中
JAVA開發工程師
手記
粉絲
205
獲贊與收藏
1010

關注作者,訂閱最新文章

閱讀免費教程

  • 推薦
  • 評論
  • 收藏
  • 共同學習,寫下你的評論
感謝您的支持,我會繼續努力的~
掃碼打賞,你說多少就多少
贊賞金額會直接到老師賬戶
支付方式
打開微信掃一掃,即可進行掃碼打賞哦
今天注冊有機會得

100積分直接送

付費專欄免費學

大額優惠券免費領

立即參與 放棄機會
微信客服

購課補貼
聯系客服咨詢優惠詳情

幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

公眾號

掃描二維碼
關注慕課網微信公眾號

舉報

0/150
提交
取消