2.2 分布式文件系统HDFS

  • 编程要求

        1.在HDFS中创建/usr/output/文件夹;

        2.在本地创建hello.txt文件添加内容:“HDFS的块比磁盘的块大,其目的是为了最小化寻址开销。”;

        3.将hello.txt上传HDFS/usr/output/目录下;

        4.删除HDFS/user/hadoop目录;

        5.将Hadoop上的文件hello.txtHDFS复制到本地/usr/local目录。

  • 开始编程

        1.启动Hadoop

start-dfs.sh

          启动成功结果如下图:

        2.HDFS中创建/usr/output/文件夹:

hadoop fs -mkdir /usr
hadoop fs -mkdir /usr/output/

        3.在本地创建hello.txt文件

touch hello.txt

        进入hello.txt文件

vim hello.txt   

        按i,输入“HDFS的块比磁盘的块大,其目的是为了最小化寻址开销。

        按Esc,输入:wq保存并退出hello.txt文件

        4.hello.txt上传HDFS/usr/output/目录下:

hadoop fs -put hello.txt /usr/output/

        5.删除HDFS/user/hadoop目录:

hadoop fs -rmr /user/hadoop

        出现以下界面表示删除成功:

 

 

        6.Hadoop上的文件hello.txtHDFS复制到本地/usr/local目录:

hadoop fs -copyToLocal /usr/output/hello.txt /usr/local

下图列出了Hadoop常用的shell命令: 

相关文章

hadoop搭建准备工作三台虚拟机:master、node1、node2检查时...
文件的更名和移动:    获取文件详细信息       遇...
目录一、背景1)小文件是如何产生的?2)文件块大小设置3)H...
目录一、概述二、HadoopDataNode多目录磁盘配置1)配置hdfs-...
平台搭建(伪分布式)伪分布式搭建在VM中搭建std-master修改...
 一、HDFS概述 1.1、HDFS产出背景及定义 1.1.1、HDFS产生...