微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

2.2 分布式文件系统HDFS

  • 编程要求

        1.在HDFS中创建/usr/output/文件夹;

        2.在本地创建hello.txt文件添加内容:“HDFS的块比磁盘的块大,其目的是为了最小化寻址开销。”;

        3.将hello.txt上传HDFS/usr/output/目录下;

        4.删除HDFS/user/hadoop目录;

        5.将Hadoop上的文件hello.txtHDFS复制到本地/usr/local目录。

  • 开始编程

        1.启动Hadoop

start-dfs.sh

          启动成功结果如下图:

        2.HDFS中创建/usr/output/文件夹:

hadoop fs -mkdir /usr
hadoop fs -mkdir /usr/output/

        3.在本地创建hello.txt文件

touch hello.txt

        进入hello.txt文件

vim hello.txt   

        按i,输入“HDFS的块比磁盘的块大,其目的是为了最小化寻址开销。

        按Esc,输入:wq保存并退出hello.txt文件

        4.hello.txt上传HDFS/usr/output/目录下:

hadoop fs -put hello.txt /usr/output/

        5.删除HDFS/user/hadoop目录:

hadoop fs -rmr /user/hadoop

        出现以下界面表示删除成功:

 

 

        6.Hadoop上的文件hello.txtHDFS复制到本地/usr/local目录:

hadoop fs -copyToLocal /usr/output/hello.txt /usr/local

下图列出了Hadoop常用的shell命令: 

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐