Hadoop入门 hdfs的shell操作

2021-06-22 10:00:38 浏览数 (1)

  • 查看环境变量
代码语言:txt复制
hadoop fs
  • 文件可视化浏览
    • 打开虚拟机中的火狐浏览器
      • 网址:http://localhost:50070
      • 打开 Utilities 下的 Browse the file system
    • 电脑中的浏览器
      • 网址:http://虚拟机的ip地址:50070
      • 打开 Utilities 下的 Browse the file system
  • 命令行查看文件
代码语言:txt复制
hadoop fs -ls /

将文件从本地上传到Hadoop

  • 在本地新建一个名为dashuju的txt文件
代码语言:txt复制
touch dashuju.txt
  • 修改文件内容
    • vim进入文件
代码语言:txt复制
vim dashuju.txt
  • i输入内容
  • Esc退出编辑
  • :wq保存文件并退出
  • cat查看文件内容
代码语言:txt复制
cat dashuju.txt
  • 在hadoop中创建文件夹
代码语言:txt复制
hadoop fs -mkdir -p /taigong/test
  • 将文件上传到新建的文件夹中
代码语言:txt复制
语法:
hadoop fs -put 需上传的文件路径 上传到的文件夹路径
示例:
hadoop fs -put dashuju.txt /taigong/test
  • 查看文件及其内容
代码语言:txt复制
查看文件:
hadoop fs -ls /taigong/test
查看内容:
hadoop fs -cat /taigong/test/dashuju.txt

将文件从Hadoop下载到本地

  • 下载到本地并命名为Haha
代码语言:txt复制
语法:
hadoop fs -get 需要下载的文件路径 下载后的文件路径
示例:
hadoop fs -get /taigong/test/dashuju.txt Haha.txt

移动文件

  • 根目录>taigon>test移动到根目录>user
代码语言:txt复制
语法:
hadoop fs -mv 需要移动的文件路径 移动后的文件夹路径
示例:
hadoop fs -mv /taigong/test/dashuju.txt /user

删除文件

  • 将文件夹taigong删除
代码语言:txt复制
语法:
hadoop fs -rm -r 需要删除的文件
示例:
hadoop fs -rm -r /taigong

0 人点赞