实战,让学习更简单     全国咨询热线:400-009-1906

北京 切换校区

全国24小时免费热线

400-009-1906

Hadoop常用命令参数介绍

时间:2018-11-29   来源:尚学堂   阅读:82
首页> Hadoop常用命令参数介绍

常用命令

      - help
      功能:输出这个命令参数手册

 

      - ls
      功能:显示目录信息
      示例:hadoop fs -ls hdfs://hadoop-hello/
      备注:这些参数中,所有的hdfs路径都可以简写–>hadoop fs -ls /等同于上一条命令效果

 

      - mkdir
      功能:在hdfs上常见目录
      示例:hadoop fs -mkdir -p /aa/bb/cc

 

      - moveFromLocal
      功能:从本地剪切粘贴到hdfs
      示例:hadoop fs -moveFromLocal /home/hadoop/a.txt /aa/bb/cc

 

      - moveToLocal
      功能:从hdfs剪切粘贴到本地
      示例:hadoop fs -moveToLocal /aa/bb/cc /home/hadoop/a.txt

 

      - appendToFile
      功能:追加一个文件到已经存在的文件末尾
      示例:hadoop fs -appendToFile ./hello.txt hdfs://hadoop-hello/hello.txt

 

      - cat
      功能:显示文件内容
      示例:hadoop fs -cat /hello.txt

 

      - tail
      功能:显示一个文件的末尾
      示例:hadoop fs -tail /weblog/access_log

 

      - chgrp chmod chown
      功能:linux文件系统中的用法一样,对文件所属权限
      hadoop fs -chomod 666 /hello.txt

 

      - copyFromLocal
      功能:从本地文件系统中拷贝文件到hdfs路径中去
      示例:hadoop fs -copyFromLocal ./hello.txt /aa

 

      -copyToLocal
      功能:从hdfs拷贝到本地
      示例:hadoop fs -copyToLocal /aa/hello.txt

 

      - cp
      功能:从hdfs的一个路径拷贝到hdfs的另一个路径
      示例:hadoop fs -cp /aa/hello.txt /bb/hello.txt

 

      - mv
      功能:在hdfs目录中移动文件
      示例:hdfs fs -mv /aa/hello.txt /

 

      - get
      功能:等同于copyToLocal,就是从hdfs下载文件到本地
      示例:hadoop fs -get /aa/hello.txt

 

      - getmerge
      功能:合并下载多个文件
      示例:比如hdfs的目录/aa/下由多个文件:log.1 log.2… hadoop fs -getmerge /aa/log.* ./log.sum

 

      - put
      功能:等同于copyFromLocal
      示例:hadoop fs -put /hello.txt /aa

 

      - rm
      功能:删除文件或文件夹
      示例:hadoop fs -rm -r /aa/bb/

 

      - rmdir
      功能:删除空目录
      示例:hadoop fs -mkdir /aa/bb/cc

 

      - df
      功能:统计文件系统的可用空间信息
      示例:hadoop fs -df -h /

 

      - du
      功能:统计文件夹的大小信息
      示例:hadoop fs -du -s -h /aa/*

 

      - count
      功能:统计一个指定目录下的文件节点数量
      示例:hadoop fs -count /aa

 

      - setrep
      功能:设置hdfs中文件的副本数量
      示例:hadoop fs -setrep 3 /aa/hello.txt (这里设置的副本数只是记录在namenode的元数据中,是否真的会有这么多副本,还要看datanode的数量)

相关资讯

  • 北京校区
  • 山西校区
  • 郑州校区
  • 武汉校区
  • 四川校区
  • 长沙校区
  • 深圳校区
  • 上海校区
  • 广州校区
  • 保定招生办

北京海淀区校区(总部):北京市海淀区西三旗街道建材城西路中腾建华商务大厦东侧二层尚学堂
北京京南校区:北京亦庄经济开发区科创十四街6号院1号楼 赛蒂国际工业园
咨询电话:400-009-1906 / 010-56233821
面授课程: JavaEE培训大数据就业班培训大数据云计算周末班培训零基础大数据连读班培训大数据云计算高手班培训人工智能周末班培训人工智能+Python全栈培训H5+PHP全栈工程师培训

山西学区地址:山西省晋中市榆次区大学城大学生活广场万科商业A1座702
咨询电话:0354-3052381 / 18903441162

郑州学区地址:金水区东风路经三路北100米注协大厦10楼
咨询电话:0371-55177956 

武汉学区地址:湖北省武汉市江夏区江夏大道26号 宏信悦谷创业园4楼
咨询电话:027-87989193

四川学区地址:成都市高新区锦晖西一街99号布鲁明顿大厦2栋1003室
咨询电话:028-65176856 / 13880900114

长沙学区地址:长沙市岳麓区麓源路湖南电子商务基地5楼(公交车站:六沟垅)
咨询电话:0731-83072091

深圳校区地址:深圳市宝安区航城街道航城大道航城创新创业园A4栋210(固戍地铁站C出口)
咨询电话:0755-23061965 / 18898413781

上海尚学堂松江校区地址:上海市松江区荣乐东路2369弄45号绿地伯顿大厦2层
咨询电话:021-67690939

广州校区地址:广州市天河区元岗横路31号慧通产业广场B区B1栋6楼尚学堂(地铁3号线或6号线到“天河客运站”D出口,右拐直走约800米)
咨询电话:020-2989 6995

保定招生办公室

地址:河北省保定市竞秀区朝阳南大街777号鸿悦国际1101室

电话:15132423123

Copyright 2006-2018 北京尚学堂科技有限公司  京ICP备13018289号-19  京公网安备11010802015183  
媒体联系:18610174079 闫老师  

有位老师想和您聊一聊