hadoop[3]-shell命令操作

hdfs的shell操作：

大致介绍（http://hadoop.apache.org/docs/r1.0.4/cn/hdfs_user_guide.html#Shell%E5%91%BD%E4%BB%A4）操作文件命令格式格式：

hadoop fs 操作命令 参数

bin/hadoop fs -help 命令列出所有Hadoop Shell支持的命令。而 bin/hadoop fs -help command-name 命令能显示关于某个命令的详细信息，一些简单的命令：

# 查看某个目录下有哪些文件
hadoop fs -ls hdfs://hadoop-server-00:9000/
hadoop fs -ls /

# 上传与下载文件
hadoop fs -copyFromLocal /root/jdk-8u191-linux-x64.tar.gz /
hadoop fs -copyToLocal /jdk-8u191-linux-x64.tar.gz /home/hwt/

hadoop fs -put /root/jdk-8u191-linux-x64.tar.gz /
hadoop fs -get /jdk-8u191-linux-x64.tar.gz /home/hwt/

# 下载多个文件到本地一个文件中
-getmerge
# 从本地移动到hdfs
-moveFromLocal
# 从hdfs移动到本地
-moveToLocal
# 从hdfs一个路径拷贝到hdfs另一个路径
-cp
# 在hdfs内部移动
-mv
# 删除目录或文件
-rm -r
# 删除空目录
-rmdir

所有命令可参考官网：http://hadoop.apache.org/docs/r1.0.4/cn/hdfs_shell.html

原文地址：https://www.cnblogs.com/wange/p/9853573.html

时间： 2024-10-24 18:26:04

hadoop[3]-shell命令操作的相关文章

Hadoop常用shell命令

为了方便自己回顾记忆,将今天实验的hadoop命令总结一下,方便后续查看. 注意,下述命令是在hadoop/bin 下操作的. 1.hadoop fs -ls \ ->查看当前下面的所有目录. 2.hadoop fs -mkdir xxx ->创建xxx文件夹在hadoop文件系统上. 3.hadoop fs -rmr xxx -> 删除在文件系统上面创建的文件夹 4.hadoop fs -put /home/xuzhang/file1 xxx 将文件放入创建的xxx目录中 5.h

【转】Hadoop FS Shell命令

FS Shell 调用文件系统(FS)Shell命令应使用 bin/hadoop fs <args> 的形式. 所有的的FS shell命令使用URI路径作为参数.URI格式是scheme://authority/path .对 HDFS文件系统,scheme是hdfs ,对本地文件系统,scheme是file .其中scheme和 authority参数都是可选的,如果未加指定,就会使用配置中指定的默认scheme.一个HDFS文件或目录比如/parent/child 可以表示成hdfs:

hadoop入门：hadoop使用shell命令总结

第一部分:Hadoop Bin后面根据项目的实际需要Hadoop Bin 包括:Hadoop hadoop的Shellhadoop-config.sh 它的作用是对一些变量进行赋值 HADOOP_HOME(hadoop的安装目录). HADOOP_CONF_DIR(hadoop的配置文件目录).HADOOP_SLAVES(--hosts指定的文件的地址)hadoop-daemon.sh 单节点启动hadoop-daemons.sh 启动slaves.sh和hadoop-dae

使用shell命令操作数据库

使用mysql的-e参数可以执行各种sql的(创建,删除,增,删,改.查)等各种操作用法 mysql -uxxx –pxxx -e "mysql 命令" 当然还可以使用如下写法 mysql -e -uxxx –pxxx "mysql 命令" 实践出真知 [[email protected] ~]# mysql -e "show databases;" -uroot -ppenghui110 >test.tx

26期20180628 shell 命令操作通配符输出输入重定向

6月28日任务 8.1 shell介绍 8.2 命令历史 8.3 命令补全和别名 8.4 通配符 8.5 输入输出重定向 shell介绍 Shell脚本只是一个表现,所谓的shell是一个命令解释器,用户和机器的一个交互 Shell我们主要使用的是bash shell 另外还有zsh ksh等 yum list |grep zsh yum list |grep ksh history查看历史命令 -c 是清空内存的命令历史其实所有的历史命令都存在一个文件里 /root/.bash_histro

hadoop(五): shell命令

hdfs dfs -cat URI : 查看文件内容 hdfs dfs -cat hdfs dfs -cat hdfs://mycluster/user/root/rcc1 hdfs dfs -cat file:///usr/hdp/2.4.2.0-258/hadoop/bin/rcc -ls <args>: 查文件列表返回格式:permissions number_of_replicas userid groupid filesize modification_date modificat

常用shell命令操作

1.找出系统中所有的*.c 和*.h 文件 $find / -name "*.cpp" -o -name "*.h" 2.设定 eth0 的 IP 地址为 192.168.100.2,掩码为 255.255.255.0,mtu 为 1024 http://blog.chinaunix.net/uid-27789542-id-3518668.html 例1.2:修改IP地址.掩码和MTU # ifconfig eth0 192.168.100.100 netmask

Hadoop的Shell操作

Hadoop shell命令操作,输入hadoop回车后可以发现如图所示: 常用的命令有: hadoop namenode -format 这个是启动Hadoop之前格式化文件系统时使用的命令. hadoop dfsadmin 这是Hadoop的管理命令,我们输入hadoop dfsadmin回车后可以看到详细命令如下图: hadoop dfsadmin常用的命令有: 1):hadoop dfsadmin -report 查看Hadoop的运行状态 2):hadoop dfsadmin -saf

Hadoop Shell命令字典（可收藏）

可以带着下面问题来阅读: 1.chmod与chown的区别是什麽?2.cat将路径指定文件的内容输出到哪里?3.cp能否是不同之间复制?4.hdfs如何查看文件大小?5.hdfs如何合并文件?6.如何显示当前路径下的所有文件夹和文件7.rm删除文件失败的原因什么?8.如何查看文件的创建时间9.查看文件命令的内容有哪些?能否说出三种?10.如何判断文件是否存在?11.如何创建0字节文件对于命令,我们一次性记住,可能以后又忘记了,这里大家用到的时候,可以查看一下. 调用文件系统(FS)Shell命