使用history命令查看作业的整体执行情况

1）通过使用history命令，我们可以深入到一个Job的任务级层面查看执行最快的任务，以及执行最慢的任务，以及其他的有用信息。命令如下：

hadoop job -history /output

“/ouptut”就是要查询的job的输出路径，如果输出路径位于hdfs的根目录下，有时候会忘记添加“/”，也就是使用如下命令：　

hadoop job -history output

就会出现如下提示：

　　

就是因为没有提高正确的路径，所以找不到文件，触发了IO异常。

2）当我们使用了history命令，得到关于job的关键信息如下：

　

时间： 2024-11-09 02:10:19

使用history命令查看作业的整体执行情况的相关文章

Linux 用top命令查看CPU和内存使用情况

直接 top 回车 PID:进程的ID USER:进程所有者 PR:进程的优先级别,越小越优先被执行 NInice:值 VIRT:进程占用的虚拟内存 RES:进程占用的物理内存 SHR:进程使用的共享内存 S:进程的状态.S表示休眠,R表示正在运行,Z表示僵死状态,N表示该进程优先值为负数 %CPU:进程占用CPU的使用率 %MEM:进程使用的物理内存和总内存的百分比 TIME+:该进程启动后占用的总的CPU时间,即占用CPU使用时间的累加值. COMMAND:进程启动命令名称 参考来源: ht

centos服务器如何用命令查看哪个程序内存占用情况

1.free -m只能查看内存总量情况 2.top M ( 注意M是大写) 3.ps aux|head -1; ps aux | sort -k4nr | head -10

Mysql中explain命令查看语句执行概况

Mysql中可以使用explain命令查看查询语句的执行方式,使用方法举例:explain + 查询语句 例如:explain select * from user_info 几个重要的字段说明: table:此次查询操作是关联哪张数据表 type:连接查询操作类型,一般根据索引查询的话为const,如果没有索引,则遍历所有数据那么为All(此种方式效率极低) possible_keys:显示可能应用在这张表中的索引.如果为空,没有可能的索引. key: 实际使用的索引.如果为NULL,则没有使

查看作业详细情况

查看作业名称,执行频率,执行时间等... DECLARE @WeekDays TABLE ( freq_interval INT, weekdays NVARCHAR(120) ) INSERT INTO @WeekDays SELECT 1 ,N'星期日 ' UNION ALL SELECT 2 ,N'星期一 ' UNION ALL SELECT 4 ,N'星期二 ' UNION ALL SELECT 8 ,N'星期三 ' UNION ALL SELECT 16 ,N'星期四 ' UNION

df du命令 查看磁盘大小

1.df命令 查看文件系统使用情况. 最常用的命令就是 df -h 其他选项: a :列出所有的文件系统,包括系统特有的/proc等系统文件 k :以KB的容量显示 m : 以MB的容量显示文件系统 h : 以人们较易阅读的gb,mb,kb等格式自行显示 H : 以十进制的进位方式显示 T:连同该分区的文件系统名称也一并列出 i :不用硬盘容量,而已inode的数量来显示 2.du命令 查看目录占用磁盘大小情况. 最常用的命令就是 du -sh  PATH 其他选项: a:列出所有的文件与目录的

使用df -h命令查看磁盘空间使用率不算高，还有很多空余空间，但是创建文件或写入数据时一直报错磁盘写满

关于磁盘空间中索引节点爆满的问题还是挺多的,借此跟大家分享一下: 一.发现问题 在公司一台配置较低的Linux服务器(内存.硬盘比较小)的/data分区内创建文件时,系统提示磁盘空间不足,用df -h命令查看了一下磁盘使用情况,发现/data分区只使用了66%,还有12G的剩余空间,按理说不会出现这种问题. 二.分析问题: 后来用df -i查看了一下/data分区的索引节点(inode),发现已经用满(IUsed=100%),导致系统无法创建新目录和文件. [[email protected]

让history命令显示出执行用户、执行时间、执行用户IP

因为之前遇到过命令审计,找不出某条命令是由哪个用户执行的,所以需要让history命令显示出执行用户.执行时间.执行用户IP,以便追踪. 在/etc/profile文件最后加两行: USER_IP=`who -u -m | awk '{print $NF}'| sed 's/[()]//g'` export HISTTIMEFORMAT="[%F %T][`whoami`][${USER_IP}] " 执行命令 source /etc/profile 随便敲几条命令 查看效果 1047

让linux history命令显示命令的执行时间、在哪个机器执行的这个命令

1.在/etc/profile的最后添加如下部分: USER_IP=`who -u am i 2>/dev/null| awk '{print $NF}'|sed -e 's/[()]//g'` export HISTTIMEFORMAT="[%F %T][`whoami`][${USER_IP}] " 2. source /etc/profile 3.随便执行一下什么命令, 4.执行history,看效果: 311  [2013-08-28 14:39:20][root][19

在windows命令行窗口下执行:查看所有的端口占用情况

开始--运行--cmd 进入命令提示符 输入netstat -ano 即可看到所有连接的PID 之后在任务管理器中找到这个PID所对应的程序如果任务管理器中没有PID这一项,可以在任务管理器中选"查看"-"选择列" 经常,我们在启动应用的时候发现系统需要的端口被别的程序占用,如何知道谁占有了我们需要的端口,很多人都比较头疼,下面就介绍一种非常简单的方法,希望对大家有用 假如我们需要确定谁占用了我们的9050端口 1.Windows平台 在windows命令行窗口下执