磁盘爆满，但是没发现磁盘有那么大的空间占用

场景回顾: 测试集群节点分配:35,36是namenode且开启HA,37,38,39即作为datanode,又作为journalnode. 某时间 38节点磁盘爆满,集群中hdfs及依赖的服务全部宕掉. 之后虽然将38节点清除一部分多余数据,但集群服务仍然不正常:namenode启动的时候两个都是standby,几分钟后自动关闭:datanode正常:journal正常:zkfc正常 调查过程: 查看namenode日志,显示一直在尝试连接journal,并显示 2017-08-14 17:0

今天发现公司监控系统有问题,检查发现原来是bin-log日志过大造成磁盘爆满,造成无法插入数据.于是在网上找解决方法. 1.停库,删除bin-log日志. 2.执行 reset master:(在没有从库的情况下) 3.执行show binary logs: 删除指定bin-logs之前的日志purge binary logs to 'mysql-bin.000018'; 在期间出现问题 执行对bin-log的操作命令时mysql命令行卡住了. 最后重启了数据库解决了. 在删除bin-log日志

继博主上篇<vsphere6.0故障:关于linux版本的vcenter6.0磁盘爆满问题和503错误问题探究>,博主今天**终于解决了这个故障**. 博主当时linux版本vcenter故障很严重,磁盘满而且无法ssh登录/shell登录,无法通过网上扩展磁盘容量+自动扩展命令进行处理(因为当时磁盘满了,vcenter基础服务都起不来了,包括ssh等服务). 然而,想起之前重置linux版本vcenter的root密码用到的进入引导界面,通过加入init=/bin/bash 方式进入单用户模

1.在使用Jenkins发版操作时发现,推送私有仓库harbor报错: received unexpected HTTP status: 500 Internal Server Error 2.想要登陆harbor查看,发现harbor界面登陆报错:登陆校验失败 3.登陆服务器,查看harbor的日志,在redis.log中找到报错信息 提示磁盘爆满 4.登陆ranchar,发现rancher也挂掉了,执行:docker ps -a |grep ranchar ,拿到ranchar的容器id,执

原因:华为agile controller的数据库C:\Program Files\Microsoft SQL Server\MSSQL10_50.MSSQLSERVER\MSSQL\DATA\AgileControllerDB_log.LDF文件过大,当时我们有126G左右了. 华为agile controller磁盘爆满解决三步走:1.把AgileControllerDB的恢复模式修改为简单(默认值是完整)2.收缩数据库事务日志(华为有官方文档)3.把AgileControllerDB的恢复

故障现像和http://blog.51cto.com/8189171/2063182 老肖的博客一样.vsphere web client登录闪退,SSH无法使用,出现报503错误503 Service Unavailable (Failed to connect to endpoint: [N7Vmacore4Http20NamedPipeServiceSpecE:0x65d3a354e80e] _serverNamespace = / _isRedirect = false _pipeNam

linux 下 home 目录磁盘爆满,rm 后仍然不行 df -h 查到是 /home 下 kafka-manager(监控kafka)那个目录下几乎占用了home所有的空间,我用rm -f 去删除了这个目录. 删除高兴的去查看还是占用99%啊握草,du -sh 查看占用才几M, 看来确实是删除了,那我们lsof | grep /home/ 下去看下 (打开文件的进程)看到了 把这个进程kill掉就可以了 来自为知笔记(Wiz) 原文地址:https://www.cnblogs.com/thy

iostat查看linux硬盘IO性能 rrqm/s:每秒进行merge的读操作数目.即delta(rmerge)/swrqm/s:每秒进行merge的写操作数目.即delta(wmerge)/sr/s:每秒完成的读I/O设备次数.即delta(rio)/sw/s:每秒完成的写I/O设备次数.即delta(wio)/srsec/s:每秒读扇区数.即delta(rsect)/swsec/s:每秒写扇区数.即delta(wsect)/srkB/s:每秒读K字节数.是rsect/s的一半,因为每扇区大

iostat查看linux硬盘IO性能 rrqm/s:每秒进行merge的读操作数目.即delta(rmerge)/s wrqm/s:每秒进行merge的写操作数目.即delta(wmerge)/s r/s:每秒完成的读I/O设备次数.即delta(rio)/s w/s:每秒完成的写I/O设备次数.即delta(wio)/s rsec/s:每秒读扇区数.即delta(rsect)/s wsec/s:每秒写扇区数.即delta(wsect)/s rkB/s:每秒读K字节数.是rsect/s的一半,