MongoDB空间整理

测试环境：192.168.1.55，单机
数据量： 4千万左右。
测试：db.repaireDatabase效果
db.compact 效果
通过stats命令获取该数据库的相关信息：
db.stats() { "db" : "test",
"collections" : 7, --collection 数量 
"objects" : 28, --对象数量 
"avgObjSize" : 50.57142857142857, --对象平均大小 
"dataSize" : 1416, --数据大小 
"storageSize" : 31744, --数据大小(含预分配空间) 
"numExtents" : 7, --事件数量 
"indexes" : 7, --索引数量 
"indexSize" : 57344, --索引大小 
"fileSize" : 50331648, --文件大小 
"ok" : 1 --本次取stats 是否正常 
} >

1. 未删数据前

show dbs

aa 0.000GB
admin 0.000GB
gwgps 3.609GB
local 0.000GB

db.stats()

{
"db" : "gwgps",
"collections" : 1,
"objects" : 41345131,
"avgObjSize" : 554.8684502656431,
"dataSize" : 22941108764,
"storageSize" : 3081945088,
"numExtents" : 0,
"indexes" : 3,
"indexSize" : 792702976,
"ok" : 1
}

2.程序删除N条后

show dbs

aa 0.000GB
admin 0.000GB
gwgps 3.610GB
local 0.000GB

db.stats()

{
"db" : "gwgps",
"collections" : 1,
"objects" : 41344233,
"avgObjSize" : 554.8684691284514,
"dataSize" : 22940611272,
"storageSize" : 3081945088,
"numExtents" : 0,
"indexes" : 3,
"indexSize" : 794288128,
"ok" : 1
}

3.repaireDatabase之后

db.repairDatabase()

{ "ok" : 1 }

show dbs

aa 0.000GB
admin 0.000GB
gwgps 3.609GB
local 0.000GB

db.stats()

{
"db" : "gwgps",
"collections" : 1,
"objects" : 41344233,
"avgObjSize" : 554.8684691284514,
"dataSize" : 22940611272,
"storageSize" : 3081945088,
"numExtents" : 0,
"indexes" : 3,
"indexSize" : 792682496,
"ok" : 1
}

4.compact命令
> db.runCommand({compact:‘location‘}) { "ok" : 1 }

show dbs

aa 0.000GB
admin 0.000GB
gwgps 3.612GB
local 0.000GB

db.stats()

{
"db" : "gwgps",
"collections" : 1,
"objects" : 41337719,
"avgObjSize" : 554.8686059818637,
"dataSize" : 22937002516,
"storageSize" : 3081945088,
"numExtents" : 0,
"indexes" : 3,
"indexSize" : 795889664,
"ok" : 1
}

经过重复循环多次删除之后，用repaireDatabase,show dbs, du -sh命令查看空间，暂得到如下结论：
1. 使用db.repairDatabase时候建议停止数据库的读写，需要大于等于数据差不多的空间，否则可能无法执行该命令。
2. 4千万数据repairDatabase需要大约10分钟左右，40亿，400亿，4000亿效果待测。
3. storageSize 该值未减少，因为包括预分配空间，有其积极的意义。
4. 实际空间减少的是索引所占的空间。
5. 对空间可控可以禁用日志或日志轮询复写，但不推荐。
6. 禁止预分配空间或预设置分配空间（启动数据库时可以选择noprealloc参数），但影响插入效率。
7. 推荐合适时机定时压缩，采用compact压缩指定collection,或repairDatabase压缩数据库。

时间： 2025-01-08 22:11:04

MongoDB空间整理的相关文章

mongoDB 基本命令整理

近来在慕课网上看了下mongDB的视频,这里总结整理一下 mongoDB学习网站: 1.mongoDB官网:www.mongodb.org 2.mongodb国内官方网站:www.monging.com 3.中文mongodb文档地址:docs.monging.com 4.mongodb的github:https://github.com/mongodb/ 5.mongodb的jira:https://jira.mongodb.org/ 6.两个google groups: mongdb-use

【面试虐菜】—— MongoDB知识整理

为什么我们要使用MongoDB? 特点: 高性能.易部署.易使用,存储数据非常方便.主要功能特性有: 面向集合存储,易存储对象类型的数据. 模式自由. 支持动态查询. 支持完全索引,包含内部对象. 支持查询. 支持复制和故障恢复. 使用高效的二进制数据存储,包括大型对象(如视频等). 自动处理碎片,以支持云计算层次的扩展性 支持Python,PHP,Ruby,Java,C,C#,Javascript,Perl及C++语言的驱动程序,社区中也提供了对Erlang及.NET等平台的驱动程序. 文件存

MongoDB知识整理

为什么我们要使用MongoDB? 特点: 高性能.易部署.易使用,存储数据非常方便.主要功能特性有: 面向集合存储,易存储对象类型的数据. 模式自由. 支持动态查询. 支持完全索引,包含内部对象. 支持查询. 支持复制和故障恢复. 使用高效的二进制数据存储,包括大型对象(如视频等). 自动处理碎片,以支持云计算层次的扩展性 支持Python,PHP,Ruby,Java,C,C#,Javascript,Perl及C++语言的驱动程序,社区中也提供了对Erlang及.NET等平台的驱动程序. 文件存

现在开始学习WPF了，mongodb在整理一下

回忆一下自己学习mongodb的过程 1安装 2增删改查 3数据类型转换 4GridFS 5权限管理--开启权限之前先建立一个超级用户(admin库中),开启权限,用该用户登陆,进入admin数据库(mongodb://127.0.0.1:27017name:[email protected]),创立用户 6测试性能(开另一个线程实时观测cpu和内存,当程序开始,给个bool信号,while(bool)cpu和内存开始记录到list集合中,同时记录时间,程序结束,信号变成false,这样就可以算

MongoDB学习整理之访问控制

1.限制特定IP地址访问,只需启动时加入--bind_ip 参数 ,客户端连接时也需要添加--host        /app/mongo/mongodb/bin/mongod --dbpath=/app/mongo/mongodb/data/test --logpath=/app/mongo/mongodb/data/test/server.log --fork --bind_ip 132.42.33.190        /app/mongo/mongodb/bin/mongo --host

MongoDB 查询整理

查询所有sql:  select * from table_namemongodb:   db.getCollection('期刊论文').find({}) 如上图所示,获取期刊论文collection 下的所有 数据 条件查询注意: 请注意选择列的数据类型1. journal _title = ' Nature'sql: select * from table_name where journal_title = 'Nature'mongodb: db.getCollection('期刊论文'

GDAL2.1增加支持Mongodb存储空间大数据

      随着空间数据越来越渗透到社会生活的各个方面,大数据提供服务的能力有待增强.如全国地理国情普查数据,仅空间矢量数据一个省数据量在30GB左右,影像更在TB级,全国数据量就更不得了,传统的集中存储模式如果在几个部门间使用还凑合,在十几个部门,成千上万次服务请求并发的情况下,难以为继.为此尽早使用互联网思维,采用集群并发处理的模式处理空间数据,提供必要的统计分析为当务之急.为此本文探讨了如何使用Mongodb存储空间大数据,从最基本的数据入库存储开始. 1目录 1.1 gdal2.1增加支

PHP操作MongoDB 数据库总结记录

分类: php mongo 2013-07-18 10:23 623人阅读 评论(0) 收藏 举报 目录(?)[-] 连接MongoDB数据库 选择数据库与表 插入数据记录 更新数据记录 删除记录操作 查询数据记录 关闭链接 常见函数使用 最近有个项目,需要用php操作mongoDb数据,所以了解下mongoDb为此整理了下,常见的操作...... 1,连接MongoDB数据库 [php] view plaincopy $conn = new Mongo(); 其他链接方式 //$conn=ne

Oracle 数据库整理表碎片

Oracle 数据库整理表碎片 转载:http://kyle.xlau.org/posts/table-fragmentation.html 表碎片的来源 当针对一个表的删除操作很多时,表会产生大量碎片.删除操作释放的空间不会被插入操作立即重用,甚至永远也不会被重用. 怎样确定是否有表碎片 -- 收集表统计信息 SQL> exec dbms_stats.gather_table_stats(ownname=>'SCHEMA_NAME',tabname=> 'TABLE_NAME'); -