mongo数据库。

生产环境使用了mongo数据库。

对mongo数据库垂涎已久,其高性能/开源/无模式/文档型数据库/...多么诱人的特性,之前也偶尔折腾着玩过,不过都没做笔记,趁此机会重新捡起来。

关于mongo

MongoDB is an open-source document database that provides high performance, high availability, and automatic scaling.

mongo支持的查询语言非常强大,其语法有点类似于面向对象的查询语言,几乎可以实现类似关系数据库单表查询的绝大部分功能

mongo是一种NoSql数据库

NoSql,全称是 Not Only Sql,指的是非关系型的数据库。主要解决几个要点:非关系型的、分布式的、开源的、水平可扩展的。原始的目的是为了大规模web应用。通常特性应用如:模式自由、支持简易复制、简单的API、最终的一致性(非ACID)、大容量数据等。NoSQL被我们用得最多的当数key-value存储。

mongo特性

  • 模式自由。
  • 支持动态查询。
  • 支持完全索引,包含内部对象。
  • 支持查询。
  • 支持复制和故障恢复。
  • 文件存储格式为BSON(一种JSON的扩展)。
  • 可通过网络访问。
  • 支持Python,PHP,Ruby,Java,C,C#,Javascript,Perl及C++语言的驱动程序
  • 使用高效的二进制数据存储,包括大型对象(如视频等)。

软件即服务

将mongo当做一个服务,通过接口CRUD我们的数据。

对于不同用户角色,对mongo所需的了解方面是不同的,我们的角色是Developers,我们主要将它作为服务来使用。

细节可以参考reference

而作为python开发者,我们使用mongo的python驱动来CRUD数据

安装

ubuntu下安装mongo比较简单,直接sudo apt-get install mongodb就行。

当然也可以去官网下载安装

端口号是27017

进入mongo shell:mongo

基础

6个简单的概念

  • MongoDB有着与您熟知的‘数据库’一样的概念。每一个数据库都是高层次的容器,用来储存其他的所有数据。
  • 一个数据库可以有若干‘集合’(collection)。集合和传统概念中的‘表’有着足够多的共同点。
  • 集合由若干‘文档’(document)组成,可以认为这里的文档就是‘行’。
  • 文档又由若干‘域’(field)组成,域就像是‘列’。
  • 索引(index)在MongoDB中的意义就如同索引在RDBMS中一样。
  • 游标(cursor)和以上5个概念不同.每当向MongoDB索要数据时,它总是返回一个游标。基于游标我们可以作诸如计数或是直接跳过之类的操作,而不需要真正去读数据。

小结一下,MongoDB由数据库组成,数据库由集合组成,集合由文档组成。组成了文档,集合可以被索引,从而提高了查找和排序的性能。最后,我们从MongoDB读取数据的时候是通过游标进行的,除非需要,游标不会真正去作读的操作。

关系数据库是在这一层次定义的,而一个面向文档的数据库则是在文档这一层次定义的。也就是说,集合中的每个文档都可以有独立的域。因此,虽说集合相对于表来说是一个简化了的容器,而文档则包含了比行要多得多的信息。

mongo shell

入口

help。shell会返回全局可用的操作。比如show dbs

Mongo的shell运行在JavaScript之上.
您可以执行一些全局的指令,如help或者exit.
操作对象db来执行针对当前数据库的操作,例如db.help()或是db.stats()。

  • 首先我们用全局命令use来切换数据库。输入use learn。这个数据库是否存在并没有关系,若不存在则新建.z执行完后您就已经在一个数据库里面了
  • db.unicorns.insert({name: ‘Aurora‘, gender: ‘f‘, weight: 450})
    以上命令对unicorns对象执行insert操作,并传入一个参数。在MongoDB内部,数据是以二进制的串行JSON格式存储的。
  • 如果我们现在执行db.getCollectionNames(),将看到两个集合:unicorns以及system.indexes。system.indexes在每个数据库中都会创建,它包含了数据库中的索引信息。
  • 现在您可以对unicorns对象执行find命令, 列出所有文档:db.unicorns.find()
    请注意,除了您在文档中输入的各个域,还有一个一个叫做_id的域。
  • 往unicorns插入一个完全不同的文档。db.unicorns.insert({name: ‘Leto‘, gender: ‘m‘, home: ‘Arrakeen‘, worm: false})再次用find可以列出所有的文档

掌握选择器(selector)

MongoDB还有一个很实用的概念:查询选择器(query selector)。
MongoDB的查询选择器就像SQL代码中的where语句。
因此您可以用它在集合中查找,统计,更新或是删除文档。
选择器就是一个JSON对象,最简单的形式就是{},用来匹配所有的文档。
如果我们需要找到所有雌性的独角兽(unicorn),我们可以用选择器{gender:‘f‘}来匹配。

  • db.unicorns.remove删除之前我们在unicorns集合中输入的所有数据
  • 插入以下数据:
db.unicorns.insert({name: ‘Horny‘, dob: new Date(1992,2,13,7,47), loves: [‘carrot‘,‘papaya‘], weight: 600, gender: ‘m‘, vampires: 63});
db.unicorns.insert({name: ‘Aurora‘, dob: new Date(1991, 0, 24, 13, 0), loves: [‘carrot‘, ‘grape‘], weight: 450, gender: ‘f‘, vampires: 43});
db.unicorns.insert({name: ‘Unicrom‘, dob: new Date(1973, 1, 9, 22, 10), loves: [‘energon‘, ‘redbull‘], weight: 984, gender: ‘m‘, vampires: 182});
db.unicorns.insert({name: ‘Roooooodles‘, dob: new Date(1979, 7, 18, 18, 44), loves: [‘apple‘], weight: 575, gender: ‘m‘, vampires: 99});
db.unicorns.insert({name: ‘Solnara‘, dob: new Date(1985, 6, 4, 2, 1), loves:[‘apple‘, ‘carrot‘, ‘chocolate‘], weight:550, gender:‘f‘, vampires:80});
db.unicorns.insert({name:‘Ayna‘, dob: new Date(1998, 2, 7, 8, 30), loves: [‘strawberry‘, ‘lemon‘], weight: 733, gender: ‘f‘, vampires: 40});
db.unicorns.insert({name:‘Kenny‘, dob: new Date(1997, 6, 1, 10, 42), loves: [‘grape‘, ‘lemon‘], weight: 690,  gender: ‘m‘, vampires: 39});
db.unicorns.insert({name: ‘Raleigh‘, dob: new Date(2005, 4, 3, 0, 57), loves: [‘apple‘, ‘sugar‘], weight: 421, gender: ‘m‘, vampires: 2});
db.unicorns.insert({name: ‘Leia‘, dob: new Date(2001, 9, 8, 14, 53), loves: [‘apple‘, ‘watermelon‘], weight: 601, gender: ‘f‘, vampires: 33});
db.unicorns.insert({name: ‘Pilot‘, dob: new Date(1997, 2, 1, 5, 3), loves: [‘apple‘, ‘watermelon‘], weight: 650, gender: ‘m‘, vampires: 54});
db.unicorns.insert({name: ‘Nimue‘, dob: new Date(1999, 11, 20, 16, 15), loves: [‘grape‘, ‘carrot‘], weight: 540, gender: ‘f‘});
db.unicorns.insert({name: ‘Dunx‘, dob: new Date(1976, 6, 18, 18, 18), loves: [‘grape‘, ‘watermelon‘], weight: 704, gender: ‘m‘, vampires: 165});

{field: value}用来查找所有field等于value的文档。通过{field1: value1, field2: value2}的形式可以实现与操作。$lt$lte$gt$gte以及$ne分别表示小于、小于或等于、大于、大于或等于以及不等于。举个例子,查找所有体重超过700磅的雄性独角兽的命令是:

db.unicorns.find({gender: ‘m‘, weight: {$gt: 700}})
//或者 (效果并不完全一样,仅用来为了演示不同的方法)
db.unicorns.find({gender: {$ne: ‘f‘}, weight: {$gte: 701}})

如果需要或而不是与,可以用$or操作符并作用于需要进行或操作的数组:

db.unicorns.find({gender: ‘f‘, $or: [{loves: ‘apple‘}, {loves: ‘orange‘}, {weight: {$lt: 500}}]})

go on ...

pymongo

参考子资料

代码片段:

#首先pip install pymongo
#连接mongodb
import pymongo
conn = pymongo.Connection(‘localhost‘, 27017)
#获取数据库列表
conn.database_names()
[u‘test1‘, u‘test2‘, u‘admin‘, u‘local‘]
#连接数据库
db = conn.test1  #或者db = conn[‘test1‘]
#权限验证
db.authenticate(‘username‘, ‘password‘)
True
#获取聚集列表 (聚集的概念类似于关系型数据库中的表)
db.collection_names()
[u‘account‘, u‘role‘, u‘item‘, u‘online‘]
#连接聚集
account = db.account #或account = db[‘account‘]
#查看聚集的一条记录
account.find_one()
#查看聚集的所有key (类似于关系型数据库中的字段)
account.find_one().keys()
#查看聚集的所有记录
for i in account.find():
    rint i
#查看记录总数
account.find().count()
#根据条件查询多条记录
for i in account.find({"name": "xxx"}):
    print i
#对查询结果进行排序 (默认升序ASCENDING)
account.find().sort("name", pymongo.ASCENDING)
account.find().sort([("name", pymongo.ASCENDING), ("active_time", pymongo.DESCENDING)])

#新增记录
account.insert({"name": "mike", "active_time": "20130408"})

#更新记录
account.update({"name": "mike"}, {"$set": {"active_time": "20130408120000"}})
#删除记录 (不带条件表示全部删除)
account.remove({"name": "mike"})
时间: 2024-11-06 03:57:31

mongo数据库。的相关文章

ubuntu安装mongo数据库

安装mongo数据库,在shell下输入 sudo apt-get install mongodb 如果需要在Python中使用mongo数据库,还需要额外安装Python封装库 pip install pymongo 检测安装是否成功,可以使用下面命令在本地启动MongoDB mongod -dbpath . 在shell中输入mongo,就可以进入mongo数据库 查询数据库语句 > show databases; cache 0.0625GB local 0.03125GB 使用数据库语句

一段mongo数据库数据丢失 引发的血案

2017年1月8日上无,一个晴朗的早上(大周末的晴朗的早上),我还在梦境中,被一个电话吵醒,众所周知,做运维的最怕在休息期间接到公司同仁电话! 起因:同事说线上的某个功能不能用了!(这个功能就是在mongo数据库中获取数据返给前端进行渲染) 经过:之前也出现过类似的问题,排查故障后是因为mongo实例挂掉(某种原因造成),这次没想到事情比之前的故障还要叫人毛骨悚然----------mongo的数据丢了 我的个天啊.里面存放了不到5千万条的数据啊.丢了这可咋弄啊? 解决:把mongo数据丢失关键

【MongoDB】windows平台搭建Mongo数据库复制集(类似集群)(三)

关于windows平台搭建Mongo数据库复制集这个话题,我已经在前面写了两篇博客 第一篇: 如何在windows平台搭建Mongo数据库复制集 第二篇: 数据同步和故障自适应测试 在本篇里面,咱们重点总结一下复制集,以及分析一下它的工作原理 一.常见场景 应用程序和数据库之间的网络连接丢失 计划停机.断电.数据库服务硬盘故障等等 复制可以进行故障转移,复制能让你在副本间均衡读负载,保证复制节点与主节点保持同步 二.工作原理 副本集依赖于两个基础机制:oplog和"心跳"(heartb

mongo数据库--非关系型数据库

mongo数据库--非关系型数据库

将 node.js 的数据保存到 mongo 数据库中

Mongo 数据库 安装 首先到 Mongo 的官方网站下载安装程序:http://www.mongodb.org/,我下载的文件名为:mongodb-win32-x86_64-2008plus-2.6.4-signed.msi 执行安装程序. 下一步 同意许可协议 可以选择定制 Custom 看一下. 全部装上吧. 开始实际安装. MongoDB 默认安装到了 C:\Program Files\MongoDB 2.6 Standard\bin 目录下,但是,没有自动添加到 Path 路径中,手

【MongoDB】windows平台搭建Mongo数据库复制集(类似集群)(转)

原文链接:[MongoDB]windows平台搭建Mongo数据库复制集(类似集群)(一) Replica  Sets(复制集)是在mongodDB1.6版本开始新增的功能,它可以实现故障自动切换和自动修复功能成员节点的功能,各个DB之间的数据完全一致,大大降低了单点故障的风险. [] 以上图示是三个节点的Replica Set架构.该图来源于红丸编写的<Mongodb管理与开发精要>这本书.从上图可以看出,结构类似与一个集群,其实完全可以当做一个集群.因为它确实和集群实现的作用是相同的. 一

mongo数据库中一条记录中某个属性是数组情形时 数据结构的定义

package entity; import java.util.Date; import com.mongodb.BasicDBList;import com.mongodb.DBObject; public class CommonEditEntity { /** 数据库中查询记录结果 */ private DBObject record; /** 数据库默认id */ private String _id; /** 项目id */ private String project_id; /*

Robomongo 0.9.0 连接mongo数据库时,提示连接失败 的解决方案

Robomongo 0.9.0 连接mongo数据库时,提示连接失败.(IP和端口号确定是对的) 基本注意点: 1.mongodb服务打开,打开时,指定端口号,默认为27017,使用默认值,则不用指定.2.防火墙关闭或是允许端口(6666)通过防火墙3.认证的情况下,数据库连接和用户名,密码要匹配.数据库和用户的对应关系,可以在系统数据库system.admin中的集合system.users中查看

nodejs如何使用mongo数据库

nodejs如何使用mongo数据库 首先,请参考下面两个链接,配置并运行express和mongodb. 1.使用express生成一个空白网站http://cnodejs.org/topic/501f43eef767cc9a51c7b90e 2.mongo数据库的安装及命令行连接http://cnodejs.org/topic/50285b34f767cc9a512a1977 安装mongoose模块 npm install -g mongoose mongoose官网 http://mon