mongodb gridfs基本使用

Mongodb GridFS图片文件存储解决方案

之前解决方案是接收图片数据后,将图片直接存储到盘阵,然后通过Apache做服务器,将图片信息存储到数据库,并且存储一个Apache的访问路径。

目前需要后台服务存储图片,将图片存储到MongoDB集群中,然后通过Nginx中的nginx-gridfs模块进行访问,在浏览器中通过url访问,效果与Apache访问本地文件一样。

本方案的内容比较基础,以后会有深入了解和优化,敬请期待!

一、安装MongoDB

(1)安装MongoDB

进入计划安装目录:cd  /usr/local/

下载mongodb-linux-x86_64-2.6.1.tgzhttps://fastdl.mongodb.org/linux/mongodb-linux-x86_64-2.6.1.tgz

解压:tar -zxf mongodb-linux-x86_64-2.6.1.tgz

改名:mv mongodb-linux-x86_64-2.6.1 mongodb2.6.1

创建数据目录和日志目录: mkdir -p mongodb2.6.1/mongodb_data/mongodb_db

mkdir -p mongodb2.6.1/mongodb_data/mongodb_logs

启动MongoDB: 进入MongoDB bin目录执行以下命令:

cd /usr/local/mongodb2.6.1/bin

./mongod --dbpath=/usr/local/mongodb2.6.1/mongodb_data/mongodb_db/ --logpath=/usr/local/mongodb2.6.1/mongodb_data/mongodb_log/mongodb.log --logappend &

检查启动状态:

ps -ef | grep mongo 看到刚才启动命令就说明在运行了

通过 netstat -ant | grep 27017 还能查看端口静态状态

?


1

2

3

4

5

6

7

8

9

10

[root@zjhl1 opt]# ps -ef | grep mongo

root     16350 10593  1 15:40 pts/1    00:01:11 ./mongod --dbpath=/opt/mongodb2.6.1/mongodb_data/mongodb_db/ --logpath=/opt/mongodb2.6.1/mongodb_data/mongodb_logs/mongodb.log --logappend

root     19027 10593  0 17:21 pts/1    00:00:00 grep mongo

[root@zjhl1 opt]# 

[root@zjhl1 opt]# netstat -ant | grep 27017

tcp        0      0 0.0.0.0:27017               0.0.0.0:*                   LISTEN      

tcp        0      0 127.0.0.1:27017             127.0.0.1:47686             ESTABLISHED 

tcp        0      0 127.0.0.1:47686             127.0.0.1:27017             ESTABLISHED 

tcp        0      0 192.168.1.111:27017         192.168.1.100:53462         ESTABLISHED 

[root@zjhl1 opt]#

(2)安装MongoVUE客户端

MongoVUE是类似oracle中PL/SQL Developer 或者MySql中SQLyog的图形化客户端。

目前是收费的,下载后Installer.msi后直接安装就行。至于授权问题自己百度解决。

此工具的功能很多,这里不展开讲,有需要的自己百度。

二、安装Nginx

(1)下载nginx-gridfs插件

网上有传出使用git安装此插件的,这个比较麻烦,我在文章的附件中留了下载包。本人测试可用。

下载后还要下载mongo的c语言驱动包,这个也可以在附件中下载。

下载完成后进行解压:tar -zxf nginx-gridfs.tar.gz

tar -zxf mongo-c-driver-0.94.2.tar.gz

解压完成后将驱动包内容全部拷贝到nginx-gridfs目录下的mongo-c-driver目录中:

mv mongo-c-driver-0.94.2/*  nginx-gridfs/mongo-c-driver/

如果有提示已经存在src目录,没有关系,忽略。然后就是下载Nginx,编译安装的过程了。

(6)下载Nginx1.0.1

Nginx版本太高对支持nginx-gridfs模块不是很成功,我是使用的Nginx1.7弄了一天都出不来图片。换成1.0.1就好了。对c不是很熟悉就没有深究。有那位大拿知道可以告诉我。

wget http://nginx.org/download/nginx-1.0.1.zip

解压:unzip nginx-1.0.1.zip

配置编译时设置:./configure --prefix=/usr/local/nginx --with-openssl=/usr/include/openssl --with-http_stub_status_module --add-module=/opt/nginx-gridfs

编译: make

安装:make install

配置mogon-gridfs地址:

在vim /usr/local/nginx/conf/nginx.conf配置文件中,增加下面的内容:

location /pics/ {
                gridfs pics     
                field=filename
                type=string;
                mongo 127.0.0.1:27017;
        }

gridfs:nginx识别插件的名字

pics:数据库名称

[root_collection]: 选择collection,如root_collection=blog, mongod就会去找blog.files与blog.chunks两个块,默认是fs

[field]:查询字段,保证mongdb里有这个字段名,支持_id, filename, 可省略, 默认是_id

[type]:解释field的数据类型,支持objectid, int, string, 可省略, 默认是int

[user]:用户名, 可省略

[pass]:密码, 可省略

mongo:mongodb url mongo名称 地址:端口

?


1

2

3

4

5

6

7

8

9

10

11

12

13

        #access_log  logs/host.access.log  main;

        location / {

            root   html;

            index  index.html index.htm;

        }

        location /pics/ {

                gridfs pics

                field=filename

                type=string;

                mongo 127.0.0.1:27017;

        }

        #error_page  404              /404.html;

        # redirect server error pages to the static page /50x.html

启动:/usr/local/nginx/sbin/nginx &

查看日志:tail -f /usr/local/nginx/logs/error.log

检查: 在浏览器输入: http://192.168.1.111/

当你看到下面的字母就说明nginx启动成功了。

Welcome to nginx!

三、测试开发

测试例子使用java开发,代码在附件中

(1)图片写入

全部的例子在附件中,GridFSTest.rar,例子还需要mongodb的驱动jar包mongo-java-driver-2.9.3.jar 。

?


1

2

3

4

5

6

7

8

                try {

   Mongo mongo = new Mongo("192.168.100.52"27017);// 创建连接

   DB db = mongo.getDB("pics"); // 选择数据库

   byte[] files = createImage(800600"800 X 600"); // 创建图片

   save(files, "test3.jpg", db); // 存储图片

  catch (Exception e) {

   e.printStackTrace();

  }

(2)文件获取

通过代码获取图片就不写了。只写如何在程序中传递文件路径,然后在前端展示。

存储图片信息时,可以加上ip地址:http://192.168.100.52/pics/test3.jpg ,然后前端应用通过给定的URL地址就可以获取图片内容了。

在浏览器中输入地址可以获得相同的效果。

时间: 2024-10-23 01:39:33

mongodb gridfs基本使用的相关文章

【转】PHP操作MongoDB GridFS 存储文件

PHP操作MongoDB GridFS 存储文件,如图片文件 GridFS是MongoDB的一个内置功能,它提供一组文件操作的API以利用MongoDB存储文件,GridFS的基本原理是将文件保存在两个Collection中,一个保存文件索引,一个保存文件内容,文件内容按一定大小分成若干块,每一块存在一个Document中,这种方法不仅提供了文件存储,还提供了对文件相关的一些附加属性(比如MD5值,文件名等等)的存储.

MongoDB GridFS最佳应用概述

<MongoDB GridFS最佳应用概述> 作者:chszs,转载需注明.博客主页:http://blog.csdn.net/chszs GridFS是MongoDB数据库之上的一个简单文件系统抽象.如果你熟悉Amazon S3的话,那么GridFS与之相似.为什么像MongoDB这样的NoSQL数据库会提供这样的一个文件层抽象呢? 一.使用GridFS的理由 理由如下: 1)存储用户产生的文件内容 大多数Web应用都允许用户上传文件.当用户使用关系数据库时,这些用户产生的文件会存储在文件系

MongoDB GridFS规范

This is being changed for 2.4.10 and 2.6.0-rc3. Tyler Brock's explanation: Now that the server uses power of 2 by default, if the default chunk size for gridfs is 256k we will almost always be throwing away some storage space. This is because if the

MongoDb GridFS的使用

MongoDb GridFS 是MongoDB的文件存储方案,主要用于存储和恢复那些超过16M(BSON文件限制)的文件(如:图片.音频等),对大文件有着更好的性能. 要在C#中使用GridFS,首先安装Nuget包: MongoDB.Driver.GridFS Bucket GridFS中的数据也是分集合存储的,每个集合叫一个bucket,每个bucket里面可以存储多个文件: 在C#中使用bucket和使用集合差不多,创建一个GridFSBucket对象即可. var bucket = ne

MongoDB(八)Mongodb——GridFS存储

mongoDB的文档以BSON格式存储,支持二进制的数据类型,当我们把二进制格式的数据直接保存到mongoDB的文档中.但是当文件太大时,例如图片和视频等文件,每个文档的长度是有限的,于是mongoDb会提供了一种处理大文件的规范--GridFS. GridFS实现原理 在GridFS数据库中,默认使用fs.chunks 和fs.files来存储文件,其中fs.files集合存放文件的信息,fs.chunks存放文件的数据,一个fs.files集合中的一条记录内容如下,即一个file信息如下所示

MongoDB GridFS

1. GridFS说明: GridFS 用于存储和恢复那些超过16M(BSON文件限制)的文件(如:图片.音频.视频等). GridFS 也是文件存储的一种方式,但是它是存储在MonoDB的集合中. GridFS 可以更好的存储大于16M的文件. GridFS 会将大文件对象分割成多个小的chunk(文件片段),一般为256k/个,每个chunk将作为MongoDB的一个文档(document)被存储在chunks集合中. GridFS 用两个集合来存储一个文件:fs.files与fs.chun

MongoDB GridFS 初探

使用GridFS简单介绍: 列出文件: [[email protected] ~]# mongofiles listconnected to: 127.0.0.1 此时并没有任何文件存在. 上传文件: [[email protected] ~]# mongofiles put install.log -d librarayconnected to: 127.0.0.1added file: { _id: ObjectId('5616b8c4f1403ca60b0999d0'), filename

MongoDB——GridFS

GridFS是一个规范的存储和检索文件超过16 mb的bson文档大小限制. 而不是将文件存储在一个文档中,GridFS文件分为部分,或块,每个块作为一个单独的文档.使用FridFS与使用分片无 关.在默认情况下网格文件系统块大小限制为255 k.GridFS文件系统使用两个集合存储文件.一个收集存储文件块, 其他商店文件元数据. 当你查询GridFS文件系统存储文件时,驱动或客户端将重新组装块.你可以通过GridFS文件系统上执行范围查询 文件存储.你也可以从任意部分的文件访问信息,你可以"跳

PHP操作MongoDB GridFS 存储文件,如图片文件

GridFS是MongoDB的一个内置功能,它提供一组文件操作的API以利用MongoDB存储文件,GridFS的基本原理是将文件保存在两个Collection中,一个保存文件索引,一个保存文件内容,文件内容按一定大小分成若干块,每一块存在一个Document中,这种方法不仅提供了文件存储,还提供了对文件相关的一些附加属性(比如MD5值,文件名等等)的存储. 01 <?php 02 // 初始化gridfs 03 $conn = new Mongo(); // 连接MongoDB 04 $db