MongoDB GridFS 使用 存储特点

GridFS简介

  • 1,GridFS是用于存储和检索超过16MB的BSON文档大小限制的文件的解决方案。

  • 2,GridFS是MongoDB用来存储大型二进制文件的一种存储机制。

  • 3,GridFS 不是讲文件存储在单个文档中,而是将文件分为块,并将每个块作为单独的文档存储,默认情况下,GridFS使用的块大小为256kb,最后一个块除外。

  • 4, GridFS 使用两个集合存储文件,一个集合文件的块,另一个存储文件的原始数据。

GridFS 优缺点

优点

  • 1:能够简化技术栈,如果已经使用了MongoDB,那么使用GridFS,就不需要其它独
    立的存储工具了

  • 2:GridFS会自动平衡已有的复制,或者为MongoDB设置的自动分片,所以对文件存
    储做故障转移或者是横向扩展会更容易 。

  • 3:GridFS的功能不错,能自动解决一些其他文件系统遇到的问题,如在同一个目录
    下存储大量的文件

缺点

  • 1: 性能较低,不如直接访问文件系统快。

  • 2:无法修改文档。如果要修改GridFS里面的文档,只能是先删除再添加

mongofiles 命令使用

语法

mongofiles <options> <commands> <filename>
  • mongofiles 的命令 和mongo mongod 在同一级目录中。

常用的 options

option 描述
--host mongodb地址
--port 端口号
--username 用户名
--password 密码
--db mongodb 数据库
--local 本地的文件名称 用于 put/get
  • 双 '-'

commands 命令

command 描述
list <prefix> 列出GridFS存储的文件 以xxx 开头的文件
search <string> 搜索 包含 xxx的文件
put <filename> 将本地文件保存于 GridFS
get <filename> 下载文件
get_id "<ObjectId>" 获取到指定id的文件
delete <filename> 删除指定的文件
delete_id 删除指定id的文件
  • 双 '-'

上传一个文件到mongodb put

bin/mongofiles --port 20001 --host 127.0.0.1 -d dbs\db1 --local /Users/lihao/Downloads/cart2.jpg put cart.jpg

2017-08-13T20:22:21.586+0800    connected to: 127.0.0.1:20001
added file: cart.jpg

  • -d 表示数据库

  • --local 要上传的本地文件

  • put 存储在mongodb 中的文件名

查看存储的所有的文件 list

bin/mongofiles --port 20001 --host 127.0.0.1 -d dbs\db1 list

2017-08-13T20:26:45.426+0800    connected to: 127.0.0.1:20001
/Users/lihao/Downloads/rsa.txt  2777
rsa3.txt    2777
cart.jpg    21421

搜索文件 search

bin/mongofiles --port 20001 --host 127.0.0.1 -d dbs\db1  search cart
2017-08-13T20:28:44.750+0800    connected to: 127.0.0.1:20001
cart.jpg    21421

下载文件 get

bin/mongofiles --port 20001 --host 127.0.0.1 -d dbs\db1  --local  /Users/lihao/Desktop/rsa/cart.jpg get cart.jpg
2017-08-13T20:39:22.282+0800    connected to: 127.0.0.1:20001
finished writing to /Users/lihao/Desktop/rsa/cart.jpg

---local 下载到本地文件名全路径

删除mongodb 存储文件

bin/mongofiles --port 20001 --host 127.0.0.1 -d dbs\db1  delete cart.jpg
2017-08-13T20:45:35.762+0800    connected to: 127.0.0.1:20001
successfully deleted all instances of 'cart.jpg' from GridFS

GridFS 基本原理

GridFS 会将大文件分割为多个块,将每个块作为独立的文档进行存储,
另外用一个文档来讲这些块组织到一起,并存储该文件的元信息。

GridFS中的块被存储到专用的集合中,默认是fs.chunks

    bin/mongo 127.0.0.1:20001
    use dbsdb1
    db.fs.chunks.find();
    { 
    "_id" : ObjectId("598fc1c11194fce1dbcd57a5"), 
    "files_id" : ObjectId("598fc1c11194fce1dbcd57a4"), 
    "n" : 0.0, 
    "data" : BinData(0, "xxxx")
    }

  • 1:files_id:块所属文件的元信息

  • 2:n:块在文件中的相对位置

  • 3:data:块所包含的二进制数据

GridFS中每个文件的元信息被存储到单独的集合中,默认是fs.files

    db.fs.files.find()
    { 
    "_id" : ObjectId("598fc1c11194fce1dbcd57a4"), 
    "chunkSize" : 261120.0, 
    "uploadDate" : ISODate("2017-08-13T03:04:33.114+0000"), 
    "length" : 2777.0, 
    "md5" : "fd12ab0bd883a9530331f35c9e04006c", 
    "filename" : "rsa3.txt"
}

  • 1:_id:文件唯一的id,就是前面的files_id

  • 2:length:文件包含的字节数

  • 3:chunkSize:组成文件的每个快的大小,单位是字节,这个值默认是256k

  • 4:uploadDate:文件被上传到GridFS的日期 5:md5:文件内容的md5校验值

参考文章

https://docs.mongodb.com/manual/reference/program/mongofiles/

https://docs.mongodb.com/manual/core/gridfs/#gridfs-collections

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 159,117评论 4 362
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,328评论 1 293
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 108,839评论 0 243
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 44,007评论 0 206
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,384评论 3 287
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,629评论 1 219
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,880评论 2 313
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,593评论 0 198
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,313评论 1 243
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,575评论 2 246
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,066评论 1 260
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,392评论 2 253
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,052评论 3 236
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,082评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,844评论 0 195
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,662评论 2 274
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,575评论 2 270

推荐阅读更多精彩内容