`
sunxboy
  • 浏览: 2827428 次
  • 性别: Icon_minigender_1
  • 来自: 武汉
社区版块
存档分类
最新评论

MongoDB 在语法上的 5 大缺陷

 
阅读更多

这几天抱怨MongoDB的帖子相当受追捧。大多是关于在特定的数据集,可靠性和分片问题上表现不佳。其中一些博客文章可能是正确的,其他的只是说,最受欢迎的NoSQL的解决方案并没有满足他们的需求。

这篇文章不是其中之一,虽然大多数的文章关注操作部分,基准测试和性能特征,而我想谈谈MongoDB查询接口。没错——编程接口,特别是关于Node.js的,但这个在不同语言平台和Mongo-shell上都差不多。

免责声明:我努力不去恨MongoDB。事实上我每个工作日都在使用MongoDB,它已经成为我全职工作的一部分。我也参与Minimongo的开发,使用内存缓存用纯javascript克隆MongoDB的API。我没有任何理由嘲笑Mongo只是警告大家这些意想不到的问题。他们大多数由David Glasser发现。本文假定您熟悉MongoDB的API。

harrybetter
harrybetter
翻译于 1个月前

0人顶

 

 翻译的不错哦!

1. 哈希对象中key的顺序

比如,你要存储一个简单的文字对象::

1 > db.books.insert({ title: "Woe from Wit", meta: { author: "A. Griboyedov", year: 1823 } });

 

太棒了!现在我们有了一条书籍记录。再比如,以后我们会想找所有1823年出版的作者是 A. Griboyedov 的书。这里不太可能返回多个结果,但至少应该有《 Woe from Wit 》这本书,因为我们刚刚插入了这条记录,对不对?

1 > db.books.find({ meta: { year: 1823, author: "A. Griboyedov" } });
2 < No results returned

 

发生了什么?我们不是刚刚插入了这本书的数据吗?让我们尝试调换key的顺序:

1 > db.books.find({ meta: { author: "A. Griboyedov", year: 1823 } });
2 < { _id: ..., title: "Woe from Wit", meta: { ... } }

 

搞定了!

陷阱: 在MongoDB中key的顺序非常重要,{ a: 1, b: 2 } 和 { b: 2, a: 1 }是不匹配的。

为什么: MongoDB使用叫做BSON的二进制数据格式。在BSON中key的顺序非常重要。注意,JSON对象是一个无序的键/值对集合。

harrybetter
harrybetter
翻译于 1个月前

0人顶

 

 翻译的不错哦!

那么在JavaScript里是怎样的呢?ECMA-262可没有规定(JS属性顺序)这件事。在某些浏览器下(通常是旧的)对属性的顺序不会太在意,这意味着它们可以是任何顺序(只要存在就行)。值得庆幸的是大多数现代浏览器的JavaScript引擎在维护JS属性的顺序(有时甚至在数组中也维护) ,因此实际上我们可以使用node.js来控制它。

更多内容请参阅 John Resig's blog.

问题的答案是:要么给出规范形式(键按字典顺序排序) ,要么就使得你自己的代码中是一致的。

当然,这里有其它的解决方法。使用另一种查询方法(selector),即指定那些特定的属性项(key-path),而不是比较对象的文本信息:

1 > db.books.find({ 'meta.year': 1823, 'meta.author''A. Griboyedov' });

 

这种特殊情况下这样的查询方式是有效地,但请注意,这个查询语句的含义是不同的。

陷阱: 每当你想建立一个拥有多键值索引的数据的时候这种行为是很危险的。

1 > db.books.ensureIndex({ title: 1, 'meta.year': -1 });

 

这样的命令会使得title的优先级会比 meta.year 的优先级高。这在MongoDB中是一个很重要的分析数据的方式。更多内容请参阅MongoDB docs.

Terry_Wang
Terry_Wang
翻译于 1个月前

1人顶

 

 翻译的不错哦!

2. undefined, null and undefined

想必很多人都还记得那个undefined, null 的关系、特性很混乱的时候吧!在JavaScript的世界中undefined、null代表着两个不同的值,严格来说它们是不一样的:undefined!== NULL。当然,在非严格的情况下他们确实相等:undefined == null。有些人很小心的使用它们,而另一部分人将两者随意交替使用。说到底我们的问题是:JavaScript确实存在两个不同但很相似的值。

MongoDB的带来了它带到一个新的水平。BSON里将未定义规定为"deprecated"。 BSON spec规定undefined为“deprecated”.

然而Node.js中的node-native-driver for MongoDB却没有实现它

Node.js目前的版本(2.4.8)特性表明null和undefined是两个相同的值。

1 > db.things.insert({ a: null, b: 1 });
2 > db.things.insert({ b: 2 }); // the 'a' is undefined implicitly
3 > db.things.find({ a: null });
4 < { a: null, b: 1 }
5 < { b: 2 }

 

我不确定node driver for MongoDB中的实现情况,不过看起来像是node driver直接将undefined转换为null,但是这在mongo-shell里是被限制的(因为在MongoDB里undefined和null本来就是两个值--译者注)。

Terry_Wang
Terry_Wang
翻译于 1个月前

1人顶

 

 翻译的不错哦!

在下面的代码中我们定义了三个对象,我们将会得到相同的结果并打印两次。

1 // from node.js code with mongo/node-native-driver
2 db.things.insert({ a: null, b: 1 });
3 db.things.insert({ b: 2 });
4 db.things.insert({ a: undefined, b: 3 });
5 console.log(db.things.find({ a: null }).fetch())
6 console.log(db.things.find({ a: undefined }).fetch())

 

然而,在mongo-shell中你只能使用null来查询,注意,我们所使用的三个对象和上面的是一样的。

1 // from mongo-shell
2 > db.things.find({a: undefined});
3 < error: { "$err" "can't have undefined in a query expression""code" : 13629 }
4 > db.things.find({a: null});
5 < { "a" null"b" : 1, "_id" "wMWNPm7zrYXTNJpiA" }
6 < { "b" : 2, "_id" "RjrYvmZF5EukhpuAY" }
7 < { "a" null"b" : 3, "_id" "kethQ2khbyfFjJ7Sa" }

 

我们可以看到,mongo/node-native-driver 显式的将undefined转换null但实际上左边隐式的那个才是我们真正想要的(我们期望的真实结果)。

当我们使用mongo-shell显式的插入undefined的时候,有趣的事情发生了:

1 // from mongo-shell
2 > db.things.insert({ a: undefined, b: 4 });
3 > db.things.find({ a: null })
4 < { "a" null"b" : 1, "_id" "wMWNPm7zrYXTNJpiA" }
5 < { "b" : 2, "_id" "RjrYvmZF5EukhpuAY" }
6 < { "a" null"b" : 3, "_id" "kethQ2khbyfFjJ7Sa" }

 

我们得到相同的三个值,但并没有我们刚才在mongo-shell里插入的 b=4的对象。undefined不是和null相等吗?好吧,让我们来看看这个新的对象:

1 > db.things.find({ b: 4 });
2 < { "_id" : ObjectId("52ca134f3e47d3d91146f2b5"), "a" null"b" : 4 }

 

它仍然在那里,虽然a属性的值很像是null,但与我们的选择器却不匹配。

陷阱:有2个以上的值在MongoDB中看起来像null: null,undefined以及隐式的向mongo-shell里插入的undefined,虽然看起来像null但在实际情况下和BSON(第6版)中的undefined 相匹配。最后一个在选择器上并不和null匹配,前两者都匹配undefined和null。这也说明了没有值同样可以匹配前两者。

原始问题请参阅 GitHub issue.

Terry_Wang
Terry_Wang
翻译于 1个月前

1人顶

 

 翻译的不错哦!

3. Soft limits, hard limits and no limits

你有一个项目的输入并且允许用户指定数字项目返回。你应该把问题的结果像这样返回:

1 db.items.find({ ... }).limit(N);

N值是由 用户供给的。我们当然希望小心的将用户限制在50之内,否则网络上的任何人只需简单地提供一个非常大的N值都可以下载我们的应用服务器和数据库。

 

1 function getItems (N) {
2   if (N > 50)
3     N = 50;
4   return db.items.find({}).sort({ year: 1 }).limit(N);
5 }

看起来是个有道理运行在你的node.js app上的代码。 

陷阱:如果用户提供0作为一个项目的值,他希望MongoDB可以理解为把所有都给他。

calance
calance
翻译于 28天前

1人顶

 

 翻译的不错哦!

这在文档里写的很清楚,但很多情况下并不是那么显然:在MongoDB中零表示无限制。我猜想MongoDB的代码可能将undefined, null, 0等等所有的false值当做无限制对待。

这没关系,我们可以对0进行单独处理:

1 function getItems (N) {
2   if (N > 50 || !N) // check if N is falsy ("no limit")
3     N = 50;
4   return db.items.find({}).sort({ year: 1 }).limit(N);
5 }

 

看上去不错?但是如果用户输入一个负值怎么办?这可能么?这又意味着什么?

事实上像db.items.find().limit(-1000000000000)这类的语句可能返回非常多的项。很难找到相关的文档,但几个月前我在node.js的驱动文档中看到一篇文章描述了这种行为,它将其表述为“硬”限制和“软”限制。我不知道这是什么意思。

那么我们服务器端方法的最终版就是这样了:

1 function getItems (N) {
2   if (N < 0) N = -N;
3   if (N > 50 || !N) // check if N is falsy ("no limit")
4     N = 50;
5   return db.items.find({}).sort({ year: 1 }).limit(N);
6 }

 

总结: 限制可以是负数。它在广义上和正数是一样的但是负数限制是“软限制”。

DrZ
DrZ
翻译于 23天前

0人顶

 

 翻译的不错哦!

4.数组的特殊待遇

很多人并不知道这个特性,但数组确实是经过特殊处理的。

1 > db.c.insert({ a: [{x: 2}, {x: 3}], _id: "aaa"})
2 > db.c.find({'a.x': { $gt: 1 }})
3 < { "_id" "aaa""a" : [  {  "x" : 2 },  {  "x" : 3 } ] }
4 > db.c.find({'a.x': { $gt: 2 }})
5 < { "_id" "aaa""a" : [  {  "x" : 2 },  {  "x" : 3 } ] }
6 > db.c.find({'a.x': { $gt: 3 }})
7 < Nothing found

 

因此每当有一个数组对象,选择器都会“分发”给每一个元素,这就像“如果其中一个元素匹配,那么整个文档(document)都会被匹配”。

值得注意的是,它并不适用于嵌套数组::

1 > db.x.insert({ _id: "bbb", b: [ [{x: 0}, {x: -1}], {x: 1} ] })
2 > db.x.find({ 'b.x': 1 })
3 < { "_id" "bbb""b" : [  [  {  "x" : 0 },  {  "x" : -1 } ],  {  "x" : 1 } ] }
4 > db.x.find({ 'b.x': 0 })
5 < Nothing found
6 > db.x.find({ 'b.x': -1 })
7 < Nothing found

 

同样也适用于预测数组中字段(field)的一些特性:

1 > db.z.insert({a:[[{b:1,c:2},{b:2,c:4}],{b:3,c:5},[{b:4, c:9}]]})
2 > db.z.find({}, {'a.b': 1})
3 < { "_id" : ObjectId("52ca24073e47d3d91146f2b7"), "a" : [  [  {  "b" : 1 },  {  "b" : 2 } ],  {  "b" : 3 },  [  {  "b" : 4 } ] ] }

 

如果我们在选择器上将以上特性与使用数字键做更多的组合,那么这个特性将变得越来越难以预测:

01 > db.z.insert({a: [[{x: "00"}, {x: "01"}], [{x: "10"}, {x: "11"}]], _id: "zzz"})
02 > db.z.find({'a.x''00'})
03 < Nothing found
04 > db.z.find({'a.x''01'})
05 < Nothing found
06 > db.z.find({'a.x''10'})
07 < Nothing found
08 > db.z.find({'a.x''11'})
09 < Nothing found
10 > db.z.find({'a.0.0.x''00'})
11 < { "_id" "zzz""a" : [     [   {   "x" "00" },   {   "x" "01" } ],     [   {   "x" "10" },   {   "x" "11" } ] ] }
12 > db.z.find({'a.0.0.x''01'})
13 < Nothing found
14 > db.z.find({'a.0.x''00'})
15 < { "_id" "zzz""a" : [     [   {   "x" "00" },   {   "x" "01" } ],     [   {   "x" "10" },   {   "x" "11" } ] ] }
16 > db.z.find({'a.0.x''01'})
17 < { "_id" "zzz""a" : [     [   {   "x" "00" },   {   "x" "01" } ],     [   {   "x" "10" },   {   "x" "11" } ] ] }
18 > db.z.find({'a.0.x''10'})
19 < Nothing found
20 > db.z.find({'a.0.x''11'})
21 < Nothing found
22 > db.z.find({'a.1.x''00'})
23 < Nothing found
24 > db.z.find({'a.1.x''01'})
25 < Nothing found
26 > db.z.find({'a.1.x''10'})
27 < { "_id" "zzz""a" : [     [   {   "x" "00" },   {   "x" "01" } ],     [   {   "x" "10" },   {   "x" "11" } ] ] }
28 > db.z.find({'a.1.x''11'})
29 < { "_id" "zzz""a" : [ [ { "x" "00" }, { "x" "01" } ], [ { "x" "10" }, { "x" "11" } ] ] }

 

好的,我们再来稍作改动。这个和上一个案例的区别仅仅是内部值的改动:在上一个案例中是一个对象,在下面的案例中将会是一个数字。这足以让数组的特性发生改变:

01 > db.p.insert({a: [0], _id: "xxx"})
02 > db.p.find({'a': 0})
03 < { "_id" "xxx""a" : [  0 ] }
04 > db.q.insert({a: [[0]], _id: "yyy"})
05 > db.q.find({a: 0})
06 < Nothing found
07 > db.q.find({'a.0': 0})
08 < Nothing found
09 > db.q.find({'a.0.0': 0})
10 < { "_id" "yyy""a" : [  [  0 ] ] }

 

陷阱: 尽可能的避免数组或者嵌套数组以及其他一对多关系的数据存在于文档之中,并且在需要查询的时候,通常我们倾向于按照一对一关系去查询。然而对于使用数字键(例如{ 'a.0.x': Y }意味着字段a的第一个元素的x字段必须为Y)的混合型文档很可能会让人感觉非常别扭,当然这也取决于数据的复杂程度。

Terry_Wang
Terry_Wang
翻译于 1个月前

0人顶

 

 翻译的不错哦!

5. 地理定位操作符$near

这个操作符很简单。你拥有大量包含位置字段的文档。位置字段表示的是地理位置信息。技巧就是MongoDB可以对两种不同类型的位置信息进行索引,每种类型都有稍微不同的API和行为。

第一种类型如下:

1 db.c.find({
2   location: {
3     $near: [12.3, 32.1],
4     $maxDistance: 777
5   }});

第二种类型如下:

01 db.c.find({
02   location: {
03     $near: {
04       $geometry: {
05         type: "Point",
06         coordinates: [ 12.3, 32.1 ]
07       },
08       $maxDistance: 777
09     }
10   }});

对每个被索引类型来说,地理信息查询语法稍稍有些不同。在通常所用的地理位置信息配对中$maxDistance与$near处于同等地位,而在Geo-JSON表示的地理位置信息配对中$maxDistance就是$near的子元素。 
然而,还不止这些!有时你在结果集中会两次获得同一个位置点!为了能够理解这一点,我们需要回想一下前一个嵌套数组里存在的缺陷。看看下面代码:

1 > db.c.insert({ location: [[1, 2], [1, 0]] }); // inserting an array of two points> db.c.ensureIndex({ location: "2d" });
2 > db.c.find({ location: { $near: [0, 0], $maxDistance: 500 } });
3 < { "_id" : ObjectId("52ca30ec3e47d3d91146f2b8"), "location" : [  [  1,  2 ],  [  1,  0 ] ] }
4 < { "_id" : ObjectId("52ca30ec3e47d3d91146f2b8"), "location" : [  [  1,  2 ],  [  1,  0 ] ] }

从匹配给定选择子的数组里返回同一个位置点两次,认为是两个位置点。

几点人
几点人
翻译于 8天前

0人顶

 

 翻译的不错哦!

在我开始使用Javascript编程的时候这些陷阱给提了醒。这里有一些我们平时不容易察觉的情况,其中一些跨浏览器效果不一致,还有一些你几乎用不到的特性,因此在某些情况下你要格外小心。以上这些都是众所周知的JavaScript领域中的问题,但在MongoDB领域中也没有处理的那么好。

几乎所有怪异的特性都在模拟MongoDB的过程中发现,然后整理并列举在这里,这个模拟MongoDB的项目叫做Minimongo, 主要由 David Glasser贡献.

分享到:
评论

相关推荐

    mongoDB-查询语法

    mongodb 常用查询语法包括分页等用法

    mongoDB语法

    mongoDb数据库基本语法,可做参考书使用

    MongoDB语法学习

    mongodb数据库语法学习,快速掌握mongodb的使用。

    mongodb 查询语法和实例

    很全面的mongodb 查询语法和实例 $gt $lt $gte $lte $exists $size $type 等等

    MongoDB常用语法/Mongodb的基本使用

    MongoDB的基本常用语法:1、创建、查询数据库 创建数据库 查询数据库 2、创建集合、查看 创建集合插入数据 查看集合 查看集合中的数据 3、删除集合、删除数据库 删除集合 删除数据库 4、操作符 4、增、删、改、查 1...

    MongoDB中英文文档,python,java对mongodb的基础操作语法,三大平台上的安装视频链接

    MongoDB在mac,linux,window的安装,...MongoDB中英文文档,python,java对mongodb的基础操作语法,三大平台上的安装视频链接。 MongoDB,mac,linux,windows,python,java,文档,手册,安装视频,mongodb语法

    MONGOdb视频教程地址.txt

    真实有效的mongodb视频教程地址 深入浅出 MongoDB 高清IT教程视频下载 1.1、-nosql与MongoDB.mp4 1.2、-MongoDB安装配置.mp4 1.3、-MongoDB?shell详.mp4 1.4、-MongoDB文档、集合、... 2.4、-MongoDB查询语法3.mp4

    MongoDB语法参考手册.zip

    MongoDB的语法速查表,表格形式

    Mongodb高可用5台服务器搭建 - 201812161

    由第一节点mongodb节点规划图所示:在服务器31,即node1上安装mongos、shard1、shard4、shard5mkdir -p /opt/app

    MongoDB参考手册.zip_MongoDB_T6U_mongodb中文手册

    MongoDB操作手册详细介绍MongoDB的语法用法

    mongodb语法.txt

    mongodb 的常用命令,常用语法,都是日常工作中汇总,你可以下载当工具使用,方便查阅,非常有用。

    MongoDB在红帽系统上的配置和启动

    MongoDB在红帽系统上的配置和启动,英文版。

    MongoDB在单机上搭建分片副本集群

    mongodb在单机上搭建分片副本集群. 1.安装mongodb。2.准备好配置文件夹。3.创建日志文件。4.启动配置进程(config servers)。5.启动路由进程(mongos)。6.启动分片进程(shard servers)。7.开始设置分片副本集。8.设置...

    在Mac上安装MongoDB数据库

    介绍详细讲解在Mac上安装MongoDB数据库,配置环境变量、数据以及日志,快速启动和停止。

    MongoDB大数据处理

    MongoDB大数据处理权威指南 MongoDB大数据处理权威指南 MongoDB大数据处理权威指南

    MongoDB(mongodb-org-server_5.0.4_amd64.deb)

    MongoDB Community Server(mongodb-org-server_...Mongo最大的特点是它支持的查询语言非常强大,其语法有点类似于面向对象的查询语言,几乎可以实现类似关系数据库单表查询的绝大部分功能,而且还支持对数据建立索引。

    MongoDB(mongodb-src-r5.0.4.tar.gz)

    MongoDB Community Server(mongodb-src-r5.0.4....Mongo最大的特点是它支持的查询语言非常强大,其语法有点类似于面向对象的查询语言,几乎可以实现类似关系数据库单表查询的绝大部分功能,而且还支持对数据建立索引。

    MongoDB笔记.docx

    5、MongoDB删除 9 6、MongoDB分页 10 7、MongoDB模糊查询和其他条件查询 12 五、Mongoose(node使用)(前提安装好node环境有node基础) 13 1、连接 13 2、创建模式结构(Schema)定义约束了数据库中的文档结构 14 3、...

Global site tag (gtag.js) - Google Analytics