在线看视频网站怎么做免费大数据查询

在es的数据类型中有一个nested类型，本讲将重点讨论这个类型。

扁平化处理

PUT my_index/doc/1
{"group" : "fans","user" : [{"first" : "John","last" : "Smith"},{"first" : "Alice","last" : "White"}]
}

如图所示，有一个名为 my_index 的索引，其中包含一个文档，该文档有一个名为 group 的字符串字段和一个名为 user 的数组字段，该数组包含两个对象。

首先看看如何在 Elasticsearch 中处理此数据，然后讨论如何解决扁平化处理带来的挑战。

默认情况下，Elasticsearch 将尝试将数组内的对象展平。在这种情况下，Elasticsearch 可能会将 user 数组展平为以下形式：

{"group": "fans","user.first": ["John", "Alice"],"user.last": ["Smith", "White"]
}

然而，这种扁平化处理并不能很好地反映原始数据结构，因为它丢失了用户对象的上下文。

扁平化处理导致的检索问题

因此，我们在查询时会遇到下面的问题。

GET my_index/_search
{"query": {"bool": {"must": [{"match": {"user.first": "Alice"}},{"match": {"user.last": "Smith"}}]}}
}

在扁平化处理下，user 数组中的对象会被展平为单独的字段，例如 user.first 和 user.last。这意味着每个用户对象的属性都会被拆分为独立的字段，而不是作为一个整体存储。

在给定的查询中，要匹配一个 user 对象，其中 first 属性等于 “Alice”，last 属性等于 “Smith”。由于扁平化处理，user.first 和 user.last 字段分别包含 “John”、“Alice” 和 “Smith”、“White”，而不是完整的 “Alice Smith”。

在扁平化处理的情况下，这个查询可能会返回错误的结果，即使文档中不存在一个完整的 “Alice Smith” 用户。这是因为查询引擎会将 “Alice” 和 “Smith” 视为独立的关键词，而不是一个完整的姓名。因此，只要文档中存在一个 user.first 匹配 “Alice” 和一个 user.last 匹配 “Smith”，无论它们是否来自同一个用户对象，都会被视为匹配项。

对于上图中的查询，语义是要查找一个叫做“Alice Smith”的人，实际上并没有这样一个人，但是因为ES的扁平化处理，检索过程如下：

• 首先会在user.first中查找Alice，能够匹配到一条记录
• 接着在user.last中查找Smith，也能够匹配到

最后能查到两条记录，与预期不符。

解决方案：使用 nested 结构

为了避免这些问题，我们可以使用 nested 类型来存储 user 数组。以下是使用 nested 类型的映射定义：

PUT my_index
{"mappings": {"properties": {"group": { "type": "keyword" },"user": {"type": "nested","properties": {"first": { "type": "keyword" },"last": { "type": "keyword" }}}}}
}

现在，我们可以将相同的数据插入到索引中，但这次使用 nested 结构：

PUT my_index/doc/1
{"group": "fans","user": [{ "first": "John", "last": "Smith" },{ "first": "Alice", "last": "White" }]
}

使用 nested 结构的好处在于，它可以保留数组中每个对象的完整结构。这意味着我们可以对 user 数组中的单个元素执行更复杂的查询，而不仅仅是简单的过滤。

例如，我们可以查询姓氏为 White 的用户：

GET my_index/_search
{"query": {"nested": {"path": "user","query": {"term": {"user.last.keyword": "White"}}}}
}

上述查询将返回所有包含至少一个姓氏为 White 的用户。

使用 nested 结构可以帮助我们更好地处理对象数组，特别是当我们需要执行更复杂的查询时。虽然 nested 结构可能会带来更高的存储成本和查询性能影响，但它提供了更大的灵活性和准确性。