Elastic Search：如何查看索引数据

Question

我在使用 ElasticSearch 和 Rails 时遇到问题，由于 attr_protected，某些数据未正确索引。 Elastic Search 将索引数据存储在哪里？检查实际索引数据是否错误将很有用。

使用 Tire.index('models').mapping 检查映射没有帮助，该字段已列出。

Answer 1

探索 ElasticSearch 集群的最简单方法可能是使用 elasticsearch-head。

您可以通过以下方式安装它：

cd elasticsearch/
./bin/plugin install mobz/elasticsearch-head

然后（假设 ElasticSearch 已在您的本地计算机上运行），打开浏览器窗口：

http://localhost:9200/_plugin/head/

或者，您也可以从命令行使用 curl，例如：

检查索引的映射：

curl -XGET 'http://127.0.0.1:9200/my_index/_mapping?pretty=1' 

获取一些示例文档：

curl -XGET 'http://127.0.0.1:9200/my_index/_search?pretty=1' 

查看存储在特定字段中的实际术语（即如何分析该字段）：

curl -XGET 'http://127.0.0.1:9200/my_index/_search?pretty=1'  -d '
 {
    "facets" : {
       "my_terms" : {
          "terms" : {
             "size" : 50,
             "field" : "foo"
          }
       }
    }
 }

更多信息请参见此处:<一href="http://www.elasticsearch.org/guide" rel="nofollow noreferrer">http://www.elasticsearch.org/guide

更新：Marvel

到目前为止，为 Elasticsearch 编写 curl 风格命令的最简单方法是 Marvel 中的 Sense 插件。

它具有源代码突出显示、漂亮的缩进和自动完成功能。

注意：Sense 最初是一个独立的 Chrome 插件，但现在是 Marvel 项目的一部分。

Answer 2

查看索引数据的最简单方法绝对是在浏览器中查看。 无需下载或安装。

我假设您的elasticsearch主机是http://127.0.0.1:9200。

第 1 步

导航至 http://127.0.0.1:9200/_cat/indices?v 以列出您的索引。您会看到类似这样的内容：

第 2 步

尝试访问所需的索引：
http://127.0.0.1:9200/products_development_20160517164519304

输出将如下所示：

注意别名，这意味着我们也可以访问以下位置的索引：
http://127.0.0.1:9200/products_development

第 3 步

导航至 http://127.0.0.1:9200/products_development/_search?pretty 查看您的数据：

Answer 3

ElasticSearch 数据浏览器

搜索、图表、一键设置......

Answer 4

聚合解决方案

通过对数据进行分组来解决问题 - DrTech 的答案使用了方面来管理此问题，但是 将被弃用。

Warning

Facets are deprecated and will be removed in a future release. You are encouraged to
migrate to aggregations instead.

Facets 被聚合替换 - 在 Elasticsearch 指南中以易于理解的方式引入 - 加载了一个示例.。

简短的解决方案

该解决方案是相同的，除了聚合需要 aggs 而不是 facets 并使用 计数 0 将限制设置为最大整数 - 示例代码需要 Marvel 插件

# Basic aggregation
GET /houses/occupier/_search?search_type=count
{
    "aggs" : {
        "indexed_occupier_names" : {    <= Whatever you want this to be
            "terms" : {
              "field" : "first_name",    <= Name of the field you want to aggregate
              "size" : 0
            }
        }
    }
}

完整解决方案

这是用于测试它的 Sense 代码out - 房屋索引示例，具有占用者类型和字段first_name：

DELETE /houses

# Index example docs
POST /houses/occupier/_bulk
{ "index": {}}
{ "first_name": "john" }
{ "index": {}}
{ "first_name": "john" }
{ "index": {}}
{ "first_name": "mark" }


# Basic aggregation
GET /houses/occupier/_search?search_type=count
{
    "aggs" : {
        "indexed_occupier_names" : {
            "terms" : {
              "field" : "first_name",
              "size" : 0
            }
        }
    }
}

---

响应

显示相关聚合代码的响应。索引中有两个键：John 和 Mark。

    ....
    "aggregations": {
      "indexed_occupier_names": {
         "buckets": [
            {
               "key": "john",     
               "doc_count": 2     <= 2 documents matching
            },                        
            {
               "key": "mark",
               "doc_count": 1     <= 1 document matching
            }
         ]
      }
   }
   ....

Answer 5

ElasticHQ 是一个对我调试 ElasticSearch 有很大帮助的工具。基本上，它是一个带有一些 JavaScript 的 HTML 文件。无需在任何地方安装，更不用说在 ES 本身中：只需下载它，解压缩 int 并使用浏览器打开 HTML 文件。

不确定它是 ES 重度用户的最佳工具。然而，对于那些急于查看条目的人来说，这确实很实用。

Answer 6

Kibana 也是一个很好的解决方案。它是 Elastic 的数据可视化平台。如果安装，它默认在端口 5601 上运行。

它提供了许多功能。它有“开发工具”，我们可以在其中进行调试。

例如，您可以使用以下命令在此处检查可用索引

GET /_cat/indices

Answer 7

如果你使用 Google Chrome，那么你可以简单地使用这个名为 Sense 的扩展，如果你使用 Marvel，它也是一个工具。

https://chrome.google.com/webstore/detail/sense-beta/lhjgkmllcaadmopgmanpapmpjgmfcfig

Answer 8

按照@JanKlimo 示例，在终端上您所要做的就是：

查看所有索引：
<代码>
$curl -XGET 'http://127.0.0.1:9200/_cat/indices?v'

查看索引 products_development_20160517164519304 的内容：
<代码>
$curl -XGET 'http://127.0.0.1:9200/products_development_20160517164519304/_search?pretty=1'