时间戳

首页 > 解决方案 > 如何为我的应用程序设计弹性索引？

elasticsearch - 如何为我的应用程序设计弹性索引？

问题描述

我的应用程序是一个调查创建应用程序，用户可以在其中创建包含许多不同类型问题的调查。然后可以将每个调查共享给任意数量的人，他们的回答记录如下...

{
          "id" : 256,                                        // submission id
          "timeTaken" : "39.00",
          "startTime" : "2020-07-19T05:37:38.873Z",
          "state" : "COMPLETED",
          "completedTime" : "2020-07-19T05:38:17.873Z",
          "deviceType" : "COMPUTER",
          "ip" : null,
          "account_id" : 2,
          "channel_id" : 48,
          "contact_id" : null,
          "survey_id" : 10,
          "trigger_id" : 93,
          "trigger_contact_id" : null,
          "locked" : false,
          "location" : null,
          "language" : null,
          "submission_id" : 256,
          "question_90" : {
            "skipped" : false,
            "answer_choices" : [ 79 ]
          },
          "question_122" : {
            "skipped" : false,
            "otherChoice" : null,
            "answer_choices" : [ 115, 113, 111, 110, 114 ]
          },
          "question_106" : {
            "skipped" : false,
            "answer_choices" : [
              85
            ]
          },
          "question_120" : {
            "answer_txt": "Great service",
            "skipped" : false
          },
          "question_118" : {
            "answer_txt": "Hello people",
            "skipped" : false
          },
          "question_121" : {
            "skipped" : false,
            "answer_date" : "2020-06-04T20:01:49.783Z",
            "answer_timezone" : 330
          },
          "question_108" : {
            "skipped" : false,
            "answer_int" : "93"
          },
          "question_105" : {
            "skipped" : false,
            "answer_string" : "+1 202 9932219"
          },
          "question_93" : {
            "skipped" : false,
            "answer_string" : "Kyra60@yahoo.com"
          },
          "question_117" : {
            "skipped" : false
          },
          "question_92" : {
            "skipped" : false,
            "answer_txt" : "composite"
          },
          "question_107" : {
            "skipped" : false,
            "answer_bool" : true
          },
      }

最初我为每个调查创建了一个索引，但结果证明这是一个坏主意，因为每个索引分配了 5 个分片，而我的应用程序有近 20k 个用户创建的调查。亚马逊弹性服务出现故障并响应在我的 2 个节点中创建了 60k 分片..

在这种困境中，我不知道如何创建索引或有意义地对其进行分区以便在后期进行高效查询。

任何人都可以分享一些见解并问我更多问题，以便我可以更新问题以澄清问题吗？

标签： elasticsearchelastic-stack

解决方案

看起来您使用的是弹性搜索版本 < 7.X ，其中默认主分片数为 5，更改为 1，原因之一是您的问题是有很多较小尺寸的分片会影响 Elasticsearch 性能。

理想情况下，您应该为所有调查只创建一个索引，并根据时间范围或大小，您可以滚动到新索引。

您需要survey_id在单个索引中拥有（调查的唯一标识），并且在针对索引进行查询时，survey_id在过滤器上下文中使用以获得更好的查询性能，因为默认情况下会缓存过滤器上下文。

推荐阅读