Назад | Перейти на главную страницу

Задержка при обновлении индекса

Я создал ILM политика следующим образом,

{
  "policy": {
    "phases": {
      "hot": {
        "min_age": "0ms",
        "actions": {
          "rollover": {
            "max_docs": 30
          },
          "set_priority": {
            "priority": 100
          }
        }
      },
      "delete": {
        "min_age": "15m",
        "actions": {
          "delete": {}
        }
      }
    }
  }
}

Установка индекса следующим образом,

{
  "index": {
    "lifecycle": {
      "name": "index-roll+doc-over",
      "rollover_alias": "router01"
    },
    "number_of_shards": "1",
    "number_of_replicas": "0"
  }
}

Как вы уже догадались, я тестирую эту политику одновременного нажатия клавиш ILM, поэтому я установил только размер документа. 30. Я планирую ограничить размер документа 1,5 миллиардами. Но я наблюдаю огромную задержку при создании индекса одновременного нажатия клавиш и переключении на новый индекс. Он записывается в текущий индекс и не переносится. Для теста я проглотил только 500 строки журнала.

Детали индекса

health status index                    uuid                   pri rep docs.count docs.deleted store.size pri.store.size

green  open   router01-000001          654G2ArFQiypDn9U69jedw   1   0        500            0    151.1kb        151.1kb

И на момент написания этого вопроса другой индекс (router01-000001) еще не создан.

В _ilm/explain является следующее,

{
  "indices" : {
    "router01-000001" : {
      "index" : "router01-000001",
      "managed" : true,
      "policy" : "index-roll+doc-over",
      "lifecycle_date_millis" : 1583819391191,
      "age" : "14.08m",
      "phase" : "hot",
      "phase_time_millis" : 1583819391396,
      "action" : "rollover",
      "action_time_millis" : 1583819706013,
      "step" : "check-rollover-ready",
      "step_time_millis" : 1583819706013,
      "phase_execution" : {
        "policy" : "index-roll+doc-over",
        "phase_definition" : {
          "min_age" : "0ms",
          "actions" : {
            "rollover" : {
              "max_docs" : 30
            },
            "set_priority" : {
              "priority" : 100
            }
          }
        },
        "version" : 1,
        "modified_date_in_millis" : 1583756555777
      }
    }
  }
}

Elasticsearch в настоящее время имеет 2GB куча и logstash имеют 1 ГБ. Общий объем памяти 4 ГБ.

У меня вопрос,