[OpenSearch] watermark 수정

OpenSearch 워터마크란?

 OpenSearch는 디스크 사용량이 특정 임계치를 초과할 경우, 노드의 안정성을 유지하고 데이터 손실을 방지하기 위해 특정 워터마크 임계치를 설정합니다. 일반적으로 세 가지 주요 워터마크 수준이 있습니다.

 

• low (low watermark, 낮은 워터마크)
  • 기본값: deafault 디스크 사용량이 85%를 초과하면 경고
  • 클러스터는 이 상태가 되면 새로운 샤드 할당을 방지하지만, 기존 데이터는 계속 사용할 수 있음.
• high (high watermark, 높은 워터마크)
  • 기본값: deafault 디스크 사용량이 90%를 초과하면 더 강력한 조치
  • 새로운 샤드 할당을 중지하고, 데이터를 이동시켜 공간을 확보하려고 시도.
• flood_stage (flood stage watermark, 플러드 스테이지 워터마크)
  • 기본값: deafault 디스크 사용량이 95%를 초과하면 읽기 전용 모드로 전환
  • 인덱스가 자동으로 읽기 전용 모드(read-only)가 되어 더 이상 데이터를 추가할 수 없음.

 

watermark threshold 값 수정

# Watermark 설정 변경
PUT _cluster/settings
{
  "persistent": {
    "cluster.routing.allocation.disk.watermark.low": "95%",
    "cluster.routing.allocation.disk.watermark.high": "95%",
    "cluster.routing.allocation.disk.watermark.flood_stage": "95%",
    "cluster.info.update.interval": "1m"
  }
}

 

읽기 전용 모드(read-only) 해제

releasing read-only-allow-delete block on indices: [[.plugins-ml-config, .opensearch-observability, .ql-datasources, opensearch_dashboards_sample_data_logs, .opensearch-sap-log-types-config, .kibana_92668751_admin_1, .opendistro_security, .kibana_1, security-auditlog-2025.02.08]]

 

저장 공간이 임계치를 넘어 더 이상 쓰기가 불가능할때 읽기 전용 모드를 해제해야 합니다.

PUT _all/_settings
{
  "index.blocks.read_only_allow_delete": "false"
}