Elasticsearch 와 RDB용어 차이

ES가 빠른 이유 ‘역색인’을 해서

샤드
샤드는 Elasticsearch에서데이터를 분산 저장하는 방법으로,갹 샤드는 독립적인 "인덱스"라고 할 수 있으며 자체적으로 검색 가능하다.(Kafka와 파티션과 같은 의미)
샤딩(sharding)은대용량 데이터를 여러 노드에 분산시켜 저장하고 처리하는 데 필요하며, 이로써 성능 향상과 확장성 등의 장점을 얻을 수 있다.
예를 들어 1TB 크기의 데이터가 있는데 단일 노드에서 다루기 어렵다면 이를 5개 샤드로 나누면 각각 200GB 크기의 작은 단위로 처리할 수 있게 되므로 성능 향상 및 관리 효율성 등이 올라간다.
단일 Elasticsearch 클러스터 내에서 샤딩된 각 부분은 서로 다른 노드에 위치할 수 있으므로한 노드가 실패해도 다른 노드에서 해당 샤드와 연관된 작업을 계속 진행할 수 있다는 장점도 있다. 하지만샤드의 개수만큼 cpu의 스레드를 사용 하기 때문에 샤드의 개수가 많아질수록 리소스를 많이 잡아먹게된다.그렇기 때문에데이터에 맞춰 샤드 개수를 적절히 설정해야 한다
레플리카
데이터 손실 방지와 검색 성능 향상을 위해 샤드가 복제될 수 있다.복제본(replica shard)은 원래 샤드에 대한 복사본이며, 원래 샤드(primary shard)가 실패할 경우 자동으로 대체될 수 있다.
출처:
https://hstory0208.tistory.com/entry/ELK-ElasticSearch란-ELK란-장단점-RDB와-차이
[< Hyun / Log >:티스토리]
실제 우리 코드
{
"settings": {
"index": {
"number_of_shards": 1,21
"number_of_replicas": 1
}
},
"mappings": {
"properties": {
"article_id": {
"type": "long"
},
"title": {
"type": "keyword",
"fields": {
"keyword": {
"type": "keyword",
"ignore_above": 256
}
}
},
"content": {
"type": "text",
"fields": {
"keyword": {
"type": "keyword",
"ignore_above": 10000
}
}
},
"image_url": {
"type": "text",
"fields": {
"keyword": {
"type": "keyword",
"ignore_above": 256
}
}
}
}
}
}