샤딩된 클러스터 밸런서

클러스터에서 샤드 추가 및 제거하기

클러스터에 샤드를 추가하면 새 샤드에는 데이터가 없기 때문에 불균형이 발생합니다. MongoDB는 새 샤드로 데이터를 즉시 마이그레이션하기 시작하지만 클러스터가 밸런싱되기까지 다소 시간이 걸릴 수 있습니다. 클러스터에 샤드를 추가하는 방법에 대한 지침은 클러스터에 샤드 추가 자습서를 참조하세요.

클러스터에서 샤드를 제거하면 해당 샤드에 있는 데이터가 클러스터 전체에 재분배되어야 하므로 비슷한 불균형이 발생합니다. MongoDB는 제거된 샤드를 즉시 비우기 시작하지만 클러스터가 균형을 이루기까지는 다소 시간이 걸릴 수 있습니다. 이 프로세스 중에 제거된 샤드와 연결된 서버를 종료 하지 마십시오 .

청크 분포가 균일하지 않은 클러스터에서 샤드를 제거하면 밸런서는 먼저 드레이닝 샤드에서 청크를 제거한 다음 나머지 불균등 청크 분포를 조정합니다.

클러스터에서 샤드를 안전하게 제거하는 방법에 대한 지침은 클러스터에서 샤드 제거 튜토리얼을 참조하세요.

마이그레이션 임계값

밸런싱이 클러스터에 미치는 영향을 최소화하기 위해 밸런서는 샤딩된 컬렉션의 데이터 분배가 특정 임계값에 도달한 후에만 밸런싱을 시작합니다.

해당 컬렉션의 샤드 간 데이터 차이가 컬렉션에 대해 구성된 범위 크기의 3배 미만인 경우 컬렉션이 균형 잡힌 것으로 간주됩니다. 기본 범위 크기인 128MB 의 경우 마이그레이션을 수행하려면 샤드 두 개에 주어진 컬렉션의 데이터 크기 차이가 384MB 이상이어야 합니다.

비동기 범위 마이그레이션 정리

샤드에서 데이터를 마이그레이션하기 위해 밸런서는 한 번에 한 범위씩 데이터를 마이그레이션합니다. 하지만 밸런서는 다음 범위 마이그레이션을 시작하기 전에 현재 마이그레이션의 삭제 단계가 완료될 때까지 기다리지 않습니다. 범위 마이그레이션 프로세스 및 삭제 단계는 범위 마이그레이션을 참조하세요.

이 큐 동작은 사전 분할 없이 초기 데이터 로드를 수행할 때나 새 샤드를 추가할 때와 같이 클러스터의 불균형이 심한 경우 샤드가 데이터를 더 빠르게 언로드할 수 있게 해줍니다.

이 동작은 moveRange 명령에도 영향을 미치므로 moveRange 명령을 사용하는 마이그레이션 스크립트가 더 빠르게 진행될 수 있습니다.

경우에 따라 삭제 단계가 더 오래 지속될 수 있습니다. 삭제 단계 중 장애 조치가 발생하는 경우 복원력이 향상되도록 범위 마이그레이션이 향상되었습니다. 이 단계에서 복제본 세트의 기본이 충돌하거나 다시 시작되는 경우에도 고아 문서가 정리됩니다.

_waitForDelete 분산 장치 설정은 현재 마이그레이션의 삭제 단계가 다음 청크 마이그레이션의 시작을 차단하도록 동작을 변경할 수 있습니다. _waitForDelete은 일반적으로 내부 테스트 용도로 사용됩니다. 자세한 내용은 삭제 대기를 참조하세요.

범위 마이그레이션 및 복제

범위 마이그레이션 시 _secondaryThrottle 값은 범위 내의 다음 문서로 마이그레이션이 진행되는 시기를 결정합니다.

config.settings 컬렉션에서:

• 밸런서의 _secondaryThrottle 설정이 쓰기 고려 (write concern)로 설정된 경우 범위 마이그레이션 중 이동된 각 문서는 다음 문서로 진행하기 전에 요청된 승인을 받아야 합니다.

• _secondaryThrottle 설정이 설정되지 않은 경우 마이그레이션 프로세스는 보조 문서로의 복제를 기다리지 않고 대신 다음 문서를 계속 진행합니다.

밸런서의 _secondaryThrottle 파라미터를 업데이트하려면 예를 들어 보조 스로틀을 참조하세요.

_secondaryThrottle 설정과 관계없이 범위 마이그레이션의 특정 단계에는 다음과 같은 복제 정책이 있습니다.

• MongoDB는 범위 위치로 구성 서버를 업데이트하기 전에 소스 샤드에서 마이그레이션되는 컬렉션에 대한 모든 애플리케이션 읽기 및 쓰기를 잠시 일시 중지합니다. MongoDB는 업데이트 후 애플리케이션 읽기 및 쓰기를 재개합니다. 범위 이동을 위해서는 범위 이동을 구성 서버로 커밋하기 전과 후에 복제본 세트 구성원의 과반수가 모든 쓰기를 승인해야 합니다.

• 나가는 마이그레이션이 완료되고 정리가 발생하면 모든 쓰기가 대다수의 서버에 복제되어야 다른 나가는 마이그레이션에서 추가 정리 또는 새로 들어오는 마이그레이션을 진행할 수 있습니다.

3} 컬렉션에서 _secondaryThrottle 설정을 config.settings 업데이트하려면 보조 스로틀의 예를 참조하세요.

마이그레이션할 범위당 최대 문서 수

기본적으로 MongoDB는 범위 내의 문서 수가 구성된 범위 크기를 평균 문서 크기로 나눈 결과의 2배보다 크면 범위를 이동할 수 없습니다. MongoDB가 청크의 하위 범위를 이동하여 크기를 그 이하로 줄일 수 있는 경우, 밸런서는 범위를 마이그레이션하는 방식으로 이를 수행합니다. db.collection.stats()에는 컬렉션의 avgObjSize 평균 문서 크기를 나타내는 필드가 포함되어 있습니다.

너무 커서 마이그레이션할 수 없는 청크의 경우:

• 밸런서 설정 attemptToBalanceJumboChunks를 사용하면 청크에 점보 레이블이 지정되지 않은 한 밸런서가 이동하기에는 너무 큰 청크를 마이그레이션할 수 있습니다. 자세한 내용은 크기 제한을 초과하는 밸런스 범위를 참조하십시오.

  moveRange 및 moveChunk 명령을 발행할 때, forceJumbo 옵션을 지정하여 너무 커서 이동할 수 없는 범위의 마이그레이션을 허용할 수 있습니다. 범위는 점보로 표시되거나 표시되지 않을 수 있습니다.

범위 삭제 성능 튜닝

2} ,rangeDeleterBatchSizerangeDeleterBatchDelayMS, 매개 rangeDeleterHighPriority 변수를 사용하여 범위 삭제가 성능에 미치는 영향을 조정할 수 있습니다. 예시:

• 일괄 처리당 삭제되는 문서 수를 제한하려면 rangeDeleterBatchSize를 32과 같은 작은 값으로 설정하면 됩니다.

• 일괄 삭제 사이에 지연 시간을 추가하려면 현재 기본값인 20 밀리초보다 rangeDeleterBatchDelayMS초 더 길게 설정하면 됩니다.

• 범위 삭제의 우선 순위를 지정하려면 rangeDeleterHighPriority ~ true 를 설정할 수 있습니다. 범위 삭제는 시스템 부하가 심할 때 사용자 작업 처리량에 부정적인 영향을 미칠 수 있는 장기 실행 백그라운드 작업일 수 있습니다.

Change Streams 및 고아 문서

MongoDB 5.3부터는 범위 마이그레이션 중에 고아 문서에 대한 업데이트에 대한 변경 스트림 이벤트가 생성되지 않습니다.