Redis 메모리 조각을 정리하는 방법

Redis 메모리 조각화란 무엇인가요?

운영 체제의 전체 남은 공간은 충분하지만 N바이트의 연속 주소로 공간을 신청할 경우 남은 메모리 공간 중 N바이트의 연속 공간이 없습니다. , N 바이트 미만의 연속 공간이 없습니다. 메모리 공간은 메모리 조각화입니다.

Redis 메모리 조각화는 어떻게 형성되나요?

메모리 조각화 형성에는 내부 및 외부 이유가 있습니다:

• 내부 원인: 메모리 할당자의 할당 전략에 따라 운영 체제가 "요청 시 할당"을 달성할 수 없다고 결정됩니다.

• Redis는 메모리 할당을 위해 libc, jemalloc, tcmalloc을 사용하며 기본적으로 jemalloc을 사용합니다.

• 메모리 할당자는 애플리케이션에서 요청한 메모리 크기 전체가 아닌 고정된 크기에 따라 메모리 공간을 할당합니다.

• jemalloc을 예로 들면, 8바이트, 16바이트, 32바이트,..., 2KB, 4KB 등 일련의 고정된 크기에 따라 메모리 공간을 나눕니다. Jemalloc은 프로그램이 요청한 메모리에 가장 가까운 고정된 크기의 공간을 할당합니다.

• 외부 이유: 키-값 쌍의 크기가 다르며, 키-값 쌍은 수정 및 삭제될 수 있습니다.

• Redis가 메모리 공간 할당을 적용할 때, 다양한 크기의 메모리 공간 요구 사항에 대해 메모리 할당자는 고정된 크기에 따라 메모리 공간을 할당합니다. 일반적으로 할당된 메모리 공간은 적용된 메모리 공간보다 큽니다. 문제. 메모리 조각화.

• 키-값 쌍이 수정 및 삭제되어 공간 확장 및 출시로 이어질 예정입니다.

Redis에 메모리 조각화가 있는지 확인하는 방법은 무엇입니까?

DAS는 Redis에서 제공하는 INFO 명령어를 통해 메모리 사용량에 대한 자세한 정보를 조회한다. 명령어는 다음과 같다.

INFO memory
# Memory
used_memory:350458970752
used_memory_human:326.39G
used_memory_rss:349066919936
used_memory_rss_human:325.09G
…
mem_fragmentation_ratio:1.00

• used_memory: Redis가 데이터를 저장하기 위해 실제로 적용한 메모리 공간을 나타낸다.

• used_memory_rss: 운영 체제에서 실제로 Redis에 할당한 물리적 메모리 공간을 나타내며 여기에는 메모리 공간 조각도 포함됩니다.

• mem_fragmentation_ratio는 Redis의 현재 메모리 조각화 속도를 나타냅니다. 계산 공식: mem_fragmentation_ratio=used_memory_rss/used_memory

• mem_fragmentation_ratio는 1보다 크거나 같고 1.5보다 작거나 같습니다.

• mem_fragmentation_ratio가 1.5보다 크면 메모리 조각화 비율이 50%를 초과했음을 나타냅니다.

메모리 조각을 정리하는 방법은 무엇입니까?

"간단하고 조잡한" 방법은 Redis 인스턴스를 다시 시작하는 것입니다. 그러나 이 방법은 두 가지 결과를 가져옵니다.

• Redis의 데이터가 지속되지 않으면 데이터가 손실됩니다.

• Redis 데이터의 지속 여부에 관계없이 AOF 또는 RDB를 사용하여 복원해야 합니다. 복구 시간은 AOF 또는 RDB 파일의 크기에 따라 다릅니다. 그리고 Redis 인스턴스가 하나만 있는 경우 복구 단계에서 서비스를 제공할 수 없습니다.

그럼 더 좋은 방법은 없을까요? 예, 버전 4.0-RC3부터 Redis 자체는 메모리 조각을 자동으로 정리하는 방법을 제공합니다.

메모리 조각 자동 청소

메모리 조각화 청소는 간단히 말해서 "길을 만들기 위해 이동하고 공간을 병합하는 것"입니다.

연속적인 메모리 공간을 여러 개의 불연속적인 공간으로 나누는 데이터가 있으면 운영체제는 해당 데이터를 다른 장소로 복사하게 되고, 원래의 불연속적인 메모리 공간은 연속적인 메모리 공간이 됩니다.

그러나 조각 모음에는 비용이 듭니다. 여러 데이터 복사본을 새 위치로 이동하고 원래 공간을 확보하는 것은 운영 체제에서 수행해야 하는 작업이지만 이 프로세스에는 시간이 걸립니다. 또한 데이터 복사 시 Redis가 차단되어 성능이 저하됩니다.

이 문제를 완화하는 방법은 무엇입니까?

Redis는 특히 자동 메모리 조각화 정리 메커니즘에 대한 매개변수 설정을 제공합니다. 조각화 정리의 시작 및 종료 시점과 CPU 점유 비율을 제어하는 ​​매개변수를 설정하여 조각화 정리가 Redis 요청 처리에 미치는 성능 영향을 줄일 수 있습니다.

먼저 자동 메모리 조각화 정리를 켭니다:

config set activedefrag yes
그런 다음 메모리 정리를 트리거하는 조건을 설정합니다:

• active-defrag-ignore-bytes 100mb: 메모리 바이트 수가 조각화가 100MB에 도달하면 정리 시작;

• active-defrag-threshold-lower 10: 메모리 조각화 공간이 운영 체제에서 Redis에 할당한 전체 공간의 10%를 차지하면 정리가 시작됨을 나타냅니다.

마지막으로 청소 작업에 사용되는 CPU 시간 비율의 상한과 하한을 제어합니다.

• active-defrag-cycle-min 25: 자동 청소 프로세스에 사용되는 CPU 시간 비율이 25% 이상, 청소가 정상적으로 수행되도록 합니다.

• active-defrag-cycle-max 75: 자동 청소 프로세스에 사용되는 CPU 시간의 비율이 75%보다 높지 않음을 나타냅니다. 이를 초과하면 정리가 중지되므로 정리 중에 Redis를 차단하는 많은 수의 메모리 복사본이 방지되어 응답 지연 시간이 늘어납니다.

위 내용은 Redis 메모리 조각을 정리하는 방법의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!