유용한 Redis 운영 및 유지 관리 도구 공유

이 글에서는 운영 상태, 데이터 마이그레이션, 클러스터 관리를 모니터링하는 방법을 알아볼 수 있는 몇 가지 유용한 Redis 운영 및 유지 관리 도구를 공유하겠습니다.

Redis를 적용하다 보면 Redis 실행 상태 모니터링, 데이터 마이그레이션, 마스터-슬레이브 클러스터 배포 및 운영, 클러스터 슬라이싱 등 운영 및 유지 관리 작업에 자주 직면하게 됩니다. 다음으로 이 세 가지 측면에서 몇 가지 도구를 소개하겠습니다. 먼저 Redis의 실시간 실행 상태를 모니터링하는 도구에 대해 알아보겠습니다. 이러한 도구는 모두 Redis에서 제공하는 모니터링 명령인 INFO를 사용합니다. [관련 권장사항: Redis 동영상 튜토리얼]

가장 기본적인 모니터링 명령: INFO 명령

Redis 자체에서 제공하는 INFO 명령은 풍부한 인스턴스 실행 모니터링 정보를 반환합니다. 이 명령은 Redis 모니터링 도구의 기초입니다.

INFO 명령을 사용할 때 매개변수 섹션을 사용할 수 있습니다. 이에 따라 INFO 명령은 다양한 유형의 모니터링 정보를 반환합니다. INFO 명령으로 반환되는 정보를 크게 5가지로 분류합니다. 일부 범주에는 다음 표와 같이 다양한 모니터링 내용이 포함되어 있습니다.

Redis의 실행 상태를 모니터링할 때 INFO 명령으로 반환되는 결과는 매우 다양합니다. 유용한. . INFO 명령어의 모든 매개변수가 반환하는 결과의 자세한 의미를 알고 싶다면 Redis공식 홈페이지 소개를 확인하시면 됩니다. 여기서는 작동 및 유지 관리 시 주의해야 할 몇 가지 매개 변수와 중요한 반환 결과를 알려 드리겠습니다.

우선, 단일 인스턴스를 실행하든 클러스터를 실행하든 명령 실행을 포함하는 4개의 매개변수 stat, commandstat, cpu 및 memory의 반환 결과에 집중하는 것이 좋습니다(예: 명령 실행 시간 및 실행 시간, 명령에 사용된 CPU 리소스), 메모리 리소스 사용량(예: 메모리 사용량, 메모리 조각화 비율), CPU 리소스 사용량 등을 확인하는 데 도움이 됩니다. 사례.

또한 RDB 또는 AOF 기능을 활성화할 때 지속성 매개변수의 반환 결과에 집중해야 하며 이를 통해 RDB 또는 AOF의 실행 상태를 볼 수 있습니다.

마스터-슬레이브 클러스터를 사용하는 경우 마스터-슬레이브 동기화의 실시간 상태가 포함된 복제 매개변수의 반환 결과에 집중해야 합니다.

그러나 INFO 명령은 모니터링 결과를 텍스트 형식으로만 제공하며 시각화되지 않습니다. 따라서 실제 응용 프로그램에서는 일부 타사 오픈 소스 도구를 사용하여 INFO 명령에서 반환된 결과를 시각화할 수도 있습니다. 다음으로 Redis 통계 결과를 플러그인을 통해 시각화할 수 있는 Prometheus에 대해 말씀드리겠습니다.

Prometheus용 Redis 내보내기 모니터링

Prometheus은 오픈 소스 시스템 모니터링 및 경보 프레임워크입니다. 핵심 기능은 모니터링되는 시스템에서 모니터링 데이터를 가져와 시각적 표시를 위해 Grafana 도구와 결합하는 것입니다. 또한, 모니터링 데이터를 시계열 데이터베이스에 저장하여 운영 및 유지보수 담당자가 이력 조회를 용이하게 할 수 있습니다. 동시에 Prometheus는 시스템의 모니터링 지표가 미리 설정된 임계값을 초과하는지 여부를 감지합니다. 임계값이 초과되면 Prometheus는 경보를 트리거합니다.

이러한 기능은 시스템의 일상적인 운영 및 유지 관리에 매우 중요합니다. Prometheus는 이러한 기능을 사용하기 위한 도구 프레임워크를 구현했습니다. 모니터링되는 시스템에서 모니터링 데이터를 얻을 수 있는 한 Prometheus를 사용하여 운영 및 유지 관리 모니터링을 구현할 수 있습니다.

Prometheus는 시스템을 모니터링하는 플러그인 기능만 제공합니다. 우리는 플러그인 내보내기를 호출합니다. 각 내보내기는 실제로 모니터링 데이터를 수집하는 구성 요소입니다. 수출자가 수집한 데이터 형식은 Prometheus의 요구 사항을 충족합니다. Prometheus가 데이터를 얻은 후 표시하고 저장할 수 있습니다.

Redis-exporter는 Redis를 모니터링하는 데 사용됩니다. INFO 명령으로 모니터링되는 실행 상태와 다양한 통계 정보를 시각적 표시 및 알람 설정을 위해 Prometheus에 제공합니다. 현재 Redis-exporter는 Redis 버전 2.0~6.0을 지원할 수 있으며 광범위한 애플리케이션을 보유하고 있습니다.

Redis 인스턴스의 실행 상태를 얻는 것 외에도 Redis-exporter는 check-keys 명령줄 옵션을 사용하여 키-값 쌍의 크기와 컬렉션 유형 데이터의 요소 수를 모니터링할 수도 있습니다. Redis-exporter를 실행할 때.

또한 Lua 스크립트를 개발하여 필요한 모니터링 데이터 수집을 맞춤 설정할 수 있습니다. 그런 다음 비즈니스 계층의 다양한 모니터링 요구 사항을 충족하기 위해 스크립트 명령줄 옵션을 사용하여 Redis-exporter가 이 특정 스크립트를 실행할 수 있도록 합니다.

마지막으로 redis-stat 및 Redis Live라는 두 가지 가젯을 더 공유하고 싶습니다. Redis-exporter와 비교하면 이 두 가지는 가벼운 모니터링 도구입니다. 각각 Ruby와 Python으로 개발되었으며 INFO 명령을 통해 제공되는 인스턴스 실행 상태 정보도 시각적으로 표시합니다. 이 두 도구는 현재 거의 업데이트되지 않지만 자체 Redis 모니터링 도구를 개발하려는 경우 좋은 참고 자료가 됩니다.

Redis의 실행 상태를 모니터링하는 것 외에도 또 다른 일반적인 운영 및 유지 관리 작업은 데이터 마이그레이션입니다. 다음으로 데이터 마이그레이션 도구에 대해 알아 보겠습니다.

데이터 마이그레이션 도구 Redis-shake

때때로 서로 다른 인스턴스 간에 데이터를 마이그레이션해야 하는 경우가 있습니다. 현재 가장 일반적으로 사용되는 데이터 마이그레이션 도구 중 하나는 Redis-shake입니다. 이는 Alibaba Cloud Redis 및 MongoDB 팀이 Redis 데이터 동기화를 위해 개발한 도구입니다.

Redis-shake의 기본 작동 원리는 Redis 인스턴스를 시뮬레이션하는 Redis-shake 프로세스를 먼저 시작하는 것입니다. 그런 다음 Redis-shake 프로세스와 데이터가 마이그레이션되는 원본 인스턴스가 전체 데이터 동기화를 수행합니다.

이 프로세스는 Redis 마스터-슬레이브 인스턴스의 전체 동기화와 유사합니다.

소스 인스턴스는 메인 라이브러리에 해당하고 Redis-shake는 슬레이브 라이브러리에 해당합니다. 소스 인스턴스는 먼저 RDB 파일을 Redis-shake로 전송하고 Redis-shake는 RDB 파일을 대상 인스턴스로 보냅니다. 그런 다음 소스 인스턴스는 증분 명령을 Redis-shake로 보내고 Redis-shake는 이러한 증분 명령을 대상 인스턴스에 동기화하는 역할을 담당합니다.

다음 그림은 Redis-shake의 데이터 마이그레이션 프로세스를 보여줍니다.

Redis-shake의 가장 큰 장점 중 하나는 다양한 유형의 마이그레이션을 지원한다는 것입니다.

우선, 단일 인스턴스 간 데이터 마이그레이션과 클러스터 간 데이터 마이그레이션을 모두 지원합니다.

두 번째로 일부 Redis 슬라이싱 클러스터(예: Codis)는 프록시를 사용하여 요청 작업을 수신하며 Redis-shake는 프록시를 통한 데이터 마이그레이션도 지원합니다.

또한 Redis-shake는 Alibaba Cloud 팀에서 개발했기 때문에 오픈 소스 Redis 버전을 지원할 뿐만 아니라 Redis-shake는 클라우드 하의 Redis 인스턴스와 클라우드 상의 Redis 인스턴스 마이그레이션도 지원합니다. Redis 서비스를 클라우드로 이동하려는 목표를 달성하는 데 도움이 될 수 있습니다.

데이터 마이그레이션 후에는 일반적으로 원본 인스턴스와 대상 인스턴스의 데이터가 일치하는지 비교해야 합니다. 일치하지 않는 데이터가 있는 경우 해당 데이터를 찾아서 대상 인스턴스에서 제거하거나 일치하지 않는 데이터를 다시 마이그레이션해야 합니다.

여기에서는 Alibaba Cloud 팀에서 개발한 또 다른 데이터 일관성 비교 도구인 Redis-full-check을 소개하겠습니다.

Redis-full-check의 작동 원리는 매우 간단합니다. 즉, 원본 인스턴스와 대상 인스턴스의 데이터를 완전히 비교하여 데이터 검증을 완료하는 것입니다. 그러나 데이터 검증의 비교 오버헤드를 줄이기 위해 Redis-full-check에서는 다중 라운드 비교 방법을 사용합니다.

1차 검증에서 Redis-full-check는 원본 인스턴스의 모든 키를 찾은 다음 비교를 위해 원본 인스턴스와 대상 인스턴스에서 해당 값을 찾습니다. 첫 번째 비교 후 redis-full-check는 원본 인스턴스와 일치하지 않는 대상 인스턴스의 데이터를 sqlite 데이터베이스에 기록합니다.

2차 검증부터 Redis-full-check는 이전 라운드 종료 후 데이터베이스에 기록된 불일치 데이터만 비교합니다.

인스턴스의 정상적인 요청 처리에 영향을 주지 않기 위해 Redis-full-check는 각 비교 라운드 후 일정 기간 동안 일시 중지됩니다. Redis-shake 증분 동기화가 진행됨에 따라 원본 인스턴스와 대상 인스턴스의 불일치 데이터가 점차 감소하므로 여러 차례의 확인 및 비교가 필요하지 않습니다.

비교 횟수를 직접 설정할 수 있습니다. 구체적인 방법은 매개변수 Comparetimes의 값을 redis-full-check 명령을 실행할 때 비교하려는 라운드 수로 설정하는 것입니다.

모든 라운드의 비교가 완료된 후 데이터베이스에 기록된 데이터는 원본 인스턴스와 대상 인스턴스 간의 최종 차이 결과가 됩니다.

여기서 주의할 점이 있습니다. Redis-full-check는 Comparemode 매개변수를 통해 설정할 수 있는 세 가지 비교 모드를 제공합니다. Comparemode 매개변수에는 세 가지 값이 있으며 그 의미는 다음과 같습니다.

• KeyOutline은 키 값이 같은지 여부만 비교합니다.
• ValueOutline은 값 값의 길이가 같은지 여부만 비교합니다. 키 값, 값 길이, 값 값이 같습니다.
• Redis-full-check를 적용할 때 데이터 일관성에 대한 비즈니스 요구 사항에 따라 해당 비교 모드를 선택할 수 있습니다. 일관성 요구 사항이 높으면 Comparemode 매개 변수를 FullValue로 설정합니다.

자, 마지막으로 Redis 클러스터 운영 및 유지 관리 도구인 CacheCloud를 소개하겠습니다.

클러스터 관리 도구 CacheCloud

CacheCloud는 Redis 운영 및 유지 관리를 위해 Sohu에서 개발한 클라우드 플랫폼입니다. 마스터-슬레이브 클러스터, Sentinel 클러스터 및 Redis 클러스터의 자동 배포 및 관리를 구현합니다. 플랫폼의 관리 인터페이스에서 작동합니다.

일반적인 클러스터 운영 및 유지 관리 요구 사항에 대해 CacheCloud는 5가지 운영 및 유지 관리 작업을 제공합니다.

• 오프라인 인스턴스: 인스턴스 및 인스턴스 관련 모니터링 작업을 종료합니다.
• 온라인 인스턴스: 오프라인 인스턴스를 다시 시작하고 모니터링합니다.
• 슬레이브 노드 추가: 마스터-슬레이브 클러스터의 마스터 노드에 슬레이브 노드를 추가합니다.
• 장애 조치: Redis 클러스터 마스터 및 슬레이브 노드의 장애 조치를 수동으로 완료합니다.
• 구성 관리: 사용자가 구성 수정을 위해 작업 주문을 제출하면 관리자가 이를 검토하고 구성 수정을 완료합니다.

물론, CacheCloud는 운영 및 유지 관리 플랫폼으로서 운영 및 유지 관리 업무뿐만 아니라 풍부한 모니터링 정보도 제공합니다.

CacheCloud는 시각적 표시를 위해 INFO 명령으로 제공되는 인스턴스의 실시간 실행 상태 정보를 수집할 뿐만 아니라 메모리 사용량, 클라이언트 연결 수, 키 등 인스턴스의 실행 상태 정보도 저장합니다. 값 쌍 데이터 볼륨. 이를 통해 Redis 운영에 문제가 발생할 경우, 운영 및 유지보수 담당자는 저장된 이력 기록을 조회하고, 당시의 운영 상태 정보를 기반으로 분석을 수행할 수 있다.

Redis 인스턴스 관리와 관련된 작업을 중앙에서 호스팅하기 위한 통합 플랫폼을 원한다면 CacheCloud가 좋은 도구입니다.

요약

이번 강의에서는 여러 Redis 운영 및 유지 관리 도구를 소개했습니다.

먼저 Redis의 INFO 명령에 대해 알아봤습니다. 이 명령은 모니터링 도구의 기초가 되며, 모니터링 도구는 INFO 명령에서 제공하는 정보를 기반으로 2차 처리를 수행합니다. 또한 Redis의 실시간 실행 상태를 모니터링하기 위한 세 가지 운영 및 유지 관리 도구인 Redis-exporter, redis-stat 및 Redis Live를 배웠습니다.

데이터 마이그레이션과 관련하여 Redis-shake 도구를 사용하거나 RDB 파일 또는 AOF 파일을 통해 마이그레이션할 수 있습니다.

Redis를 운영하고 유지 관리할 때 방금 언급한 많은 오픈 소스 도구는 이미 우리의 많은 요구 사항을 충족할 수 있습니다. 그러나 때로는 비즈니스 라인에 따라 Redis 운영 및 유지 관리에 대한 요구 사항이 다를 수 있으며, 기성 오픈 소스 도구를 직접 사용하는 것만으로는 모든 요구 사항을 충족하지 못할 수 있습니다. 이 경우 2차 개발이나 자체 조사를 수행하는 것이 좋습니다. 오픈 소스 도구를 기반으로 하여 비즈니스 사용 요구 사항을 더 잘 충족합니다.

더 많은 프로그래밍 관련 지식을 보려면 프로그래밍 소개를 방문하세요! !

위 내용은 유용한 Redis 운영 및 유지 관리 도구 공유의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!