Computer >> Hướng Dẫn Máy Tính >  >> Lập Trình >> Redis

Công cụ toàn diện phân tích file Redis RDB

Bối cảnh

Khi sử dụng Redis, đôi khi gặp vấn đề như bộ nhớ quá đầy hoặc băng thông đầy. Cần phân tích bộ nhớ Redis. Có 2 loại phân tích: online (kết nối trực tiếp Redis server, tăng tải, có thể ảnh hưởng ổn định) và offline (dựa trên file backup RDB, không ảnh hưởng server). Khuyên dùng offline khi memory > 2GB.

Hai công cụ open source nổi tiếng: redis-rdb-tools (Python) và rdr (Golang). Nếu developer không rành 2 ngôn ngữ này, mở rộng tính năng sẽ khó. Bài viết giới thiệu công cụ offline analysis mới viết bằng C# - dễ dàng mở rộng cho C# developer.

rdb-tools

rdb-tools là công cụ parse/analyze Redis RDB files được viết bằng C#.

Gồm 2 phần:

  • Thư viện parser (parser library) - có thể tùy chỉnh.
  • CLI tool phân tích (analysis cli tool) - phân tích các usage cơ bản qua command line.

Parser library dựa trên net6.0 → dễ dàng mở rộng. CLI tool cũng dựa trên net6.0, build bằng command-line-api, có thể đóng gói thành binary không phụ thuộc runtime.

Cách dùng CLI tool

2 cách cài đặt rdb-cli:

  1. Chưa cài .NET 6.0 SDK: tải tool từ latest stable release phù hợp OS.
  2. Đã cài .NET 6.0 SDK: chạy dotnet tool install --global rdb-cli.

Để minh họa cách 1: Sau khi tải và giải nén, có file thực thi rdb-cli.

Chạy ./rdb-cli -h xem help.

Công cụ toàn diện phân tích file Redis RDB

Có 2 command, quan trọng nhất là memory.

Công cụ toàn diện phân tích file Redis RDB

Cần chỉ định file RDB và các option.

Ví dụ phổ biến:

./rdb-cli memory /tmp/test/demo.rdb -ot html

Lệnh phân tích file RDB, xuất kết quả dạng HTML.

Thực thi chỉ mất 32 giây phân tích file RDB 2.1GB - tốc độ khá nhanh.

Công cụ toàn diện phân tích file Redis RDB

Báo cáo HTML chi tiết tại /tmp/test/res.html

Công cụ toàn diện phân tích file Redis RDB Công cụ toàn diện phân tích file Redis RDB Công cụ toàn diện phân tích file Redis RDB Công cụ toàn diện phân tích file Redis RDB

Kết quả HTML gồm 3 phần:

  1. Thông tin cơ bản: RDB version, Redis version, total memory, total keys.
  2. Histogram: phân bố memory và quantity theo data type, expiration time.
  3. Bảng: top key prefix, top big key, top stream, function list (Redis 7.0).

Nếu muốn lọc điều kiện, dùng các tham số:

1. Chỉ phân tích DB 9 và DB 10:

./rdb-cli memory /tmp/test/demo.rdb -ot html --db 9 --db 10

2. Chỉ phân tích type hash và string:

./rdb-cli memory /tmp/test/demo.rdb -ot html --type string --type hash

Tham khảo phân tích file RDB 2-8GB:

Công cụ toàn diện phân tích file Redis RDB

CLI tool có thể không hoàn toàn phù hợp nhu cầu. Lúc này có thể tùy chỉnh dựa trên parser library.

Cách dùng parser library

Cài package RDBParse từ NuGet:

dotnet add package RDBParse

Thêm class implement interface IReaderCallback.

Tạo instance class BinaryReaderRDBParser.

Gọi method Parse của instance BinaryReaderRDBParser.

Ví dụ code:

public class MyReaderCallBack : IReaderCallback { }
var path = "/yourpath/your.rdb"
var cb = new MyReaderCallBack();
var parser = new RDBParser.BinaryReaderRDBParser(cb);
parser.Parse(path);

Tóm tắt

Bài viết giới thiệu công cụ phân tích RDB dựa trên C#, hiểu cách dùng cơ bản và cách tùy chỉnh.

Hy vọng giúp ích cho bạn!

Tham khảo

  • rdb-tools github page
  • rdb.c of redis
  • rdr github page
  • redis-rdb-tools github page