
Giới thiệu
Redis cảm giác rock solid khi mọi thứ khỏe. Thử thách thực sự bắt đầu khi có thứ gì đó break. Node crash, VM reboot, container biến mất, hoặc network issue isolate phần hệ thống.
Điều xảy ra tiếp theo phụ thuộc hoàn toàn vào cách replication và high availability được thiết kế. Nhiều teams giả định Redis tự động handle failures, nhưng không phải vậy. Redis cung cấp building blocks, không phải finished solution.
Replication và high availability giải quyết vấn đề khác nhau. Redis hỗ trợ cả hai, nhưng hiểu sự khác biệt là critical để xây dựng production systems resilient.
Redis Replication thực sự làm gì
Cốt lõi, Redis replication là về copy data từ node này sang nodes khác. Primary node, thường gọi là master, xử lý tất cả write operations. Một hoặc nhiều replica nodes nhận continuous stream of changes và giữ data in sync.
Replication tồn tại vì ba lý do chính: read scaling, failover readiness, và data redundancy. Tuy nhiên, replication đơn lẻ KHÔNG guarantee high availability. Nó chỉ cung cấp nguyên liệu cần thiết để xây dựng nó.
Replication hoạt động dưới capa như thế nào
Khi replica connect đến master, nó bắt đầu với initial synchronization process. Master tạo snapshot của data hiện tại và gửi cho replica. Replica load snapshot này vào memory.
Sau initial sync, master stream tất cả subsequent write commands đến replica. Replica apply các commands theo cùng thứ tự để stay consistent.
Cách tiếp cận này efficient và đơn giản, nhưng introduce important tradeoffs. Replication là asynchronous by default, nghĩa là luôn có một cửa sổ nhỏ data tồn tại trên master nhưng chưa trên replicas.
Asynchronous Replication và Risk Data Loss
Asynchronous replication cho phép Redis vẫn nhanh và responsive, nhưng cũng nghĩa là data loss có thể xảy ra nếu master fail.
Nếu master crash trước khi replicas nhận latest writes, những writes đó mất. Redis không cố gắng che giấu thực tế này. Với cache data, điều này thường chấp nhận được. Với critical state, có thể không.
Redis cung cấp options để làm replication strict hơn, nhưng stricter guarantees tăng latency và giảm availability. Quyết định bao nhiêu data loss chấp nhận được là quyết định kiến trúc then chốt.
Dùng Replicas để Scale Reads
Một lý do phổ biến dùng Redis replication là scale read traffic. Applications có thể direct write operations đến master và distribute read operations across replicas.
Điều này giảm tải trên master và cải thiện overall throughput. Tuy nhiên, vì replication async, replicas có thể trả về data hơi stale.
Cho use cases như caching profiles hoặc configuration, điều này thường ổn. Cho scenarios yêu cầu strong consistency, có thể không chấp nhận được. Teams phải làm tradeoff này intentionally.
Điều gì xảy ra khi Master Fail
Replication đơn lẻ không handle master failure. Khi master down, replicas vẫn in sync nhưng không được promote tự động без external failover mechanism.
High availability đòi hỏi thứ gì đó detect failures, coordinate decisions, và promote master mới. Đây là nơi failover systems vào chơi.
Redis Sentinel và High Availability
Redis Sentinel là giải pháp truyền thống thêm high availability cho Redis. Sentinel processes monitor Redis instances, detect failures, và communicate với nhau để đạt consensus.
Khi Sentinels đồng ý master down, một replica được promote thành master mới. Sentinels cũng notify clients để họ reconnect đến node đúng.
Sentinel giới thiệu additional components và complexity. Để effective, multiple Sentinel nodes phải chạy. Single Sentinel không đủ cho true high availability.
Sentinel quyết định Failover như thế nào
Sentinel dùng timeouts và quorum để tránh false failovers. Nhiều Sentinels phải đồng ý master unreachable trước khi promotion xảy ra.
Thiết kế này cải thiện reliability nhưng nghĩa là failover không instantaneous. Luôn có khoảng thời gian ngắn master unavailable và không có replacement active.
Applications phải được thiết kế handle window này gracefully. Retries, timeouts, và fallback behavior là essential.
Redis Cluster và Built-In High Availability
Redis Cluster tích hợp replication và failover trực tiếp vào hệ thống. Mỗi shard có master và replicas, và failover xảy ra tự động khi master fail.
Điều này loại bỏ cần Sentinel nhưng giới thiệu constraints khác. Key distribution, client behavior, và cross-shard operations yêu cầu careful design.
Redis Cluster đơn giản hóa high availability nhưng impose stricter architectural boundaries.
Failover KHÔNG nghĩa là Zero Downtime
Một misconception phổ biến là Redis failover guarantee zero downtime. Thực tế, failover nhanh nhưng không instantaneous.
Trong lúc failover, một số requests sẽ fail hoặc yêu cầu retries. Well-designed systems expect behavior này và recover gracefully. Poorly designed systems có thể crash hoặc trigger cascading failures.
High availability cải thiện resilience, không phải perfection.
Split Brain và Rủi ro
Split brain xảy ra khi nhiều hơn một node tin nó là master. Redis và Sentinel được thiết kế prevent điều này, nhưng network partitions và misconfigurations vẫn có thể gây ra.
Split brain có thể dẫn đến conflicting writes và data corruption. Giảm risk này yêu cầu proper Sentinel quorum, correct network setup, và sensible timeouts.
Bỏ qua các chi tiết này là nguyên nhân phổ biến của incidents hiếm nhưng severe.
Replication Lag và Performance Impact
Replication lag thường nhỏ nhưng không bao giờ zero. Dưới heavy write load, replicas có thể fall behind master.
Nếu failover xảy ra trong period high lag, data loss tăng. Monitoring replication lag là essential cho systems nơi data integrity matters.
Sudden increases in lag thường signal underlying performance hoặc resource issues.
Tại sao Replication KHÔNG phải Backup
Replication không nên nhầm lẫn với backup. Nếu data bị xóa trên master, deletion đó được replicate ngay lập tức.
Backups bảo vệ khỏi human error và logical corruption. Replication bảo vệ khỏi hardware hoặc process failure. Cả hai đều required nếu Redis lưu valuable data.
Common Redis HA Mistakes
Teams thường làm những sai lầm giống nhau khi design Redis high availability. Bao gồm: giả định replication equals high availability, chạy chỉ một Sentinel, bỏ qua replication lag, không test failover, và cho applications crash trên Redis errors.
Những sai lầm này xuất hiện lặp lại trong real-world outage reports.
Testing Failure như một phần của Design
High availability chưa từng được tested chỉ tồn tại trên giấy. Teams nên regularly simulate failures bằng cách stop master trong controlled environment.
Quan sát failover behavior, measure recovery time, và hiểu application response cung cấp insights quý giá mà no documentation có thể replace.
Practical Mental Model cho Redis HA
Redis high availability là về graceful degradation. Khi Redis khỏe, system perform tốt. Khi Redis unhealthy, performance có thể degrade. Khi Redis unavailable, system vẫn nên survive.
Nếu Redis down gây total system outage, high availability là incomplete.
Tóm tắt
Redis replication và high availability định hình cách systems behave under stress. Replication cung cấp copies của data, trong khi high availability cung cấp continuity of service.
Cả hai yêu cầu careful design, realistic expectations, và continuous testing. Khi implement đúng, Redis failures trở thành routine events thay vì major incidents. Đó là mục tiêu của Redis high availability.