Arhitektūra

Redis Sentinel: kā iestatīt augstu pieejamību, kas tiešām pārslēdzas

Redis Sentinel dod Redis bez klastera automātisku pārslēgšanos, bet tikai tad, ja kvorums, izvietojums, klienti un replikācija ir iestatīti, domājot par atteicēm. Lūk, strādājoša konfigurācija, ko kvorums patiesībā nozīmē, kā pazūd rakstītie dati un kas mainās ar lielām datu kopām.

· 13 min lasīšanai · AG Data komanda

Redis Sentinel ir iebūvētā augstas pieejamības sistēma Redis, kas nedarbojas Cluster režīmā. Sentinel procesu grupa uzrauga master un tā replikas, vienojas, kad master nav pieejams, paaugstina repliku un pasaka klientiem, kur ir jaunais master. Tas strādā labi, bet lielākā daļa ar to saistīto avāriju, ko redzam, rodas no uzstādījumiem, kas nekad nav testēti ar īstu atteici.

Ko Sentinel dara un ko nedara

Saskaņā ar Sentinel dokumentāciju Sentinel veic četrus darbus: uzraudzību, paziņojumus, automātisku pārslēgšanos un konfigurācijas nodrošināšanu, tāpēc klienti jautā Sentinel pašreizējā master adresi, nevis to iekodē. Tas nesadala datus un nemērogo rakstīšanu; tam vajag Redis Cluster. Un tas nepadara replikāciju sinhronu, kas ir ļoti svarīgi tālāk.

Minimāla konfigurācija, kas tiešām ir izturīga

# sentinel.conf, identical on three independent hosts
port 26379
sentinel monitor mymaster 10.0.1.10 6379 2
sentinel down-after-milliseconds mymaster 5000
sentinel failover-timeout mymaster 60000
sentinel parallel-syncs mymaster 1
sentinel auth-pass mymaster <redis-password>

# start it (either form works)
redis-sentinel /etc/redis/sentinel.conf
redis-server /etc/redis/sentinel.conf --sentinel

Kvorums nav vairākums

Šī ir visvairāk pārprastā Sentinel daļa. Pēdējais sentinel monitor arguments ir kvorums: Sentinel skaits, kam jāvienojas, ka master nav sasniedzams. To izmanto tikai atteices noteikšanai.

Sekas: Sentinel nekad nepārslēdzas nodalījumā, kurā ir tikai Sentinel mazākums. Katra atļautā pārslēgšanās saņem unikālu konfigurācijas epohu, tāpēc, nodalījumiem savienojoties, uzvar jaunākā konfigurācija. SENTINEL CKQUORUM pārbauda, vai pašreizējie Sentinel var sasniegt gan kvorumu, gan vairākumu; palaidiet to pēc katras izmaiņas.

redis-cli -p 26379 SENTINEL get-master-addr-by-name mymaster
redis-cli -p 26379 SENTINEL ckquorum mymaster
redis-cli -p 26379 SENTINEL replicas mymaster
redis-cli -p 26379 SENTINEL sentinels mymaster
redis-cli -p 26379 INFO sentinel     # sentinel_tilt:0 is what you want

Kā Sentinel pazaudē apstiprinātus ierakstus

Dokumentācija par to runā godīgi: tā kā Redis replicē asinhroni, Sentinel nevar garantēt, ka apstiprināti ieraksti pārdzīvos atteici. Klasisks gadījums ir tīkla nodalījums, kas izolē veco master kopā ar dažiem klientiem. Vairākuma puse paaugstina repliku; klienti, kas palikuši pie vecā master, turpina tajā rakstīt; kad nodalījums savienojas, vecais master kļūst par jaunā repliku, un šie ieraksti tiek atmesti.

Šo logu nevar novērst, bet to var ierobežot:

# redis.conf on the master (and on replicas, which may become master)
min-replicas-to-write 1
min-replicas-max-lag 10

Ar šiem iestatījumiem master pārstāj pieņemt rakstīšanu, ja neviena replika nav apstiprinājusi 10 sekunžu laikā. Kompromiss ir skaidrs: ja visas replikas nav pieejamas, arī master atsaka rakstīšanu. Kešatmiņai tā bieži ir nepareiza izvēle; datiem, kas jums svarīgi, parasti pareiza. Kopā ar saprātīgu noturību (skatiet mūsu RDB un AOF salīdzinājumu) tas pārvērš "daži ieraksti pazuduši" par "pazudušas ne vairāk kā dažas sekundes ierakstu".

Klientiem jāprot Sentinel. Dokumentācijā teikts, ka Sentinel prasa skaidru klienta atbalstu, ja vien trafiks netiek novirzīts citādi, piemēram, ar virtuālo IP. Klients, kas piesiets fiksētam hostam, pēc pārslēgšanās turpina rakstīt vecajā master un, kad tas pazemināts, saņem kļūdas kā mūsu READONLY replikas kļūdas ceļvedī. Pārbaudiet, vai jūsu bibliotēka izmanto Sentinel API un pēc pārslēgšanās no jauna noskaidro master (Sentinel klientu vadlīnijas).

Docker, NAT un hostu nosaukumi

Ekspluatācijas detaļas, kas iekož vēlāk

Sentinel ar lielām datu kopām

Pārslēgšanās mācības uz 200 MB testa instances maz ko pierāda par 60 GB produkcijas datu kopu. Kas mainās:

Galvenās atziņas

Redis Valkey Sentinel Augsta pieejamība
Sadarbība ar mums

Redis pārslēgšanās, kas nepārslēdzās?

Mēs projektējam, testējam un salabojam Redis un Valkey Sentinel uzstādījumus, ieskaitot pārslēgšanās mācības uz produkcijas izmēra datiem un klientu konfigurācijas pārskatu.

Sazināties Vairāk no emuāra