stackabletech / stackabletech/hive-operator

The metastore offers replicas > 1 but no HA ist configured

Offen
#154 2 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen

Dieses Issue hat noch niemand übernommen.

type/feature-improvement
Vorherrschende Sprache
Rust
Sterne
29
Forks
2
Ø Merge
1 T. 19 Std.
Gemergte PRs (30 T.)
12

Beschreibung

Currently, the Hive metastore can be configured with multiple replicas > 1 per role group. This results in the feeling for high availability. The service discovery to offers multiple FQDN's to different (and completely unrelated) metastores (https://github.com/stackabletech/hive-operator/pull/145).

We should consolidate the behavior and have two options:

  1. Fix replicas to 1 and offer a warning if set > 1. Add in the documentation that metastores from different rolegroups do not offer HA or interact with each other
  2. Implement HA for the metastore (e.g. using ZooKeeperTokenStore)?

TODO: They all share the same database, Metastore should still be stateless, ZK discovery does exist but not sure what uses that. This is for Jim to research

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Erste Schritte

  1. Lies das ganze Issue und danach den Beitragsleitfaden des Projekts.
  2. Schreib ins Issue, dass du es übernimmst — das erspart doppelte Arbeit.
  3. Forke das Repository und arbeite in einem Branch.
  4. Öffne einen Pull Request, der die Issue-Nummer nennt.

Rechercherichtung

Beginne damit, das aktuelle Verhalten des Hive-Metastore-Replikats zu prüfen, das in issue #154 beschrieben ist, sowie den Kontext der Service-Erkennung in pull request #145. Untersuche, ob die gemeinsam genutzte Datenbank und ZooKeeperTokenStore echte HA unterstützen, und entscheide dann zwischen der Begrenzung der Replikate auf eins mit entsprechender Dokumentation oder der Implementierung von HA; abgeschlossen bedeutet, dass das ausgewählte Verhalten implementiert und dokumentiert ist.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
kubernetes, rust
Bereich
databases, distributed-systems
Issue-Typ
Bug
Schwierigkeit
5/5
Geschätzter Aufwand
Über eine Woche
Aktivitätsstatus
Veraltet
Klarheit
Muss geklärt werden
Anfängerfreundlichkeit
25/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.