dingo store

Was ist Dingo-Store?

Das Dingo-Store-Projekt ist ein verteiltes KV-Speichersystem, das auf mehreren Raft-Replikationsgruppen basiert, die auch die Ausladungsfunktionen der Speicherschichtberechnung bietet. Der obere Layer-Service dieses Projekts basiert auf SQL und kann auch hochfrequente Servierfunktionen basierend auf KV bereitstellen. Die Gesamtarchitektur des Projekts lautet wie folgt:

Rollen über Dingo-Store

Der Speichercluster in Dingodb, Dingo-Store, enthält die folgenden Rollen:

Koordinator

Der Koordinator dient als zentrale Metadatenmanagementkomponente für den gesamten DingoDB -Cluster unter Verwendung des Raft -Konsensprotokolls. Es behält die Metadaten zur Datenverteilung und die Gesamttopologie des DingoDB -Clusters bei. Der Koordinator wird oft als "das Gehirn" des DingoDB -Systems bezeichnet und hält nicht nur die Metadaten des Clusters, sondern überwacht auch die Ressourcenzuweisung. Für Robustheit und hohe Verfügbarkeit arbeitet der Koordinator mit mindestens drei Knoten. Eine ungerade Anzahl von Koordinatorknoten wird für eine optimale Bereitstellung empfohlen.

Speichern

Dingo-Store bietet einen Multi-Replica-Mechanismus an, der auf dem RAFT-Protokoll basiert und die Datenkonsistenz sicherstellt. Es bietet auch Funktionen wie Protokollreplikation, Leiterwahlen, Migration der Floßgruppen, Snapshot -Installation und automatische Aufteilung auf der Grundlage der Datengröße. Darüber hinaus zeichnen Dingo-Store alle Geschäftsdatenmodelle auf ein Schlüsselwertdatenmodell und liefern nahtlose Hochfrequenz-Schlüsselwert-Read-Write-Funktionen. Beispielsweise transformiert es Tabellenmodelle und Indexmodelle vollständig in KV -Darstellungen.

Index

Dingo-Index ist eine spezielle Version von Dingo-Store. Es bietet nicht nur verteilte Datenspeicherfunktionen, sondern stellt auch die Echtzeitkonstruktion hochdimensionaler Vektordaten und deren Indexierung sicher. Es bietet umfangreiche Suchfunktionen in hochdimensionalen Räumen. Das System unterstützt Vektorindexformate wie HNSW und IVF.

Verwandte Projekte über Dingodb

Willkommen bei Dingodb. Die Dokumentation von DingoDB befindet sich auf der Website: https://dingodb.readthedocs.io. Die Hauptprojekte über Dingodb sind wie folgt:

• DINGODB: Eine einheitliche SQL -Engine zum Analysieren und Berechnen sowohl für strukturierte als auch für unstrukturierte Daten.
• DINGO-Deploy: Das Bereitstellungsprojekt von Rechenknoten und Speicherknoten.

Wie können Sie sich mit uns beschäftigen?

Wie man baut

Dingo-Store ist ein hybrides Projekt von C ++ und Java, bei dem C ++ verteilte Speicher- und Rechenfunktionen bietet, während die Java-Schicht grundlegende API-Schnittstellen bietet.

Rollen von Dingo-Store (C ++)

git submodule sync --recursive
git submodule update --init --recursive
mkdir build && cd build

# Release
cmake -DCMAKE_BUILD_TYPE=Release -DTHIRD_PARTY_BUILD_TYPE=Release -DDINGO_BUILD_STATIC=ON -DBUILD_UNIT_TESTS=OFF ..

# Debug
cmake -DCMAKE_BUILD_TYPE=Debug -DTHIRD_PARTY_BUILD_TYPE=Debug -DDINGO_BUILD_STATIC=ON -DBUILD_UNIT_TESTS=ON ..

# RelWithDebInfo
cmake -DCMAKE_BUILD_TYPE=RelWithDebInfo -DTHIRD_PARTY_BUILD_TYPE=RelWithDebInfo -DDINGO_BUILD_STATIC=ON -DBUILD_UNIT_TESTS=ON ..

make

API von Dingo-Store (Java)

 cd java && mvn clean package - DskipTests 

So stellen Sie eine Clean Pull -Anfrage durch

• Erstellen Sie eine persönliche Gabel von Dingo auf GitHub.
• Klonen Sie die Gabel auf Ihrer lokalen Maschine. Ihr Remote -Repo auf Github heißt Origin.
• Fügen Sie das ursprüngliche Repository als Fernbedienung hinzu.
• Wenn Sie Ihre Gabel vor einiger Zeit erstellt haben, ziehen Sie unbedingt nach oben in Ihr lokales Repository ein.
• Erstellen Sie eine neue Filiale, an der Sie arbeiten können. Zweig von entwickeln.
• Implementieren/beheben Sie Ihre Funktion und kommentieren Sie Ihren Code.
• Befolgen Sie den Codestil des Google -Code -Stils, einschließlich Eindrückung.
• Wenn das Projekt Tests ausführt!
• Fügen Sie Unit -Tests hinzu, die Ihren neuen Code testen.
• Vermeiden Sie im Allgemeinen die Änderung bestehender Tests, da sie auch sicherstellen, dass die bestehende öffentliche API unverändert ist.
• Fügen Sie die Dokumentation nach Bedarf hinzu oder ändern Sie.
• Kürzen Sie Ihre Commits in einen einzigen Commit mit der interaktiven Rebase von Git.
• Schieben Sie Ihren Zweig auf Ihre Gabel auf Github, den abgelegenen Ursprung.
• Öffnen Sie aus Ihrer Gabel eine Pull -Anfrage in der richtigen Filiale. Zielen Sie auf den Entwicklungszweig des Dingo.
• Sobald die Pull -Anfrage genehmigt und zusammengeführt wurde, können Sie die Änderungen von stromaufwärts zu Ihrem örtlichen Repo ziehen und Ihren Zweig löschen.
• Last but not least: Schreiben Sie immer Ihre Commit -Nachrichten in der vorliegenden Zeitform. Ihre Commit -Nachricht sollte beschreiben, was der Commit, wenn er angewendet wird, dem Code ausführt - nicht was Sie dem Code angetan haben.

Weitere detailliertere Informationen finden Sie unter: Leitfaden für den Beitragsführer

Kontaktieren Sie uns

Dingo-Store ist ein Open-Source-Projekt, das in Apache Lizenzversion 2.0 lizenziert ist und alle Feedback der Community begrüßen. Für Unterstützung oder Vorschläge kontaktieren Sie uns bitte.