SQLite ist 138x langsamer als DAS?! (Stoolap im Test)

Der Sprecher thematisiert die weite Verbreitung von SQLite als Industriestandard für neue Projekte. Er erklärt, dass SQLite bei wachsenden Datenmengen und komplexen Abfragen aufgrund seiner Single-Threaded-Natur an Grenzen stößt. Als Lösung wird Stoolap vorgestellt, eine neue Datenbank-Engine, die komplett in der Programmiersprache Rust entwickelt wurde. Es wird ein leistungsstarker Node.js-Treiber erwähnt, der laut Marketing eine bis zu 138-mal höhere Geschwindigkeit verspricht. Dieses Video soll prüfen, ob diese ambitionierten Behauptungen in einem realen Benchmark-Test standhalten können.

In diesem Abschnitt wird der grundlegende Unterschied zwischen OLTP-Datenbanken wie SQLite oder Postgres und OLAP-Datenbanken wie Stoolap erläutert. Während Erstere für Transaktionen optimiert sind, fokussiert sich Stoolap auf analytische Hochgeschwindigkeits-Verarbeitung ähnlich wie DuckDB. Ein technisches Highlight ist die Integration in Node.js via NAPI-RS, wodurch die Datenbank direkt in den Prozess geladen wird. Dies eliminiert den typischen Serialisierungs-Overhead, der normalerweise bei der Kommunikation über JSON oder Sockets entsteht. Node.js und die Rust-Engine teilen sich hierbei effizient denselben Speicherbereich für maximale Performance.

Der Sprecher analysiert drei spezifische Gründe, warum Stoolap technisch überlegen sein soll. Erstens nutzt die Engine MVCC, was simultane Lese- und Schreibzugriffe ohne die bei SQLite üblichen Datenbanksperren ermöglicht. Zweitens wird durch den Rayon-Scheduler eine echte parallele Ausführung erreicht, die alle verfügbaren CPU-Kerne für Abfragen nutzt. Drittens verfügt Stoolap über einen kostenbasierten Optimizer, der den effizientesten Ausführungspfad für SQL-Befehle berechnet. Diese Kombination aus moderner Speicherverwaltung und paralleler Rechenkraft bildet das Rückgrat für die versprochene Geschwindigkeit.

Für den Praxistest wird ein Node.js-Projekt aufgesetzt, das Stoolap und SQLite in einer In-Memory-Konfiguration vergleicht. Der Test fokussiert sich auf eine Verkaufstabelle mit zunächst 10.000 Zeilen, um die Performance von "Count Distinct"-Operationen zu messen. Der Sprecher berichtet jedoch von erheblichen Schwierigkeiten bei der Installation des NPM-Pakets aufgrund fehlender nativer Bindings. Er musste die Software schließlich manuell aus dem Quellcode klonen und kompilieren, um den Test überhaupt durchführen zu können. Dieser Umstand verdeutlicht, dass sich das Projekt aktuell noch in einer frühen, potenziell instabilen Entwicklungsphase befindet.

Die Benchmarks zeigen, dass Stoolap bei 10.000 Zeilen etwa viermal schneller ist als SQLite. Bei einer Erhöhung auf eine Million Zeilen steigt dieser Vorsprung auf das Sechsfache an, was jedoch weit hinter dem Faktor 138 zurückbleibt. Ein zweiter Test mit "Distinct" und "Order By" liefert nur noch eine minimale Steigerung von 1 bis 1,5-mal der SQLite-Geschwindigkeit. Der Sprecher merkt kritisch an, dass die offiziellen Marketing-Messwerte deutlich übertrieben wirken. Dennoch bleibt festzuhalten, dass Stoolap in seinen Kernkompetenzen, den analytischen Abfragen, messbar führt.

Abschließend wird klargestellt, dass Stoolap kein direkter Ersatz für SQLite ist, da beide Systeme unterschiedliche Einsatzzwecke verfolgen. Während SQLite der zuverlässige Standard für alltägliche Transaktionen bleibt, glänzt Stoolap als spezialisierter "Rennwagen" für komplexe Datenanalysen. Die Integration von Rust in das Node.js-Ökosystem wird als großer Gewinn für die Entwickler-Community bewertet. Sobald die Probleme mit dem NPM-Paket behoben sind, bietet Stoolap eine spannende Alternative für datenintensive lokale Anwendungen. Der Sprecher verabschiedet sich mit einem Aufruf zur Diskussion über die Relevanz dieses Performance-Boosts.