SQLite보다 138배나 빠르다고?! (Stoolap 벤치마크 테스트)

영상은 새로운 프로젝트 시작 시 업계 표준으로 통하는 SQLite의 인기를 언급하며 시작합니다. 하지만 로컬 데이터가 무거워지고 쿼리가 복잡해지면 SQLite의 단일 스레드 파일 잠금 방식이 성능 한계에 부딪히게 됩니다. 이러한 문제를 해결하기 위해 Rust로 구축된 새로운 데이터베이스 엔진인 Stulab이 등장했습니다. 최근 출시된 네이티브 Node.js 드라이버는 기존 방식보다 훨씬 놀라운 성능을 보여줍니다. 이 섹션은 왜 우리가 기존 SQLite를 넘어 새로운 대안을 고려해야 하는지 그 배경을 설명합니다.

Stulab은 트랜잭션 중심의 OLTP인 SQLite나 Postgres와 달리 분석 처리에 최적화된 임베디드 OLAP 데이터베이스입니다. DuckDB나 BigQuery와 유사한 분석 능력을 갖추면서도 SQLite처럼 파일 기반의 휴대성을 제공하는 것이 특징입니다. 특히 NAPI-RS 프레임워크를 활용하여 Rust 엔진을 Node.js 프로세스에 직접 로드하는 방식을 취합니다. 이를 통해 중간 브릿지나 JSON 변환 과정에서 발생하는 직렬화 오버헤드를 완전히 제거했습니다. 결과적으로 Node.js와 Rust가 동일한 메모리 공간을 공유하며 통신하는 혁신적인 구조를 가집니다.

Stulab의 고속 성능을 뒷받침하는 세 가지 핵심 기술 요소가 상세히 소개됩니다. 첫째는 MVCC(다중 버전 동시성 제어)를 도입하여 여러 사용자가 동시에 읽고 쓸 수 있도록 구현한 점입니다. 둘째는 Rayon 스케줄러를 사용하여 단일 코어가 아닌 장비의 모든 CPU 코어를 활용하는 병렬 실행 기술입니다. 셋째는 SQL 실행 전 다양한 경로의 비용을 추정하여 최적의 실행 계획을 세우는 비용 기반 최적화 도구입니다. 이 기술들은 Stulab이 왜 기존 데이터베이스보다 효율적인지 논리적인 근거를 제시합니다.

실제 성능 검증을 위해 Node.js 환경에서 SQLite와 Stulab의 벤치마크 테스트를 진행합니다. 초기 설정 과정에서 NPM 패키지의 바이너리 누락 오류가 발생하여 소스에서 직접 빌드해야 했던 번거로움도 솔직하게 공유합니다. 1만 행의 판매 데이터를 대상으로 한 count distinct 테스트에서 Stulab은 SQLite보다 4배 빠른 결과를 보여주었습니다. 데이터 규모를 100만 행으로 늘렸을 때도 약 6배의 성능 향상을 기록하며 분석 작업에서의 우위를 증명했습니다. 다만 광고에서 주장하던 138배라는 수치와는 다소 차이가 있음을 확인시켜 줍니다.

정렬 작업이 포함된 두 번째 벤치마크에서는 Stulab이 약 1.5배 정도의 근소한 우위를 보이며 작업 유형에 따라 성능 차이가 있음을 보여줍니다. 제작자는 Stulab이 모든 상황에서 SQLite를 대체하는 '킬러'는 아니라고 결론짓습니다. 단일 행 작업이나 일반적인 트랜잭션은 여전히 SQLite가 안정적이고 빠르기 때문입니다. 하지만 복잡한 데이터 분석이 필요한 Node.js 프로젝트라면 Stulab은 매우 매력적인 고성능 도구가 될 수 있습니다. 마지막으로 패키지 설치 문제 해결을 희망하며 시청자들의 의견을 묻고 영상을 마무리합니다.