DuckDB

DuckDB
Description de l'image DuckDB logo.svg.
Description de l'image DuckDB UI 20251115.png.
Informations
Créateur Hannes Mühleisen (d)Voir et modifier les données sur Wikidata
Développé par Hannes Mühleisen (d) et Mark Raasveldt (d)Voir et modifier les données sur Wikidata
Dernière version 1.5.2 ()Voir et modifier les données sur Wikidata
Dépôt github.com/duckdbVoir et modifier les données sur Wikidata
Écrit en C++Voir et modifier les données sur Wikidata
Formats écrits DuckDB database file (d)Voir et modifier les données sur Wikidata
Type Système de gestion de base de donnéesVoir et modifier les données sur Wikidata
Licence Licence MITVoir et modifier les données sur Wikidata
Site web duckdb.orgVoir et modifier les données sur Wikidata

modifier - modifier le code - voir Wikidata (aide)

DuckDB est un logiciel libre de gestion de bases de données.

DuckDB est performant pour le traitement analytique en ligne (OLAP) notamment grâce à son format de stockage par colonnes.

Le logiciel a été créé par Mark Raasveldt (d) et Hannes Mühleisen (d) au Centrum voor Wiskunde en Informatica (CWI) aux Pays-Bas.

Historique

DuckDB a été initialement développé par Mark Raasveldt et Hannes Mühleisen (d) au Centrum Wiskunde & Informatica (CWI) aux Pays-Bas. Les co-fondateurs du projet ont conçu DuckDB pour répondre au besoin d'une solution de base de données OLAP en processus.

DuckDB est sortie en 2019.

La version 1.0.0 de DuckDB a été publiée le , sous le nom de code SnowDuck.

Le 12 mai 2026, un article de blog de DuckDB annonce le protocole Quack,, une fonctionnalité permettant d'utiliser duckdb en mode Client-serveur et plus uniquement en mode local.

Le 26 Aout 2026, DuckLabs, l'entreprise qui développe l’écosystème Duckdb, est racheté par AWS,, le projet reste opensource et la Fondation est censé garantir la pérennité du projet.

Fonctionnalités

DuckDB utilise un moteur de traitement des requêtes vectorisé. DuckDB est particulier parmi les systèmes de gestion de bases de données car il n'a aucune dépendance externe et peut être construit avec uniquement un compilateur C++. DuckDB s'écarte également du modèle client-serveur traditionnel en s'exécutant à l'intérieur d'un processus hôte. Le parseur SQL de DuckDB est dérivé de la bibliothèque pg_query développée par Lukas Fittl, qui elle-même provient du parseur SQL de PostgreSQL, simplifié au maximum. DuckDB utilise un format de stockage en fichier unique pour conserver les données sur disque, conçu pour permettre des scans efficaces ainsi que des mises à jour en masse, des ajouts et des suppressions. DuckDB est également compilé en WebAssembly à l'aide d'emscripten, ce qui permet à DuckDB d'exécuter SQL dans des outils d'analyse basés sur le navigateur,.

Sources de données

DuckDB est en mesure d’interagir avec différentes sources de données, notamment des formats de fichiers, des protocoles réseau ainsi que des systèmes de gestion de bases de données. Parmi les sources prises en charge figurent :

Extensions

L'architecture de DuckDB prend en charge les extensions, permettant d'ajouter des fonctionnalités supplémentaires de manière dynamique. De nombreuses extensions populaires sont maintenues par l'équipe principale de DuckDB, et il existe plus de 30 extensions communautaires maintenues par des tiers,,. Les extensions peuvent être activées à l'aide de la commande INSTALL. Certaines sources de données pré-citées sont accessibles au travers d'extensions. Les extensions permettent principalement d'utiliser des formats de fichiers supplémentaires, mais pas uniquement elles peuvent aussi d'étendre la gamme de fonctionnalités .

Extensions Core notable

Illustration de DuckDB UI ouvert dans Mozilla Firefox.
  • postgres, mysql, sqlite permettent l'accès à des bases de données externes.
  • ODBC : Cette extension permet de se connecter à d'autres bases de données (à l'aide de leurs pilotes ODBC)
  • ducklake permet de crée un mini DataLake en local. DuckLake offre des fonctions de lac de données sans la complexité des datalake traditionnels. Il utilise des fichiers Parquet pour le stockage des données. La gestion des métadonnées s'effectue dans une base de données SQL centrale telle que PostgreSQL. Pour les cas d'utilisations simples, DuckDB lui-même suffit comme base de données de métadonnées.
  • Vortex Nouveau format de la fondation duckdb et de Spiraldb , qui s'inspire entre autres de apache iceberg.

Comparaison

DuckDB, dans son créneau OLAP, ne concurrence pas les systèmes de gestion de bases de données traditionnels tels que MSSQL, PostgreSQL ou Oracle. Bien qu'il utilise SQL pour les requêtes, DuckDB vise les applications serverless et offre des réponses extrêmement rapides en utilisant par exemple des fichiers Apache Parquet , JSON, ou son propre format de stockage. Ces caractéristiques en font un choix populaire pour l'analyse de grands ensembles de données en mode interactif.

DuckDB Foundation

La fondation indépendante à but non lucratif DuckDB Foundation assure la maintenance et le développement à long terme de DuckDB. La fondation détient une grande partie de la propriété intellectuelle du projet et est financée par des dons caritatifs. Les statuts de la Fondation DuckDB garantissent que DuckDB reste open source sous licence MIT license à perpétuité.

Prise en charge des langages

En plus des API natives C et C++, DuckDB prend en charge un large éventail de langages de programmation.

API clientes
LangageNotesRéférence
JavaL’API Java est implémentée à l’aide de la JNI. Une intégration avec le format Apache Arrow est fournie.
PythonL’API Python implémente la prise en charge des bibliothèques Pandas, Apache Arrow et Polars pour l'analyse de données.
RustL’API Rust est distribuée sous forme de crate Rust qui expose un élégant wrapper autour de l’API C native.
Node.JSAPI Node
RAPI R
JuliaAPI Julia
SwiftAPI Swift
WebAssemblyAPI WASM
GoAPI Go

Articles connexes

Notes et références

  1. ↑ « Release 1.5.2 », (consulté le )
  2. 1 2 Chris Kamphuis, Advances in Information Retrieval, vol. 12036, Cham, Springer International Publishing, coll. « Lecture Notes in Computer Science », , 608–612 p. (ISBN 978-3-030-45441-8, PMCID 7148032, DOI 10.1007/978-3-030-45442-5_79), « Graph Databases for Information Retrieval »
  3. ↑ Leendert van der Ent, « DuckDB: Introducing a New Class of Data Management Systems », ICT Research Platform Nederland,‎ (lire en ligne, consulté le )
  4. ↑ (en) Lindsay Clark, « DuckDB reaches version 0.5.0 » [archive du ], sur www.theregister.com (consulté le )
  5. ↑ (en) Mark Raasveldt et Hannes Mühleisen, « Announcing DuckDB 1.0.0 », sur duckdb.org, (consulté le ).
  6. ↑ (en) The DuckDB team, « Quack : The DuckDB Client-Server Protocol », sur duckdb.org, (consulté le ).
  7. ↑ (en) GitHub User, « Quack Remote Protocol », sur duckdb.org (consulté le ).
  8. ↑ (en) Mark Raasveldt and Hannes Mühleisen, « DuckLabs to Join AWS, Projects to Remain Open Source », sur duckdb.org, .
  9. ↑ https://fr.investing.com/news/stock-market-news/aws-acquiert-ducklabs-pour-renforcer-ses-capacites-analytiques-93CH-3573337
  10. ↑ « DuckDB Building Instructions » (consulté le )
  11. ↑ (en) Marco Slot, « How We Fused DuckDB into Postgres with Crunchy Bridge for Analytics », sur Crunchy Data, (consulté le ).
  12. ↑ (en) « Introducing Universal SQL », sur evidence.dev (consulté le ).
  13. ↑ (en) « How we evolved our query architecture with DuckDB », sur Count (consulté le ).
  14. ↑ (en) GitHub User, « Data Sources », sur DuckDB (consulté le )
  15. ↑ « DuckDB Extensions Overview », sur www.duckdb.org (consulté le )
  16. ↑ « Core Extensions » [archive du ], sur duckdb.org, (consulté le )
  17. ↑ (en) GitHub User, « List of Community Extensions », sur www.duckdb.org (consulté le ).
  18. ↑ « DuckDB Extension Radar », sur www.github.com (consulté le )
  19. ↑ https://duckdb.org/docs/stable/extensions/overview
  20. ↑ (en) GitHub User, « UI Extension », sur duckdb.org (consulté le ).
  21. ↑ https://duckdb.org/docs/current/core_extensions/postgres
  22. ↑ (en) GitHub User, « MySQL Extension », sur duckdb.org (consulté le ).
  23. ↑ (en) GitHub User, « SQLite Extension », sur duckdb.org (consulté le ).
  24. ↑ (en) GitHub User, « ODBC Extension », sur duckdb.org (consulté le ).
  25. ↑ (en) GitHub User, « DuckLake », sur duckdb.org (consulté le ).
  26. ↑ (en) GitHub User, « DuckLake is an integrated data lake and catalog format », sur ducklake.select (consulté le ).
  27. ↑ (en) GitHub User, « Vortex Extension », sur duckdb.org (consulté le ).
  28. ↑ M. Bannert, Research Software Engineering: A Guide to the Open Source Ecosystem, CRC Press, coll. « Chapman & Hall/CRC Data Science Series », (ISBN 978-1-04-000513-2, lire en ligne [archive du ]), p. 25
  29. ↑ (en) « DuckDB Foundation », sur duckdb.org via Internet Archive (consulté le ).
  30. ↑ (en) GitHub User, « DuckDB Project FAQs », sur duckdb.org (consulté le ).
  31. ↑ (en) « Java JNI Source Code », sur www.github.com (consulté le )
  32. ↑ « DuckDB Java Arrow Source Code », sur www.github.com (consulté le )
  33. ↑ (en) « DuckDB Java Source Code », sur www.github.com (consulté le )
  34. ↑ (en) « DuckDB Pandas Source », sur www.github.com (consulté le )
  35. ↑ (en) « DuckDB PyArrow Source », sur www.github.com (consulté le )
  36. ↑ (en) « DuckDB Python Source Code », sur www.github.com (consulté le )
  37. ↑ (en) « DuckDB Rust Source Code », sur www.github.com (consulté le )
  38. ↑ (en) « DuckDB Node Source Code », sur www.github.com (consulté le )
  39. ↑ (en) « DuckDB R Source Code », sur www.github.com (consulté le )
  40. ↑ (en) « DuckDB Julia Source Code », sur www.github.com (consulté le )
  41. ↑ « DuckDB Swift Source Code », sur www.github.com (consulté le )
  42. ↑ « DuckDB WASM Source Code », sur www.github.com (consulté le )
  43. ↑ « DuckDB Go Source Code », sur www.github.com (consulté le )