Vers de meilleures performances avec des Roaring bitmaps

Abstract

Les index bitmap sont tres utilises dans les entrepots de donnees et moteurs de recherche. Leur capacite a executer efficacement des operations binaires entre bitmaps ameliore significativement les temps de reponse des requetes. Cependant, sur des attributs de hautes cardinalites, ils consomment un espace memoire important. Plusieurs techniques de compression bitmap ont ete introduites pour reduire l'espace memoire occupe par ces index, et accelerer leurs temps de traitement. Ce papier introduit un nouveau modele de compression bitmap, appele Roaring bitmap. Une comparaison experimentale, sur des donnees reelles et synthetiques, avec deux autres solutions de compression bitmap connues dans la litterature : WAH (Word Aligned Hybrid compression scheme) et Concise (Compressed 'n' Composable integer Set) a montre que Roaring bitmap n'utilise que 25% d'espace memoire compare a WAH et 50% par rapport a Concise, tout en accelerant significativement les temps de calcul des operations logiques entre bitmaps (jusqu'a 1100 fois pour les intersections).