Фильтр Блума

Фильтр Блума — это вероятностная структура данных, придуманная Бёртоном Блумом в 1970 году, позволяющая компактно хранить множество элементов и проверять принадлежность заданного элемента к множеству. При этом существует возможность получить ложноположительное срабатывание(элемента в множестве нет, но структура данных сообщает, что он есть), но не ложноотрицательное.

Фильтр Блума может использовать любой объём памяти, заранее заданный пользователем, причем чем он больше, тем меньше вероятность ложного срабатывания. Поддерживается операция добавления новых элементов в множество, но не удаления существующих (если только не используется модификация со счётчиками). С увеличением размера хранимого множества повышается вероятность ложного срабатывания.

Описание структуры данных

Пример фильтра Блума с [math]m = 9[/math] и [math]k = 3[/math], хранящего множество из элементов [math]A[/math] и [math]B[/math]. Цветные стрелки указывают на места в битовом массиве, соответствующие каждому элементу множества. Этот фильтр Блума может определить, что элемент [math]C[/math] входит в множество, хотя он и не добавлен в него.

Фильтр Блума представляет собой битовый массив из [math]m[/math] бит. Изначально, когда структура данных хранит пустое множество, все [math]m[/math] бит обнулены. Далее определяются [math]k[/math] независимых хеш-функций [math]h_1[/math], …, [math]h_k[/math], отображающих каждый элемент в одну из [math]m[/math] позиций битового массива достаточно равномерным образом.

Для добавления элемента [math]e[/math] необходимо записать единицы на каждую из позиций [math]h_1(e)[/math], …, [math]h_k(e)[/math] битового массива.

Чтобы проверить что элемент [math]e[/math] принадлежит множеству хранимых элементов, необходимо проверить состояние битов [math]h_1(e)[/math], …, [math]h_k(e)[/math]. Если хотя бы один из них равен нулю, элемент не принадлежит множеству. Если все они равны единице, то структура данных сообщает, что [math]е[/math] принадлежит множеству. При этом может возникнуть две ситуации: либо элемент действительно принадлежит к множеству, либо все эти биты оказались установлены по случайности при добавлении других элементов, что и является источником ложных срабатываний в этой структуре данных.