winnow() возвращает set, поэтому list(fp)[:LIMIT] брал случайное подмножество:
у длинного документа целые куски оставались без отпечатков, и списывание
именно из них не находилось. Обнаружено при разборе того, почему фрагмент
статьи PMC не искался.
Добавлены winnow_ordered() — отпечатки в порядке появления в тексте, и
sample_evenly() — выборка каждого n-го элемента вместо первых N. Применено в
add_document и store_full_text.
7 тестов на главное свойство: выборка растянута по всей длине документа, шаг
ровный, порядок сохранён.
Co-Authored-By: Claude Opus 5 <noreply@anthropic.com>
476682741e