结构体 faiss::StopWordsInvertedLists

struct StopWordsInvertedLists : public faiss::ReadOnlyInvertedLists

如果 il 中的倒排列表小于 maxsize,则返回它,否则返回一个空的 invlist

公共类型

enum subset_type_t

enumerator SUBSET_TYPE_ID_RANGE
enumerator SUBSET_TYPE_ID_MOD
enumerator SUBSET_TYPE_ELEMENT_RANGE
enumerator SUBSET_TYPE_INVLIST_FRACTION
enumerator SUBSET_TYPE_INVLIST

公共函数

StopWordsInvertedLists(const InvertedLists *il, size_t maxsize)
virtual size_t list_size(size_t list_no) const override

获取列表的大小

virtual const uint8_t *get_codes(size_t list_no) const override

获取倒排列表的代码,必须由 release_codes 释放

返回值:

codes size list_size * code_size

virtual const idx_t *get_ids(size_t list_no) const override

获取倒排列表的 id,必须由 release_ids 释放

返回值:

ids size list_size

virtual void release_codes(size_t list_no, const uint8_t *codes) const override

释放 get_codes 返回的代码 (默认实现是 nop)

virtual void release_ids(size_t list_no, const idx_t *ids) const override

释放 get_ids 返回的 id

virtual idx_t get_single_id(size_t list_no, size_t offset) const override
返回值:

倒排列表中的单个 id

virtual const uint8_t *get_single_code(size_t list_no, size_t offset) const override
返回值:

倒排列表中的单个代码 (应该使用 release_codes 释放)

virtual void prefetch_lists(const idx_t *list_nos, int nlist) const override

准备以下列表 (默认情况下不执行任何操作),列表可以是 -1,因此是有符号的长整型

virtual size_t add_entries(size_t list_no, size_t n_entry, const idx_t *ids, const uint8_t *code) override
virtual void update_entries(size_t list_no, size_t offset, size_t n_entry, const idx_t *ids, const uint8_t *code) override
virtual void resize(size_t list_no, size_t new_size) override
virtual bool is_empty(size_t list_no, void *inverted_list_context = nullptr) const

检查列表是否为空

virtual InvertedListsIterator *get_iterator(size_t list_no, void *inverted_list_context = nullptr) const

获取使用迭代器的列表的可迭代对象

virtual size_t add_entry(size_t list_no, idx_t theid, const uint8_t *code, void *inverted_list_context = nullptr)

向倒排列表中添加一个条目

virtual void update_entry(size_t list_no, size_t offset, idx_t id, const uint8_t *code)
virtual void reset()
void merge_from(InvertedLists *oivf, size_t add_id)

从 oivf 移动所有条目(输出时为空)

size_t copy_subset_to(InvertedLists &other, subset_type_t subset_type, idx_t a1, idx_t a2) const

将条目索引的子集复制到另一个索引

返回值:

复制的条目数

double imbalance_factor() const

1=完全平衡,>1:不平衡

void print_stats() const

显示有关倒排列表的一些统计信息

size_t compute_ntotal() const

汇总列表大小

公共成员

const InvertedLists *il0
size_t maxsize
size_t nlist

可能的键值的数量

size_t code_size

每个向量的字节码大小

bool use_iterator = false

请求使用迭代器而不是 get_codes / get_ids

公共静态属性

static const size_t INVALID_CODE_SIZE = static_cast<size_t>(-1)

用于 BlockInvertedLists,其中代码被打包成组,并且单个代码大小没有意义