跳到主要内容
版本:v2.4.x

标量字段索引

在 Milvus 中,标量索引用于通过特定的非向量字段值加速元过滤,类似于传统的数据库索引。本指南将指导你为整数、字符串等字段创建和配置标量索引。

标量索引的类型

  • 自动索引:Milvus 根据标量字段的数据类型自动决定索引类型。这适用于不需要控制特定索引类型的情况。

  • 自定义索引:你可以指定精确的索引类型,如倒排索引。这为索引类型选择提供了更多控制。

自动索引

要使用自动索引,请在 add_index()中省略 index_type 参数,以便 Milvus 根据标量字段类型推断索引类型。

要使用自动索引,请省略 IndexParam中的 indexType 参数,以便 Milvus 根据标量字段类型推断索引类型。

要使用自动索引,请省略 createIndex()中的 index_type 参数,以便 Milvus 根据标量字段类型推断索引类型。

有关标量数据类型和默认索引算法之间的映射,请参阅标量字段索引算法

# Auto indexing
client = MilvusClient(
uri="http://localhost:19530"
)

index_params = MilvusClient.prepare_index_params() # Prepare an empty IndexParams object, without having to specify any index parameters

index_params.add_index(
field_name="scalar_1", # Name of the scalar field to be indexed
index_type="", # Type of index to be created. For auto indexing, leave it empty or omit this parameter.
index_name="default_index" # Name of the index to be created
)

client.create_index(
collection_name="test_scalar_index", # Specify the collection name
index_params=index_params
)

自定义索引

要使用自定义索引,请使用 add_index().

要使用自定义索引,请在.NET 文件中使用indexType参数指定特定的索引类型。 IndexParam.

要使用自定义索引,请在 .NET 文件中使用index_type参数指定特定的索引类型。 createIndex().

下面的示例为标量字段scalar_2 创建了一个反转索引。

index_params = MilvusClient.prepare_index_params() #  Prepare an IndexParams object

index_params.add_index(
field_name="scalar_2", # Name of the scalar field to be indexed
index_type="INVERTED", # Type of index to be created
index_name="inverted_index" # Name of the index to be created
)

client.create_index(
collection_name="test_scalar_index", # Specify the collection name
index_params=index_params
)

方法和参数

  • prepare_index_params()

    准备一个IndexParams对象。

  • add_index()

    IndexParams对象添加索引配置。

    • field_name*(字符串)*

      要索引的标量字段的名称。

    • index_type*(字符串*):

      要创建的标量索引的类型。对于隐式索引,请将其留空或省略此参数。

      对于自定义索引,有效值为

      • 倒排:(推荐)倒排索引由术语字典组成,其中包含按字母顺序排序的所有标记词。有关详情,请参阅标量索引

      • STL_SORT:使用标准模板库排序算法对标量字段进行排序。仅支持数值字段(如 INT8、INT16、INT32、INT64、FLOAT、DOUBLE)。

      • Trie用于快速前缀搜索和检索的树形数据结构。支持 VARCHAR 字段。

    • index_name*(字符串)*

      要创建的标量索引的名称。每个标量字段支持一个索引。

  • create_index()

    在指定的 Collection 中创建索引。

    • collection_name*(字符串)*

      创建索引的 Collection 的名称。

    • 索引参数

      包含索引配置的IndexParams对象。

方法和参数

  • IndexParam准备一个 IndexParam 对象。
    • fieldName*(字符串*) 要索引的标量字段的名称。
    • indexName*(字符串*) 要创建的标量索引的名称。每个标量字段支持一个索引。
    • indexType*(字符串*) 要创建的标量索引的类型。对于隐式索引,请将其留空或省略此参数。 对于自定义索引,有效值为
      • 倒排:(推荐)倒排索引由术语字典组成,其中包含按字母顺序排序的所有标记词。有关详情,请参阅标量索引
      • STL_SORT:使用标准模板库排序算法对标量字段进行排序。支持布尔和数值字段(如 INT8、INT16、INT32、INT64、FLOAT、DOUBLE)。
      • Trie用于快速前缀搜索和检索的树形数据结构。支持 VARCHAR 字段。
  • CreateIndexReq在指定的 Collection 中创建索引。
    • collectionName*(字符串*) 创建索引的 Collection 名称。
    • indexParams*(List*) 包含索引配置的 IndexParam 对象列表。

方法和参数

  • 创建索引

    在指定的 Collection 中创建索引。

    • collection_name*(字符串*) 创建索引的 Collection 名称。
    • field_name*(字符串*) 要创建索引的标量字段的名称。
    • index_name*(字符串*) 要创建的标量索引的名称。每个标量字段支持一个索引。
    • index_type*(字符串*) 要创建的标量索引的类型。对于隐式索引,请将其留空或省略此参数。 对于自定义索引,有效值为
      • 倒排:(推荐)倒排索引由包含按字母顺序排序的所有标记词的术语字典组成。有关详情,请参阅标量索引
      • STL_SORT:使用标准模板库排序算法对标量字段进行排序。支持布尔和数值字段(如 INT8、INT16、INT32、INT64、FLOAT、DOUBLE)。
      • Trie用于快速前缀搜索和检索的树形数据结构。支持 VARCHAR 字段。

验证结果

使用 list_indexes()方法验证标量索引的创建:

使用listIndexes() 方法验证标量索引的创建:

使用listIndexes() 方法验证标量索引的创建:

client.list_indexes(
collection_name="test_scalar_index" # Specify the collection name
)

# Output:
# ['default_index','inverted_index']

限制

  • 目前,标量索引支持 INT8、INT16、INT32、INT64、FLOAT、DOUBLE、BOOL、VARCHAR 和 ARRAY 数据类型,但不支持 JSON 数据类型。