简介

本指南将引导您完成使用 Cohere 嵌入功能配置 Meilisearch 的过程,以实现语义搜索能力。通过结合 Meilisearch 的 AI 功能和 Cohere 的嵌入 API,您可以提升搜索体验并获取更相关的结果。

准备工作

要完成本指南,您需要:

  • 运行版本 >=1.13 的 Meilisearch Cloud 项目
  • 拥有 Cohere 账户及用于生成嵌入的 API 密钥。您可以在 Cohere 注册账户
  • 无需后端支持

配置 Meilisearch

要在 Meilisearch 中设置嵌入器(embedder),您需要根据需求进行配置。您可以参考 Meilisearch 文档 了解如何更新嵌入器设置的详细信息。

Cohere 提供多种嵌入模型:

  • embed-english-v3.0embed-multilingual-v3.0:1024 维
  • embed-english-light-v3.0embed-multilingual-light-v3.0:384 维

以下是 Cohere 嵌入器设置的示例:

{
  "cohere": {
    "source": "rest",
    "apiKey": "<Cohere API Key>",
    "dimensions": 1024,
    "documentTemplate": "<Custom template (Optional, but recommended)>",
    "url": "https://api.cohere.com/v1/embed",
    "request": {
      "model": "embed-english-v3.0",
      "texts": [
        "{{text}}",
        "{{..}}"
      ],
      "input_type": "search_document"
    },
    "response": {
      "embeddings": [
        "{{embedding}}",
        "{{..}}"
      ]
    },
  }
}

在此配置中:

  • source:指定嵌入器的来源,设置为 “rest” 表示使用 REST API
  • apiKey:将 <Cohere API Key> 替换为您实际的 Cohere API 密钥
  • dimensions:指定嵌入的维度,对于 embed-english-v3.0 模型设置为 1024
  • documentTemplate:可选地,您可以提供一个 自定义模板 来从文档生成嵌入
  • url:指定 Cohere API 端点的 URL
  • request:定义 Cohere API 的请求结构,包括模型名称和输入参数
  • response:定义 Cohere API 的预期响应结构,包括嵌入数据

配置好嵌入器设置后,Meilisearch 将自动为您的文档生成嵌入向量并存储在向量存储中。

请注意,大多数第三方工具都有速率限制,Meilisearch 会管理这些限制。如果您使用的是免费账户,索引过程可能需要一些时间,但 Meilisearch 会使用重试策略来处理。

建议监控任务队列以确保一切运行顺利。您可以通过 Cloud UI 或 Meilisearch API 访问任务队列。

测试语义搜索

配置好嵌入器后,您现在可以使用 Meilisearch 执行语义搜索。当您发送搜索查询时,Meilisearch 会使用配置的嵌入器为查询生成嵌入向量,然后利用它在向量存储中找到语义最相似的文档。

要执行语义搜索,您只需发起一个普通的搜索请求,但需包含 hybrid 参数:

{
  "q": "<用户输入的查询>",
  "hybrid": {
    "semanticRatio": 1,
    "embedder": "cohere"
  }
}

在这个请求中:

  • q: 表示用户的搜索查询
  • hybrid: 指定混合搜索的配置
    • semanticRatio: 用于控制语义搜索与传统搜索的平衡。值为1表示纯语义搜索,值为0表示全文搜索。您可以调整此参数来实现混合搜索体验
    • embedder: 用于生成嵌入向量的嵌入器名称。请确保使用与嵌入器配置中相同的名称,本例中为”cohere”

您可以使用 Meilisearch API 或客户端库来执行搜索,并根据语义相似性检索相关文档。

结论

通过本指南,您现在应该已经配置好了支持 Cohere 嵌入的 Meilisearch,能够在应用中利用语义搜索功能。Meilisearch 的自动批处理和高效的嵌入处理使其成为集成语义搜索到项目中的强大选择。

要探索更多嵌入器配置选项,请查阅关于嵌入器设置可能性的详细文档