Padrões de Busca por Similaridade

Padrões para implementar busca por similaridade eficiente em sistemas de produção.

Quando Usar Esta Habilidade

• Construindo sistemas de busca semântica
• Implementando recuperação RAG
• Criando motores de recomendação
• Otimizando a latência de busca
• Escalando para milhões de vetores
• Combinando busca semântica e por palavras-chave

Conceitos Principais

1. Métricas de Distância

| Métrica | Fórmula | Ideal Para | | ------------------ | ------------------ | --------------------- | --- | -------------- | | Cosseno | 1 - (A·B)/(‖A‖‖B‖) | Embeddings normalizados | | Euclidiana (L2) | √Σ(a-b)² | Embeddings brutos | | Produto Escalar | A·B | Magnitude importa | | Manhattan (L1) | Σ | a-b | | Vetores esparsos |

2. Tipos de Índice

┌─────────────────────────────────────────────────┐
│                 Index Types                      │
├─────────────┬───────────────┬───────────────────┤
│    Flat     │     HNSW      │    IVF+PQ         │
│ (Exact)     │ (Graph-based) │ (Quantized)       │
├─────────────┼───────────────┼───────────────────┤
│ O(n) search │ O(log n)      │ O(√n)             │
│ 100% recall │ ~95-99%       │ ~90-95%           │
│ Small data  │ Medium-Large  │ Very Large        │
└─────────────┴───────────────┴───────────────────┘

Modelos e exemplos detalhados

A biblioteca completa de modelos e exemplos detalhados está em references/details.md. Leia este arquivo quando precisar dos modelos concretos.

Melhores Práticas

O Que Fazer

• Use o índice apropriado - HNSW para a maioria dos casos
• Ajuste os parâmetros - ef_search, nprobe para recall/velocidade
• Implemente busca híbrida - Combine com busca por palavras-chave
• Monitore o recall - Meça a qualidade da busca
• Pré-filtre quando possível - Reduza o espaço de busca

O Que Não Fazer

• Não pule a avaliação - Meça antes de otimizar
• Não crie índices em excesso - Comece com flat, escale gradualmente
• Não ignore a latência - P99 importa para a experiência do usuário
• Não se esqueça dos custos - O armazenamento de vetores soma