Escalando com Janela Deslizante de Tempo

Use quando apenas dados recentes precisam de busca rápida -- posts de redes sociais, artigos de notícias, tickets de suporte, logs, vagas de emprego. Dados antigos se tornam irrelevantes ou podem tolerar acesso mais lento.

Três estratégias: rotação de shard (recomendado), rotação de coleção (quando a configuração por período difere) e filtrar e deletar (mais simples, para limpeza contínua).

Rotação de Shard (Recomendado)

Use quando: os dados têm limites naturais de tempo (diário, semanal, mensal). Preferido porque as consultas abrangem todos os períodos de tempo em uma única requisição, sem fan-out no nível da aplicação. Sharding definido pelo usuário

1. Crie uma coleção com sharding definido pelo usuário habilitado
2. Crie uma chave de shard por período de tempo (ex: 2025-01, 2025-02, ..., 2025-06)
3. Ingesta dados na chave de shard do período atual
4. Quando um novo período começar, crie uma nova chave de shard e redirecione as escritas
5. Delete a chave de shard mais antiga fora da janela de retenção

• Deletar uma chave de shard recupera todos os recursos instantaneamente (sem fragmentação, sem sobrecarga do otimizador)
• Pré-crie a chave de shard do próximo período antes da rotação para evitar interrupção na escrita
• Use shard_key_selector no momento da consulta para buscar apenas períodos específicos para eficiência
• Chaves de shard podem ser colocadas em nós específicos para tiering hot/cold

Rotação de Coleção (Troca de Alias)

Use quando: você precisa de configuração de coleção por período (ex: diferentes configurações de quantização ou armazenamento). Aliases de coleção

1. Crie uma coleção por período de tempo, aponte um alias de escrita para a mais nova
2. Consulte todas as coleções ativas em paralelo, mescle os resultados no lado do cliente
3. Quando um novo período começar, crie a nova coleção e troque o alias de escrita Trocar coleção
4. Remova a coleção mais antiga fora da janela

Trade-off vs rotação de shard: permite diferenças de configuração por coleção, mas requer fan-out no nível da aplicação e mais sobrecarga operacional.

Filtrar e Deletar

Use quando: os dados chegam continuamente sem limites claros de tempo, ou você quer a configuração mais simples.

1. Armazene um payload timestamp em cada ponto, crie um índice de payload nele Índice de payload
2. Filtre para a janela desejada no momento da consulta usando a condição range Filtro de intervalo
3. Periodicamente delete pontos expirados usando delete-by-filter Deletar pontos

• Execute a limpeza durante horários de menor movimento em lotes (10k-50k pontos) para evitar bloqueios do otimizador
• Deletes não são gratuitos: pontos marcados para exclusão degradam a busca até que o otimizador compacte os segmentos
• Não recupera disco instantaneamente (compactação é assíncrona)

Tiers Hot/Cold

Use quando: dados recentes precisam de busca rápida em RAM, dados mais antigos devem permanecer pesquisáveis com menor desempenho.

• Rotação de shard: coloque a chave de shard atual em nós de armazenamento rápido, mova chaves de shard mais antigas para nós mais baratos via posicionamento de shard. Todas as consultas ainda passam por uma única coleção.
• Rotação de coleção: mantenha a coleção atual em RAM (always_ram: true), mova coleções mais antigas para vetores mmap/em disco. Quantização

O Que NÃO Fazer

• Não use filtrar e deletar para séries temporais de alto volume com milhões de deletes diários (use rotação em vez disso)
• Não se esqueça de indexar o campo de timestamp (filtros de intervalo sem índice causam varreduras completas)
• Não use rotação de coleção quando a rotação de shard seria suficiente (complexidade de fan-out desnecessária)
• Não remova uma chave de shard ou coleção antes de verificar se o período dela está totalmente fora da janela de retenção
• Não pule a pré-criação da chave de shard ou coleção do próximo período (falhas de escrita durante a rotação são difíceis de recuperar)