LearnAI
Módulo 5 · RAG profundo (Pro) · Lição 1/6
← Para o catálogo
Tarefa

Chunking: como cortar documentos

O que há de errado com essa fragmentação e como posso corrigi-la? Retorne JSON {"problem": "problema", "fix": "como corrigir"}.

Desbloqueie o acesso para enviar soluções para análise instantânea de IA.Comece de graça
A base de um RAG de qualidade
💡 Uma teoria

O RAG começa cortando documentos em pedaços (pedaços) - é impossível contextualizar todo o banco de dados (é caro e não cabe). Do jeito que você corta, será encontrado. Pedaços muito grandes confundem o significado e queimam fichas; os muito pequenos perdem o contexto (um pedaço de frase sem suporte). Boa prática: corte ao longo dos limites semânticos (parágrafos, seções), e não cegamente de acordo com os caracteres, e adicione uma sobreposição (sobreposição) para que a ideia na junção de dois pedaços não se perca. Metadados (fonte, seção) são anexados a cada bloco para filtragem e referências. A má fragmentação é a principal razão pela qual "RAG não encontra o óbvio".

Como é avaliado · aprovado 70

  • 1JSON válido sem texto ao redor30%
  • 2Existem campos problem e fix35%
  • 3100 caracteres perdem contexto; corte de acordo com o significado + sobreposição35%
Sua solicitaçãoClaude ⌄