Ferramentas para desenvolvedores
Estimador de tamanho RAG
Estime fragmentos sobrepostos e vetores brutos.
Processado localmente
Estimativa para corpus contínuo; exclui limites de documentos, metadados do índice, réplicas e preenchimento.
Sua resposta aparecerá aqui.
Ajuda e método
Passo = fragmento − sobreposição; inclui o último fragmento parcial. Repetidos = sobreposição × (fragmentos − 1). Bytes = fragmentos × dimensões × bytes. Inteiros; sobreposição menor que fragmento. Corpus ≤10¹²; fragmento ≤10⁷; dimensões ≤10⁶; bytes 1–16.
Contagem de tokens e escopoMétodos e confiabilidadeExemplo resolvido
Um exemplo para testar ou adaptar aos seus valores.
- Tokens do corpus
- 1000
- Tokens por fragmento
- 400
- Tokens de sobreposição
- 100
- Dimensões do vetor
- 3
- Bytes por dimensão
- 4
Resultado
1000 tokens, fragmento 400, sobreposição 100, 3 dimensões, 4 bytes → 3 fragmentos, 1200 tokens, 36 bytes.