Modelos de Linguagem
Benchmarks de tempo até o primeiro token (TTFT) entre vLLM, TGI e SGLang em produção
Aprenda a comparar TTFT em vLLM, TGI e SGLang com carga controlada, percentis, cache e erros registrados, sem…
benchmarks
Assuntos relacionados
4 matérias
Modelos de Linguagem
Jargões médicos em português: como avaliar modelos de linguagem
Aprenda a avaliar modelos de linguagem em registros médicos em português, com testes de negação, contexto, evidências e…
Modelos de Linguagem
IA em português: como avaliar a qualidade, fluência e acurácia de modelos
Aprenda a avaliar a qualidade de LLMs em portugues brasileiro, medindo compreensao gramatical, termos tecnicos, expressoes regionais e…
Modelos de Linguagem
Benchmarks de IA: MMLU, GSM8K, MATH e o que eles realmente medem
MMLU, GSM8K, MATH, HumanEval e GPQA: entenda o que cada teste mede de verdade, os limites de memorizacao…