Athina ajuda desenvolvedores a monitorar e avaliar suas aplicações LLM em produção, oferecendo visibilidade no pipeline RAG e métricas de avaliação para detectar falhas.

Você é o desenvolvedor deste app? Verifique a propriedade para gerenciar esta listagem.

Tenha um app para desktop dedicado ao Athina AI no Mac, Windows e Linux com o WebCatalog Desktop.

  • Abra o Athina AI direto do Dock ou da barra de tarefas.
  • Trabalhe sem distrações em uma janela dedicada, separada das abas do navegador.
  • Gerencie várias contas do Athina AI e alterne entre elas sem sair.

Saiba mais sobre o WebCatalog Desktop

Para desenvolvedores e equipes de IA que criam aplicações com LLMs, a Athina ajuda a investigar respostas não confiáveis e acompanhar o desempenho dos sistemas em produção. Ela registra rastros das chamadas aos modelos e das etapas da aplicação, facilitando a análise de entradas e saídas, a depuração de pipelines RAG e o monitoramento do uso, da latência e dos custos com tokens. As equipes podem executar avaliações em conjuntos de dados de teste ou registros de produção para verificar a qualidade e a fidelidade das respostas, além de outros critérios. A Athina inclui métricas de avaliação predefinidas e oferece suporte a avaliadores personalizados, incluindo verificações baseadas em LLMs e funções Python. Os painéis permitem comparar resultados ao longo do tempo e entre prompts, modelos ou segmentos de usuários, ajudando as equipes a identificar regressões e decidir o que melhorar.

Aviso: A WebCatalog não é afiliada, associada, autorizada, endossada por ou de qualquer forma oficialmente vinculada a Athina AI. Todos os nomes de produtos, logotipos e marcas são propriedade de seus respectivos proprietários.

Artigos relacionados