Athina AI

Для разработчиков и команд, создающих приложения на базе больших языковых моделей (LLM), Athina помогает выявлять ненадёжные ответы и отслеживать работу систем в production-среде. Платформа записывает трассировки вызовов моделей и этапов работы приложений, упрощая проверку входных и выходных данных, отладку RAG-пайплайнов и мониторинг использования, задержек и расходов на токены. Команды могут запускать оценку на тестовых наборах данных или производственных логах, чтобы проверять качество ответов, их соответствие источникам и другие критерии. Athina предлагает готовые метрики оценки и поддерживает пользовательские оценщики, в том числе проверки на основе LLM и функции на Python. Панели мониторинга позволяют сравнивать результаты во времени, а также для разных промптов, моделей и сегментов пользователей. Это помогает выявлять ухудшение качества и решать, что нужно улучшить.

Отказ от ответственности: WebCatalog не связан, не ассоциирован, не уполномочен, не одобрен и не имеет какой-либо официальной связи с Athina AI. Все названия продуктов, логотипы и бренды являются собственностью соответствующих владельцев.