替代項 - LangSmith

Dify

Dify 是開源的 LLM 應用開發平台，提供可視化工作流、RAG、代理與模型管理，支援多種模型、部署與觀測工具。

Agenta

Agenta 是開源平台，用於開發、監控與評估基於大型語言模型的應用，提供提示協作、版本管理、A/B 測試、可觀察性、成本與效能追蹤，並支援多種 LLM 與框架。

Humanloop

Humanloop是一個企業平台，用於開發和評估大型語言模型（LLM）應用，並通過人類反饋改進模型性能。

Langfuse

Langfuse是一個開源LLMOps平台，幫助團隊共同開發、監控和評估AI應用，支持自我部署和多種模型集成。

Wordware

Wordware是一個協作的提示工程IDE，簡化AI代理與應用程式的構建和部署，支援API連接與生成管理。

Klu.ai

Klu.ai是一個綜合平台，支持開發和優化使用大型語言模型的AI應用，促進團隊協作和性能分析。

Laminar AI

Laminar AI是一個開源平台，幫助開發人員監控和優化大型語言模型應用，提供追踪、分析和數據管理工具。

LLM Gateway

LLM Gateway是一個集中式平台，通過單一API管理和分析多個AI模型提供商的請求，簡化開發者的集成和操作工作流程。

Traceloop

Traceloop監控LLM應用程式的質量，提供警報、洞察及逐步推出功能，幫助開發人員調試和優化應用。

Confident AI

自信AI是一個大型語言模型（LLM）評估平台，提供測試、優化和監控工具，以確保LLM應用的可靠性和安全性。

Promptly

迅速是一個低代碼生成AI平台，簡化大型語言模型的提示創建與管理，支持用戶進行提示優化與實驗。

Vellum

Vellum是一個支持AI驅動應用程序開發的端到端平台，提供協作工具以便於創建、部署和監控AI應用。

Galileo

Galileo 是一個用於評估、監控與保護企業 AI／代理應用程式的平台，可測試提示、RAG 與模型表現，並提供即時監控、除錯與指標分析。

Helicone

Helicone是一個開源框架，專為大型語言模型的可觀察性和監控而設，幫助開發人員跟踪和優化LLM應用程式。

Maxim AI

Maxim AI是一個AI評估和可觀察性平台，幫助團隊開發、測試和部署高質量的AI產品，提供數據管理和實時監控功能。

GradientJ

GradientJ是一個AI平台，幫助產品團隊開發、部署和管理大型語言模型，支持可擴展應用和性能監控。

Promptmonitor

Promptmonitor 是一款應用程式，讓行銷人員追蹤並優化品牌在各種AI平台的可見性，以增加流量、潛在客戶和銷售。

Arkor

Arkor 是 AI 模型訓練與部署平台，協助開發者準備資料、執行微調，並將模型部署為相容 OpenAI 的 API，無需自行管理 GPU 或 Python 訓練環境。

Orq.ai

Orq.ai是一個生成式AI協作平台，幫助團隊開發、部署和優化大型AI應用，並支持多種模型集成與實時性能監控。

Inworld

Inworld 是一個為消費者應用提供 AI 運行時與工具的平台，支援大規模部署、降低維運、提供機器學習運維 (MLOps)、實時語音 (TTS) 與實驗管理。

Weavel

Weavel是一個針對LLM應用的性能分析與測試平台，可以輕鬆建立數據集、執行批量測試並分析性能。

Patronus AI

Patronus AI是一個自動評估平台，檢測大型語言模型的錯誤，幫助企業自信地使用生成AI，確保準確性與可靠性。

Braintrust

Braintrust是一個平台，幫助團隊開發、評估和優化AI應用，提供實時監控和數據管理功能以提高模型性能和可靠性。

Deepchecks

Deepchecks是一個評估平台，簡化大型語言模型和機器學習系統的驗證，提供性能監測和偏見檢測功能。

Lamini

Lamini是一個企業級平台，幫助團隊構建和管理自有大型語言模型，支持定制化和高效集成，適用於多種環境。

AI Monitor

AI Monitor 監控並分析 ChatGPT、Google AI 等平台產生的內容與搜尋結果，為品牌提供具體建議以優化線上曝光與內容策略。

Mastra

Mastra 是一個 TypeScript 為主的開源 AI 框架，提供代理、持久工作流程、RAG 檢索、評估與部署工具，幫助開發與監控生產級 AI 應用。

Not Diamond

Not Diamond 是一個多模型 AI 基礎設施平台，能自動將提示適配到不同模型並根據輸入預測選擇最適合的 LLM，支援路由、回退與 Python/TypeScript/REST API。

Pioneer

Pioneer 是一個用於微調與部署開源語言模型的平台，能自動生成資料、訓練、評估並持續用即時推理資料更新模型。

TrueFoundry

TrueFoundry是一個雲原生PaaS平台，協助機器學習團隊快速構建、部署和管理AI應用程序，提升效率和降低成本。