LangChain baut LangSmith rund um ein einheitliches Agentenprofil neu auf

LangChain hat LangSmith rund um den Agenten neu aufgebaut. Damit werden Agenten zum zentralen Objekt für die Entwicklung, den Betrieb, die Verbesserung und die Steuerung von Systemen im gesamten Unternehmen. Nach Angaben des Unternehmens soll das Redesign fragmentierte Abläufe durch eine einheitliche Ansicht jedes Agenten und seiner Umgebungen ersetzen.
- LangSmith verwendet nun den Agenten als zentrales Objekt.
- Agentenprofile bündeln Zuständigkeiten, Umgebungen, Traces und Evaluierungen.
- Allgemeine Agenten und Programmieragenten sind bereits verfügbar.
- LangSmith unterstützt Agenten auf Plattformen mit OpenTelemetry Protocol.
- Das überarbeitete Produkt ist weltweit in Cloud-, BYOC- und selbst gehosteten Umgebungen verfügbar.
Eine Plattform für den gesamten Agentenlebenszyklus
LangChain hat das überarbeitete Produkt als Teil seiner neuen LangSmith Agent Platform vorgestellt. Die Plattform verbindet die wichtigsten Phasen der Agentenentwicklung über ein gemeinsames Agentenprofil und lässt Teams zugleich frei entscheiden, welche Teile von LangSmith sie nutzen.
Entwickler können einen Agenten mit dem Builder in natürlicher Sprache in LangSmith Studio beschreiben, ihn mit den Open-Source-Harnesses von LangChain entwickeln oder ein anderes Framework verwenden. Sie können ihn auf dem LangSmith Agent Server bereitstellen oder auf einer bestehenden Laufzeitumgebung belassen. Tracing, Evaluierungen, Datensätze, Annotationen und Engine lassen sich anschließend mit jedem Agenten verwenden, der Traces an LangSmith sendet.
Das Agentenverzeichnis und das LLM Gateway bieten Transparenz und Kontrollmöglichkeiten auf Organisationsebene. Die Traces, Evaluierungen, der Agent Server und die Engine-Probleme jedes Agenten sind über sein Profil abrufbar. Lokale Umgebungen sowie Entwicklungs-, Staging- und Produktionsumgebungen werden unter derselben Agenten-ID zusammengefasst. Dadurch lässt sich die Leistung nach Änderungen leichter vergleichen.
Ein Datenmodell mit Fokus auf Zuständigkeit und Evaluierung
Bisher wurden an LangSmith gesendete Traces in einer flachen Projekthierarchie abgelegt und keinem bestimmten Agenten zugeordnet. Im neuen Modell enthält jedes Agentenprofil einen Verantwortlichen, eine global eindeutige und unveränderliche ID sowie einen Typ.
Der Typ legt fest, welche Informationen, Datenverbindungen und Evaluierungskriterien im Dashboard des Agenten erscheinen. LangChain hat mit allgemeinen Agenten und Programmieragenten begonnen. Ein Dashboard für allgemeine Agenten kann aktuelle Aktivitäten, Online-Monitoring, gängige Modelle und Tools sowie von Engine gemeldete Fehler enthalten. Ein Dashboard für Programmieragenten kann zusammengeführte Pull Requests, Tokenkosten und die vom Agenten erledigte Arbeit anzeigen.
Diese vordefinierten Ansichten sollen die manuelle Einrichtung vermeiden und für Agenten desselben Typs einheitliche Messungen ermöglichen. Der Typ für Programmieragenten kann außerdem mit einem GitHub-Repository verbunden werden, um nachgelagerte Ergebnisse zu verfolgen. LangChain zufolge sollen weitere Typen für Agenten mit unterschiedlichen Evaluierungsanforderungen hinzukommen, darunter Sprachagenten, bei denen Latenz und Audioqualität entscheidend sind.
Governance über eine wachsende Agentenflotte hinweg
LangChain zufolge wird die zunehmende Zahl von Agenten zu einer Governance-Herausforderung. Agenten werden von Engineering-Teams entwickelt, von Anbietern wie ServiceNow und Glean übernommen oder von Mitarbeitern für Programmier- und Produktivitätsaufgaben ausgewählt. Jedes Team zur Nutzung einer einzigen Plattform zu verpflichten, sei nicht realistisch, so das Unternehmen.
LangSmith kann sich mit Agenten verbinden, die auf Plattformen mit Unterstützung für das OpenTelemetry Protocol laufen, darunter Labs und Hyperscaler. Registrierte Agenten erhalten einen Verantwortlichen, eine ID und einen Typ. Kosten- und Qualitätsmetriken werden über ihre Umgebungen hinweg zusammengeführt. So erhalten Plattformteams eine einheitliche Möglichkeit, Agenten zu überwachen und zu erkennen, wer verantwortlich ist, wenn Kosten steigen oder ein Fehler auftritt.
Verfügbarkeit und geplante Erweiterungen
Das neue LangSmith ist weltweit in Cloud-, BYOC- und selbst gehosteten Umgebungen verfügbar. Nutzer können mit dem Bau eines Agenten in LangSmith Studio beginnen oder einen bereits betriebenen Agenten anbinden.
LangChain arbeitet nach eigenen Angaben an weiteren Agententypen, darunter Sprachagenten, Dashboards auf Organisationsebene und der Möglichkeit, Agenten mit einem Identitätsanbieter zu registrieren. Außerdem plant das Unternehmen, Red-Teaming, Produktionsprüfungen, Evaluierungsdatensätze und Fine-Tuning-Workflows mit demselben Agentenprofil zu verknüpfen. Dashboards auf Workspace-Ebene sind bereits verfügbar, Dashboards auf Organisationsebene befinden sich in der Entwicklung.
LangChain: Why we rebuilt LangSmith around the agent


