Zur Navigation springen

ElevenAgents

Erfahren Sie, wie Sie mit ElevenLabs Agenten entwickeln, bereitstellen und skalieren.

Agenten erledigen Aufgaben durch natürliche Dialoge – von schnellen Anfragen bis zu komplexen, offenen Workflows. ElevenLabs bietet ausdrucksstarke, sprachstarke Modelle, Entwicklertools für den Aufbau multimodaler Agenten sowie Tools zur Überwachung und Bewertung der Agentenleistung im großen Maßstab.

Plattformfunktionen

Von der Entwicklung über die Bereitstellung bis zur Optimierung bietet ElevenLabs alles, was Sie für den Aufbau skalierbarer Agenten benötigen.

Entwerfen und konfigurieren

ZielLeitfadenBeschreibung
Gesprächs-Workflows erstellenWorkflowsErstellen Sie mehrstufige Workflows mit dem visuellen Workflow-Builder
System Prompts schreibenSystem PromptLernen Sie Best Practices für effektive Agenten-Prompts kennen
Sprachmodell auswählenModelleWählen Sie aus unterstützten LLMs oder verwenden Sie ein eigenes Modell
Gesprächsablauf steuernGesprächsablaufKonfigurieren Sie Sprecherwechsel, Unterbrechungen und Timeout-Einstellungen
Stimme & Sprache konfigurierenStimme & SpracheWählen Sie aus über 10.000 Stimmen in 31 Sprachen mit Anpassungsoptionen
Wissen zum Agenten hinzufügenWissensdatenbankLaden Sie Dokumente hoch und aktivieren Sie RAG für fundierte Antworten
Tools verbindenToolsErmöglichen Sie Agenten, Clients & APIs für Aktionen aufzurufen
Jedes Gespräch personalisierenPersonalisierungNutzen Sie dynamische Variablen und Überschreibungen pro Gespräch
Agentenzugriff sichernAuthentifizierungImplementieren Sie benutzerdefinierte Authentifizierung für geschützten Zugriff

Verbinden und bereitstellen

ZielAnleitungBeschreibung
Mit React-Komponenten entwickelnElevenLabs UIVorgefertigte Komponentenbibliothek für Audio- und Agent-Apps (auf shadcn basiert)
Widget in Website einbettenWidgetFügen Sie jeder Website ein anpassbares Web-Widget hinzu
React-Web-Apps entwickelnReact SDKSprachfähige React-Hooks und -Komponenten
iOS-Apps entwickelnSwift SDKNatives iOS-SDK für Sprachagenten
Android-Apps entwickelnKotlin SDKNatives Android-SDK für Sprachagenten
React-Native-Apps entwickelnReact Native SDKPlattformübergreifend für iOS und Android mit React Native
Unity-Spiele entwickelnUnity SDKSprachagenten in Unity-Szenen für Desktop- und WebGL-Builds
Über SIP-Trunk verbindenSIP-TrunkIn bestehende Telefonieinfrastruktur integrieren
Ausgehende Batch-Anrufe durchführenBatch-AnrufeMehrere Anrufe programmatisch auslösen
Twilio-Integration nutzenTwilioNative Twilio-Integration für Telefonanrufe
Eigene Integrationen entwickelnWebSocket APIWebSocket-Protokoll auf niedriger Ebene für eigene Implementierungen
Echtzeitereignisse empfangenEreignisseGesprächsereignisse und Updates abonnieren

Überwachen und optimieren

ZielAnleitungBeschreibung
Benutzer nach externer ID auflistenBenutzerSehen Sie Endbenutzer und öffnen Sie ihre Gespräche
Transkripte durchsuchenGespräche durchsuchenSchlüsselwort- und semantische Suche im Gesprächsverlauf
A/B-Tests durchführenExperimenteTesten Sie Änderungen an der Agentenkonfiguration mit Live-Traffic
Agentenverhalten testenTestsErstellen und führen Sie automatisierte Tests für Ihre Agenten aus
Gesprächsqualität analysierenGesprächsanalyseGewinnen Sie Erkenntnisse und bewerten Sie Gesprächsergebnisse
Metriken und Analysen verfolgenAnalysenÜberwachen Sie Leistungsmetriken und Gesprächsverlauf
Datenaufbewahrung konfigurierenDatenschutzLegen Sie Aufbewahrungsrichtlinien für Gespräche und Audio fest
LLM-Kosten senkenKostenoptimierungÜberwachen und optimieren Sie Ausgaben für Sprachmodelle
Agenten als Code verwaltenCLIVersionskontrolle und Bereitstellung von Agenten über Ihr Terminal
Agenten über Claude verwaltenGehostetes MCPErstellen und aktualisieren Sie Agenten über jeden MCP-Client

Architektur

ElevenAgents koordiniert vier Kernkomponenten:

  1. Ein feinabgestimmtes Speech to Text (ASR)-Modell für Spracherkennung
  2. Ein Sprachmodell Ihrer Wahl oder ein benutzerdefiniertes LLM
  3. Ein Text to Speech (TTS)-Modell mit geringer Latenz für mehr als 10.000 Stimmen und über 70 Sprachen
  4. Ein proprietäres Sprecherwechselmodell, das das Timing von Gesprächen steuert

Voice Agents können auch ein Realtime-Modell verwenden, ein ElevenLabs-Modell für latenzarme Sprachdialoge.

Wie Eleven Realtime mit ElevenAgents und Speech Engine zusammenhängt

ElevenLabs bietet drei Möglichkeiten, einem Produkt Sprache hinzuzufügen. Jede eignet sich für einen anderen Grad an Kontrolle und Integrationsaufwand.

ProduktWas es istHauptzielgruppe
ElevenAgentsEine vollständige Omnichannel-Agentenplattform. Läuft auf Realtime-Modellen oder auf einer vollständig kaskadierten, konfigurierbaren Pipeline mit benutzerdefiniertem TTS, LLM, STT, Workflows, Evals und Monitoring.Entwickler und Unternehmen, die produktive Agenten im großen Maßstab entwickeln.
Realtime-ModelleEine eigenständige API mit einer Reihe von Speech-to-Speech-Modellen, die jeweils für einen anderen Anwendungsfall optimiert sind. Direkt über die Realtime API oder als Modelloption in ElevenAgents verfügbar.Entwickler und Unternehmen, die Sprache mit minimaler Komplexität hinzufügen möchten, einschließlich Teams, die bereits eine andere Echtzeit-Sprach-API nutzen und wechseln möchten.
Speech EngineDie reine Sprachorchestrierungsebene für Teams, die bereits einen textbasierten Chat-Agenten entwickelt haben und Sprache hinzufügen möchten.Entwickler und Unternehmen, die bereits einen Text-Agenten entwickelt haben und Sprache hinzufügen möchten.

Lesen Sie den Kompatibilitätsleitfaden zur OpenAI Realtime API, um Realtime-Modelle über das Realtime SDK und Wire-Protokoll von OpenAI zu verbinden, sowie die Speech Engine-Übersicht, um einem bestehenden Text-Agenten Sprache hinzuzufügen.