नेविगेशन पर जाएँ

एक्सप्रेसिव मोड

ऐसे वॉइस एजेंट बनाएं जो बातचीत के संदर्भ के आधार पर टोन, समय और भावनात्मक प्रस्तुति को ढाल सकें।

परिचय

एक्सप्रेसिव मोड एजेंट को ऐसी स्पीच देने में सक्षम बनाता है जो इरादे, भावना और जोर को दर्शाती है। यह यूज़र की आवाज़ और उनकी बातों के अनुसार रीयल टाइम में ढलता है। यह कन्वर्सेशनल स्टैक में दो सिस्टम-लेवल सुधारों पर आधारित है:

  1. Eleven v4 Turbo — ElevenAgents में उपलब्ध सबसे भावनात्मक रूप से बुद्धिमान और संदर्भ-सचेत टेक्स्ट टू स्पीच मॉडल।
  2. एक नया टर्न-टेकिंग सिस्टम — कम रुकावटों के साथ ज़्यादा सटीक समय पर जवाब।

जब आप अपने एजेंट के TTS मॉडल के रूप में Eleven v4 Turbo चुनते हैं, तो एक्सप्रेसिव मोड अपने-आप चालू हो जाता है।

Eleven v4 Turbo

Eleven v4 Turbo, Eleven v4 का रीयल-टाइम वेरिएंट है। इसकी औसत इन्फ़रेंस लेटेंसी ~100ms है और इसे लाइव, आगे-पीछे होने वाले संवाद के लिए ऑप्टिमाइज़ किया गया है। यह अलग-अलग टर्न के बीच बातचीत का संदर्भ बनाए रखता है और हर बातचीत के टोन और इरादे के अनुसार प्रस्तुति ढालता है।

  • संदर्भ-सचेत प्रस्तुति: एजेंट बातचीत के संदर्भ के आधार पर टोन ढालते हैं — यूज़र के चिंतित लगने पर शांत तरीके से जवाब देते हैं या स्पष्टता ज़रूरी होने पर ज़्यादा सीधे जवाब देते हैं।
  • स्पष्ट भावनात्मक नियंत्रण: अपने ब्रांड की आवाज़ और अनुपालन आवश्यकताओं के अनुरूप प्रस्तुति के लिए, सटीक ट्रिगर से लेकर व्यापक स्थितियों तक, सिस्टम प्रॉम्प्ट नियमों से मार्गदर्शन दें।
  • 90+ भाषाओं का समर्थन: Flash मॉडल की ~32 भाषाओं से बढ़ाकर।
  • एक्सप्रेसिव टैग: LLM प्रस्तुति के खास पलों को नियंत्रित करने के लिए [laughs], [whispers] या [sighs] जैसे टैग आउटपुट कर सकता है।

ElevenAgents की कीमतों में हर प्लान के लिए प्रति मिनट कॉल की एक ही दर दी गई है, जिसमें TTS मॉडल के आधार पर कोई अलग दर नहीं है। अतिरिक्त कॉल मिनट की लागत $0.08 प्रति मिनट है और LLM उपयोग का बिल अलग से लिया जाता है। ElevenAgents की कीमतें देखें।

टर्न-टेकिंग सिस्टम

नया टर्न-टेकिंग सिस्टम Scribe v2 Realtime के रीयल-टाइम संकेतों — जिनमें भावनात्मक संकेत और बोलने के पैटर्न शामिल हैं — का उपयोग करके तय करता है कि एजेंट को कब बोलना, रुकना या इंतज़ार करना चाहिए। इससे एजेंट ज़्यादा स्वाभाविक ढंग से जवाब दे पाते हैं, खासकर भावनात्मक स्थितियों में।

उदाहरण के लिए, “हाँ” एक पूर्ण स्वीकृति हो सकता है या आगे बोलते रहने का संकेत। ट्रांसक्रिप्ट के साथ-साथ इसे कैसे कहा गया था (प्रोसोडी जैसे स्पीच संकेत) का विश्लेषण करके सिस्टम एजेंट के जवाब का समय ज़्यादा स्वाभाविक रूप से तय करता है।

टर्न-टेकिंग व्यवहार को टर्न ईगरनेस सेटिंग से और बेहतर ढंग से ट्यून किया जा सकता है।

कॉन्फ़िगरेशन

एक्सप्रेसिव मोड चालू करना

1

TTS मॉडल चुनें

अपने एजेंट का TTS मॉडल Eleven v4 Turbo (eleven_v4_turbo) पर सेट करें। इस मॉडल के साथ एक्सप्रेसिव मोड अपने-आप चालू हो जाता है। इसे बंद करने के लिए expressive_mode को false पर सेट करें।

  1. डैशबोर्ड में अपना एजेंट खोलें और Agent voice पैनल खोलने के लिए Voices में अपनी आवाज़ चुनें।
  2. TTS model family के अंतर्गत V4 Turbo चुनें। Expressive mode टॉगल चालू हो जाएगा और उसके नीचे Suggested audio tags में वे टैग दिखेंगे जिन्हें आपका एजेंट इस्तेमाल कर सकता है।
  3. बदलाव सेव करने के लिए Publish पर क्लिक करें।

एक्सप्रेसिव मोड चालू करना

2

अपने सिस्टम प्रॉम्प्ट में भावनात्मक प्रस्तुति का मार्गदर्शन करें

एजेंट के टोन को ढालने के तरीके का मार्गदर्शन करने के लिए उसके सिस्टम प्रॉम्प्ट में निर्देश जोड़ें। आप व्यापक मार्गदर्शन या खास ट्रिगर इस्तेमाल कर सकते हैं।

सिस्टम प्रॉम्प्ट के उदाहरण

सिस्टम प्रॉम्प्ट में प्राकृतिक भाषा के निर्देशों से अपने एजेंट की भावनात्मक प्रस्तुति का मार्गदर्शन करें। मॉडल इन्हें संदर्भ के अनुसार समझता है, इसलिए हर स्थिति के लिए स्पष्ट टैग ज़रूरी नहीं हैं।

व्यापक मार्गदर्शन

You are a customer support agent. When a user sounds frustrated or upset, respond
in a calm, reassuring tone. When delivering good news, allow your tone to reflect
genuine warmth. Maintain a professional but approachable delivery throughout.

खास ट्रिगर

You are a conversational AI agent with expressive speech capabilities.
Tone guidelines:
- When a user expresses frustration, use a calm and empathetic tone
- When explaining technical steps, use a clear and measured pace
- When a user shares good news, respond with warmth and enthusiasm
- When handling complaints, remain composed and solution-oriented

एक्सप्रेसिव टैग इस्तेमाल करना

संदर्भ-सचेत प्रस्तुति के अलावा, LLM खास पलों को नियंत्रित करने के लिए स्पष्ट टैग आउटपुट कर सकता है। आम टैग में शामिल हैं:

  • [laughs] — स्पीच में हँसी जोड़ता है
  • [whispers] — फुसफुसाने के लिए आवाज़ कम करता है
  • [sighs] — आह भरने का भाव जोड़ता है
  • [slow] — स्पीच की गति धीमी करता है
  • [excited] — प्रस्तुति में उत्साह जोड़ता है

हर टैग सामान्य प्रस्तुति पर लौटने से पहले स्पीच के अगले लगभग 4-5 शब्दों को प्रभावित करता है।

You can also use expressive tags in your responses for precise control:
- [laughs] for moments of humor
- [whispers] for confidential or intimate moments
- [sighs] for resignation or relief
- [slow] when emphasizing important information
Example: "That's great to hear! [laughs] I'm glad we could sort that out for you."

सर्वोत्तम तरीके

अपने एजेंट को स्थिति के अनुसार अपनी भावनात्मक प्रस्तुति ढालने का मार्गदर्शन दें। निराश ग्राहक को शांत, सहानुभूतिपूर्ण जवाब मिलना चाहिए। अच्छी खबर साझा करने वाले यूज़र को सच्ची गर्मजोशी महसूस होनी चाहिए। बेमेल टोन भरोसा कम करता है।

केवल मॉडल के निर्णय पर निर्भर रहने के बजाय अपने सिस्टम प्रॉम्प्ट में स्पष्ट टोन दिशानिर्देश तय करें। इससे आपके ब्रांड की आवाज़ और अनुपालन आवश्यकताओं के अनुरूप एकरूप प्रस्तुति सुनिश्चित होती है।

भावपूर्ण प्रस्तुति भाषाओं के अनुसार अलग हो सकती है। भावनात्मक बारीकियां अपेक्षा के अनुसार पहुँच रही हैं या नहीं, यह सुनिश्चित करने के लिए हर लक्षित भाषा में अपने एजेंट को टेस्ट करें, खासकर उन भाषाओं में जहाँ बातचीत के मानदंड अलग होते हैं।

एक्सप्रेसिव मोड को उचित टर्न ईगरनेस सेटिंग के साथ जोड़ें। धैर्यवान मोड भावनात्मक रूप से संवेदनशील बातचीत में यूज़र्स को ज़्यादा समय देता है, जबकि ईगर मोड तेज़ बातचीत के लिए काम करता है।

यूज़र एक्सप्रेसिव प्रस्तुति पर कैसे प्रतिक्रिया देते हैं, यह ट्रैक करने के लिए बातचीत के विश्लेषण का उपयोग करें। बातचीत के नतीजों और यूज़र फ़ीडबैक के आधार पर अपने टोन दिशानिर्देश बेहतर बनाएं।

सीमाएं

  • एक्सप्रेसिव टैग के प्रभाव सामान्य प्रस्तुति पर लौटने से पहले लगभग 4-5 शब्दों तक रहते हैं।
  • भावपूर्णता आवाज़ों और भाषाओं के अनुसार अलग हो सकती है।

FAQ

नहीं। ElevenAgents की कीमतों में हर प्लान के लिए प्रति मिनट कॉल की एक ही दर दी गई है, जिसमें एक्सप्रेसिव मोड या TTS मॉडल की कोई अलग दर नहीं है: अतिरिक्त कॉल मिनट की लागत $0.08 प्रति मिनट है और LLM उपयोग का बिल अलग से लिया जाता है। ElevenAgents की कीमतें देखें।

Agent voice पैनल में, TTS model family के अंतर्गत V4 Turbo चुनें। इस मॉडल के साथ एक्सप्रेसिव मोड अपने-आप चालू हो जाता है। इसे बंद करने के लिए Expressive mode टॉगल बंद करें या API अथवा CLI से conversation_config.tts.expressive_mode को false पर सेट करें।

यह सिस्टम एजेंट को कब जवाब देना चाहिए, इसका अनुमान लगाने के लिए Scribe v2 Realtime के रीयल-टाइम संकेतों का उपयोग करता है, जिनमें भावनात्मक संकेत और बोलने के पैटर्न शामिल हैं। यह जवाबों का समय स्वाभाविक बनाने के लिए ट्रांसक्रिप्ट और शब्दों को कैसे कहा गया था (प्रोसोडी), दोनों का विश्लेषण करता है।

Eleven v4 में Professional Voice Clones समर्थित हैं। अगर किसी PVC को अभी तक Eleven v4 पर प्रशिक्षित नहीं किया गया है, तो My Voices खोलें, आवाज़ ढूंढें और फाइन-ट्यूनिंग शुरू करने के लिए Eleven v4 के पास मौजूद प्लस बटन पर क्लिक करें। Professional Voice Clones के लिए Clone Strength सहित वॉइस सेटिंग के बारे में Eleven v4 देखें।

Eleven v4 Turbo 90+ भाषाओं का समर्थन करता है, जो Flash मॉडल की ~32 भाषाओं से बढ़ाई गई हैं।

Eleven v4 Turbo की भावनात्मक रेंज Flash और Multilingual v2 से अधिक है और यह बातचीत के संदर्भ के आधार पर प्रस्तुति ढाल सकता है। Flash की ~32 भाषाओं की तुलना में यह 90+ भाषाओं का समर्थन करता है।

संबंधित सुविधाएं