זיהוי סוף התור
להחליט מתי המשתמש סיים לדבר. מוקדם מדי, והסוכן קוטע אותו. מאוחר מדי, והוא מרגיש איטי. לכן מכווננים את זה לכל שפה.
סוכן קולי AI בעברית ובאנגלית
סוכן קולי שעונה בזמן.
ועוצר כשמפריעים לו.
תמלול דיבור, מודל עם כלים וקול, והכול בסטרימינג. מי שמדבר עם בוט קולי לעסקים שופט אותו כבר בשנייה הראשונה, ולכן אנחנו בונים ומודדים את כל השרשרת על הקלטות אמיתיות, בשפות שלכם.
Ultrabot נבנה על ידי MLAIA Data Scienceבהובלת ד״ר יוחאי אדליץ, דוקטורט ממכון ויצמן
איך זה עובד
שלושה מודלים ברצף.
כל אחד מוסיף השהיה.
כל שלב עובר בסטרימינג, והסוכן מתחיל לדבר כבר במשפט הראשון, לא אחרי שכל התשובה מוכנה.
תמלול דיבור בזמן אמת
נבחר לפי הדיוק על אוצר המילים שלכם ולפי ההשהיה בסטרימינג. קטעים לא ברורים נזרקים, ולא מקבלים תשובה.
הסוכן
מודל עם כלים לקביעת תורים, לחיפוש מידע או לעדכונים, שמשחרר את התשובה משפט אחר משפט.
הקראת טקסט (TTS)
משווים קולות לפי טבעיות, הגייה והזמן עד הצליל הראשון, עם קול גיבוי אם אחד מהם איטי.
עצירה כשמפריעים
הסוכן משתתק כשהמשתמש מדבר. שיעול? ההשמעה ממשיכה. בקשה אמיתית? התור נעצר.
מודלי דיבור-לדיבור
Nova Sonic או מודלי realtime מקשיבים ומדברים בצעד אחד. אנחנו משווים אותם לשרשרת הרגילה לפני שבוחרים.
מה כבר בנינו
עוזר קולי בעברית ובאנגלית,
עם אווטאר שמדבר.
לאפליקציה בתחום הבריאות, שנמצאת כעת בפיתוח: Amazon Transcribe לעברית באזור ענן באירופה, Claude ב-Bedrock, דיבור משפט אחר משפט, עצירה רכה כשמפריעים, ומעבר לקול של המכשיר כשהענן איטי. הוא נשען על עבודת האודיו והדיבור של MLAIA, כולל הפחתת רעשים וביטול הד (באנגלית).
אנחנו מתארים פרויקטים של לקוחות באופן כללי. פרטים נוספים בשיחה, בכפוף לסודיות.
סוכן קולי בעברית ובשפות נוספות
עברית צריכה בדיקות משלה.
לא הגדרות מאנגלית בתרגום.
טקסט בלי ניקוד, פנייה בלשון זכר או נקבה, ומתקשרים שעוברים שפה באמצע משפט.
הגייה
ניקוד ורמזים פונטיים לשמות, שנבדקים על אוצר המילים שלכם.
זיהוי של המונחים שלכם
מילונים מותאמים, שנבדקים על הקלטות עם שמות המוצרים שלכם.
מגדר ומשלב
לשון הפנייה והמשלב הנכונים, בטקסט ובקול.
אפשרויות לרכיבי הקולElevenLabs ScribeAmazon TranscribeDeepgramGoogle SpeechWhisperElevenLabsGoogle Chirp & WaveNetAmazon PollyCartesiaNova SonicWebSocket & WebRTCLiveKitAmazon ConnectTwilio
תהליך עבודה מעשי
מודדים על הקלטות אמיתיות.
ואז משפרים את השלב האיטי ביותר.
מגדירים את השיחה
מי מתקשר, באילו שפות, באיזה ערוץ, ואילו פעולות מותרות.
משווים ספקים
תמלול וקולות, מושווים על ההקלטות שלכם.
בונים ומכווננים
סטרימינג, זיהוי סוף התור ועצירה כשמפריעים, מכווננים על שיחות ניסיון.
מפעילים
מעקב אחרי השהיות, הפרעות והעברות לנציג, לפי כללי פרטיות.
לפני שמתחילים
שאלות טובות. תשובות ישירות.
כמה מהר סוכן קולי יכול לענות?
זה תלוי בערוץ, במודלים וברשת. אנחנו מודדים כל שלב על ההגדרות שלכם ומעבירים את כולם בסטרימינג, כך שהסוכן מתחיל לדבר כבר במשפט הראשון ולא אחרי שכל התשובה מוכנה.
אפשר להשתמש ב-ElevenLabs?
כן. ElevenLabs הוא אחד הקולות שאנחנו מחברים ומשווים. כשמדובר במידע אישי או רפואי, אנחנו בודקים קודם את תנאי הספק לגבי הנתונים, וכשצריך עוברים לספק עם החוזה המתאים.
סוכן קולי יכול לשמש מענה קולי חכם בטלפון?
כן, דרך Amazon Connect, Twilio או ספק SIP. אודיו של שיחת טלפון צר יותר ורועש יותר מאודיו באתר, ולכן את זיהוי הדיבור ואת זיהוי סוף התור בודקים על שיחות אמיתיות.
מה קורה כשהסוכן לא יכול לעזור?
הוא אומר את זה ומעביר הלאה: לנציג, לבקשה לחזרה טלפונית, או להודעה עם סיכום השיחה עד אותו רגע, לפי הערוץ.
אתם מקליטים את השיחות?
רק אם החלטתם על כך והמשתמש יודע. ברבות מהמערכות שתכננו לא נשמרים אודיו או תמלולים בכלל, ונרשם רק באילו כלים הסוכן השתמש.
דברו עם בן אדם
ספרו לנו
על מה אתם עובדים.
תארו את הבעיה, את המידע שיש לכם ואיך תיראה הצלחה. נחזור אליכם עם צעד ראשון מעשי.
נא לא לצרף מידע סודי, סיסמאות או מידע רפואי של מטופלים.