ElevenLabs,一家專注於AI語音克隆和文字轉語音API的新創公司,近期重磅推出了一項新功能:用戶可以自主建立完整的對話式AI智能體。這項新功能讓使用者在ElevenLabs的開發者平台上,根據自身需求客製對話智能體的諸多參數,例如語音語調、回覆長度等等,大大提升了AI智能體的客製化程度與實用性。此舉不僅簡化了創建對話機器人的流程,也為開發者提供了更靈活、更強大的工具,以滿足各種不同的應用情境。
ElevenLabs 是一家專注於AI 語音克隆和文字轉語音API 的新創公司,最近宣布推出用戶可以建立完整對話式AI智能體的新功能。
使用者現在可以在ElevenLabs 的開發者平台上,依據自己的需求,客製化對話智能體的多種變量,例如語音語調和回覆長度。

ElevenLabs 過去主要提供不同的語音和文字轉語音服務。該公司成長主管Sam Sklar 在接受TechCrunch 採訪時表示,許多客戶早已在使用該平台創建對話式AI智能體。但在整合知識庫和處理客戶中斷方面是最大的挑戰。因此,ElevenLabs 決定建立一個完整的對話機器人管道,以便簡化這個過程。
使用者可以透過登入ElevenLabs 帳號,選擇範本或建立新項目來開始建立對話智能體。他們可以選擇智能體的主要語言、首條訊息和系統提示,以確定智能體的個性。
此外,開發者還需選擇大型語言模型(如Gemini、GPT 或Claude)、回應的溫度(決定創意)以及令牌使用限制。
使用者還可以根據自己的需求添加知識庫,例如文件、URL 或文字區塊,以增強對話機器人的能力。同時,他們可以將自己的自訂大型語言模型與該機器人整合。 ElevenLabs 的SDK 相容於Python、JavaScript、React 和Swift,此外,該公司還提供WebSocket API,方便進一步客製化。
公司還允許用戶定義資料收集標準,例如與智能體對話的客戶姓名和電子郵件,並使用自然語言定義通話的成功與否評估標準。
ElevenLabs 正在利用其現有的文字轉語音管道,同時也為新對話式人工智慧產品開發語音轉文字功能。目前,該公司並未單獨提供語音轉文字API,但未來可能會推出,從而與Google、微軟和亞馬遜等公司的語音轉文字API 競爭,以及與OpenAI 的Whisper、AssemblyAI、Deepgram、Speechmatics 和Gladia 等專業API 展開競爭。
該公司計劃以超過30億美元的估值籌集新一輪資金,且正與其他語音AI 新創公司如Vapi 和Retell 展開競爭,這些公司同樣在建立對話智能體。更重要的是,ElevenLabs 將與OpenAI 的即時對話API 競爭。不過,ElevenLabs 相信其客製化能力和切換模型的靈活性,將使其在競爭中佔據優勢。
劃重點:
ElevenLabs 推出了建構對話式AI智能體的新功能,讓使用者自訂多種變數。
使用者可以添加知識庫以增強智能體能力,並將自訂大型語言模型與之整合。
ElevenLabs 計劃以超過30億美元的估值籌集資金,並與OpenAI 等競爭對手競爭。
總而言之,ElevenLabs 的新功能為建立自訂對話式AI智能體提供了前所未有的靈活性和便利性,這將推動其在競爭激烈的AI市場中佔據更有利的地位。未來,ElevenLabs 的發展值得持續關注。