快科技1月20日消息，今日，字節跳動豆包大模型團隊宣布，豆包實時語音大模型今日正式上線，並在豆包app全量開放，將app升級至7.2.0版本即可體驗。
據介紹，豆包實時語音大模型是一款語音理解和生成一體化的模型，實現了端到端語音對話。
相比傳統級聯模式，在語音表現力、控制力、情緒承接方面表現驚艷，並具備低時延、對話中可隨時打斷等特性，號稱“情商智商雙高”。
該模型是真正意義上的端到端語音系統，主要面向中文語境和場景（可進行英語對話，暫不支持多語種）。
豆包表示，依託於語音和語義聯合建模，豆包實時語音大模型擁有豐富表現力，呈現出接近真人的語音表達水準。
通過學習角色語音和情感特點，模型具備強大講故事能力，在對話或內容演繹中，可生動切換成不同角色/狀態，配合不同情緒表達，增強交互趣味性和沉浸感。
聯合建模後，模型湧現出超出預期的指令理解、聲音扮演和聲音控制能力。
比如，目前模型部分方言和口音，主要源自於pretrain階段數據泛化，而非針對性訓練。
豆包實時語音大模型輸出語音表現力高度逼近真人，包括類人的副語言特徵（如語氣詞、停頓思考等），同時賦予模型實時聯網功能，能根據問題，動態獲取最新信息，對時效問題給到精準、及時的回應。
從豆包發布的技術展示來看，該模型語音語氣自然度和情緒飽滿度逼近真人，對話風格更加擬人，情感理解更加深刻，對用戶的情緒做到較好承接。
豆包大模型團隊也坦言，現階段的模型主要支持中文，其他語種尚未較好支持，中文範圍內，模型也僅支持小部分方言和地方口音的理解和表達。
