展會(huì)信息港展會(huì)大全

智譜AI上線最新“自主智能體”,“Her”終于能照進(jìn)現(xiàn)實(shí)了
來(lái)源:互聯(lián)網(wǎng)   發(fā)布日期:2024-10-26 11:12:21   瀏覽:1424次  

導(dǎo)讀:劃重點(diǎn) 01智譜AI推出自主智能體AutoGLM,可模擬用戶點(diǎn)擊屏幕的手機(jī)操作助手和瀏覽器助手。 02AutoGLM已適配8款知名應(yīng)用軟件,覆蓋日常生活常用的線上聊天、網(wǎng)購(gòu)、社交等功能。 03除此之外,智譜AI還推出了端到端情感語(yǔ)音模型GLM-4-Voice,具備一定自我糾錯(cuò)能...

劃重點(diǎn)

01智譜AI推出自主智能體AutoGLM,可模擬用戶點(diǎn)擊屏幕的手機(jī)操作助手和瀏覽器助手。

02AutoGLM已適配8款知名應(yīng)用軟件,覆蓋日常生活常用的線上聊天、網(wǎng)購(gòu)、社交等功能。

03除此之外,智譜AI還推出了端到端情感語(yǔ)音模型GLM-4-Voice,具備一定自我糾錯(cuò)能力。

04目前,GLM-4-Voice已上線清言app,用戶可與清言自然聊天。

05智譜AI與高通、三星手機(jī)等合作,推動(dòng)大模型落地AI手機(jī)市常

以上內(nèi)容由騰訊混元大模型生成,僅供參考

文 | 田哲

編輯 | 蘇建勛

在對(duì)標(biāo)OpenAI之路上,智譜AI又近了一步。

今年年初,OpenAI被爆出將自研AI Agent軟件,它可替代人類,自動(dòng)導(dǎo)航至任何網(wǎng)站并執(zhí)行指定任務(wù)。

10月25日,智譜AI推出相似產(chǎn)品自主智能體AutoGLM,智譜將其稱為是一個(gè)可模擬用戶點(diǎn)擊屏幕的手機(jī)操作助手,以及點(diǎn)擊網(wǎng)頁(yè)的瀏覽器助手。

智譜的展示視頻顯示,AutoGLM可實(shí)現(xiàn)網(wǎng)頁(yè)進(jìn)行線上點(diǎn)餐、整理小紅書筆記并生成攻略、總結(jié)論文等功能。

同時(shí),智譜AI還推出了端到端情感語(yǔ)音模型GLM-4-Voice。這款情感語(yǔ)音模型不僅能夠模擬真實(shí)的情感表達(dá),甚至連細(xì)微的停頓、喘氣都表現(xiàn)得惟妙惟肖。

這一技術(shù)的突破,與科幻愛(ài)情電影《Her》的部分情節(jié)相似。電影中,男主角西奧多與AI助手薩曼莎偶然相識(shí),薩曼莎正是通過(guò)富有情感的語(yǔ)音互動(dòng)讓人感到貼近、溫暖。

如今,智譜AI的情感語(yǔ)音模型似乎正把《Her》中的科幻場(chǎng)景帶入我們的日常生活,人工智能不再只是冷冰冰的工具,而開(kāi)始具備“情感”與“個(gè)性”。

《Her》已經(jīng)初具雛形,具有自我意識(shí)和情感的AI或許不久會(huì)出現(xiàn)。

自主智能體上線:能點(diǎn)外賣、夸彩虹屁

與OpenAI的AI Agent相似,智譜清言AutoGLM模型,也無(wú)需用戶手動(dòng)操作示范,不受制于簡(jiǎn)單的任務(wù)場(chǎng)景或API調(diào)用,即可替代人類在電子設(shè)備執(zhí)行操作。

目前,智譜AutoGLM可適配微信、淘寶、美團(tuán)、小紅書等8款知名應(yīng)用軟件,覆蓋日常生活常用的線上聊天、網(wǎng)購(gòu)、社交、地圖、酒店火車訂票等功能。

具體而言,當(dāng)你向AutoGLM發(fā)出指令后,雙方之間的對(duì)話將以語(yǔ)音形式展現(xiàn),并實(shí)時(shí)顯示字幕。

例如,你可以要求AutoGLM在大眾點(diǎn)評(píng)給出指定的店家好評(píng),并自動(dòng)編輯評(píng)論。在執(zhí)行“發(fā)送評(píng)論”這一超出指令的操作時(shí),AutoGLM會(huì)主動(dòng)提示是否進(jìn)行。

你也能讓AutoGLM查找淘寶某一時(shí)段的歷史訂單,復(fù)購(gòu)指定商品。

就連向指定微信好友的朋友圈點(diǎn)贊、評(píng)論,這一步驟較長(zhǎng)的任務(wù)也能完成。

除了網(wǎng)購(gòu)、編輯評(píng)論等功能之外,AutoGLM還能批量總結(jié)微信公眾號(hào)多篇文章,并生成文章摘要。

智譜公眾號(hào)介紹,AutoGLM基于自進(jìn)化在線課程強(qiáng)化學(xué)習(xí)框架WEBRL,克服了訓(xùn)練任務(wù)稀缺、反饋信號(hào)稀少和策略分布漂移等網(wǎng)頁(yè)智能體研究和應(yīng)用難題,加之自適應(yīng)學(xué)習(xí)策略,能夠在迭代過(guò)程中不斷改進(jìn)、持續(xù)穩(wěn)定地提高自身性能。這意味著,AutoGLM具備了一定自我糾錯(cuò)能力。

智譜AI上線最新“自主智能體”,“Her”終于能照進(jìn)現(xiàn)實(shí)了

來(lái)源:智譜公眾號(hào)

據(jù)悉,為了保護(hù)用戶隱私,AutoGLM不會(huì)主動(dòng)獲取用戶的個(gè)人隱私信息,如果需要執(zhí)行授權(quán)范圍之外的任務(wù),AutoGLM會(huì)主動(dòng)提示以獲取用戶同意。

即使用戶向AutoGLM授權(quán),也不意味著AutoGLM永久擁有相關(guān)權(quán)限。每次后臺(tái)啟動(dòng)AutoGLM,都會(huì)重新向用戶申請(qǐng)無(wú)障礙權(quán)限。

目前,AutoGLM已上線電腦端開(kāi)放使用,安裝清言插件即可使用,手機(jī)端AutoGLM正開(kāi)放安卓手機(jī)內(nèi)測(cè)。

情感語(yǔ)音模型,有情感、會(huì)停頓

兩個(gè)月前,智譜清言首次秀了一把語(yǔ)音通話技術(shù),雖然當(dāng)時(shí)語(yǔ)音通話功能能聽(tīng)懂對(duì)話、回復(fù)還算準(zhǔn)確,但語(yǔ)氣像是機(jī)器人“背稿子”,沒(méi)啥感情。要是讓它來(lái)點(diǎn)情感表達(dá),它還會(huì)一本正經(jīng)地告訴你:“作為一個(gè)人工智能,無(wú)法表達(dá)感情”。

不過(guò),現(xiàn)在升級(jí)后的情感語(yǔ)音模型,感覺(jué)就不一樣了。語(yǔ)音聽(tīng)起來(lái)更有“人味兒”,還能加點(diǎn)感情,像真人一樣跟你聊。

它已經(jīng)學(xué)會(huì)了用撒嬌、調(diào)侃、憤怒、歇斯底里等語(yǔ)氣表達(dá)。比如,擬人語(yǔ)音能模仿孩子,用撒嬌語(yǔ)氣向姐姐要糖葫蘆。

模仿小孩撒嬌

如果普通話聽(tīng)膩了,沒(méi)問(wèn)題,它還能切換為北京、東北、廣東、臺(tái)灣、重慶五地腔調(diào),比如介紹美食時(shí)那句經(jīng)典的“巴適得板”,直接讓人食欲大開(kāi)。

模仿四川方言

玩角色扮演游戲也不成問(wèn)題,可以把它設(shè)定為《哈利波特》中的反派伏地魔與你戰(zhàn)斗,并能要求它以指定的語(yǔ)氣進(jìn)行扮演。比如它能以電視劇中常見(jiàn)的反派語(yǔ)氣說(shuō)話。

模仿伏地魔

如果挑戰(zhàn)繞口令加速,它可能就會(huì)“翻車”了,發(fā)音有點(diǎn)“飄”。

加速說(shuō)話

不過(guò)在某些時(shí)候,GLM-4-Voice說(shuō)話時(shí)偶爾會(huì)出現(xiàn)短暫的電流聲。

電流聲

另外,發(fā)音偶爾也可能不標(biāo)準(zhǔn),比如將為什么的“為”,發(fā)音為“微”。

發(fā)音偶爾不標(biāo)準(zhǔn)

據(jù)了解,GLM-4-Voice結(jié)合了自然語(yǔ)言生成(NLG)和語(yǔ)音合成技術(shù),相比傳統(tǒng)的TTS技術(shù)(Text-to-Speech),擬人語(yǔ)音能夠理解上下文語(yǔ)境,實(shí)現(xiàn)富有情感的自然對(duì)話。

此外,GLM-4-Voice以音頻 token 的形式直接建模語(yǔ)音,在一個(gè)模型里面同時(shí)完成語(yǔ)音的理解和生成,信息損失和誤差積累相比傳統(tǒng)級(jí)聯(lián)方案更少,理論上有著更高的建模上限。

智譜AI上線最新“自主智能體”,“Her”終于能照進(jìn)現(xiàn)實(shí)了

GLM-4-Voice 模型架構(gòu)圖;來(lái)源:智譜AI

這不是清言擬人語(yǔ)音通話的全部功能,其對(duì)標(biāo)GPT 40,將在響應(yīng)和打斷速度、情緒感知情 感共鳴、語(yǔ)音可控表達(dá)、多語(yǔ)言多方言等方面進(jìn)一步突破。目前,其已實(shí)現(xiàn)不同情緒,各地方言說(shuō)話時(shí),還能調(diào)節(jié)語(yǔ)速、音量,實(shí)現(xiàn)與真人般的對(duì)話。

目前,GLM-4-Voice已上線清言app,用戶可與清言自然聊天。值得注意的是,GLM-4-Voice已對(duì)外開(kāi)源,這是智譜AI首個(gè)開(kāi)源的端到端多模態(tài)模型。

下一步,它還將支持視頻通話功能,屆時(shí)不僅能認(rèn)出物體,還能用語(yǔ)氣帶來(lái)“眼神交流”的互動(dòng)感。

據(jù)智譜公眾號(hào),智譜發(fā)布從文本、圖像、視頻到情感語(yǔ)音模型等多模態(tài),并讓AI學(xué)會(huì)使用各種工具,原因在于其打造了新的基座模型GLM-4-Plus。在語(yǔ)言文本能力方面,GLM-4-Plus和GPT-4o、405B參數(shù)量的Llama3.1 相當(dāng)。

加碼AI手機(jī),智譜找到商業(yè)化大入口

“現(xiàn)在的小模型還處于找市場(chǎng)的階段,需要將市場(chǎng)與技術(shù)磨合,提升效率的同時(shí)找到新的應(yīng)用場(chǎng)景。”

兩個(gè)月前,智譜AI CEO張鵬與《智能涌現(xiàn)》的訪談中,提到了這一觀點(diǎn)。與手機(jī)廠商合作AI智能體,或許就是張鵬所說(shuō)的新場(chǎng)景。

找到場(chǎng)景,是模型廠商的當(dāng)務(wù)之急,這意味著模型廠商不僅能獲得穩(wěn)定的收入來(lái)源,完成自我造血,同時(shí)也能在場(chǎng)景中持續(xù)手機(jī)數(shù)據(jù),進(jìn)行產(chǎn)品迭代。

而AI智能體是大模型應(yīng)用的主要形式之一,其具備自主感知、決策并采取行動(dòng),被認(rèn)為將是電腦、智能手機(jī)下一代產(chǎn)品形態(tài)的AI手機(jī)、AI PC,就搭載了AI智能體。據(jù)咨詢機(jī)構(gòu)IDC預(yù)計(jì),2027年,中國(guó)市場(chǎng)AI手機(jī)和AI PC的市占率將分別超過(guò)50%、80%。

智譜正在加緊推動(dòng)大模型落地AI手機(jī)。本月22日,智譜與高通達(dá)成合作,為驍龍 8 至尊版適配優(yōu)化 GLM-4V 端側(cè)視覺(jué)大模型,提供多模態(tài)交互方式;23日,智譜與三星手機(jī)圍繞GLM-4V 端側(cè)視覺(jué)大模型合作,雙方將打造AI產(chǎn)品。

而AutoGLM,智譜也透露正在與榮耀等手機(jī)廠商開(kāi)展深度合作。事實(shí)上,今年9月智譜與榮耀已成立AI大模型技術(shù)聯(lián)合實(shí)驗(yàn)室。

榮耀也有意進(jìn)一步提升AI智能體的表現(xiàn)。在23日的榮耀MagicOS 9.0發(fā)布會(huì)媒體采訪中,榮耀終端有限公司CEO趙明表示,榮耀正在通過(guò)AI重構(gòu)操作系統(tǒng),打造核心底層能力,以實(shí)現(xiàn)更加智慧化的服務(wù)。

AI手機(jī)風(fēng)頭正盛,多家手機(jī)廠商如蘋果、榮耀、vivo、OPPO等爭(zhēng)相推出具備AI功能的手機(jī),AI功能如AI消除、AI通話摘要等。

然而,搭載AI智能體的手機(jī)目前數(shù)量較少,其中原因,既包括行業(yè)技術(shù)發(fā)展仍不成熟,另一反面相關(guān)標(biāo)準(zhǔn)長(zhǎng)期缺失。

不過(guò),這一情況正在逐步改善。

市場(chǎng)層面,Open.ai、智譜等模型廠商已傳出與手機(jī)公司合作消息,將推動(dòng)模型廠商、應(yīng)用軟件提供者與手機(jī)廠商之間的合作。

政策層面,中國(guó)信息通信研究院與國(guó)內(nèi)多家手機(jī)廠商聯(lián)合發(fā)布《終端智能化分級(jí)研究報(bào)告》,其中對(duì)終端智能化進(jìn)行了分級(jí)定義,一定程度,這將推進(jìn)國(guó)內(nèi)AI手機(jī)市場(chǎng)的發(fā)展。

智譜AI上線最新“自主智能體”,“Her”終于能照進(jìn)現(xiàn)實(shí)了

終端智能化分級(jí)定義

多款大模型已與智能手機(jī)生態(tài)公司合作,或許AI手機(jī),將成為智譜商業(yè)驅(qū)動(dòng)的主引擎。

贊助本站

相關(guān)內(nèi)容
AiLab云推薦
推薦內(nèi)容
展開(kāi)

熱門欄目HotCates

Copyright © 2010-2024 AiLab Team. 人工智能實(shí)驗(yàn)室 版權(quán)所有    關(guān)于我們 | 聯(lián)系我們 | 廣告服務(wù) | 公司動(dòng)態(tài) | 免責(zé)聲明 | 隱私條款 | 工作機(jī)會(huì) | 展會(huì)港