最近,和一個搞硬件的朋友聊天
他說——
“我職業生涯最恥辱的事,就是三年前給本地銀行做了款客服機器人,放在營業大廳里,‘丟人現眼’了。“
這個機器人上崗第一天
就被客戶嫌棄,不大聰明
經常機械地重復一句臺詞,“請取號”
上崗即失業,客戶沒再啟用
放在角落吃灰,這一放就是三年
年前回訪,它脖子銹得嘎吱響
客戶摸了一手灰,叨叨說
“這家伙真占地方!還算個固定資產,扔了也不是,留著更鬧心!”。
聽完臉火辣辣的,三年哪,丟人現眼
不過,今年轉機來了
大模型的風吹到了智能硬件圈
訊飛兩大平臺幫他“找回了臉”
?訊飛AIUI開放平臺:一個讓硬件具備智能交互能力的平臺,讓硬件能聽得清、說得準、會思考。
?訊飛機器人超腦平臺:一個專門負責給機器人裝上“超腦”的平臺,讓機器人能聽會說、能思考、善行動。
通過訊飛AIUI開放平臺
王濤給機器人做了小升級,短短兩周
這家伙的交互能力就突飛猛進了
? 語言的進化:一開口驚艷所有人
毫秒響應
之前客戶問一句,半天才慢吞吞答一句
現在所有場景都能極速響應
不搶話、不冷場
全雙工擬人交互
之前是“一問一答”
它說話時,你不能插嘴
否則,它就“凌亂”了
現在雙方能同時說話
隨時打斷,真正做到連續對話不卡殼
還能識別對方說話的人聲情緒
并在對方猶豫、等待或附和的時候
自動延?拾?
避免傳統全雙工中的誤觸發和搶答難題
多模態降噪
營業廳環境嘈雜
之前背景音樂一響,語音立馬變啞巴
現在精準識別語音指令,聽清每句話
? 情商的進化:像個人精,提供滿滿的情緒價值
會情感計算
之前,大部分智能硬件的回答
每句都是公事公辦,缺點人情味
現在,它能聽出
你是高興還是難過,還是想罵人…
接得住人話,開口撩人本事越來越強
共情交互能?超級牛掰
記憶系統
之前,不記人、不記事
隔壁阿姨常來存錢,它都當生人看
現在,AIUI讓硬件具有類?記憶系統
在得到用戶授權的前提下
基于對話歷史?動?成個性化知識庫
開口就是張大爺、李大媽,劉經理...
在王濤看來,這兩項升級
主要還是側重語言交互能力
雖然幫他“一雪前恥”已經足夠
但他心里還想著更高級的事兒
?大腦的進化:機器人正在集體告別“沒腦子”時代
目前【機器人】產業是大熱門
科大訊飛提供了【機器人超腦平臺】
依托訊飛超腦2030技術底座
專門教機器人“做人”
比如,多模態感知表達、開放式人機交互
大小腦協同運動控制、軟硬件一體和模型訓練等
已成功應用被多個人形機器人搭載
”訊飛超腦“提供了
軟硬件一體化快速集成方式
機器人廠商不用自己從零開發
即插即用,就能快速實現
讓機器人能聽會說、能理解、會行動
有了「超腦」加持
這機器人可太會“做人”了
多模態交互融合
讓機器人耳聽八方眼觀六路
人臉識別→看得出你是誰
唇形識別→判斷你在說什么,嘈雜環境更準
物體檢測→認得周圍的物品和場景
把“聽覺”+“視覺”+“環境感知”融合起來
多模態感知交互的好處是
在獲得用戶授權前提下提供個性化服務
看到你 → 人臉識別確認“李先生”
自動調出你的偏好、卡等級
它能通過唇形+語音同時理解需求
邊想邊動邊做
大模型認知和理解
讓機器人能理解會行動
“超腦”依托訊飛星火大模型
幫機器人構建了【大腦+小腦】閉環
“大腦” 負責思考,“小腦” 負責行動
讓機器人具備自然和復雜指令的理解能力
比如
下面這樣的場景
客戶來到銀行
客戶對問銀行機器人:“我想取錢, ATM機在哪?”
“大腦” 負責理解:理解需求(取錢+找ATM),并快速規劃。
“小腦”負責行動:身體轉向右后方,同時語音引導:“您跟我來“
聽王濤講完自己的“雪恥”心得
特大妹還是有點懵
一邊兒是“AIUI”,一邊兒是“超腦”
這倆平臺到底有啥區別
王濤也算是資深使用者了
立馬在紙上給特大妹畫了畫
AIUI開放平臺,是以大模型理解為核心的全鏈路人機交互平臺。匯聚了降噪算法、聲音、圖像、數字虛擬人等人機交互全鏈路核心能力,支持智能體、知識庫自由定制,可以快速讓你的應用和設備能看、能聽、會說,能理解、會思考。
機器人超腦平臺,是依托訊飛超腦2030技術底座,聚焦多模態感知表達、開放式人機交互、大小腦協同運動控制、軟硬件一體和模型訓練,為機器人廠商提供多模態感知交互和大模型認知理解服務。通過軟硬件一體化的快速集成,實現機器人能聽會說、能理解會行動。
講完這兩大概念
王濤又講起了行業八卦
一個硬件工程師的觀察
讓產品開口說話、有智商
成了每個硬件產品制造商的訴求
汕頭一家玩具工廠
他們做傳統的毛絨玩具
前段時間,內部出現了非常大的爭論
最終達成共識,做智能玩具
讓玩具開口說話,能和人溝通交流
他們想找一個快速集成方案
最終選擇了基于訊飛AIUI平臺的
「兒童玩具解決方案」
AIUI接入集成也超簡單
支持SDK、Websocket、硬件模組等多種方式
接下來,科大訊飛還有猛料
這就是6月12日在深圳舉辦的
科大訊飛智能交互產品升級發布會
王濤直言,看完這場發布會
內心有點興奮
新東西有點多
簡單分享一下
??
①AIUI開放平臺「煥新升級」
從設備端聲學處理到云端智能理解
再到內容響應與定制開發
構建起完整交互鏈路
AIUI平臺?從2015年正式上線以來
鏈接生態伙伴20萬+,終端設備數22.5億
在?載、AI硬件、機器?等領域建??業標桿
②機器人超腦平臺「智慧升級」
升級多人多模態交互能力
升級全離線交互套件
秘密武器“智能語音背包”正式發布
無需硬件改造,即插即用
大會現場,搭載背包的宇樹G1機器人
從“沉默鐵疙瘩”秒變“社交達人”
目前“超腦”平臺
已經與520+機器人企業完成集成和使用
落地政企服務、智慧營銷、醫療養老、教培等多個場景
③虛擬人平臺「創新升級」
用戶僅需一句話復刻聲音
一張圖生成數字分身
滿足各種場景和身份需求
同時,星辰開發平臺再次升級
幫助用戶深度定制AI智能體
訊飛還一口氣推出十大標桿場景方案
軟硬結合,推動大模型應用落地
講完發布會的干貨
王濤有點意猶未盡,興奮地補了一句
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.