研究人員推手語(yǔ)轉(zhuǎn)文字AI翻譯器 幫助聽(tīng)障人士正常交流
IT之家 5 月 25 日消息，巴塞羅那超級(jí)計(jì)算中心（BSC）和加泰羅尼亞理工大學(xué)（UPC）的研究人員開(kāi)發(fā)了一種將手語(yǔ)翻譯成文本的新工具，以給予聽(tīng)覺(jué)障礙者更多包容性和可及性。該工具利用人工智能技術(shù)，包括自我注意機(jī)制和更快的吞吐量，以更準(zhǔn)確地理解手語(yǔ)者的姿勢(shì)并產(chǎn)生準(zhǔn)確的文字轉(zhuǎn)寫(xiě)。
(資料圖片)
圖源 Arxiv
該工具基于 How2Sign 數(shù)據(jù)集，這是一個(gè)公開(kāi)可用的大規(guī)模、多模態(tài)和多視圖數(shù)據(jù)集，包括 80 小時(shí)的美國(guó)手語(yǔ)教學(xué)視頻和相應(yīng)的英語(yǔ)文字記錄。該數(shù)據(jù)集由 BSC 和 UPC 發(fā)布，用于訓(xùn)練模型，以便將手語(yǔ)轉(zhuǎn)換為文本。研究人員使用膨脹式三維網(wǎng)絡(luò)（I3D）對(duì)數(shù)據(jù)進(jìn)行預(yù)處理，這是一種視頻提取方法，可以對(duì)視頻進(jìn)行三維過(guò)濾，直接從視頻中獲取時(shí)空信息。并使用了一個(gè)轉(zhuǎn)化器式的機(jī)器學(xué)習(xí)模型，與 ChatGPT 等其他人工智能工具背后的模型類(lèi)似。
圖源論文《Sign Language Translation from Instructional Videos》
該研究的主要作者 Laia Tarrés 表示：“我們開(kāi)發(fā)的新工具是以前發(fā)布的名為 How2Sign 的出版物的延伸，在那里，訓(xùn)練模型所需的數(shù)據(jù)被公布。利用這些已經(jīng)可用的數(shù)據(jù)，我們開(kāi)發(fā)了一個(gè)新的開(kāi)源軟件，能夠?qū)W習(xí)視頻和文本之間的映射。”
圖源 Pexels
研究人員發(fā)現(xiàn)，他們的模型能夠產(chǎn)生有意義的翻譯，但仍存在改進(jìn)的空間。該工具尚處于實(shí)驗(yàn)階段，研究人員將繼續(xù)努力，以創(chuàng)建一個(gè)能夠與無(wú)聽(tīng)力損失者使用的技術(shù)相媲美的工具。
Laia Tarrés 同時(shí)表示：“這個(gè)自動(dòng)手語(yǔ)翻譯的開(kāi)放工具是對(duì)關(guān)注無(wú)障礙環(huán)境的科學(xué)界的寶貴貢獻(xiàn)，它的發(fā)表代表了向?yàn)樗腥藙?chuàng)造更具包容性和無(wú)障礙的技術(shù)邁出的重要一步。”
關(guān)鍵詞：
研究人員推手語(yǔ)轉(zhuǎn)文字AI翻譯器 幫助聽(tīng)障人士正常交流
2023-05-26 08:47:25 
文化和旅游部推出10條長(zhǎng)江主題國(guó)家級(jí)旅游線路
2023-05-26 08:00:22 
不及物動(dòng)詞和及物動(dòng)詞的區(qū)別和聯(lián)系_不及物動(dòng)詞和及物動(dòng)詞的區(qū)別
2023-05-26 06:55:11 
有需求趕緊買(mǎi)！SSD和內(nèi)存已經(jīng)開(kāi)始漲價(jià)了 今日視點(diǎn)
2023-05-26 06:53:41 
每日速讀!英偉達(dá)股價(jià)暴漲：下季度營(yíng)收預(yù)計(jì)超110億美元
2023-05-26 06:51:24 
新寶馬5系來(lái)了：前臉激進(jìn) 電動(dòng)版本來(lái)了 今熱點(diǎn)
2023-05-26 06:42:57 
微信開(kāi)發(fā)新功能被吐槽：QQ十年前就有了 最新資訊
2023-05-26 06:36:02 
亞馬遜海外特惠：買(mǎi)12900K送傲騰！ 環(huán)球訊息
2023-05-26 06:35:41 
今日最新更新內(nèi)容 985畢業(yè)生大量涌入縣城 為獲得公務(wù)員名額有人埋頭苦讀-頭條
2023-05-26 06:13:42 
關(guān)注：熱門(mén)中概股多數(shù)下跌 網(wǎng)易有道跌超14% 小鵬汽車(chē)3日累跌15%
2023-05-26 04:53:18 
今日熱訊：碧翠絲·布萊梅（關(guān)于碧翠絲·布萊梅介紹）
2023-05-26 03:56:57 
有機(jī)光導(dǎo)纖維（關(guān)于有機(jī)光導(dǎo)纖維介紹）_今熱點(diǎn)
2023-05-26 03:06:36
四川規(guī)范校外培訓(xùn) 消息
2023-05-26 02:06:11 
北京密云區(qū)舉辦急救操作技能大賽
2023-05-26 01:42:50 
建筑工程質(zhì)量控制與管理
2023-05-26 00:50:27 
當(dāng)前快看：芬尼-史密斯：知道球隊(duì)擁有什么 但我們無(wú)法預(yù)測(cè)最終的結(jié)果
2023-05-26 00:29:17 
20年前的河南狀元何碧玉，14歲以750分考進(jìn)清華，現(xiàn)狀如何？-環(huán)球簡(jiǎn)訊
2023-05-25 23:54:12 
今頭條！保利發(fā)展四只合計(jì)60.30億公司債券將于6月1日付息
2023-05-25 22:58:41 
摩托羅拉Razr 40 Ultra配置曝光：6.9 英寸165Hz內(nèi)屏、3.6英寸副屏
2023-05-25 22:52:48 
【全球新要聞】藍(lán)寶石RX 7600顯卡首測(cè) 1080p小甜品
2023-05-25 22:47:08 
北京麥當(dāng)勞推出“六一”主題快閃店
2023-05-25 21:27:21 
每日短訊：百隆東方(601339.SH)子公司簽署《房屋征收補(bǔ)償安置協(xié)議》 合計(jì)補(bǔ)償款1.21億元
2023-05-25 21:01:05 
環(huán)球今亮點(diǎn)！兩大巨頭“開(kāi)戰(zhàn)”，股價(jià)雙雙跳水，長(zhǎng)城汽車(chē)大跌6%
2023-05-25 20:15:41 
2023天津高考各科試題及答案解析匯總 各科目真題試卷
2023-05-25 19:00:17 
周末近郊游 艾草采摘正當(dāng)時(shí)
2023-05-25 18:56:53 
塌陷地上長(zhǎng)出致富“金草” 環(huán)球新視野
2023-05-25 18:52:45 
河南寶豐縣41萬(wàn)畝小麥長(zhǎng)勢(shì)喜人 豐收在望
2023-05-25 18:50:32 
英特爾Agilex 7 FPGA R-Tile現(xiàn)已量產(chǎn)，為CPU提供行業(yè)領(lǐng)先帶寬_即時(shí)看
2023-05-25 18:47:32 
原相3395，4K屏顯超跑升級(jí)！雷柏VT960PRO屏顯雙模無(wú)線RGB游戲鼠標(biāo)上市|熱點(diǎn)在線
2023-05-25 18:47:13 
龜山鎮(zhèn)塆長(zhǎng)論壇第一期開(kāi)講
2023-05-25 18:42:17 
兼職在家打電話日賺200元？上海警方成功搗毀一特大話務(wù)引流黑灰產(chǎn)團(tuán)伙 焦點(diǎn)快看
2023-05-25 18:39:05 
返鄉(xiāng)創(chuàng)業(yè) 大有可為|看點(diǎn)
2023-05-25 18:37:01 
今日播報(bào)!超強(qiáng)補(bǔ)貼｜購(gòu)買(mǎi)SGS金標(biāo)認(rèn)證車(chē)型新5008，可享萬(wàn)元補(bǔ)貼，不容錯(cuò)過(guò)
2023-05-25 17:53:55 
碰瓷女明星？直播賣(mài)貨用上了AI換臉
2023-05-25 17:48:04 
Windows11將原生支持rar
2023-05-25 17:46:15 
努比亞Z50 Ultra攝影師版官宣：31日發(fā)布 4799元
2023-05-25 17:45:14 
快資訊丨C位出道! YOGA Book 9i 翻轉(zhuǎn)雙屏打造靈感生活新標(biāo)桿
2023-05-25 17:42:39 
環(huán)球新資訊：2499起 小米Civi 3發(fā)布：首發(fā)天璣8200-Ultra
2023-05-25 17:33:51 
俄國(guó)防部：俄軍艦在黑海遭烏無(wú)人駕駛快艇襲擊
2023-05-25 17:31:27 
創(chuàng)新顛覆行業(yè)，洗衣機(jī)產(chǎn)品形態(tài)將迎來(lái)重大變革_天天精選
2023-05-25 16:57:27
vivo S17系列定檔5月31日 首創(chuàng)粒子水墨工藝輕薄好手感_焦點(diǎn)資訊
2023-05-25 16:54:54
全球熱文：高通和微軟在Microsoft Build開(kāi)發(fā)者大會(huì)上攜手 推動(dòng)終端側(cè)AI規(guī)模化擴(kuò)展
2023-05-25 16:49:49 
天天視訊！內(nèi)存SSD價(jià)格要翻盤(pán)？
2023-05-25 16:34:19 
海拉爾蚌埠杭州3個(gè)氣象站入選世界氣象組織百年氣象站 全球要聞
2023-05-25 16:02:42 
中沙6000公里的貿(mào)易線路，埃捷國(guó)際物流（AJEX）已“輕車(chē)熟路”
2023-05-25 16:00:31 
F5 2023科技趨勢(shì)線上峰會(huì)開(kāi)幕 讓更好的數(shù)字世界融入生活
2023-05-25 15:45:01 
2499元起！小米Civi 3發(fā)布：全球首發(fā)天璣8200-Ultra
2023-05-25 15:42:29 
最美小米手機(jī)！小米Civi 3發(fā)布：首發(fā)天璣8200-Ultra，2499元起
2023-05-25 15:40:25 
4060Ti喜迎破發(fā)直接九折！
2023-05-25 15:39:55 
1億個(gè)理由告訴你：今年618買(mǎi)3C數(shù)碼產(chǎn)品還要選京東
2023-05-25 15:35:22 
化學(xué)式編輯軟件 化學(xué)式編輯器 環(huán)球資訊
2023-05-25 15:09:25 
每日速讀!AMD 3D V-Cache有什么用？戰(zhàn)未來(lái)的游戲神U竟然是他！
2023-05-25 14:51:25 
華為 MateBook 14S / 16S 2023 筆記本開(kāi)售，6599 元起
2023-05-25 14:44:24 
cat6e是幾類(lèi)網(wǎng)線_cat6e是超6類(lèi)網(wǎng)線嗎
2023-05-25 14:41:58 
華為舉辦2023創(chuàng)新數(shù)據(jù)基礎(chǔ)設(shè)施論壇，加速全球數(shù)據(jù)生產(chǎn)力躍升-實(shí)時(shí)焦點(diǎn)
2023-05-25 13:56:47 
全球觀速訊丨強(qiáng)化監(jiān)督確保送電“不落一戶、不漏一人”
2023-05-25 13:54:03
天天看熱訊：健身比賽激發(fā)職工健身熱
2023-05-25 13:51:59 
葡萄迎豐收 村民笑開(kāi)顏|全球短訊
2023-05-25 13:51:05 
全球快報(bào):農(nóng)發(fā)行甘肅省分行推進(jìn)業(yè)務(wù)“四合一”促高質(zhì)量發(fā)展
2023-05-25 13:51:00 
4799元！魅族20 PRO京東20周年紀(jì)念款發(fā)布：曙光銀頂配、印有特殊Logo 全球新資訊
2023-05-25 13:50:16 
關(guān)于梅艷芳母親破產(chǎn)是怎么回事 梅艷芳母親破產(chǎn)真相曝光的相關(guān)信息
2023-05-25 13:49:46 
華為發(fā)布2023奧林帕斯懸紅，產(chǎn)學(xué)研攜手推進(jìn)數(shù)據(jù)存儲(chǔ)創(chuàng)新
2023-05-25 13:49:31 
訂單農(nóng)業(yè)生成農(nóng)企雙贏“密碼”
2023-05-25 13:39:13 
TCL華星閃耀SID2023會(huì)場(chǎng)，OLED/MLED多項(xiàng)創(chuàng)新顯示技術(shù)領(lǐng)先全球-全球今頭條
2023-05-25 13:35:46 
售價(jià)超1400元！蘋(píng)果天價(jià)旅行保溫杯上架、可定位_當(dāng)前視點(diǎn)
2023-05-25 13:35:37 
焦點(diǎn)關(guān)注：黑龍江省雙鴨山市：聚焦農(nóng)貿(mào)市場(chǎng)整治，助力推進(jìn)文明城市創(chuàng)建
2023-05-25 13:22:51
iPhone 14 Pro系列京東618便宜了：6499元起省了1800元
2023-05-25 12:47:04
微信新增鎖定功能怎么用，已在所有客戶端上線，解鎖方法來(lái)了 前沿?zé)狳c(diǎn)
2023-05-25 12:40:18 
今頭條！史低價(jià)！游戲神器12490F僅1178元
2023-05-25 12:39:59 
iQOO Pad預(yù)售：2389元起 天璣9000+旗艦
2023-05-25 12:39:34 
京東 618 省錢(qián)速通攻略：國(guó)產(chǎn) 2T 固態(tài) 409 元，紅米直降1000元-世界焦點(diǎn)
2023-05-25 12:36:48 
世界觀熱點(diǎn)：教育部預(yù)警：堅(jiān)決防范遏制學(xué)生溺水事件發(fā)生
2023-05-25 12:08:12
天天快資訊：富士X-S20正式發(fā)布 京東參與預(yù)售送價(jià)值千元好禮
2023-05-25 11:53:57 
天天新消息丨iOS 17要來(lái)了！WWDC23正式官宣
2023-05-25 11:51:12 國(guó)際商標(biāo)協(xié)會(huì)(INTA) 第145屆年會(huì)在新加坡舉辦
2023-05-25 11:50:13
史詩(shī)級(jí)功能來(lái)了！Win11支持應(yīng)用程序云備份-全球獨(dú)家
2023-05-25 11:46:30 
英特爾推動(dòng)生態(tài)大融合 為中國(guó)用戶帶來(lái)PC創(chuàng)新新體驗(yàn)
2023-05-25 11:41:38
OPPO Find X3 geek bench 4.2單核跑分4280分-天天時(shí)快訊
2023-05-25 11:20:48 
環(huán)球熱頭條丨驍龍8 Gen2直屏旗艦！真我GT Neo6曝光
2023-05-25 10:47:03 
青島即墨：“幸福花”開(kāi)滿山鄉(xiāng)
2023-05-25 10:42:01
【世界聚看點(diǎn)】3199元起！英偉達(dá)RTX 4060 Ti 8G顯卡開(kāi)賣(mài)：公版秒光
2023-05-25 10:33:54 
重磅！珠峰科考“成績(jī)單”來(lái)了！ 焦點(diǎn)訊息
2023-05-25 10:17:45
朱婷不隨中國(guó)女排 征戰(zhàn)世界聯(lián)賽
2023-05-25 09:29:34 
【環(huán)球聚看點(diǎn)】中國(guó)平安捐資援建蓄洪區(qū)易地搬遷小學(xué)
2023-05-25 08:52:18 
天天熱點(diǎn)評(píng)！打造新型網(wǎng)點(diǎn)服務(wù)市民
2023-05-25 08:49:40 
“銀發(fā)安全守護(hù)”讓老人老有所護(hù)
2023-05-25 08:49:17 
人保壽險(xiǎn)發(fā)行120億元補(bǔ)充債券-世界播資訊
2023-05-25 08:49:11
助企搶占發(fā)展先機(jī)_世界快播
2023-05-25 08:46:34 
手握保單 心里不慌-環(huán)球今日?qǐng)?bào)
2023-05-25 08:44:56 
記者觀察：為中小養(yǎng)殖戶搭建“避風(fēng)港”
2023-05-25 08:41:00 
觀熱點(diǎn)：科創(chuàng)金改開(kāi)先河
2023-05-25 08:36:45 
www2baiducom百度官網(wǎng) www2baiducom 新要聞
2023-05-25 08:29:18 
同方股份：5月24日融資買(mǎi)入5399.42萬(wàn)元，融資融券余額14.51億元
2023-05-25 07:37:19
交銀康聯(lián)人壽保險(xiǎn)有限公司官網(wǎng)_交銀康聯(lián) 聚看點(diǎn)
2023-05-25 07:04:04 
SSD要全面漲價(jià)！沒(méi)買(mǎi)硬盤(pán)的趕緊買(mǎi)
2023-05-25 06:57:44
焦點(diǎn)速看：淚流滿面！Win11終于內(nèi)置RAR格式支持了
2023-05-25 06:56:52 
熱門(mén)看點(diǎn)：《英雄聯(lián)盟》衍生游戲來(lái)了：售價(jià)108元
2023-05-25 06:44:20 
在線觀點(diǎn)：便攜商務(wù)投影如何滿足用戶痛點(diǎn)
2023-05-25 06:41:22 
環(huán)球聯(lián)手AI推出助眠音樂(lè)
2023-05-25 06:35:22
新手怎樣學(xué)會(huì)買(mǎi)化妝品_需要考慮質(zhì)量嗎
2023-05-25 05:43:58 
相關(guān)新聞