騰訊優圖又有新動作!AI手語翻譯機助力聽障人士緩解溝通障礙

2019.05.22 14:22:19 作者:小編

騰訊科技訊,2019 年數字生态大會于 5 月 21 日—23 日在昆明舉行,在 AI 分論壇上,騰訊優圖實驗室聯合負責人、傑出科學家賈佳亞分享了優圖近期在 AI 手語識别上取得的突破——推出基于自研算法的“優圖 AI 手語翻譯機”。

據賈佳亞介紹,AI 手語翻譯機以普通攝像頭作為手語采集裝置,依托高性能計算機進行後台運算,用戶隻要正對攝像頭完成手語表達,翻譯機就能快速運算出結果并把手語翻譯成為文字。未來有望在機場、民政窗口等公共場所部署和落地,助力信息無障礙城市建設。

騰訊優圖實驗室聯合負責人、騰訊傑出科學家賈佳亞

AI 手語翻譯機:自研算法,實現手語識别“黑科技”

手語識别(SLR),就是指通過計算機算法,自動區分手語表達中的各類手勢、動作以及這些手勢和動作之間的切換,最後将表達的手語翻譯成文字。不過相比于其他 AI 視覺識别技術的研究,手語識别的研發卻存在更大的困難和挑戰。手語表達所特有的地域性、複雜性和多樣性極大地增加了數據采集與清洗的難度和成本,而受限于數據量的大小和人工設計特征的缺陷,很多傳統研究的研究方法在适應性、泛化性及魯棒性上都十分有限。

優圖 AI 手語翻譯機界面

據賈佳亞介紹,此次騰訊優圖推出的 AI 手語翻譯機,結合聽障人士手語表達的習慣采集手語數據,參考先進的手勢識别、動作識别和序列翻譯等技術,通過自研算法實現了對複雜手語表達的識别技術突破。相較于其他方法,優圖 AI 手語翻譯機的數據集覆蓋了近千句日常表達,900 個常用詞彙,同時對數據進行進一步的分析和歸納,擁有目前最大的中文手語識别數據集,并支持整句手語表達的識别,可直接判斷用戶是否結束并完成實時翻譯。

應用探索:視覺 AI,助力信息無障礙建設

據北京聽力協會 2017 年公開數據,估計中國殘疾性聽力障礙人士已達 7200 萬,相當于北京市常住人口(約 2200 萬,2015 年數據)的 3 倍多。盡管我國在信息無障礙領域的投入逐漸增加,但目前國内的聽障人群需求依然得不到滿足。優圖 AI 手語翻譯機的推出将一定程度地緩解聽障人士的交流障礙。

在演講中,賈佳亞表示,“未來,我們希望通過與聾啞人士或手語使用者的深入接觸,嘗試在公共事物場所為聽障者提供更好的服務,更好地助力信息無障礙的建設。”下一步,優圖實驗室将對 AI 手語翻譯機展開優化和升級,嘗試在日常服務窗口、手語教育等場景中落地,為聽障人士帶來實實在在的便利。

目前,優圖實驗室已經和深圳市信息無障礙研究會成立 AI 手語識别聯合項目組,就手語數據采集、産品算法優化等方面展開長期深度合作,并通過與聽障者或手語使用者進一步接觸,擴充數據容量,完善數據規範,緻力于推動後續的産品和服務部署,推動信息無障礙建設。

優圖和深圳信息無障礙研究會 AI 聽障無障礙聯合項目組

此次的數字生态大會展示的優圖 AI 手語翻譯機,并不是騰訊在信息無障礙建設上的首次嘗試。早在 2009 年騰訊便開始了信息無障礙方面的探索,截至目前,旗下 QQ、QQ 空間、微信、騰訊網、騰訊新聞、應用寶、企鵝 FM 等大部分産品已針對障礙用戶實現專門優化,緻力于為障礙人士構建信息友好社會。2013 年,騰訊優圖團隊和手機 QQ 一起打磨了 OCR 引擎技術,基于計算機視覺算法及自然語言處理能力,可将圖片上的文字直接轉換為可編輯的結構化文本,幫助視障群體實現信息溝通無障礙化。

與本次亮相數字生态大會 AI 分論壇的跨年齡人臉識别技術一樣,優圖 AI 手語翻譯機同樣是騰訊踐行“科技向善”的重要體現。而優圖實驗室也将繼續秉承“科技向善”這一理念,推動前沿技術在社會場景中的應用,切實讓更多的實際問題得以解決。做有溫度的 AI,讓科技産生更大的社會價值。

您看完此文的心情是

  • 0

  • 打醬油

    1

  • 開心

    1

  • 流淚

    0

  • 正能量

    0

  • 憤怒

    1