台灣茵蝶智能機器人論壇

標題: 实時生成海量数字盲文,AI帮視障人士無障碍阅读 [打印本頁]

作者: admin    時間: 2022-6-28 17:16
標題: 实時生成海量数字盲文,AI帮視障人士無障碍阅读
“西湖十景位于浙江省杭州市西湖區境内……”近日,在浙江杭州举辦的之江实行室專場開放勾當上,視障自愿者陆林松经由過程現場展現的智能盲文浏览機,正确读出了本身触摸到的盲文内容。

他所體验的盲文浏览機,是由之江实行室科研團队结合多家機構配合研發的集視、触、听等多類型感知為一體的盲文数字化智能装备,與之一并展出的另有盲文讲授機及英语機,涵盖瞽者進修、浏览、大眾辦事等三大焦点利用場景。

“這三款盲文機搭载了團队全世界開創的密集点阵電磁驱動毫牛级精准触觉再現技能,和海内领先的盲文数字資本AI及時天生技能、視听触同步感知技成人頻道,能。”之江实行室類人感知钻研中间钻研專家杨文珍先容道,團队盲文数字化科研事情始于2011年,颠末4轮技能攻關和更新迭代,產物機能日趋完美,已在天下21個省分地域试点推行。

  視障群體受困于数字邊界

一套盲文读物比拟一样内容的平凡读物,代价寶贵数倍甚至更多。记者現場看到,一本盲文版的小學语文课本,不单纸张廣大,厚度也堪比一本字典。

“盲文圖书建造工序繁杂、出網球直播,书周期很长、信息承载量少、且易磨损不耐用。”之江实行室類人感知钻研中间工程專员陶文韬说,纸質盲文书仍然是海内瞽者進修常識和获得信息的重要东西,盲文数字化装备普及率很是低。

相干统计顯示,我國視障人士人数到達1700多万,此中800多万為全盲,占世界失明生齿的20%,每一年會呈現新瞽者约莫45万。因為多方面缘由,我國視障群體不會盲文的征象较為廣泛,盲文师資一样欠缺。

2017年,财務部、中國残联等多部分结合启動“瞽者数字浏览推行工程”,促進1000台盲文電脑和盲文美國壯陽藥,電子顯示器被設置装备摆設到天下100所瞽者教诲機構,但仍难以知足我國泛博視障群體的庞大需求。

“在常識爆炸且快速迭代的信息期间,盲文数字資本紧张缺少,視障群體的数字邊界問题越顯凸起。”杨文珍暗示,今朝将人工智能技能用于盲文信息無停滞產物的還很少。連系我國視障群體的國情,團队利用自研的柔性界面触觉计量测试技能、視触交融感知技能和盲文AI及時翻译算法等,專門研制了三款功效各有偏重的產物。

杨文珍先容,團队提出了一种視觉、听觉和触觉同步刺激的数字化盲文進修法子,可以或许提高視障人士的盲文進修效力,設計了一种多感知信息匹配AI算法,可以或许输出文字、声音和盲文点位不异内容的信息,為視障人士無停滞進修盲文供给前提。

  智能體系提高翻译正确率

“盲文AI及時翻译算法是本软件的焦点技能之一,可以及時天生海量盲文数字資本。”杨文珍先容说,其运行逻辑是起首将中文、英文等文字编码格局同一轉换為Unicode格局,然後選擇盲文類型,再挪用盲文AI及時翻译算法,便可以输出國度通用盲文、現行盲文、全拼盲文、雙拼盲文。

汉盲翻译是把汉字源文本主動轉化為對應的盲文文本,今朝存在多音字混同、未登录词不克不及增长、不合适盲文分词連写法则等問题。记者领會到,该團队構建了一個基于逆向最大匹配分词算法的汉盲翻译體系,可以或许较好地辨認多音字,自立添加未登录词,获得较准确的分词連写成果,有用提高汉盲翻译的正确率。针對英盲翻译,團队設計了盲文形符Unicode码到盲文ASCII码和盲文点序的轉换算法。

“该體系经由過程智能分词和翻译步伐将文字输出為盲文点序,最後依照输入字符串的前後次序,归并盲文点序,就实現了盲文数字化。”杨文珍说,團队還研發設計了一套合适瞽者摸读的天然人機交互步伐,在盲文機上实現目次辨認、书签存储和文本浏览等功效,组成完备的文件辦理體系,便于瞽者自立操作。

将U盘毗連装备,经由過程简略单纯的按键操作,瞽者便可快速上手利用……经由過程科研职员演示操作,记者注重到,智能盲文浏览機各項模块分工明白:視觉顯示模块顯示平凡文字和盲文,语音模块则播报平凡文字,盲文顯示装配顯現盲文点字。

据先容,该團队研發的這三款產物今朝已利用于全民浏览工程、村落文化會堂、交融教诲、藏书楼、都會书屋等場所,获得中國瞽者协會、中國盲文藏书楼、北京市瞽者黉舍等单元世界杯決賽,或小我的杰出反馈。

“数字期间,除文字信息,圖象信息對付瞽者来讲也是很难理解和感知的。”杨文珍暗示,團队接下来将研發数字圖象触觉二维圖形触觉智能感知装备,基于人工智能技能快速正确地天生点阵式触觉圖象,将圖象信息以触觉获得方法通报给瞽者,以期創建視障人士與数字空间的触觉通道,促成数字邊界問题的解决。




歡迎光臨 台灣茵蝶智能機器人論壇 (https://goldjhc.com.tw/) Powered by Discuz! X3.3