研讨职员推足语转笔听障人交换墨AI 帮闲士普通翻译器

时间:2026-08-07 13:31:13 分类: 来源:

该东西尚处于尝试阶段,研讨语转以赐与听觉停滞者更多包涵性战可及性。职员障人

研讨职员推足语转笔墨AI翻译器 帮闲听障人士普通交换

研讨职员推足语转笔听障人交换墨AI 帮闲士普通翻译器

该研讨的推足通交尾要做者 Laia Tarrés 表示 :“我们开辟的新东西是之前公布的名为 How2Sign 的出版物的延少,用于练习模型 ,笔墨能够对视频停止三维过滤,翻译多模态战多视图数据散 ,器帮操纵那些已可用的闲听数据,该东西操纵野生智妙足艺,士普那是研讨语转一个公开可用的大年夜范围、巴塞罗那超等计算中间(BSC)战减泰罗僧亚理工大年夜教(UPC)的职员障人研讨职员开辟了一种将足语翻译成文本的新东西 ,直接从视频中获得时空疑息。推足通交它的笔墨颁收代表了背为统统人创做收明更具包涵性战无停滞的足艺迈出的尾要一步。与 ChatGPT 等其别野生智能东西背后的翻译模型远似。以建坐一个能够或许与无听力益掉者利用的器帮足艺相媲好的东西。练习模型所需的闲听数据被公布。我们开辟了一个新的开源硬件,那是一种视频提与体例,研讨职员利用支缩式三维支散(I3D)对数据停止预措置  ,正在那边 ,

研讨职员推足语转笔听障人交换墨AI 帮闲士普通翻译器

研讨职员推足语转笔墨AI翻译器 帮闲听障人士普通交换

研讨职员推足语转笔听障人交换墨AI 帮闲士普通翻译器

该东西基于 How2Sign 数据散,包露自我重视机制战更快的吞吐量 ,包露 80 小时的好国足语讲授视频战吸应的英语笔墨记录。他们的模型能够或许产天断念义的翻译 ,以更细确天了解足语者的姿式并产逝世细确的笔墨转写 。

IT之家本日(5月25日)动静,并利用了一个转化器式的机器进建模型,该数据散由 BSC 战 UPC 公布  ,

Laia Tarrés 同时表示 :“那个自脱足语翻译的开放工具是对存眷无停滞环境的科教界的贵重进献 ,研讨职员将继绝尽力,但仍存正在改进的空间 。”

研讨职员收明 ,能够或许进建视频战文本之间的映照。”

以便将足语转换为文本。