“指哪读哪”,阿尔法蛋大蛋2.0背后的科技奥秘

  说起阿尔法蛋大蛋2.0机器人,有不少家长和孩子最感兴趣的便是TA的指读功用:只要把小学语文英语讲义放在TA面前,再用手指着讲义上的词句,大蛋2.0立刻就能声情并茂地朗诵出来,屏幕上也会同步显现所指的内容,还能够点击进行跟读评测。H1U

H1U

  除此之外,指尖查词也相同有用。恣意的中英纸质读物放在TA面前,用手指一指纸上的字、词,中文的有笔顺笔画、部首结构、释义组词,英文的则有音标、词性词义、例句和发音评测等。H1U

  其实,阿尔法蛋大蛋2.0的指读功用的完成调集了许多种技能,其中有一项关键技能叫做手势辨认——在科大讯飞的手势辨认技能基础上,淘云科技针对儿童运用的场景进行了深度优化,才干让大蛋2.0“看到”孩子手指的内容、协助孩子学习字词、课文等。H1U

  就在本年1月17日,科大讯飞在德国The 20BN-Jester Dataset手势辨认评测中以97.26%的准确率斩获冠军,并改写国际纪录。阿尔法蛋大蛋2.0“指哪读哪”的诀窍之一,这回在国际级的赛场上大放异彩啦!H1U

H1U

  科大讯飞改写德国The 20BN-Jester Dataset手势辨认评测国际纪录H1U

  (截图来历:The 20BN-Jester Dataset )H1U

  什么是The 20BN-Jester Dataset手势辨认评测?H1U

  The 20BN-Jester Dataset评测集由德国TwentyBN公司建议,具有全球最大规划动态手势辨认数据集,在线实时翻滚排名的比赛方法招引了华为、斯坦福大学、福特等很多国内外优异立异企业和顶尖学术组织的参加。 该测评从海量的视频资源选取了1376名被收集者的动态手势,包括“向左或向右重击”、“两个手指向上或向下滑动”、“向前或向后摆手”在内的27种手势类别,包括大部分常见手势类别。 为了让参赛者供给的辨认计划具有更大的使用价值,在该评测会集,针对不同的被收集者,选用风格悬殊的布景对其做出的手势进行收集,终究用于评测的手势视频具有“继续时间短、手势动作杂乱”的特征,这要求辨认模型对时空信息具有很强的理解能力。H1U

  怎么改写国际记载?H1U

  在这次测评中,科大讯飞成功学习杂乱版别剖析中文本检测以及驾驭场景中图画语义切割技能,并结合手势辨认使命对算法进行针对性地搬迁和改善。 在辨认模型规划上,为完成动态手势辨认功率与准确率的均衡,团队摒弃了核算量杂乱的3D卷积神经网络计划,选用更为轻量化的2D卷积神经网络模型对视频进行逐帧剖析,一起为了进一步进步功用,团队规划相邻帧特征交互模块和自注意力机制相结合的计划,完成短时长时特征信息的交互,进步模型对时空信息的理解能力,大幅进步模型辨认功用,终究取得了97.26%的辨认准确率。 “低功耗,更精准”是团队在规划计划时遵从的准则,也是相关技能完成使用落地的条件和保证。得益于此,这次评测所选用的计划能够直接使用在移动端在线手势辨认,然后让人机交互的方法更灵活快捷。H1U

  正是得益于不断进步的手势辨认技能,结合OCR技能辨认内容,以及图画辨认、语音组成等使用,再加上淘云科技在儿童场景下对技能的深度优化,AI学习机器人阿尔法蛋大蛋2.0才干完成“指哪学哪”。H1U

H1U

  除了指读之外,阿尔法蛋大蛋2.0还具有个性化精准学的特征功用,让孩子先经过少数标题找到知识点把握的薄缺点,然后有针对性地进行剖析、进行知识点学习和习题练习,进步学习功率与作用。白话评测、绘本伴读、算术修改、构思编程等,也让大蛋2.0为孩子们的学习解锁了更多新方法。用AI启迪未来新人类,可不止是说说罢了!H1U

内容版权声明:除非注明,否则皆为本站原创文章。

转载注明出处://orioncsc.com/ganhuo/696.html