【腾讯云AI小程序大赛】中山大学作品《小耳朵天使》

2020-01-17 16:42:55 浏览数 (2)

本文由中山大学范钟炜同学撰写并授权同意发表于云加社区。

----------------------------------------------------------------------------------

前言

在科技日渐发达的今天,我们越来越担心青少年过度使用电子产品的问题,然而在这种担心背后,却很少人关注到还有这样一个群体,他们就是无法正常使用电子产品的视障人群,特别是视障儿童。

阅读和交流是视障儿童早期干预的重要手段,只有正确的早期干预,才能让他们掌握个人的生存能力和学习能力,才能正常地融入校园、融入社会。这个小程序的灵感就源自一个为视障儿童录制有声书的志愿者活动。但是志愿者的人力是有限的、时间也是有限的,因此创作出来的阅读资源也是有限的,我们也没有可能用技术的方法,为他们提供长期且内容丰富的阅读资源呢?于是就有了这样一个小程序——小耳朵天使(第二届腾讯云AI+小程序创意应用赛决赛第三名)。

使用到的腾讯云AI能力

  • 语音识别
  • 语音合成
  • 智能对话平台
  • OCR印刷体识别

让交互更智能化、更人性化

针对视障儿童的特殊情况,我们设计了两个特殊的交互方式,包括4个手势指令(上下左右)和2种触摸反馈(长震动与短震动)。

家长在儿童的小程序使用中扮演了重要的引导者和协助者的角色,针对家长自己录入故事的需要,小程序借助腾讯云AI的能力,提供了手动输入、语音输入、拍照识别三种方式,让家长录入长篇文字更高效。

让内容更加安全、更加可靠

视障儿童,本质上还是未成年儿童,因此有一点不得不提,那就是内容方面的安全性,我们必须充分确保内容足够安全。对此,我们有以下两点举措:

  • 接入微信小程序官方提供的文本内容安全接口(msgSecCheck),精准识别涉黄、涉政、涉恐文本,并进行拦截或文本替换。
  • 联系腾讯智能对话平台(TBP),使用了专门为儿童语言特点设计的儿童闲聊机器人(Chitchat Bot for Children),在保证内容安全的前提下还增加了对话的趣味性。

更快使用上AI能力——小程序插件

通常,我们开发小程序时,如果要使用上腾讯云或其他互联网服务商的AI能力,都需要自己对照文档进行接入,其中通常还有一个相当麻烦的后端接口鉴权步骤。比如,以下几款小程序插件,能有效降低开发的门槛和开发的代码量:

  • 微信同声传译——语音识别、语音合成

(https://mp.weixin.qq.com/wxopen/pluginbasicprofile?action=intro&appid=wx069ba97219f66d99)

  • 腾讯智能对话平台TBP——机器人对话

(https://mp.weixin.qq.com/wxopen/pluginbasicprofile?action=intro&appid=wx65f00fe52f504192)

人工智能创造更多可能——科技向善

这个项目是将人工智能利用到为弱势群体服务的一个探索,关于这个项目的未来,我们也有一些设想和展望,希望它的存在能够帮助到更多的人:

  • 增加更多类型的故事,质与量同步提升;
  • 接入腾讯AI语义解析接口,进行意图成分、情感分析,让家长更好掌握孩子的情绪变化。

0 人点赞