面向SELL-Corpus和VR环境的英语口语学习与评估研究

发布时间：2023-10-13 20:45

　　英语学习一直是国内一项热门的话题,除了学校将英语设置为必修课之外,各种英语培训机构也是层出不穷。但是,由于中国并非以英语为母语的国家,并且相较于听力、阅读和写作,针对口语的训练十分缺乏,这导致中国英语学习者普遍存在口语应用能力不佳的情况。近年来,随着虚拟现实设备的普及,越来越多的研究试图利用虚拟现实(VR),来打造一个沉浸式的英语学习环境。因此,本文将虚拟现实和人工智能(AI)技术相结合,打造了一个沉浸式的英语口语学习系统。并且,为了使学习系统更加符合中国英语学习者的需求,本文构建了专为中国英语学习者设计的SELL(Second Language Learning)语料库,并面向该语料库进行语音识别以及发音评估的研究。论文的主要研究内容如下:首先,本文设计并实现了一个针对中国英语学习者的口语训练系统。系统架构具有高灵活性,学习者可通过创建配置文件,方便地进行个性化课程定制,满足不同学习者的需求。其次,为了让系统能够同时支持PC、手机以及各种主流VR设备,令界面交互更加自然,提高用户的沉浸式体验,本文构建了一个高扩展性,支持多设备的人机交互系统。并且,系统支持多人多设备同步,为各种不同设...

【文章页数】：101 页

【学位级别】：硕士

【文章目录】：
摘要
abstract
第一章 绪论
    1.1 研究背景与意义
    1.2 研究现状
    1.3 研究内容与论文结构
        1.3.1 研究内容
        1.3.2 论文结构
第二章 系统介绍
    2.1 系统架构
        2.1.1 表现层
        2.1.2 中间逻辑层
        2.1.3 数据层
    2.2 目标学习者
    2.3 沉浸式学习体验
        2.3.1 仿真虚拟环境
        2.3.2 特定场景训练
    2.4 系统实现
    2.5 本章小结
第三章 SELL——英语学习者口语语料库的建立
    3.1 口语语料库
        3.1.1 常见英语口语料库
        3.1.2 学习者语料库介绍
    3.2 SELL语料库构建方法
    3.3 SELL语料库结构和统计信息
    3.4 音素标定与错误发音统计
    3.5 SELL语料库性能测试
    3.6 基于SELL语料库的少量口音语料建立识别模型研究
        3.6.1 多任务的口音迁移识别网络
        3.6.2 实验结果
    3.7 本章小结
第四章 VR界面交互设计
    4.1 Unity中的界面交互
    4.2 适用于多种VR设备的界面交互设计
        4.2.1 设备管理模块
        4.2.2 改进的输入模块
    4.3 本章小结
第五章 结合AI技术的英语学习系统
    5.1 语音识别与评估原理简述
        5.1.1 信号处理和特征提取
        5.1.2 传统基于GMM-HMM声学模型
        5.1.3 语言模型
        5.1.4 基于深度学习的语音识别系统
        5.1.5 ASR性能评估
        5.1.6 传统发音评估
    5.2 智能会话系统
        5.2.1 语音识别
        5.2.2 发音评估
        5.2.3 智能对话
    5.3 本章小结
第六章 总结与展望
    6.1 总结
    6.2 展望
参考文献
致谢
攻读硕士学位期间发表论文和参与科研项目情况



本文编号：3853742