智能网联汽车智能座舱系统装调与测试 项目四 语音交互系统.pptx

项目四语音交互系统

任务1语音交互系统的调试

语音交互系统的概念01语音交互系统的工作原理与技术02语音交互系统的特点04语音交互系统在智能座舱的应用05语音交互系统的工作流程03理论知识

作业前的检查02语音交互系统的线路连接03整理清洁05语音交互系统的调试04工具设备介绍01理论知识

课程导入Part1

语音交互系统的调试/v?pd=wisenaturalvid=4647132839665254824这个视频是车载语音的人机交互过程展示，车载语音交互系统还可以实现车端的哪些功能控制？答：车载常用语音功能有接听电话、开关车窗、广播音乐、路线导航、空调、部分灯光、车窗、车门、雨刮等语音指令等。思考讨论题车载语音交互系统课程导入

语音交互系统的调试思考讨论题课程导入智能网联教学车大家知道教学车语音交互系统主要包括哪些部件吗？语音交互系统是如何进行调试的？

语音交互系统的调试思考讨论题课程导入答：教学车语音交互系统主要包括麦克风、工控机和扬声器等。麦克风扬声器工控机

思考讨论题课程导入答：语音交互系统的调试流程：语音交互系统的调试流程语音交互系统的调试工具设备介绍作业前的检查语音交互系统的线路连接语音交互系统的调试整理清洁

理论知识Part2

语音交互系统的调试一、语音交互系统的概念语音交互VUI全称为VoiceUserInterface，语音交互技术其实离我们很近，我们日常使用的很多产品和应用，都离不开语音交互技术。语音交互技术是人工智能技术的重要组成部分，通俗的说，就是用人类最自然的语言（开口说话）给机器下达指令，达成自己的目的的过程。语音交互（VUI）语音交互系统的概念语音交互系统的工作原理与技术语音交互系统的工作流程语音交互系统的特点语音交互系统在智能座舱的应用

语音交互系统的调试二、语音交互系统的工作原理与技术语音交互系统的概念语音交互系统的工作原理与技术语音交互系统的工作流程语音交互系统的特点语音交互系统在智能座舱的应用2.1语音交互系统的工作原理语音识别，就是将一段语音信号转换成相对应的文本信息，系统主要包含特征提取、声学模型，语言模型以及字典与解码四大部分。语音交互系统的工作原理

语音交互系统的调试二、语音交互系统的工作原理与技术语音交互系统的概念语音交互系统的工作原理与技术语音交互系统的工作流程语音交互系统的特点语音交互系统在智能座舱的应用2.1语音交互系统的工作原理1.为了更有效地提取特征往往还需要对所采集到的声音信号进行滤波、分帧等预处理工作，把要分析的信号从原始信号中提取出来；2.特征提取工作将声音信号从时域转换到频域，为声学模型提供合适的特征向量；3.声学模型中再根据声学特性计算每一个特征向量在声学特征上的得分；4.语言模型则根据语言学相关的理论，计算该声音信号对应可能词组序列的概率；5.最后根据已有的字典，对词组序列进行解码，得到最后可能的文本表示。

语音交互系统的调试二、语音交互系统的工作原理与技术语音交互系统的概念语音交互系统的工作原理与技术语音交互系统的工作流程语音交互系统的特点语音交互系统在智能座舱的应用2.2语音交互系统的主要技术语音交互系统的主要技术语音识别技术主要包括：特征提取技术、模式匹配准则及模型训练技术三个方面。输入语音特征提取识别结果训练语音模型训练算法语言模型，声学模型语音识别模型匹配

语音交互系统的调试二、语音交互系统的工作原理与技术语音交互系统的概念语音交互系统的工作原理与技术语音交互系统的工作流程语音交互系统的特点语音交互系统在智能座舱的应用2.2语音交互系统的主要技术语音交互系统的主要技术首先是声音的预处理，比如端点检测、降噪和回声消除等，让处理过后的声音信号能够更加真实地反映语音的状态，提取到关键特征后，就会进入真正的语音识别（或者称为模式匹配的）过程。然后进行声学模型的匹配，把语音特征转化为声音信号。如图中声学模型部分所示，可以看到它有点类似于拼音的音标。拿到这样的发声信息后，再到语言模型，比如到中文的语言模型中去查有哪个词或者字是最匹配这样的发声特征的。最后得到的识别结果就是“科大讯飞”。

语音交互系统的调试二、语音交互系统的工作原理与技术语音交互系统的概念语音交互系统的工作原理与技术语音交互系统的工作流程语音交互系统的特点语音交互系统在智能座舱的应用2.2语音交互系统的主要技术我们讲到的特征提取其实可以把它简单地理解为这张图片中的语谱图。我们认为每一种发声对应的语谱图形状都是不一样的，是有自己独特的特征的，可以根据特征匹配出它的发音，然后再匹配出对应的文字。ASR“读谱”

语音交互系统的调试三、语音交互系统的工作流程语音交互系统的概念语音交互系统的工作原理与技术语音交互系统的工作流程语音交互系统的特点语音交互系统在智能座舱的应用语音交