多媒体技术应用课件第二章.ppt

第二章 多媒体计算机系统组成;知识回顾;知识回顾;内容提要;知识要点;多媒体计算机及外设;2.1 多媒体功能卡;2.1 多媒体功能卡;;2.1 多媒体功能卡;音频卡的结构体系 ;1）数字化声音处理 声音卡用数字信号处理器DSP芯片管理所有声音输入/输出和MIDI操作。 DSP芯片带有自己的RAM和EPROM，存放声音处理(I/O)、ADPCM编码/译码程序和中间运算结果。声卡的数字化声音接口有如下两种传送方式： ①直接传送方式 ②DMA传送方式;数字音频信息获取与处理技术工作原理 ;音频卡混音器原理 ;2）混音器 ;3）合成器

⑴频率调制FM合成器；

⑵波形表(Wave Table)合成器。;3.音乐合成与MIDI接口;2) MIDI接口 MIDI规范允许MIDI装置已预先说明的方式通信。为了提供单电缆连接和通信端口标准，关键之一是物理连接的标准化。 MIDI标准中规定MPC包括一个内部合成器和标准MIDI端口。;电子琴的MIDI接口;4. 语音合成;合成方法

发音器官参数语音合成

对人的发音过程进行直接模拟

声道模型参数语音合成

基于声道截面积函数或声道谐振特性合成语音

波形编辑语音合成技术

波形编辑语音合成技术是直接把语音波形数据库中的波形相互拼接在一起，输出连续语流。

;4. 语音合成;韵律模拟

自然语言中的韵律特征

语调、节奏和重音等能表达说话者的语义和感情，是自然语流的重要组成部分

韵律合成及方法

超音段特征（音高、音长、音强及频率分布的变化）的修改构成了韵律合成的基础

方法：修改基频模式、共振峰模式、PSOLA算法等

韵律模拟的问题

需解决韵律规则、韵律描述、计算模型和修改算法等问题 ;概述

语音识别是将人发出的声音、字或短语转换成文字、符号，或给出响应，如执行控制、作出回答 。

语音识别系统的分类

按可识别的词汇量多少划分

按照语音的输入方式划分