第八章 多媒体技术
主要内容
v 多媒体技术概述
v 音频技术
v 视频技术
v 虚拟显示
8.1 多媒体技术概述
8.1.1 多媒体技术定义
v媒体:信息
表
关于同志近三年现实表现材料材料类招标技术评分表图表与交易pdf视力表打印pdf用图表说话 pdf
示、存储、传播的载体
视觉、听觉、触觉等
v多媒体特点:
§ 多媒体是一种界面技术
§ 多媒体集交互性,真实性与分布性为一体
§ 多媒体信息具有可加工性
§ 多媒体包括音频、视频、通信和计算机技术
8.1 多媒体技术概述
v多媒体技术是利用计算机把各种文字、声音、图
像等信息综合一体化,使它建立逻辑联系,并能
进行加工处理的技术
v多媒体技术包括:数字信号处理技术、音频视频
技术,多媒体计算机技术和通信技术
v与传统计算机技术相比,多媒体技术具有多样性、
集成性、交互性、实时性、数字化等特点
8.1 多媒体技术概述
v多媒体技术应用
§ 多媒体视频会议
§ 多媒体远程教育
§ 多媒体电子出版物
§ 多媒体数据库
8.1 多媒体技术概述
8.1.2 多媒体计算机
1、多媒体计算机系统
v硬件系统:音频、视频、输入输出系统
v软件系统:操作系统、多媒体应用软件
2、多媒体关键技术
v数据压缩技术
v网络与通信技术
v多媒体数据库和大容量存储技术
v大规模集成电路技术
v人机交互设备技术与多媒体软件技术
8.1 多媒体技术概述
8.1.3 多媒体的数据压缩与编码技术
1、数据压缩的必要性
多媒体数据量大,冗余数据多,从感受来讲也存在
可能
2、文本压缩
自适应的模式替换和指针模式
3、图形文件压缩技术
游程编码压缩、JPEG
有损压缩和无损压缩,DCT ,小波,哈夫曼
8.1 多媒体技术概述
4、视频文件压缩
MPEG-1 -2 -4
静态图像压缩 40:1
帧差别存储压缩方式,200:1
8.1.4 多媒体的质量和带宽
v文本
v图像
v声音
v视频
8.1 多媒体技术概述
8.1.5 AD和DA转换原理
1、AD转换器
v AD种类:逐次比较、双积分、V/F变换
v AD转换原理
2、DA转换器
v构成:基准电源、电阻网络、运算放大器、缓冲
器等
v转换原理
8.1 多媒体技术概述
8.1.6 多媒体系统的数据和文件格式
1、图形图像和视频表示
v位图图像
v矢量图
v灰度和彩色图
v数字视频
2、常见格式
BMP,PCX,GIF,JPEG,TIFF,WMF,RIFF,INDEO,MPEG
,MOV,MIDI,RTF
8.2 音频技术
v声音种类:语音、音乐声、其他效果声音
v音频信息根据来源:波形音频和合成声音
1、波形音频:声音的数字表示声音,是由声音经过
数字化过程的声音;.wav .mod .voc
2、MIDI音乐:乐器音乐接口,文件包括乐器和重
构声音的指令它是音乐符号系统;.mid .cmf .rol
8.2 音频技术
3、声卡
v 声卡关键技术:数字音频、音乐合成、MIDI和音
效;
v 声卡结构:
§ 扬声器输出
§ 线性输入
§ 线性输出
§ 麦克风输入
§ 游戏与MIDI连接器
§ CDROM插座
§ PC喇叭
§ CDROM驱动器接口
8.2 音频技术
4、声卡的性能指标
v数字、模拟转换方式
v采样速率
vMIDI合成方式
v分辨率
v信噪比
5、数字声音
v采样频率
8.2 音频技术
§ 采样率:一秒种对声音信号采样的次数,采样
率越高,对声音信号保真度越高;
§ 常见采样频率:11.025k 22.05k 44.1k
v 样本量化等级:分辨率
8bit 16bit
v 通道个数
6、3D音频
v 定位
v 环境:混响,能量损失、障碍物效果
8.2 音频技术
7、MP3音乐
MP3其实是一种压缩的音乐文件格式,其基本原
理是对声音数据进行压缩(有损),播放其再按
其反向过程进行解压缩。
软件MP3播放器和硬件MP3播放器
8.3 视频技术
视频一般指动态图形,我们这里将静态图像也包
括进来。
视频技术包括:图像数字化,压缩编码,数字图
像处理,传输与编辑、变换,图像存储、检索和
组织管理技术。
1、视频捕捉卡
视频捕捉卡将模拟图像转换成数字图像的装置,
包括一下组件:
§ 系统总线:数据传输
8.3 视频技术
§ 模拟输入:复合视频接口,S端口,成分视频端口,音
频输入端口
§ 模拟视频输出
§ 模数转换与滤波
§ 数字视频压缩硬件
8.3 视频技术
2、多媒体视频工作原理
多媒体处理流程包括三个步骤:
v视频采集:利用计算机生成动画、图形图像文件
序列生成、视频采集卡采集
v视频编辑:线性编辑(模拟)、非线性编辑(数
字),专业软件和通用软件
v视频输出
8.4 虚拟现实
虚拟现实:计算机技术生成一个逼真的、集视、听、
触、嗅觉等为一体的感觉世界,用户通过感观与生
成的虚拟实体交互沟通。主要特征:
v多感知性:听觉,视觉,嗅觉,力觉等
v浸没感:用户作为主体处于虚拟环境,真假难辨
v交互性:用户可以和虚拟实体交互
v构想性:具有广阔想象空间,拓展人类视野
虚拟现实技术集计算机技术、机器人技术、人工智
能、传感器和心理学为一体。
8.4 虚拟现实
1、虚拟现实设备
vBOOM可移动显示器
v数据手套
v数据衣
v其他
8.4 虚拟现实
2、虚拟现实分类
v桌面虚拟现实
v浸没虚拟现实
v增强现实性的虚拟现实
v分布式虚拟现实
3、3D环境的建立