多媒体技术概论课件(-62张).ppt

1、多媒体技术及其医学应用1第一章第一章 多媒体技术概论多媒体技术概论多媒体技术及其医学应用2 第一节第一节 多媒体技术多媒体技术一、多媒体一、多媒体（一）媒体的分类 感觉媒体（Perception）表示媒体（Presentation）显示媒体(Display)存储媒体（Storage）传输媒体（Transmission）多媒体技术及其医学应用3（二）多媒体的定义-“多媒体”一词译自英文“Multimedia”。-通常所指的就是各种感觉媒体的组合，也就是声音、图形、图像、文字、数据等。-“多媒体”在计算机领域有几层含义：一是指存储信息的实体，如磁盘、光盘、磁带、半导体存储器等；二是指传递信息的载体

2、，如数字、文字、声音、视频、动画、图形和图像等；三是指处理多媒体的声卡、视频卡、芯片等硬件设备。多媒体技术及其医学应用4二、多媒体技术及其特点二、多媒体技术及其特点 （一）多媒体技术 多媒体技术是指基于计算机科学的综合技术，包括音频和视频技术、信息处理技术、软件技术、硬件技术、人工智能技术、通信技术和网络技术等。多媒体技术及其医学应用5（二）多媒体技术的特点 集成性 交互性 非循序性 实时性 多媒体技术及其医学应用6三、多媒体应用系统的媒体元素三、多媒体应用系统的媒体元素(一)文本 指各种文字、符号和数字，包括各种字体、尺寸、格式及色彩的文本。常用的文本文件格式有：.DOC、.RTF、.TXT

3、。(二)图形 指通过一系列指令来表示一幅图，也称矢量图，如：点、线、面、直线、矩形、曲线、圆等。常用的编辑软件有CorelDraw、Flash。多媒体技术及其医学应用7(三)图像 指由像素点阵组成的画面，也称点位图或位图。常用的图像处理软件有Paint、Brush、Photoshop等。(四)音频 音频包括音乐、语音、自然声和各种音响效果。声音的存储格式目前常见的有以下几种：波形文件（WAV）、MP3文件、MIDI音频文件、光盘数字音频文件（CD-DA）。多媒体技术及其医学应用8(五)视频 视频是图像数据的一种，若干有联系的图像数据连续播放便形成了视频。(六)动画 动画是利用人眼的视觉残留特性

4、，快速播放一系列静态图像，在人的视觉上产生平滑流畅的动态效果。动画和视频是有区别的，动画是由计算机生成的二维或三维的连续的矢量图。常见的二维动画制作工具有：Flash、Animator等；三维动画制作软件有3D MAX、Maya等。多媒体技术及其医学应用9四、多媒体涉及的几个概念四、多媒体涉及的几个概念（一）超文本（hypertext）和超媒体（hypermedia）超文本和超媒体 超文本和超媒体的组成 超媒体系统的结构模型 （二）SGML 规定了在文档中嵌入描述标记的标准格式，指定了描述文档结构的标准方法。SGML的主要特点：支持无数的文档结构类型、创建与特定的软硬件无关的文档。多媒体技术及

5、其医学应用10（三）HTML 超文本标记语言（Hypertext Marked Language）的缩写，一种用来制作超文本文档的简单标记语言。（四）XML 可扩展标记语言（Extensible Markup Language)的缩写。XML源于SGML，是一个用来定义其他语言的元语言。XML继承了SGML的许多特性：可扩展性、灵活性、自描述性。XML与HTML不同：HTML的设计目标是显示数据并集中于数据外观，而XML的设计目标是描述数据并集中于数据的内容。XML标记由架构或文档的作者定义，并且是无限制的。HTML标记则是预定义的；HTML作者只能使用当前HTML标准所支持的标记。多媒体技术

6、及其医学应用11（五）VRML VRML是虚拟现实模型语言（Virtual Reality Modeling Language）的缩写，它是一种用于对三维虚拟场景进行建模的描述性语言。VRML是HTML的扩展，基本的概念相类似，区别在于HTML文档是二维的，VRML则带来三维空间的立体世界。多媒体技术及其医学应用12第二节第二节 多媒体计算机系统的组成多媒体计算机系统的组成 用户多媒体应用软件多媒体素材制作软件 多媒体创作软件 多媒体应用系统多媒体操作系统多媒体驱动软件多媒体硬件多媒体技术及其医学应用13一、多媒体计算机系统的软件一、多媒体计算机系统的软件（一）多媒体应用系统（二）多媒体创作软

7、件 基于页的多媒体创作工具 基于图标的多媒体创作工具 基于时间的多媒体创作工具 基于高级程序设计语言的多媒体创作工具 多媒体技术及其医学应用14（三）多媒体素材制作软件 文字编辑软件 图像处理软件 动画制作软件 音频处理软件 视频处理软件 （四）多媒体核心系统软件 指多媒体操作系统和多媒体设备的驱动程序 多媒体技术及其医学应用15二、多媒体计算机系统的硬件二、多媒体计算机系统的硬件（一）按照多媒体处理流程看主要包括以下设备 主机 输入设备 扫描仪 数码相机/数码摄像机 存储设备 磁盘存储设备 光盘存储设备:CD光盘及驱动器、DVD光盘及驱动器 输出设备 显示器 彩色喷墨打印机 触摸屏 多媒体技

8、术及其医学应用16（二）按照媒体类型，还涉及的多媒体关键设备 音频卡 视频卡 显示控制适配器 多媒体技术及其医学应用17第三节第三节 多媒体技术的发展和应用多媒体技术的发展和应用一、多媒体技术的发展一、多媒体技术的发展 1984年，美国Apple公司推出Macintosh计算机，开创了计算机进行图像处理的先河。多媒体技术及其医学应用18 1985年，美国Commodore公司将世界上第一台多媒体计算机系统Amiga展现在世人面前。多媒体技术及其医学应用19 1986年，荷兰Philips公司和日本SONY公司联合推出了交互式紧凑光盘系统。1989年，美国Intel公司和IBM公司联合将DVI技

9、术发展成为新一代多媒体开发平台Action Media 750。1990年11月，由美国Microsoft公司联合IBM、Intel、DELL、Philips等共14家厂商召开了多媒体开发者会议，会议成立了“多媒体计算机市场协会”。1992年，Microsoft公司推出了视窗操作系统Windows3.1，这是计算机操作系统发展的一个里程碑。多媒体技术及其医学应用20 1995年，Microsoft推出了Windows 95操作系统，操作界面变得更加友好、更加简便、并全面支持多媒体功能。1996年，Intel公司将多媒体扩展技术加入到微处理芯片Pentium Pro中，多媒体逐渐成为个人计算机的

10、主流，将个人计算机带入了多媒体时代。1998年，在Windows 95的基础上推出了Windows 98 操作系统，操作系统的性能更加稳定。2001年10月25日微软推出了Windows XP。2006年11月30日Vista在中国发布，同期发布的还有Office2007版。多媒体技术及其医学应用21二、多媒体技术的应用领域二、多媒体技术的应用领域 （一）在教育培训中的应用 教学模式的改变 教学手段、方法的变革多媒体技术及其医学应用22（二）在商业中的应用 多媒体技术特点的数字家用电器 基于多媒体技术的演示查询系统和信息管理系统：如车票销售系统、气象咨询系统、病历库、新闻报刊音像库等。多媒体技

11、术及其医学应用23（三）在娱乐中的应用 交互式电影、电视 游戏多媒体技术及其医学应用24（四）在电子出版物中的应用 指以数字代码方式将图、文、声、像等信息存储在磁、光、电介质上，通过计算机或类似设备阅读使用。多媒体技术及其医学应用25（五）在军事领域中的应用 模拟真实战争的作战场景指挥现场 特点：重量轻、便于携带 多媒体技术及其医学应用26（六）在过程模拟领域中的应用 模拟设备运行、火山爆发、海洋洋流、天气预报、化学反应、生物进化等，使复杂、难以用语言准确表述的变化过程变得生动具体。开窗料型变形部分道次的过程模拟 多媒体技术及其医学应用27（七）在其它领域的应用 管理信息系统 多媒体测试系统

12、工程辅助设计 工农业生产、通信业、旅游业、航空航天业、医学等 多媒体技术及其医学应用28三、多媒体技术的医学应用三、多媒体技术的医学应用（一）图像处理技术在医学中的应用 医学影像如CT、MRI、PET 医学影像的特点：是灰度分布图，由人体组织特征参数的不同而决定。多媒体技术及其医学应用29（二）动画技术在医学中的应用 医学网络课程中包含了大量的音频、动画、视频等多媒体素材，Flash生成的动画数据量小，具有流媒体的特性，支持网络发布。多媒体技术及其医学应用30（三）网络视频技术在医学教学中的应用多媒体技术及其医学应用31（四）现代多媒体综合技术在医学中的应用远程医疗 多媒体技术可以在帮助远离服

13、务中心的病人通过多媒体通信设备、远距离多功能医学传感器和微型遥测接受医生的询问和诊断，为抢救病人赢得宝贵的时间，并充分发挥名医专家的作用，节省各种费用开支，这便是多媒体远程医疗系统。多媒体技术及其医学应用32多媒体技术及其医学应用33 1959年开始，已经出现了远程医疗。70和80年代，远程医疗技术主要集中在改进电视画面来传送医学图像，但模拟通信方式无法实现多媒体医疗信息的综合集成与有效处理。90年代后，数字化技术在医疗器械和通信技术中广泛采用，特别是信号处理技术和通信网络的发展，为多媒体远程医疗跃上一个新台阶。多媒体技术及其医学应用34 多媒体远程医疗系统的应用功能根据多媒体远程医疗的设计目

14、标不同，大致可以分为四类：以检查诊断为目的的多媒体远程医疗诊断系统 以咨询会诊为目的的多媒体远程医疗会诊系统 以教学培训为目的的多媒体远程医疗教育系统 以家庭病床为目的的多媒体远程病床监护系统 多媒体技术及其医学应用35第四节第四节 多媒体的关键技术及其医学体现多媒体的关键技术及其医学体现 一、数据压缩编码技术一、数据压缩编码技术 （一）数据的压缩分为有损压缩和无损压缩 无损压缩是利用数据的统计冗余进行压缩，可完全回复原始数据而不引起任何失真。经常使用的无损压缩方法有Shannon-Fano编码，Huffman编码，游程(Run-length)编码，LZW(Lempel-Ziv-Welch)编

15、码、算术编码等。多媒体技术及其医学应用36 有损压缩是利用了人类对图像或声波中的某些频率成分不敏感的特性，允许压缩过程中损失一定的信息；虽然不能完全回复原始数据，但是所损失的部分对理解原始图像的影响小，而换来的是较大的压缩比。常见的压缩方法有：PCM(脉冲编码调制)，预测编码，变换编码等。如多媒体中音频格式mp3、wma、图像格式jpg、视频格式rm、rmvb、wmv等都采用的是有损压缩。多媒体技术及其医学应用37（二）数据压缩技术的国际标准 JPEG标准：适用于连续色调、多级灰度、彩色/单色静止图像压缩。MPEG-1用于传输码率约为1.5Mb/s用于数字存贮媒体活动图像及其伴音的编码。MPE

16、G-2主要针对高清晰度电视所需要的视频及伴音信号，传输速率为10Mb/s，与MPEG-1兼容，适用于1.560Mb/s甚至更高的编码速率。MPEG-4是基于对象（内容）的、可交互、可伸缩质量的编码标准，适合各种应用（会话、交互、广播等）。MPEG-7是多媒体内容描述接口标准，它规定一个用于描述各种不同类型多媒体信息的描述符的标准集合。MPEG-21是有关多媒体框架的协议。多媒体技术及其医学应用38（三）医学图像与数据压缩技术 静态图像压缩标准 应用较多的远程医疗系统采用的是JPEG2000压缩。与JPEG压缩相比具有更高的压缩比（比JPEG高2040），并且支持感兴趣区压缩。视频压缩标准 MP

17、EG标准：MPEG-1，MPEG-2，MPEG-4，其中MPEG-2用于高带宽（1.5MHz以上）的应用 H系列，如H.261、H.263，它们覆盖了低带宽（2Mbit/s以下）的应用。后来二者联合起来定制了一个统一的图像编码压缩标准H.264/MPEG-4AVC，用于改善图像质量，覆盖所有的带宽。多媒体技术及其医学应用39 音频压缩标准 电话质量：G.711，G.721，G.723，G.728 调幅广播质量：G.722 高保真立体质量：MPEG音频 多媒体技术及其医学应用40二、多媒体存储技术二、多媒体存储技术（一）几种主要的存储技术 直接连接存储技术：磁盘多媒体技术及其医学应用41 磁带

18、磁带存储技术不利于高速存储，但由于其存储成本低、容量扩展、灵活方便、介质小、易于保存仍然在使用。但是新工艺的研发将使磁带存储密度提高至少15倍，达到每平方英寸6.67Gb。IBM最新磁带存储工艺最新磁带存储工艺(左左)与现有磁带存储工艺与现有磁带存储工艺(右右)对比对比 多媒体技术及其医学应用42 光盘 光存储以其工作稳定、存储容量大、寿命长、介质可换、便于携带、价格实惠等优点，成为计算机系统普遍使用的设备。聚碳酸脂衬垫刻槽铝反射层保护层多媒体技术及其医学应用43 移动存储技术 移动硬盘：移动硬盘采用了成熟的硬盘技术，使用通用的支持热插拔的USB接口。目前移动硬盘的存储容量可达上百G。闪存卡：

19、闪存卡是一种半导体存储器，用于存储数据信息，可反复读写。优盘：是通过整合闪存芯片、USB、I/O控制芯片而成的产品，容量一般在1G以上，目前已经出现了8G的优盘。多媒体技术及其医学应用44 网络存储技术 NAS（network add-on storage，网络附加存储）：是直接连接到网络上通过网络传输的一种存储器。SAN（storage area network，存储区域网络）：以块为存储单元，通过光纤传输数据的技术。多媒体技术及其医学应用45（二）医学数据的存储 医学数据存储的必要性：医学数字化图像不允许使用有损压缩算法，所以占用存储空间非常大，另外数字化图像的数量多、增量大。PACS（P

20、icture Archiving and Communication System，影像传输及存档系统）。多媒体技术及其医学应用46 磁盘阵列 在线存储 利用磁盘作为存储介质的存储设备。优点：运行速度快，支持并发访问多，这有利于实时在线应用。缺点：性能及安全性差，为了解决易损问题，人们利用RAID技术来提高数据安全性能和大容量存储的要求。多媒体技术及其医学应用47 光盘库近线存储设备 光盘存储安全性高 光盘可以支持数据并发访问和随机读写 磁带存储离线存储 恢复备份的数据时需要倒带到数据区域 保存环境要求较高需要防潮 防尘以及防止电磁干扰 另外还需要定期倒带以免磁粉粘连 多媒体技术及其医学应用4

21、8三、多媒体数据库技术三、多媒体数据库技术（一）多媒体数据库 多媒体数据分为结构化数据和非结构化数据 普通数据库管理系统 多媒体数据库管理系统的特点多媒体技术及其医学应用49（二）多媒体信息检索技术 基于内容的检索（Content-Based Retrieval）是一种新的检索技术，是对多媒体对象的内容以及上下文语义环境进行检索。分类：基于内容的图像检索 基于内容的视频检索 基于内容的音频检索 多媒体技术及其医学应用50（三）医学多媒体数据库系统 远程医疗系统的数据库具有两个特点 第一，数据量巨大，存储量大、增量大等特点 第二，综合使用传统精确匹配查询与基于内容的相似检索的检索方法 下一代远程

22、医疗数据库系统 XML数据库是XML技术与数据库技术的结合，在数据库中使用XML技术有利于帮助用户去整合各种不同的数据源，比较灵活地去应用新的数据库源、复杂的数据库源，这对数据库技术是一个很大的提升，它迅速在医疗行业得到了应用。多媒体技术及其医学应用51四、虚拟现实技术四、虚拟现实技术 虚拟现实（Virtual Reality）是指利用计算机生成的一种模拟环境(如飞机驾驶、分子结构世界等)，通过多种传感设备使用户“投入”到该环境中，实现用户与该环境直接进行自然交互的技术。多媒体技术及其医学应用52（一）虚拟现实技术的特点 沉浸感（Immersion）交互性(Interactivity)思维构想

23、（Imagination）多媒体技术及其医学应用53（二）虚拟现实系统的组成 虚拟环境 以高性能计算机为核心的虚拟环境处理器、以头盔显示器为核心的视觉系统 以语音识别、声音合成与声音定位为核心的听觉系统 以方位跟踪器、数据手套和数据衣为主体的身体方位姿态跟踪设备 味觉、嗅觉、触觉与力觉反馈系统等功能单元多媒体技术及其医学应用54多媒体技术及其医学应用55（三）虚拟现实技术的分类 桌面式虚拟现实系统 沉浸型虚拟现实系统 分布式虚拟现实系统 增强现实性的虚拟现实系统 多媒体技术及其医学应用56(四)虚拟现实技术与医学 虚拟现实技术在医学中的应用 利用虚拟现实技术将三维解剖数据变得可视化，使得在手术

24、前能够给医务工作者建立一个虚拟的手术环境，将病人的病灶全面的展现出来，以便在手术前做好规划 虚拟现实技术在手术训练中的应用 虚拟现实的增强现实技术应用于手术治疗 虚拟现实应用于身体和精神恢复的治疗 多媒体技术及其医学应用57 医学虚拟现实的关键技术 医学图像的三维重建 动态模型 虚拟人体组织器官的物理建模 多媒体技术及其医学应用58五、多媒体网络通信技术五、多媒体网络通信技术 多媒体通信网络有着特殊的要求 支持综合业务 具备较强的实时数据传输能力 能够完成多媒体同步 支持多种通信模式 多媒体技术及其医学应用59 网络通信采用的协议有 基于TCPIP协议的HTTP(超文本传输协议)FTP(文件传输协议)RTP(实时交互式多媒体传输协议)多媒体技术及其医学应用60 现代远程医疗的网络通信发展是立体的多方位的，是卫星、地面光纤、微波以及海底电缆的通信整体。多媒体技术及其医学应用61 下一代基于IPv6的远程医疗系统正在研究进行当中 IPv6的地址由原有的IPv4的32位扩展到128位 目前生产的B超、CT、核磁共振、PET等常用的检查设备采用DICOM3.0标准，通过DICOM接口可以实现对医学图像的数字化采集，为其配置IPv6地址后，可以直接进入IPv6网络进行数据的采集、传输和存储