《数字信息保存》课件 第1章.pptx

1、第一章数字信息保存的发展第一章 数字信息保存的发展第一节 数字信息保存的概念第二节 数字信息保存目标及保存内容第三节 国际开展主要数字信息保存研究及项目第四节 我国数字信息保存基本状况第五节 数字信息保存责任体系第一节数字信息保存的概念1.数字信息 数字产品：一开始就是以数字形式产生的文献资料；由传统形式的文献转换而成的数字文献(数字再造资源)美国国家信息基础结构和保存项目(NDIIPP)将数字信息分为电子书、电子期刊、网站、数字电视等几大类第一节数字信息保存的概念2.数字信息保存“保存”一词对于数字信息的保护较为准确,包括行为、策略、方案和技术 数字信息保存是指将有价值的实体或非实体数据,利

2、用数字化科学技术保存在数字保存系统中,所有保存数据均以数字化形式存在 数字保存的特点:数字保存的对象范围广；数据格式范畴包括保存范围内的各种形式和数字化后的电子数据格式；数据的质量要高第一节数字信息保存的概念3.其他概念 掌管(curation):指从数据生产出来时就开始的管理和促进其被利用的行为,目标是使数据能够符合现实的需要,或能被用于发现和重用数据。存档(archiving):在掌管的基础上,确保数据是经过合理选择、得到良好保存的,并且这些数据可以被存取。随着时光的流逝,确保这些数据的逻辑和物理完整性得到维护,具有相应的安全和认证机构。第二节数字信息保存目标及保存内容数字信息的保存目标数

3、字信息长期保存的真实而具体的含义数字信息保存内容一、数字信息的保存目标 可持续发展是数字信息长期保存的目标 开放档案信息系统(OAIS)认为：数字信息保存系统的目标是确保被保存的信息对于目标团体而言是独立可理解的 保存元数据实施战略(PREMIS)认为：数字信息保存的目标是维持数字资源的长期可生存能力、可呈现能力和可理解能力 普里西拉卡普兰(Priscilla Caplan)认为,从下到上、从低到高,数字信息保存的目标分别为:可获得性;可识别性;可理解性;完整性;持久生存能力;可呈现能力;被保存对象的真实性 国内学者普遍认为数字信息的保存有四方面的含义:保证数字信息存储载体的稳定 保证信息内容

4、逻辑上的准确 保证数字信息的功能性 保证数字信息的存取性 概括而言,保存的目的即是要保存数字信息的内容、物理形式和功能 长期保存策略还应确保数字信息在未来可读一、数字信息的保存目标二、数字信息长期保存的真实而具体的含义1.数字信息的可读性 存储介质的损坏直接影响数字信息的可读性2.数字信息的可用性 指数字信息可以被人或电脑阅读和处理3.数字信息的可理解性 指数字信息的格式化内容可以被它的使用者理解4.数字信息的完整性 指数字信息是齐全的,并且未加删除、修正或改动5.数字信息的可检索性 抽象的信息对象(或部分)能有效、高效和准确地被检索与显示二、数字信息长期保存的真实而具体的含义6.数字信息的真

5、实性 数字信息与其用意相符 数字信息的形成和发送与其既定的形成者和发送者相吻合 数字信息的形成和发送与其既定时间一致 与它所代表的原件相一致(或记载不同之处)7.数字信息的安全性 指信息内容、用户使用和技术维护等多方面的安全性,包括现在和未来较长时间内信息的可获得性、准确性8.数字信息的通用性 指数字信息在保存过程中,要尽量用标准化的格式存储,必须考虑保存格式在相关行业中的认同度和现有软件的支持力度,应得到商业使用者和开放资源使用者的广泛支持,保证其在不同环境中都能被顺利读取使用三、数字信息保存内容1.信息内容(content)信息内容是数字信息中包括的大量内容2.信息结构(document-

6、based information structure)线性结构 非线性结构：树形结构、网状结构3.参考信息(reference)参考信息是一致持久的参考方法,是保证数字信息完整的基础,在引用、描述和分类体系中提供必要的参考方式,从而能发现、区分、确认与检索相关的信息对象三、数字信息保存内容4.信息环境(document-based information context)信息环境包括有关数字信息的产生、控制、使用、存储和管理的信息,以及与其相似材料的有关信息 数字信息的常用存储结构：数字信息类型存储结构(格式)应用范围格式化文本DOC、TXT、CAJ、PDF、HTML、SGML、XML各种出

7、版物、文本文件、网页等图像JPG、GIF、PNG、TIFF、BMP各类出版物、多媒体文件、网页音频MP3、WMA、RM语音处理、音乐、数字广播、音乐图书馆视频PMP、AVI、MPEG、RMVB、WMV、MP4数字录像或电视、影像图书馆、教育培训三、数字信息保存内容 AVI的英文全称为Audio Video Interleaved,即音频视频交错格式,是将语音和影像同步组合在一起的文件格式 这种视频格式的优点是图像质量好,可以跨多个平台使用;其缺点是体积过于庞大,而且压缩标准不统一,受到版本的影响较大三、数字信息保存内容 MPEG的全名为Moving Picture Expert Group,中

8、文译名是动态图像专家组 MPEG标准主要有五个:MPEG-1、MPEG-2、MPEG-4、MPEG-7及MPEG-21三、数字信息保存内容 ASF是Advanced Streaming Format(高级串流格式),是一种包含音频、视频、图像以及控制命令脚本的数据格式 ASF用于排列、组织、同步多媒体数据以利于通过网络传输；也可用于指定实况演示；最适于通过网络发送多媒体流三、数字信息保存内容 SGML(Standard Generalized Markup Language,标准通用标记语言)格式是一种定义电子文档结构和描述其内容的国际标准语言,是所有电子文档标记语言的起源,早在网络发明之前就

9、已存在 使用SGML将给多媒体的创作带来许多好处：由于其规范性,它可以使创作人员更集中于内容的创作,可提高作品的重复使用性能、可移植性能以及共享性能；其独立性使得它在许多场合都有用武之地 HTML和XML都是SGML HTML(Hyper Text Markup Language)格式即超文本标记语言或超文本链接标示语言 XML(Extensible Markup Language)格式即可扩展标记语言三、数字信息保存内容 PDF格式,全称Portable Document Format,是一种电子文档格式，这种文档格式与操作系统平台无关 PDF文件格式的目的是支持跨平台上的、多媒体集成的信息

10、出版和发布,尤其是提供对网络信息发布的支持 用PDF制作的电子书具有纸版书的质感和阅读效果,可以展现纸质书籍的原貌,而显示大小可任意调节,给读者提供了个性化的阅读方式三、数字信息保存内容5.元数据(metadata)元数据是关于数据的数据,由背景、处理和使用时产生的信息构成;有利于保证数字信息的真实性、检索和保存6.技术环境(technical environment)数字信息依赖于某种技术的支持,根据不同的情况,或多或少与某种特殊的配置、技术有联系,必须保存一定的技术处理的信息才能够利用和存储信息7.功能(function)数字信息的类型包括文本、图像、视频、音频等,可以多种类型存在。要完成

11、多种功能,必须提供不同类型的工具,保存数字信息既是保存这些功能,也是实现这些功能第三节国际开展主要数字信息保存研究及项目 研究图书馆组织(The Research Library Group)是一个有160 个会员单位参加的国际性的专业社团,其团体会员主要是国家图书馆、大专院校图书馆、公共图书馆、博物馆和独立研究收藏机构等单位 1991年,瑞典、挪威、丹麦、芬兰和冰岛的国家档案馆就电子文件的保护与存取问题进行了调研,并颁布电子文件的存取与保护研究报告；此后,欧、美等发达国家纷纷成立相应的机构专门研究数字信息的长期存取与保护问题 例如：1994年3月17日,在荷兰首都阿姆斯特丹就成立了欧洲保护与

12、存取委员会(ECPA)1994年12月美国组建美国保护与存取委员会 1993年12月澳大利亚成立保护澳大利亚数字信息调研组第三节国际开展主要数字信息保存研究及项目 数字信息长期保存系统基本构架：开放档案信息系统参考模型(OAIS)OAIS的五个主要功能模块：摄取模块(Ingest)：从出版商或其他信息提供者处收集或接收按照一定格式组织的提交信息单元(Submission Information Package,SIP),信息单元经检验后建立相应元数据,交给数据管理模块,信息单元被转换为按照长期保护规定格式组织,包含专门的长期保护处理数据的存储信息单元(Archival Information

13、Package,AIP),然后交长期存储模块第三节国际开展主要数字信息保存研究及项目 OAIS的五个主要功能模块：长期存储模块(Archival Storage)：实际存储按AIP 要求组织的数字信息,负责数据更新、技术仿真或数据迁移,负责建立具体存储与存取系统(如梯次存储系统),并在检索传递模块要求时将AIP提供给该模块。在技术仿真或数据迁移过程中,可能形成新的数字内容单元,可能需要与摄取模块协作重新建立有关元数据并送交数据管理模块 数据管理模块(Data Management)：存储关于数字信息单元的元数据和关于长期保护处理政策、程序、技术及系统的元数据,并提供对这些元数据的基础检索与管理

14、第三节国际开展主要数字信息保存研究及项目 OAIS的五个主要功能模块：检索利用模块(Access)：提供用户检索元数据和索取数字信息单元的界面,提供检索机制,并将AIP 转换为适合用户利用的传递信息单元(Dissemination Information Package,DIP),还可能承担身份认证和授权管理等。系统管理模块(Administration)：通过有关政策、规范、程序、工作流程等来监测和控制整个长期保存系统的运行和各个模块的运行第三节国际开展主要数字信息保存研究及项目 目前国际上致力于数字信息长期保存措施研究颇具影响的项目:ERA(Electronic Records Archi

15、ves)项目 OAIS项目 InterPARES(The International Research on Permanent Authentic Records in Electronic Systems)项目 CEDARS(CURL Exemplars in Digital Archive Systems)项目 NEDLIB(Networked European Deposit Library)项目 PANDoRA(Preserving and Accessing Networked Documentary Resources of Australia)项目 PRISM(Preserva

16、tion,Reliability,Interoperability,Security,Metadata)项目第三节国际开展主要数字信息保存研究及项目 目前国际上致力于数字信息长期保存措施研究颇具影响的项目:PAERM(Persistent Archives and Electronic Records Management)项目 CAMiL EON(Creative Archiving at Michigan and Leeds:Emulating the Old on the New)项目 Data Provenance Project项目 Nordic Web Archive项目 ERPA

17、NET(Electronic Resource Preservation and Access Network)项目 LOCKESS(Lots of Copies Keeps Stuff Safe)项目 DELOS(Network of Excellence on Digital Library)项目第三节国际开展主要数字信息保存研究及项目 目前国际上致力于数字信息长期保存措施研究颇具影响的项目:欧盟项目FP6项目(2004年1月启动)PRESTO(Preservation Technology for European Archives)项目 EVA(European Visual Arch

18、ive)项目 美国数字信息保存计划NDIIPP(National Digital Information Infrastructure and Preservation Program)挪威网络信息保存项目PARADIGMA第三节国际开展主要数字信息保存研究及项目 各项目试图解决的主要问题:确定长期保存的目标 明确相关人员或组织的职责 制定长期保存的规范流程 规定所需遵守的技术标准或最佳实践 建立对实施效果进行评估的机制 制订长期保存延续性计划第四节我国数字信息保存基本状况 经过最近十几年的发展,我国针对印刷型(纸本)文献的数字化已经初具规模 一方面,具有特色文献收藏的机构正在逐步、有计划地数

19、字化一些珍贵文献和特色收藏 例如:国家图书馆建设了碑帖菁华、敦煌遗珍、西夏碎金、数字方志等数字化项目;第二历史档案馆的数字化项目;CALIS特色数据库建设项目;中美百万册图书数字图书馆计划CADAL,在国内建立了2个技术中心和14个数字资源中心,对我国古籍、民国书刊、学位论文等馆藏文献进行数字化 另一方面,商业性电子图书出版商(方正、超星、书生、中文在线等)形成了较强的对图书资源的数字化加工能力第四节我国数字信息保存基本状况 数字信息长期保存在我国还没有引起广泛关注 比较早关注数字信息保存的机构是图书馆、档案馆、信息中心等机构,而出版界、软硬件商或者数据库生产商等机构发表的相关论文寥寥无几 目

20、前,国内数字信息长期保存研究主要有:国家图书馆网络信息资源(表层网页和深层网页)的采集和保存试验研究WICP(Web Information Collection and Preservation)构筑网络信息采集的基本试验环境并逐步完善和扩充,分析采集对象的性质,研究、采集编目、保存与服务相关的各种技术标准与规范 制定网络资源整合与服务平台的功能需求书 公开试验阶段的元数据探讨存档信息的长期保存 对图书馆、著作权和新闻出版的缴送制度等方面的法律规范提出建议 开展网络信息资源整合的国内国际交流第四节我国数字信息保存基本状况 我国数字图书馆研究历程大致可以分为三个阶段:概念引入阶段(199519

21、96年)技术探索阶段(19962000年)应用实践阶段(2001年至今)第四节我国数字信息保存基本状况 技术探索阶段(19962000年)教育部“九五”攻关项目,于1996年年底至1998年年底由清华大学、北京大学、上海交通大学、华南理工大学完成,主要研究了数字图书馆体系结构、异构数据源的数字化、存储和检索机制以及相应的标准规范,建立了一个图文信息联合导读学习系统、音乐数字图书馆的雏形系统和一个小型数字化视频数据库的示范系统 2000年11月,由清华大学基础研究基金资助,清华大学图书馆、计算机系、建筑学院共同承担的“清华大学建筑数字图书馆”项目立项等第四节我国数字信息保存基本状况 应用实践阶段

22、(2001年至今)“文物调查及数据库管理系统建设”项目与“馆藏文物信息管理系统软件”中国广播电视音像资料馆 ISO14721/OAIS标准(开放档案信息系统标准)已经在很多国家的图书馆、档案馆中采用 中国已经建成了数百个各种类型的数字图书馆和数字档案馆系统，在数字图书馆和档案馆系统结构、法律问题、长期存储问题、共建共享、标准建设等方面取得了一批积极的成果；但在数字图书馆、档案馆的建设中还需要加大投入,集中力量解决数字信息存储的问题第四节我国数字信息保存基本状况 台湾地区,各重要的文化教育研究机构,如台北“故宫博物院”、台湾历史博物馆和自然科学博物馆、台湾图书馆、“中央研究院”及台湾大学等,亦致

23、力于数字化技术的研究发展 台湾行政主管部门及科学委员会自1998 年起,系统化地资助了一系列的数字保存相关计划:自1998年至2002 年展开了“数字博物馆项目计划”自2000年至2002 年展开了“国际数字图书馆合作计划”在2001 年展开“保存数字化项目计划”在2002 年合并整编以上“数字博物馆项目计划”、“保存数字化项目计划”以及“国际数字图书馆合作计划”,考虑整体发展,成立“数字保存国家型科技计划第五节数字信息保存责任体系 谁应该承担数字信息长期保存的责任?应该是数据的作者、数据的用户,还是数据的管理者,抑或是其他的责任者?数字信息的长期保存需要多方面、多形式的合作与支持,单凭传统的

24、图书馆、档案馆等来进行长期保存是不够的，有必要建立全国数字信息保存中心组织 全面解决数字信息长期保存的问题需要有共同的认识和共同的行动,同时也需要借助各方面的专业知识和技能 在数字信息长期保存中,多方合作是主要模式第五节数字信息保存责任体系 数字保存这项庞大的工程需要共同的参与和合作。国际专门机构在进行这项工作,比如互联网档案馆(http:/www/archive.org)就是第一个专门的互联网档案机构,致力于数字信息的长期保存图片来源：https:/ 数字信息保存活动中的责任分工:数字信息监管者、形成者、保存者和利用者,他们对数字信息长期保存肩负着不同的职责第五节数字信息保存责任体系 数字信

25、息监管者：对组织数字信息长期保存项目及其活动过程、成果进行监管、协调机构和个人,监督数字信息保存活动的实施 贯穿整个长期保存活动的全过程,涉及活动的方针、政策,方法的制定、实施及评价,以及人员角色、职责、分工和落实情况的监督、调查,相当于中心组织的作用第五节数字信息保存责任体系 职责要求：根据国内相关法律法规、行政命令、信息管理的相关标准、规范、指南,建立、执行和维护数字资源长期保存项目 明确和制定数字资源长期保存的目标和要求,建立衡量数字保存的绩效体系 指派相关的档案管理机构和负责人,并分配负责数字资源长久保存战略规划制定、实施、监控、质量审核的负责人 保证所有数字信息管理人员明确责任并接受

26、先期培训 协调数字信息管理部门与组织内外其他相关部门的信息沟通 保证组织信息资产;保证真实、完整的数字文件信息产生 保证数字资源长期保存相关人员的配置和登记,防止因人事变动或者人员缺席而造成数字信息保存的损失 支持机构间的互操作、制定数字信息管理的互操作性标准,并将其纳入机构规范体系建设和信息化建设规划第五节数字信息保存责任体系 数字信息形成者：在组织业务活动中,在收集范围内的一切数字信息的形成者,可以是个人、机构或者文件系统 给予组织业务活动的目标和要求,按照一定的长期保存要求的格式产生数字信息;通过移交过程将文件信息和元数据递交系统第五节数字信息保存责任体系 职责要求:创建和维护足够、适当

27、的项目活动记录信息 在项目研究过程中,树立文件、数字信息管理意识,对项目文件的创建、维护、利用、保护和处置进行全程、实时控制 与组织业务部门及相关负责人联系,保证业务活动过程中产生的文件信息被及时移交、制定保管期限 与组织内部信息管理部门联系,识别和明确文件的管理要求,包括产生文档的格式、内容、保存类型、存储介质以及相关元数据著录信息 创建和维护业务活动产生的文件信息资源,协助业务绩效审核第五节数字信息保存责任体系 数字信息保存者:对项目形成的数字信息进行收集、整理、著录、处理、存储、销毁、迁移等管理活动的相关人员、组织、部门或者系统 阐明、修改、制定数字信息存储的目标、原则政策框架;设置人员

28、责任权限;采取成本、效益一致性的技术策略;设计一套与项目业务活动一致的数字信息保存活动流程等第五节数字信息保存责任体系 职责要求：协调管理部门与业务部门及干系人之间的关系,保证数字资源长期保存与相关法律、规定、标准、规范相一致 为组织部门及干系人提供执行数字资源长期保存的前提操作管理培训和管理活动技术支持与指导,实现数字资源管理的前端控制,保证数字资源长期保存的有效性 为数字信息提供利用第五节数字信息保存责任体系 数字信息利用者：数字信息的利用群体,包括个人、机构或者系统,数字管理系统制定用户群 使用系统服务,发现、检索、利用信息第五节数字信息保存责任体系 职责要求：主张业务活动管理过程透明,管理事务信息公开,公共信息资产向公众开放利用,在符合国家相关信息保密、知识产权保护和电子政务信息管理规定的前提下,通过合法的途径利用数字信息资源 公众有权利查询、检索数字信息资源 公众有权利要求数字信息保存部门以一定的形式向利用者提供数字信息 实现对文件资料的多级查询 利用者有权知晓提供利用的方式 利用者有义务遵守关于数字信息利用的标准、利用权限和有关知识产权保护的学术道德规范章节回顾 数字信息保存的主要内容是什么？数字信息长期保存策略的目标是什么？国外数字信息保存项目有哪些？我国数字信息保存进展是怎样的情况？数字信息保存责任体系是怎样的？