分类: 服务器与存储
2008-07-13 16:12:24
1.资料管理现状
中国广播电视事业历经半个世纪的发展和几代人的艰苦努力,已经形成了大量高水平、高质量、具有历史收藏价值的音像节目和视音频素材资料。随着时间的延续这些资料的保存价值和重要性也随着突显出来。首先,这些视音频资料需要更可靠和长效的介质保存;其次这些宝贵资料更需要合理有效的存储管理系统,使它们完整有序、便于检索、并能够方便快捷地提供全方位的音像信息服务,充分发挥这些视音频资料的实用价值。
2、高新技术的应用
资料管理工作早以走过了"卡片索引+手工检索"的历史阶段,引进先进的技术手段是必然的选择。模拟制式将最终被数字制式替代,数字流磁带和数字化存储将成为节目保存的主流。
数字化技术在节目的录制、编辑和播出业务普遍应用,将有效的提高节目保存和播出的质量,海量存储技术也为视音频资料的数字化提供了大规模存储的基础。
3、对资料管理的要求
在知识经济时代的深入,情报和信息工作对节目资料的检索和再利用提出更高的要求,编导在制作节目时,要查阅库存中同类或相似的节目资料以便参考和再利用;逐渐增多的行业内部交流更需要节目资料共享;随着远程宽带网络的飞速发展,我们所拥有的丰富资源必将通过网上节目交流而产生巨大的经济效益和社会效益。
第一章 方案综述
本章首先阐述了建设视音频资料存储管理系统的必要性和迫切性;然后,对系统业务需求进行分析;最后,提出系统总体建设目标和设计原则
1.1建设视频资料管理系统的必要性
●视音频资料管理系统现状:数量大、价值高
一般的用户均拥有了几万小时的节目资源,而且每年还再不断增加。资料越来越多,种类日趋齐全,其有形价值和无形资产均不能以金钱去衡量。
●资料库房的面积小,密度大,物理条件差
由于历史原因,库房条件不是很理想,条件不满足磁带的长期保存要求,极易造成资料的损失。
●资料管理现代化的条件已具备:技术的进步,编导需求,有
应用基础
综合上面的几点资料使用情况,说明建立一个资料丰富,保存条件好,编目完备的现代化视音频资料存储管理系统已经刻不容缓。
1.2业务需求分析
现有系统保存了一大批具有历史意义和史料价值的视音频节目素材,如何完好的保存这些资料和节目,成为当前的重要课题。首先,原来历经几十年,几代工作者积累的大量视音频资料要完整的保存,其次这些视音频资料存放在不同格式的磁带上,最后所有资料都要便于存放,便于查找,使保存的资料能够真正体现出他们的价值。
建成后的数字化视音频资料存储管理系统能够实现下述几方面的功能:
A、 海量存储:建成的系统存储量要满足存储约上千小时的视音频节目并随着节目制作的不断增加实现系统的无缝升级,存储的介质类型以符合数字化技术潮流和保存时间长的介质为主。
B、足够的输出能力:编导和用户需要节目的视音频数据时,系统应能及时输出所需的介质或提供视音频信号。
C、充足的输入能力:能够满足处理同时有多个工作终端的工作要求,满足若干编导多路采集的资料处理能力。
D、快速简捷的资料整理:对资料管理系统要求操作简捷直观符合规范。
E、易懂有效的资料检索:无须专门培训,检索系统也能够达到检索的要求。
第二章 系统设计
系统建成后,所有视音频资料将进行完善的编目,同时对所有资料将逐步进行数字化保存,系统的数据量是空前的。多级存储部分作为整个计算机系统的数据处理、存储和管理中心,承担着海量信息的存储处理和维护任务。对设备的可靠性、开放性、可扩充性及可管理性提出了较高的要求。
为了对系统的编目、检索、视音频传输等应用提供持久、稳定可靠的性能,系统采用惠普公司的Surestore VA7100高性能和可堆叠的2/20自动化磁带库并依托 Openview软件构成整个多级存储体系。
惠普公司致力于存储技术领域已有几十年的历史,惠普公司同时拥有多种存储技术和针对不同行业的经验,惠普公司的各项存储产品在存储市场占有很大的份额,可为用户提供高性能和高可靠性的存储硬件产品,可有效的提高系统的存储性能,大大降低系统的造价。软件方面,惠普高效的Openview软件同时可为迅速增加的企业数据提供高度的可存取性以及可靠的保护。
2.1存储系统的容量估算
根据亚细亚公司多年对媒体行业研究和实施经验,我们认为对系统所要满足的存储空间需求估计如下:
参考节目资料存储管理系统的数据量、软件开发及数据库管理的经验,系统中的管理类数据,磁带物理状态信息数据等属于文字类数据,所占存储空间总量约在100M(节目时间长度2000小时),他们在全部数据中只占很少的比重,存储系统中最主要的数据是多媒体(视音频)数据和编目检索数据。 我们以存储容量2000小时为基础,以下的估算均以此为依据。
1、文字类编目检索数据
按平均每盘资料节目带的长度为1小时计算,包含10条编目单元,文字量为5KB(标题,来源,稿件,分类号,关键词等),全文检索数据量与文字信息大体相当,计算如下:
编目单元数:2000小时*1盘磁带/小时*10条/盘磁带=20000
文字信息量为20000条*5KB/条=100000
文字类编目检索数据数量:100M
2、多媒体信息数据
假设对所有入库视音频资料进行全程采集,对部分节目采集MPEG-2则:
MPEG-1:2000*3600*1.5/8=1350GB (节目时间长度2000小时)
MPEG-2:1000*3600*25/8= 3125GB (节目时间长度1000小时)
所以多媒体信息总量为: 4475GB
考虑到增加数据冗余和备份设计(约占30%),存储系统需要具有4TB的数据存储能力,其中假设在系统的磁盘阵列将最近10天之内入库的节目和常用数据信息及检索频率高的资料在线存储,在加上系统的检索信息,这部分在线资料大约730GB,其他多媒体数据主要存储在专门设置的数据流磁带设备中。
2.2设计原则与目标
2.2.1高性能
对整个系统来说,所要处理的数据量相当巨大,并且要进行高质量的实时视频流的存储,查寻及检索,因此要求系统的主机与数据库具备优越的并发处理能力,从而保证每个业务在较短的时间内得到处理,这就需要主机具有多个高性能的处理器,高速的内存系统和高效,快速访问的外围设备。