登陆注册
49313800000029

第29章 传媒信息存储与管理新技术(4)

4.2.5 SAN的管理

1.管理系统的作用

实践证明,SAN网络非常适合于视音频海量数据的存取,具有显着的优势。其他数据化业务处理系统(如非线性编辑、硬盘播出、在线视频点播、媒体资产管理、视音频资料馆等等)也都将以SAN和其增值产品为基础运行,以满足高性能、高可靠性、高性能价格比的应用要求。同以太网一样,SAN也需要管理操作。SAN带来了全新的数据存储方式,其管理成为一个新课题。

上述各种应用可以在一个或多个系统中实现。这些系统一般都采用开放、独立的模块化设计,这样设计的好处是保持系统的灵活性:

(1)各模块之间采用开放、标准的接口协议,使不同产品模块之间的衔接简单化;

(2)不因某个模块技术、产品的变化影响其他模块的设计和使用;

(3)降低更换和升级模块产品和技术的成本;

(4)降低系统集成、运行、维护、培训的难度和费用;

(5)不会被某个特定厂商、供应商所控制。

SAN文件系统和存储管理系统将硬件系统(如主机、存储网络、存储设备)和应用平台(如媒体资产管理系统)分离开来,硬件和应用平台的变化不会相互影响。如果应用平台是基于标准文件系统接口开发的,在更换和升级SAN文件系统和存储管理系统时,应用平台不会受到任何影响。

此外,SAN文件系统是否具备存储管理功能,即能否将大量的素材和历史资料经济、有效、长期存储和保护存储在SAN文件系统中,对广电传媒行业应用非常重要。海量视频素材和资料全部存储在磁盘阵列当中是非常昂贵和不现实的,而且会给数据的保护造成很大难度。而将它们存储到相对廉价的可移动介质中,可以降低存储系统成本和资料备份的开销与难度,并提高整个应用系统的性能。由于这些资料往往是只读数据,生成后一般不会改变,所以采用版本保留和介质复制方式备份资料,比传统备份方式更经济、有效。

在SAN环境下的存储模型中,网络中每一个工作站都可以通过交换机直接访问SAN存储设备。这也是SAN可以实现高速集中存储的根本原因。

可是由于设计问题,现在的操作系统都会对资源进行独占处理,使得各主机间会无休止地对所检测到的资源(存储空间)进行签名争抢。另外,由于存储是集中的,各主机对集中存储的操作也不为其他主机所知,这使得数据安全成为一个很大的问题。因此,单有这些硬件构架还不足以使整个SAN平稳高速地运行,很有必要对SAN建立一套完善的管理机制。以下介绍两种管理软件StorNext Management Suite 和ImageSAN。

2.StorNext Management Suite 简介

StorNext Management Suite(SNMS)是ADIC 公司出品的SAN存储管理软件,特别适合于大规模、高数据流、长期数据归档存储和保护的应用环境。

SNMS 由高性能、跨平台的SAN文件系统(StorNext FS)和长期数据存储管理(StorNext SM)两个模块组成。

StorNext FS 的前身是着名的CentraVision,是世界上最早、最成熟、专门为SAN环境设计的高性能、跨平台的SAN文件系统。StorNext FS 软件安装在每个直连在SAN网络的主机上(支持Unix、Linux、Windows),不依赖于任何主机文件系统(如UFS、NTFS 等)。StorNext FS 将挂接在SAN网络上的FC 磁盘阵列的存储空间形成一个或多个SAN文件系统,使得每个主机都可以以FC 的高速度同时访问同一个文件,这不仅极大地提高了系统性能(不必通过网络在主机拷贝文件),而且降低了磁盘存储成本(不必在磁盘上拥有多个文件副本)。StorNext FS 的主要特点如下:

(1)可为异构主机提供对同一数据文件的“数据块”级访问。完全使用Fibre Channel Direct I/O 功能,不在SAN网络中使用TCP/IP 和NFS 方式共享文件,从而充分发挥SAN网络硬件性能,并保证随着SAN网络性能的提高而提高。

(2)支持不同的主机平台(Unix,Linux,Windows)。

(3)不局限于任何SAN硬件,如光纤通道适配器、SAN交换机、磁盘阵列等。可以优化组合各种品牌的SAN磁盘资源,并发访问多个磁盘设备,使系统能充分发挥SAN的高性能。

(4)具备磁盘卷管理、优化功能和带宽质量保证机制(QoS)。

(5)支持各种SAN连接方式和拓扑结构(FC、iSCSI 等),支持多SAN网络适配器并行工作。

(6)支持XDSM 数据管理规范,可以和主流数据备份软件协同工作。

(7)支持大量SAN主机以本地I/O 方式(不通过IP 网络协议栈)同时访问同一个文件。

StorNext SM 是一个数据长期归档存储管理系统,它按照系统管理员预设的各种规则将StorNext FS 文件系统中的数据从昂贵的RAID 系统中迁移到廉价的JBOD 磁盘阵列和磁带库当中,在降低存储成本的同时对数据进行长期、安全的归档存储。这一切对于应用系统和用户是透明的,他们不用关心所需数据位于何处。SNMS 可以智能地存储和调用数据,满足应用系统的需要。例如,当StorNext FS 磁盘空间达到某个百分比(如90% )时,便会将最不经常使用的数据迁移到磁带库中,使StorNext FS 磁盘空间保持某个百分比(如50% )的空余空间存储新的数据;若文件在预定时间内没有被访问,则将其迁移到磁带库中,节省磁盘空间用于存储新数据;而应用程序和用户依然认为数据文件存储在StorNext FS 磁盘当中,他们可以正常查阅文件属性列表。当他们调用文件本身时,StorNext SM 将文件本身从磁带库中调回到StorNext FS 磁盘当中,供应用系统和用户使用。StorNext SM 拥有以下许多特点可以满足用户高效、安全的多级数据存储的需求。

(1)存储空间管理

管理多级存储空间的能力。昂贵磁盘阵列RAID、廉价磁盘组JBOD、磁带库Library 和磁带架Vault。透明地在不同存储介质间高速移动、复制数据。

(2)内置数据保护功能

文件复制功能。同一数据可以同时保存在多盘磁带当中,提高数据的冗余度,快速实现磁带当中的数据备份。

同一文件的多版本存储。数据可以保存多种版本,保证数据可以被恢复为以前的版本;

文件反删除功能。保证数据在误操作的情况下可以及时恢复。

(3)数据完整性

使用具备自我描述能力的磁带格式。在发生意外、或有特殊要求的情况下,SNMS 磁带中的数据可以在一台独立的磁带机中读出,而不必依赖SNMS 系统和磁带库。

具备灾难恢复功能。如果磁盘阵列中的数据遭到破坏,可以利用磁带库中的数据恢复。

完备的系统管理工具。具备系统使用情况、健康状态监控功能。

(4)确保数据在整个生命周期内一致

Infinite File Life(IFL)。保证数据永远不因介质损坏而丢失。

Vaulting。磁带介质可以拿出磁带库,存放到其他安全的地方。

(5)投资保护服务

技术迁移。使用户在一种可以控制和管理的方式下,采用或升级到新的驱动器和存储介质。这一特性极大降低了用户因为产品、技术更新所付出的数据迁移成本和数据损坏、丢失的可能性。

(6)强大的可移动介质管理功能

支持不同控制类型的磁带库,可以同时管理多台磁带库;在同一个磁带库中管理不同类型的磁带机和磁带介质;支持磁带库的条形码扫描功能;支持对拿出磁带库的磁带介质的跟踪和管理。

SNMS 将SAN环境中的磁盘阵列和磁带库统一管理起来,形成一个完整的、长期数据存储和保护系统。SNMS 具有很多特点,非常适合于广电传媒行业对数据化资料存储和管理的要求。

3.ImageSAN简介

ImageSAN是Rorke Data 公司的SAN管理软件。ImageSAN是专门针对广电传媒行业视音频(AV)SAN网络存储应用而研发的,是Windows 及Macintosh OSX 环境及混合环境的SAN解决方案,并提供广泛的应用支持和高适应性的容错能力。

作为业内第一个2GBSAN解决方案,ImageSAN使人们可以完全专注于创意,而不用担心存储系统。Rorke Data 的存储解决方案通过速度、协作和多任务提高了视频、音频及图形编辑系统的网络化处理能力,已为高级的数字视频和影视编辑系统所采用。

在现有SAN网络管理方案中,ImageSAN是完全针对AV 存储开发的,它在应用中具有明显的优势。

(1)安装

ImageSAN安装简单,在安装重启后自动完成全部配置。自动管理,使用中很少需要用户参与,保证在后台完成SAN共享存储的管理,对用户的使用完全透明。

(2)磁盘管理

ImageSAN无需映射网络磁盘。在每一台ImageSAN工作站上,中央的存储卷显示为本地硬盘,凡是可在本地硬盘上进行的操作,凡具有相应权限的用户都可以对SAN中央存储进行操作,如共享一个卷到以太网。从而可在网络中的所有工作站进行面向以太网的二次共享,使局域网上的工作站(如粗编站)也可以方便地进行访问。

(3)MDC 设置

ImageSAN可以保证卷Master 的动态切换,确保高可用性。在对等网中,每一台主机都有可能成为卷Master。从成本考虑,用户根本不必花费额外的MDC(Meta Data Controller)费用。而从安全性等方面考虑,当网络中主机数量大于10时,用户往往使用域模式(并不是必须如此,取决于用户以太网的设置),单独设置一台域服务器,ImageSAN就可以指定该服务器为Master。

(4)支持苹果OSX 系统

苹果系统在AV 领域提供了广泛支持,尤其是在高清晰度电视、电影方面。ImageSAN支持苹果OSX 的SAN管理软件。

(5)SAN以外以太网工作站的访问要求

在每一台ImageSAN工作站上,SAN存储卷都直接显示为本地硬盘。由于具有所有本地硬盘的特性,SAN存储卷可以再映射到以太网以便共享。这样,SAN以外的以太网工作站也可以访问SAN中的资料。更重要的是,SAN中的每一台主机都可以面向以太网共享同一SAN分区(用户权限支持)。整个网络的处理能力分担了原来单台服务器的负载,大大减小了网络瘫痪的可能性。这一点特别适合无卡网络编辑的要求。

(6)动态高可用冗余标准

ImageSAN网络中的Master 如果出故障,同一网络中的工作站都可以接管成为Master。而且,SAN中的每个卷都可以单独指定自己的Master,也可让网络选举产生Master,非常灵活。

(7)元数据的占用

元数据(Meta‐data)请求通过以太网来传输。当使用一个小规模的SAN,以太网的压力也许并不明显,但在使用不同的文件系统、异构共享的环境中,元数据共享对保证SAN所用文件一致性至关重要。元数据请求及传输将对以太网造成沉重压力。在实际应用中,以太网还要进行日常的工作和文件传输,结果反倒成为整个网络的瓶颈。而使用ImageSAN,每次读取只发送一个元数据请求,减少了Master 和客户机之间的通讯,大大减轻了以太网的压力,同时也减轻了对MasterCPU的负担。正因为如此,ImageSAN可以使SAN网络大大扩展,可以加入更多的节点。在一个大规模SAN网络上,ImageSAN将更有优势。

4.3 媒体资产管理系统

随着电视媒体竞争的加剧,为了适应节奏变化加快的市场需求,保持竞争能力,电视台及影视制作公司需要更高的制作灵活性,这就要求能更快地找出所需的媒体素材并重新包装、再用。构成栏目的素材含有种种商业信息,包括版权、可容许播出的次数、购买版权的成本和付费方式等,都非常重要。因此,很有必要建立一个高效的媒体资产管理系统,它能为更有效地制作高质量的节目带来帮助,提供有效的成本和风险管理,也为将来的系统升级和全面数字化系统的融合提出全新的解决方案。

4.3.1 媒体资产管理(MAM)的基本概念

媒体资产管理(MAM)是一个端到端的、对各种媒体及内容(如视音频资料、文本文件、图表等)进行全面管理的总体解决方案。包括数字媒体的采集、编目、管理、传输和编码转换等所有环节,满足媒体资产拥有者收集、保存、查找、编辑、发布各种信息的功能要求。

同类推荐
  • 吹牛大王历险记

    吹牛大王历险记

    本书原为德国民间故事,后由德国埃·拉斯伯和戈·毕尔格两位作家再创作而成。这是介于童话和幻想故事之间的作品,是根据十八世纪德国男爵敏豪森讲的故事编写的。
  • 月圆之日的修车人

    月圆之日的修车人

    三年前丧生车祸的漂亮女孩,在毕业照上笑靥如花。白发人送黑发人的不幸母亲,却要为杀死独生爱子的凶手做无罪辩护……世事难料,唯有人性向善,才能给予我们彼此的温暖;而保存在心底的那一点温暖,便是走出逆境的曙光和动力。这也是作者出这本故事专辑的初衷。
  • 语文新课标课外必读第十二辑——王子与贫儿

    语文新课标课外必读第十二辑——王子与贫儿

    国家教育部颁布了最新《语文课程标准》,统称新课标,对中、小学语文教学指定了阅读书目,对阅读的数量、内容、质量以及速度都提出了明确的要求,这对于提高学生的阅读能力,培养语文素养,陶冶情操,促进学生终身学习和终身可持续发展,对于提高广大人民的文学素养具有极大的意义。
  • 学生的创造素质教育与升级方案(下)

    学生的创造素质教育与升级方案(下)

    素质教育主要着眼干广大学生及社会长远发展的要求,以面向全体学生、全面提高学生的基本素质为根本宗旨,是以注重培养广大学生的态度、能力、促进他们在德智体等方面生动、活泼、主动地发展为基本特征的教育。
  • 谁是你心中的唯一

    谁是你心中的唯一

    本书为中国有名的招牌大学335所最新揭密,是千百万高考生、考研生必读的一本书。
热门推荐
  • 有女明妆

    有女明妆

    她,宋氏明妆,本是小小庶女,父亲一心匡扶家族,不问后宅;嫡母高贵冷漠,对她不冷不热;生母温柔,却不幸早逝。上有出挑的嫡姐庶姐,下有高贵的嫡妹。好在生母对祖母有着舍身相救之情,在这后宅中有祖母照拂,养母细心看顾,得以平安长大。一朝选秀,宋家姐妹纷纷落选,反倒是她,走进宫门。对宋明妆来说,进宫本是为了家族,却对一国之君产生了愿得一心人的感觉。他是她的依靠,是她的下半生。(本文纯属虚构,请勿模仿。)
  • 指引人生丛书:指引人生的成功智慧

    指引人生丛书:指引人生的成功智慧

    《指引人生丛书:指引人生的成功智慧》中的每一则小故事都发人自省、启人深思。不但有助于我们处理日常生活中偶发的困难情况,而且许多故事和寓言具有的伟大的智慧理念,将帮助我们进一步了解自我及人类的本质,由此领悟更多的人生哲理。许多故事已经过数百年的世代传承,历经时间的锤炼也沉淀了时代的智慧。在每一则故事或寓言中,我们附以精彩的格言,这些都是最贴切的提示,有画龙点睛之妙。《指引人生丛书:指引人生的成功智慧》部分的解读至情至理、丝丝人扣,是对故事或寓言的完美诠释。
  • 天行

    天行

    号称“北辰骑神”的天才玩家以自创的“牧马冲锋流”战术击败了国服第一弓手北冥雪,被誉为天纵战榜第一骑士的他,却受到小人排挤,最终离开了效力已久的银狐俱乐部。是沉沦,还是再次崛起?恰逢其时,月恒集团第四款游戏“天行”正式上线,虚拟世界再起风云!
  • 福缘树

    福缘树

    一个心有翅膀的小男孩,一个童话般的女孩,一段可歌可泣恋情,神秘的福缘树,可爱的圣诞矮人,造就一个永恒不朽的传奇。这是一个活着般真实的世界,也会是一个别样精彩的世界。大千星域,群魔乱舞,百世红尘,少年一朝觉醒,谁主沉浮?!
  • 天行

    天行

    号称“北辰骑神”的天才玩家以自创的“牧马冲锋流”战术击败了国服第一弓手北冥雪,被誉为天纵战榜第一骑士的他,却受到小人排挤,最终离开了效力已久的银狐俱乐部。是沉沦,还是再次崛起?恰逢其时,月恒集团第四款游戏“天行”正式上线,虚拟世界再起风云!
  • 史记?他的伟大时代?司马迁

    史记?他的伟大时代?司马迁

    本书对司马迁的一生及其文学作品进行品读,将这位文坛巨匠真实地展现给读者。
  • 她的偏执宠爱

    她的偏执宠爱

    女病娇甜宠爽文她,是人人口中阴晴不定患有低血糖的君家大小姐君无颜。他,是顾家老来得子的唯一儿子顾清离。初见他时,他被人追杀,被她救下,他们竟然有娃娃亲?还定了婚?再见时,他对她说:我们可以尝试着在一起的…结婚多年后,君无颜面对着各大记者说:他是我的命,没了他,我会疯。
  • 机械时代之古武机甲

    机械时代之古武机甲

    黑森林里,苏音小小的身体圈作一团,无边的黑暗将她包围。
  • 伊然泪

    伊然泪

    他曾说:”某一天,你我暮年,静坐庭前,赏花落,笑谈浮生流年。“她曾回应:”我只愿这一生不负你的期望。“她曾是他灰暗时光中最美好的笑颜;她曾是他心中潜藏最深的玫瑰;他曾经说过无论怎样他都不会抛弃她;他也曾许诺此生只为她留心。可世人大多眼孔浅显,身不由己,他和她还是错过了,错过的不仅仅是十几年苦心经营的感情,更是彼此曾经最美的信任。没有了信任,说的再美都是谎言。
  • 玄神异界

    玄神异界

    当你从一个世界穿越到另外个世界时,你才知道什么是奇迹!