数据操作存储

数据操作存储（精选三篇）

数据操作存储 篇1

海量光盘数据存储技术(Optical Disc Archive)基于成熟、稳定、可靠、安全、耐用的专业光盘技术,实现了海量光盘数据存储光盘与驱动器之间良好的代际兼容,而且在普通的环境中保存时间可以超过50年,其非接触式和非线性媒介的属性使文件检索的速度更快,为快速发展的电视台近线和离线海量数据存储提供了新的选择。

在展会期间,索尼中国专业系统集团节目制作市场部彭帅接受了本刊专访,详细为我们介绍了海量数据流光盘库存储系统的相关情况。

彭帅介绍说,目前电视台媒体资产管理系统使用的近线、离线存储介质主要是LTO数据流磁带,在实际使用中这些采用线性读写的LTO数据流磁带存在着一些固有的问题。

一是驱动器与磁带代际兼容性差。为增大数据存储密度LTO,驱动器和磁带每隔几年都会升级,但升级后的驱动器只能兼容上一代磁带的数据读写及前两代磁带的读出。因此,为了确保全部数据的可用性,用户必须不断地把早期磁带上的数据迁移拷贝到新一代磁带上,一般使用来说5～7年就必须要迁移一次,大大增加了近线/离线存储的工作量和成本,大量不断丢弃的磁带也在浪费资源和破环环境。

二是易老化不宜长期保存。LTO数据流磁带通过不断发展,其单盘容量大及产品的成熟度等优势非常明显,但其工艺特性采用"电-磁"的基本记录原理,"接触式"读写方式,长期存储后易产生掉磁,粘连等情况,因此也决定了其老化周期较短,难以做到长期有效的保存。

三是保存环境要求严格。LTO数据流磁带对存储条件非常敏感。磁带厂商引述的存储寿命年限是基于理想的存储条件。如:保存温度为16℃～35°C、湿度20%～50%、无尘和腐蚀性气体的环境。相对于理想条件,较小幅度偏移就会造成磁带寿命的大幅度减少。高温、高湿,强光环境会使磁带状况急速恶化。同时,灰尘是所有种类磁带的大敌,甚至很少量的灰尘进入磁带内都会让使用次数明显减少。

四是线性读写,数据定位时间长。根据数据存储在磁带的位置不同,所需磁头定位的时间也不同,一盘LTO数据流磁带完整倒带需要大约100秒时间。

现在的电视媒体资产管理应该采用能够适应时代发展的技术手段,既能够将以往的资料长期,安全地保存完好,还不会造成资源的损害与浪费。在这种需求背景下,海量光盘数据存储系统(Optical Disc Archive)应运而生。

面对展台上的产品,彭帅介绍到:海量光盘数据存储的存储媒体是便于操作的盘盒,外观与LTO磁带盒相仿,体积略大一些,每个盘盒内装12片裸盘,具有专业光盘的高可靠性和耐用性。目前海量光盘数据存储记录媒体共有4种容量.可重写的最大容量为1.2TB,一次写入多次读出的最大容量为1.5TB。

海量光盘数据存储盘盒进入驱动器后盘盒开放,盘片选择模块依据文件管理系统的指令选择取出相应的盘片,由移动加载模块放入光驱。存储文件较大需要跨盘读写时,盘片选择和移动加载模块根据文件管理系统的指令自动更换盘片。

海量光盘数据存储可以组成近线光盘库(Optical Disc Archive PetaSite海量数据流光盘库),该光盘库是模块化的,用户可以根据实际需求灵活配置。光盘库由基本单元与扩展单元构成。基本单元配有抓取海量光盘数据存储光盘的移动机械手,7U高,含30个槽位和2个驱动器。扩展单元同样7U高,分为两种规格,一种只含有101个槽位,另一种含有61个槽位和4个驱动器。单柜体最大配置42U,必须包含1个基本单元,最多可以加5个扩展单元,根据实际需求配置。单柜体42U最多可放置22个驱动器,335个光盘;或者最多535个光盘,2个驱动器。单柜体42U最大可以配置802TB的容量,通过第三方中间件,可以多机柜之间级联。根据中间件的指令,机械手从海量光盘数据存储槽位上自动抓取需要的海量光盘数据存储光盘并放置在相应的驱动器内进行数据读写操作(例:图1)。

近线存储系统需要使用中间件管理光盘库,中间件实际上是一个文件系统,它的作用是把光盘库内的全部光盘,驱动器和移动机械手虚拟成一个或几个巨大的存储卷。索尼公司可以向用户直接提供中间件软件产品,也可以向专业的中间件供应商提供单机版文件系统,包括驱动程序以及机械手控制协议。

当问及海量光盘数据存储的优势时,彭帅进行了一一盘点。

首先是高可靠性和高耐用性。海量光盘数据存储介质光盘可以适应各种工作环境,光盘外有抗静电的树脂保护外壳,其重复写入次数超过一千次,实际上一万次重写时误码率仍然低于纠错的容差范围,读出次数超过一百万次。盘片即使在高温、高湿、高腐蚀气体,高强光、液体浸泡侵蚀等恶劣环境中也同样安全(例:图2、图3、图4)。

第二是长寿命。存储寿命测试采用的是依据阿雷尼厄斯定律(Arrhenius Law)进行的模拟加速老化试验,即通过提高环境温度和湿度条件来模拟测试长时间保存后光盘读出数据的误码率。ISO标准的加速老化试验证明,海量光盘数据存储光盘的存储寿命超过50年(例:图5)。

第三是良好的代际兼容性。由于光盘采用的是非接触式数据读写技术,所以可以很容易实现良好的存储数据代际之间的兼容性,例如:现在最新的笔记本电脑上装配的光盘驱动器,不仅可以播放目前最新的民用蓝光的节目,也可以播放甚至是1982年诞生的CD音乐唱片。而数据流磁带采用的是机械的接触式线性扫描读写技术,为增大数据存储容量,其驱动器和磁带每隔几年都会升级,但升级后的驱动器只能兼容上一代磁带的数据读写及前两代磁带的读出。例如,在LTO-5的驱动器中,可以读写LTO-5和LTO-4磁带上的数据,或者读出LTO-3磁带上的数据,而不兼容以前LTO-1和LTO-2磁带上的数据。这样就使得用户不得不跟随着LTO驱动器和数据流磁带的升级,每隔5～7年必须进行定期的数据迁移,大大增加了近线/离线存储的工作量和成本。

第四是非接触随机读写。海量光盘数据存储光盘是"非接触性"数据读写,重复读写不会损伤盘体。而且海量光盘数据存储光盘为非线性随机读写,同时数据被分散在盘盒内的12个盘片上具有更快的文件检索和访问速度,而线性磁带需要更长的素材检索和定位时间(例:图6)。

第五,海量光盘数据存储系统在存储容量和存储成本,以及数据读取速度方面,基本上可以达到LTO数据流磁带的水平。由于海量光盘数据存储光盘巧妙地将12张裸盘集成在一个盘盒中,所以大大地超越了目前所有单片光盘存储介质的容量,目前海量光盘数据存储光盘的最大容量为1.5TB,和LTO-5数据流磁带相同。此外,还有4种容量和两种类型可选,可擦写的海量光盘数据存储光盘最大容量为1,2TB,每GB记录容量的成本大约0,1美元。

海量光盘数据存储驱动器(型号:ODS-D77U/F)目前读取速度最高1.1Gbps,与LT05磁带1,12Gbps的读取速度持平;但写入速度目前最高为730Mbps,低于LT05磁带的1.12Gbps,但随着新型号驱动器的推出,相信写入速度会继续提高。

此外彭帅告诉笔者,目前在全球范围开始应用的案例主要有:

TV Globe:巴西和葡萄牙语/西班牙语社区的主要电视台,选择海量光盘数据存储系列的ODS-D77F和ODA PetaSite可扩展光盘库产品(ODS-L30M,ODS-L60E/100E)作为归档和数字化工程的主要存储格式。系统将于2013年冬季开工,届时,TV Globe将在不改变现有工作流程的情况下,将素材存储到海量光盘数据存储系统中。

·IMAGICA株式会社:日本主要的节目制作公司,已经引进海量光盘数据存储系统,在节目制作过程中采用海量光盘数据存储作为备份介质。高可靠性、优良的代际兼容性和高效率,并且能够方便地将现有媒体资产迁移到海量光盘数据存储系统上是IMAGICA选择海量光盘数据存储系统的主要原因。

存储的相关知识及操作 篇2

4.1 相关术语

PV(Physical Volume)

物理卷，指物理磁盘，是系统的主要存储设备，可以是内部的、外接的或是活动的。它实际上是由物理磁盘内顺序排列的物理分区组成的。VG(Volume Group)

(物理)卷组，是若干个(1-32)物理卷的集合。卷组中可以包括不同类型的磁盘。一个物理卷只能属于一个卷组。系统中可以有最多不超过255个的卷组。

PP(Physical Partition)

物理分区，是磁盘空间分配的最小单位。它是1MB-256MB(若PP>1M,则必须是4兆的倍数)的一块连续的磁盘空间。同一卷组中所有物理卷上物理分区的大小必须相同，一个物理卷中最多可有1016个PP。

LP(Logical Partition)

逻辑分区，可以由1-3个物理分区（PP）组成。通常情况下，LP和PP是一一对应的，但是当对LP做了镜像时，一个LP就可能对应2-3个PP了。逻辑分区中的物理分区可以来自不同的物理卷。

LV(Logical Volume)

逻辑卷，由若干个逻辑分区（不超过35512个LP）组成，可供程序作为一个设备使用，用户可将其视作一块可使用的空间或一个磁盘。确切讲，一个LV就是PV上的区域的映象。逻辑卷可以由不连续的物理分区组成，而且物理分区可以来自不同的物理卷。由于一个逻辑分区可以映射到多个物理卷上，因此它可以占有比任何一个物理卷都大的空间。一个VG中可以存在不超过256个的LV。它通常用于建立文件系统，也可用作Pagine Space、JFSLOG 或是作为裸设备供数据库系统使用。Mirror(镜像)

镜像指的是对存放在逻辑块上的数据的复制。AIX可以做单镜像（将数据置成两份来存放），也可以做双镜像（做三份存放），一般情况下，系统是不作镜像的，当需要时，可以为高有效性或高速运行而做数据镜像。

为高有效性而作的镜像用来解决因为介质缺损、严重的驱动失效或控制器故障等而引起数据失效之类的问题。通过镜像数据，LVM可以透明地由数据备份处恢复丢失的数据。

对于读操作，为数据块建立多个拷贝使数据访问比没有磁盘镜像时要快，这些备份数据块可以被并发的读要求所访问。而对写操作，系统将产生写镜像的双重请求。它可以顺序地执行，也可以并行执行。顺序写镜像时，系统写完一个PP后，再写下一个PP，这种方法的可靠性较好，能保证在系统崩溃时，至少有一个副本是好的，但它的效率很低。并行写镜像时，系统同时对一个LP所对应的所有PP进行写操作，这种方法虽然降低了系统的写安全性，但写速度提高了。

总之，镜像并不总是获得高性能的最好方法。只有当数据的镜像是为了频繁的读访问而不是写访问这个目的时，才有意义。

VGDA(Volume Group Description Area,卷组描述区)

VGDA存在于每一个PV的开始处，用于描述该PV所属的VG所包含的所有LV和PV信息。VGDA的存在使得每一个VG都可以自我描述。每个PV上VGDA的个数随组成该VG的PV个数的不同而不同：

若VG中包含单个PV，则该PV上有两个VGDA；

若VG中包含两个PV，则一个PV上有两个VGDA，另一个PV上有一个VGDA； 若VG中包含三个或三个以上的PV，则每个PV上都有一个VGDA。

这里介绍一下Quorum。Quorum用来指定为保持系统中某个VG的激活状态而必须可用的VGDA的数目。通常，当系统中>51%的VGDA可用时，这些VGDA所属的VG才能保持激活状态，否则，该VG将自动被varyoff以禁止对该VG的任何操作。

VGSA(Volume Group Status Area,卷组状态区)用于描述一个VG中所有的PP和PV的状态信息。

4.2 PV的管理

硬盘安装 带防静电手链。将手链带在手上，将另一端连的接地的金属物上!卸下前挡板。正对机器，会看到前面中上位置处有一银

白色金属片，边上用锣丝固定。用工具将其取下。将会看到机器上面有硬盘安装说明图例。机器里面有硬盘。由硬盘架固定。硬盘上有一蓝色拉手。用力拉此拉手可把硬盘拨出。将硬盘上的蓝色拉手拉出，对准硬盘架，推进，直至把

拉手也完全推进。

将金属片装上，用锣丝拧紧。配置一个PV

一块硬盘只有当它被标识为一个PV并被加入某个VG后，该硬盘才可用。假设系统刚刚由IBM工程师添加了一块新的硬盘，或是系统管理员需要重新配置一块已被删除了（通过rmdev命令或smit菜单选项）的硬盘，管理员可以通过命令“cfgmgr”使得新硬盘变得可用（注：系统启动时，该命令会自动被运行）。如果此时管理员可以通过lspv命令看到该pv的PVID，# lspv

hdisk0 000cd60d520a23a9 rootvg hdisk1 000cd60d8a7b8d98 orclvg #

则该硬盘hdisk1已经可以通过LVM进行进一步的配置了，否则的话，我们还需要通过如下命令将该硬盘定义成一个PV： #chdev-l hdisk1-a pv=yes 修改PV的属性 1． 使一个PV变得不可用：

# chpv –v r PVNAME 2． 使一个PV可用：

# chpv –v a PVNAME

3． 允许/禁止在一个PV上分配空间

# chpv –a y PVNAME(允许)

# chpv –a n PVNAME(禁止)删除一个PV

1． 使一个PV由“Active”状态变为“Available”

# rmdev –l PVNAME

2．使一个PV由“Active”状态变为“Defined”

# rmdev –l PVNAME-d

4.3 VG的管理

创建一个VG

以root用户或拥有root权限的用户登陆，在命令行提示符下键入命令：smitty mkvg ,系统将出现如下的菜单： Add a Volurne Group

Type or select Values in eutry fields.Press Enter AFTER making all desired changes.Volume Group name

physical partition SIZE in mega bytes

☆ physical Volume names

[Entry Fields] [ extendvg] [hdisk1 hdisk2]

Activate volume group AUTO MATICAUY

at system restart?

☆ Activate Volume group after it is

created

Yes

Yes

+

+

+ + Volume Group major Number [ ]

+#

在“Volume Group name”域输入自定义的卷组名字，并规定该卷组中每一个物理分区(PP)的大小，指定卷组所包含的物理卷，注意，没有加过物理卷标识(Identify)的硬盘不可以加入一个卷组。

删除一个VG

要删除一个VG，可以以root用户或拥有root权限的用户登陆，在命令行提示符下键入命令：smitty reducevg 或通过“reduce”命令删去一个VG中的一个或多个PV。如：

# reduce VGNAME PVNAME1 PVNAME2

当一个VG中所有的PV都被删除时，该VG将自动被删除。对VG的管理

(1)当检查系统中所有卷组时，输入:

＃lsvg

显示系统中所配置的所有卷组的名字。# lsvg rootvg orclvg

＃lsvg-o

显示系统中所有激活的卷组的名字。# lsvg-o orclvg rootvg #

(2)当检查某个卷组的特性时，输入：

＃lsvg VGNAME

屏幕将显示关于 该VG的详细资料。# lsvg rootvg

VOLUME GROUP: rootvg VG IDENTIFIER: 000cd60d00004c00000000f4520a36a1

VG STATE: active PP SIZE: 64 megabyte(s)VG PERMISSION: read/write TOTAL PPs: 542(34688 megabytes)

MAX LVs: 256 FREE PPs: 141(9024 megabytes)LVs: 30 USED PPs: 401(25664 megabytes)OPEN LVs: 9 QUORUM: 2 TOTAL PVs: 1 VG DESCRIPTORS: 2 STALE PVs:

0 STALE PPs: 0 ACTIVE PVs: 1 AUTO ON: yes MAX PPs per PV: 1016 MAX PVs: 32 LTG size: 128 kilobyte(s)AUTO SYNC: no HOT SPARE: no

(3)当检查有关卷组的物理卷信息时，运行命令： ＃lsvg-p VGNAME # lsvg-p rootvg rootvg:

PV_NAME PV STATE TOTAL PPs FREE PPs FREE DISTRIBUTION hdisk0 active 542 141 00..00..00..32..109

# lsvg rootvg

VOLUME GROUP: rootvg VG IDENTIFIER: 000cd60d00004c00000000f4520a36a1

VG STATE: active PP SIZE: 64 megabyte(s)VG PERMISSION: read/write TOTAL PPs: 542(34688 megabytes)

数据存储主要优点建议 篇3

随着集团网络的数据量不断增加，网络数据的安全性是极为重要的，一旦重要的数据被破坏或丢失，就会对企业造成重大的影响，甚至是难以弥补的损失。数据存储备份除了拷贝外，还包括更重要的内容即管理。备份管理包括备份的可计划性，磁盘的自动化操作、历史记录的保存以及日志记录等。所有的硬件备份都不能代替数据存储备份，硬件备份（双机热备份、磁盘阵列备份以及磁盘镜象备份等硬件备份）只是拿一个系统、一个设备等作牺牲来换取另一台系统或设备在短暂时间内的安全。若发生人为的错误、自然灾害、电源故障、病毒黑客侵袭等，引起的后果就不堪设想，如造成系统瘫痪，所有设备将无法运行，由此引起的数据丢失也就无法恢复了。只有数据存储备份才能为我们提供万无一失的数据安全保护。

我们早先采用数据存储为“DAS（Direct Attached Storage，直接外挂存储）”的存储方式。这种数据存储的服务器结构如同PC机架构，外部数据存储设备都直接挂接在服务器内部总线上，数据存储设备是整个服务器结构的一部分，同样服务器也担负着整个网络的数据存储职责。DAS这种直连方式，只能够解决单台服务器的存储空间扩展、传输需求，无法满足多台服务器备份的需要。为了满足现在多台服务器所需要的网络存储必须采取支持以下两种方式的存储设备：

一、NAS（Network Attached Storage，网络附加存储）方式则全面改进了以前低效的DAS数据存储方案，它是采用独立于PC服务器，单独为网络数据存储而开发的一种文件服务器。NAS服务器中集中连接了所有的网络数据存储设备（如各种磁盘阵列、磁带、光盘机等），存储容量可以较好地扩展，同时由于这种网络存储方式是NAS服务器独立承担的，所以，对原来的网络服务器性能基本上没什么影响，以确保整个网络性能不受影响。它提供了一个简单、高性价比、高可用性、高扩展性和低总拥有成本（TCO）的数据存储方案。

二、SAN（Storage Area Network，存储域网络）与NAS则是完全不同，它不是把所有的存储设备集中安装在一个专门的NAS服务器中，而是将这些存储设备单独通过光纤交换机连接起来，形成一个光纤通道的网络，然后这个网络再与企业现有局域网进行连接，在这种数据存储方案中，起着核心作用的当然就是光纤交换机了，它的支撑技术就是Fibre Channel（FC，光纤通道）协议，这是ANSI为网络和通道I/O接口建立的一个标准集成，支持HIPPI、IPI、SCSI、IP、ATM等多种高级协议。在SAN中，数据以集中的方式进行存储，加强了数据的可管理性，同时适应于多操作系统下的数据共享同一存储池，降低了总拥有成本。

目前在数据存储方面几大主要品牌：EMC、IBM、HP、DELL等，与其他公司相比中EMC是专业从事数据方面的公司，在数据存储方面有其专业的优势。

利用 EMC 恢复管理解决方案，可以从任何中断或事件中快速、轻松、可靠地恢复业务数据。利用 EMC 恢复管理，您可采用一种全方位的做法，即利用集成式软件的备份、复制、连续数据保护(CDP)、分析和报告来保护数据。它结合了简化的管理，以提供关键业务信息的更高级别的可靠性和恢复能力。

主要优点

一、集中化备份管理 — 跨不同操作系统保护您的关键应用程序和数据库，同时集中执行管理并加快总体备份速度。

二、集中化复制管理 — 以实时或接近于实时的方式将电子数据拷贝移动到本地或远程信息存储库。

三、连续数据保护 — 自动为每一次数据更改保存一个拷贝，以便您能够将数据恢复到任一时间点。

四、分析和报告 — 收集、关联备份操作相关信息并发出警报，包括对备份失败执行根本原因分析。

五、简化管理 — 使用管理控制台查看保护和恢复活动，并确定向何处分配更多资源

EMC 同时有针对 Microsoft SQL Server 的数据保护可满足 SQL Server 的可用性和可恢复性要求。利用 EMC 针对 Microsoft SQL Server 的数据保护，并可利用 SQL Server 中的本机功能实现数据恢复和保护。利用 EMC 行之有效的专业技能满足备份和恢复、SLA 遵守能力、人员职责和基础架构规划等方面的要求。

主要优点

一、提高了数据库可用性 — 使用数据库镜像直接在服务器之间传输事务日志记录，并可快速故障切换到备用服务器。

二、增加了应用程序正常运行时间 — 减少备份窗口以减少对应用程序和系统可用性的影响。

三、减少了业务风险 — 通过内置的硬件冗余、RAID 保护和高可用性确保数据能够快速而准确地恢复。

我们通过对存储方式、存储空间、存储性能的比较，推荐选择的数据存储型号为：