下载文档原格式
存储HCIP题库及参考答案一、单选题（共38题，每题1分，共38分）1.以下哪个选项不属于oceanstortoolkit工具的功能？A、维护功能B、部署功能C、升级功能D、数据迁移功能正确答案：D2.在大数据系统初始化配置前需要进行网络连接,华为Oceanstor9000的组网不包括.A、心跳网络B、后端存储网络C、管理网络D、前端业务网络正确答案：A3.某华为Oceanstor9000集群局点,配置了6个C72节点,应该将其中几个节点的NIC0接入管理网络?A、3B、4C、5D、6正确答案：D4.华为端到端双活数据中心解决方案分为6层，这六层是：A、存储层、会话层、应用层、网络层、传输层和物理层B、存储层、会话层、应用层、网络层、传输层和安全层C、存储层、计算层、应用层、网络层、传输层和安全层D、存储层、计算层、应用层、网络层、传输层和物理层正确答案：C5.以下哪一项是华为oceanstorv3系列存储产品所支持的维护软件？A、oceanstortoolkitB、oceanstorultrapathC、oceanstorreplicationdirectorD、oceanstoresdk正确答案：A6.在华为Oceanstor9000存储系统中,当某一个InfoReplicator处于分裂状态时,以下说法不正确的哪一项?A、当该Pair被重新同步后,上次同步由于分裂操作导致未被复制到从目录的差异数据和已同步的数量需求同步B、此时Pair所指定的两端目录的主从关系不变C、出现Pair分裂,可能的原因是暂时性的链路异常或网络带宽扩容正确答案：A7.客户提出了RPO=0且RTO=0的要求，同事选择了主备同步远程复制容灾方案，该方案：A、能达到客户要求。
B、不能达到客户要求RPO>0且RTO>0。
C、不能达到客户要求，RTO>0D、不能达到客户要求RPO>0正确答案：C8.工程师C在现场完成华为分布式存储安装后，上电进行大数据业务配置。
基于华为高端NAS存储双活的POC测试【摘要】近年来，银行业积累了越来越多的非结构化数据，在业务场景和存储系统建设上都在不断进行优化。
本文以作者所在企业的业务需求以及存储系统优化实际出发，在高端NAS存储双活系统上线前进行了深度POC测试。
从双活系统组网、架构健壮性以及业务系统适配上进行了多维度的测试，并形成了本POC测试报告，最终作为行里高端NAS双活系统规划和建设的依据。
1. 项目背景我行自2018年开始建设NAS存储资源池，从而正式开启了业务数据的存储架构优化之路，对于文件类的数据由先前的GPFS向NAS存储逐步迁移转型。
此外，结合存储系统分级体系建设以及业务系统的分级标准，在NAS存储资源池建设上同样也进行了分级存储建设。
为此，近两年来随着新核心系统的建设我行开始调研并构建高端NAS存储资源池。
同时，在同城双中心构建高端NAS存储的双活架构以满足我行新核心、重要及重要支撑系统的文件共享需求及其文件的高可用需求。
然而，高端NAS双活在我行首次实施，无论是该技术本身在我行网络架构中的适配性，还是在业务场景中的匹配上，甚至是存储运维人员对于这一新技术的全面掌握上都存在不确定性，甚至是盲点。
因此，运维部门作为该项目建设的牵头部门，开展了深度的高端NAS双活POC测试。
2. 测试目的和测试思路本项目计划通过深度的POC测试对高端NAS双活系统在应用场景、安全性以及功能性上进行充分验证，然后形成详尽的POC测试报告，最终作为高端NAS双活系统的规划和建设依据。
测试目的主要包括以下方面：第一，验证高端NAS双活架构在我行分区域建设的网络架构中的组网可行性。
第二，验证高端NAS双活架构在各种单点和双点故障场景中的自身架构健壮性。
第三，验证基于细粒度的单个业务系统的计划性站点切换演练的易用性和安全性。
对于POC测试原则最重要的是真实模拟或尽量贴近生产实际，因为在客户真实环境中的POC测试是最有说服力的，尤其是网络环境的真实性。
OceanStor N8500集群NAS存储系统产品技术白皮书IssueDate2020-08-18华为技术有限公司版权所有华为技术有限公司 2012。
保留一切权利。
非经本公司书面许可，任何单位和个人不得擅自摘抄、复制本文档内容的部分或全部，并不得以任何形式传播。
商标声明和其他华为商标均为华为技术有限公司的商标。
本文档提及的其他所有商标或注册商标，由各自的所有人拥有。
注意您购买的产品、服务或特性等应受华为公司商业合同和条款的约束，本文档中描述的全部或部分产品、服务或特性可能不在您的购买或使用范围之内。
除非合同另有约定，华为公司对本文档内容不做任何明示或默示的声明或保证。
由于产品版本升级或其他原因，本文档内容会不定期进行更新。
除非另有约定，本文档仅作为使用指导，本文档中的所有陈述、信息和建议不构成任何明示或暗示的担保。
华为技术有限公司为客户提供全方位的技术支持，用户可与就近的华为办事处联系，也可直接与公司总部联系。
华为技术有限公司地址：深圳市龙岗区坂田华为总部办公楼邮编：518129网址：客户服务电0 18话：客户服务传1真：客户服务邮箱：目录图目录图 1 产品逻辑结构图 ............................... 错误!未定义书签。
图 2 FileStore 软件及应用架构示意图 ............... 错误!未定义书签。
图 3 N8500集群NAS存储系统关系图.................. 错误!未定义书签。
图 4 SAN、NAS一体化典型组网....................... 错误!未定义书签。
图 5 使用NBU客户端备份方式组网 ................... 错误!未定义书签。
图 6 使用NDMP备份组网 ............................ 错误!未定义书签。
图 7 数据通道全互联技术 ........................... 错误!未定义书签。
OceanStor Dorado 8000/18000high-end all-flash storage systems set new benchmarks of storage performance and reliability for critical business of enterprises,providing excellent data service experience.The storage systems leverage innovative hardware platform,FlashLink®intelligent algorithms,and full-series E2E NVMe architecture,to deliver the latency of 0.05ms and the proven 21,000,000SPC-1IOPS,with performance almost twice that of the next-best player in the industry.Their full-mesh SmartMatrix architecture ensures always-on services.Intelligent and elastic architecture supports online hardware update of three generations for 10years without any migration.Excelling in scenarios such as databases and virtualization,OceanStor Dorado 8000/18000high-end all-flash storage systems are best suited to the carrier,finance,government,manufacturing,and other fields.OceanStor Dorado 8000/18000High-End All-Flash Storage Systems 21,000,000SPC-1IOPS E2E NVMe for 0.05ms of ultra-low latencyFlashLink®intelligent algorithmsSCM intelligent cache acceleration for 60%lower latencyDistributed file system with 30%higher performanceLeading Performance withInnovative Hardware✓The intelligent multi-protocol interface module hosts theprotocol parsing previously performed by the general-purpose CPU, expediting the front-end access performanceby 20%.✓The computing platform offers industry-leadingperformance with 25% higher computing power than theindustry average.✓The intelligent accelerator module analyzes andunderstands I/O rules of multiple application models basedon machine learning frameworks to implement intelligentprefetching of memory space. This improves the read cachehit ratio by 50%.Component reliability :Wear leveling and anti-wear levelingArchitecture and product reliability :0data loss in the event of single,dual,and multiple failures (7/8controllers,3/4controllers,or disk enclosures),as well as three disk failuresSolution and cloud reliability :The industry's only A-A solution for SAN and NAS,geo-redundant 3DC solution,and gateway-free cloud backup Always-On Applications with 5-Layer Reliability3-layer intelligent management:•365-day capacity trends prediction •60-day performance bottleneck prediction •14-day disk fault prediction •Solutions immediately provided for 93%of problems SAN&NAS convergence,storage and computing convergence,and cross-gen device convergence for efficient resource utilization FlashEver:No data migration over 10years for 3-gen hardware systems Efficient O&M with Intelligent Edge-Cloud Synergy Product Features Ever Fast Performance with Innovative Hardware Innovative hardware platform: Huawei storage uses an innovative hardware platform for E2E data acceleration, delivering the proven 21,000,000 SPC-1 IOPS, almost twice thatof the second player.✓SmartCache + SCM intelligent multi-tier caching identify whether or not the data is hot and uses different media tostore it, reducing the latency by 60% in OLTP (100% reads) scenarios.✓The intelligent SSD hosts the core Flash Translation Layer (FTL) algorithm, accelerating data access in SSDs andshortening the write latency by half.✓The intelligent hardware has a built-in Huawei storage fault library that accelerates component fault location anddiagnosis, and shortens the fault recovery time from 2hours to just 10 minutes.Intelligent algorithms: Most flash vendors lack E2E innate capabilities to ensure full performance from their SSDs. OceanStor Dorado 8000/18000 run industry-leading FlashLink® intelligent algorithms based on self-developed controllers, disk enclosures, and operating systems.✓Many-core balancing algorithm: Taps into the many-core computing power of a controller to maximize the dataprocessing capability.✓Service splitting algorithm: Offloads reconstruction services from the controller enclosure to the smart SSD enclosure to ease the load pressure of the controller enclosure for moreefficient I/O processing.✓Cache acceleration algorithm: Accelerates batch processing with the intelligent module to bring intelligence to storagesystems during application operations.The data layout between SSDs and controllers is coordinated synchronously.✓Large-block sequential write algorithm: Aggregates multiple discrete data blocks into a unified big data blockfor disk flushing, reducing write amplification and ensuringstable performance.✓Independent metadata partitioning algorithm: Effectively controls the performance compromise caused by garbagecollection for stable performance.✓I/O priority adjustment algorithm: Ensures that read and write I/Os are always prioritized, shortening the accesslatency.FlashLink® intelligent algorithms give full play to all flash memory and help Huawei OceanStor Dorado achieve unparalleled performance for a smoother service experience.E2E NVMe architecture for full series: All-flash storage has been widely adopted by enterprises to upgrade existing IT systems, but always-on service models continue to push IT system performance boundaries to a new level. Conventional SAS-based all-flash storage cannot break the bottleneck of 0.5 ms latency. NVMe all-flash storage, on the other hand, is afuture-proof architecture that implements direct communication between the CPU and SSDs, shortening the transmission path. In addition, the quantity of concurrencies is increased by 65,536 times, and the protocol interaction is reduced from four times to two, which doubles the write request processing. Huawei is a pioneer in adopting end-to-end NVMe architecture across the entire series. OceanStor Dorado all-flash systems use the industry-leading 32 Gb FC-NVMe/100 Gb RoCE protocols at the front end and adopt Huawei-developed link-layer protocols to implement failover within seconds and plug-and-play, thus improving the reliability and O&M. It also uses a 100 Gb RDMA protocol at the back end for E2E data acceleration. This enables latency as low as 0.05 ms and 10x faster transmission than SAS all-flash storage. Globally shared distributed file system: The OceanStor Dorado 8000/18000 high-end all-flash storage systems support the NAS function and use the globally shared distributed file systems to ensure ever-fast NAS performance. To make full use of computing power, the many-core processors in a controller process services concurrently. In addition, intelligent data prefetching and layout further shorten the access latency, achieving over 30% higher NAS performance than the industry benchmark.Linear increase of performance and capacity: Unpredictable business growth requires storage to provide simple linear increases in performance as more capacity is added to keep up with ever-changing business needs. OceanStor Dorado8000/18000 support the scale-out up to 32 controllers, and IOPS increases up to 21,000,000 linearly as the quantity of controller enclosures increases, matching the performance needs of the future business development.Always-On Applications with 5-Layer Reliability Industries such as finance, manufacturing, and carriers are upgrading to intelligent service systems to meet the strategy of sustainable development. This will likely lead to diverse services and data types that require better IT architecture. OceanStor Dorado 8000/18000 high-end all-flash storage systems are an ideal choice for customers who need robust IT systems that consolidate multiple types of services for stable, always on services. They ensure end-to-end reliability at all levels, from component, architecture, product, solution, all the way to cloud, supporting data consolidation scenarios with 99.99999% availability.Benchmark-Setting 5-Layer ReliabilityComponent –SSDs: Reliability has always been a top concern in the development of SSDs, and Huawei SSDs are a prime example of this. Leveraging global wear-leveling technology, Huawei SSDs can balance their loads for a longer lifespan of each SSD. In addition, Huawei's patented anti-wear levelingtechnology prevents simultaneous multi-SSD failures and improves the reliability of the entire system.Architecture –fully interconnected design: Huawei OceanStor Dorado 8000/18000 use full-interconnection design at front and back-ends and intelligent multi-protocol interface modules to build the SmartMatrix architecture with ultra-high reliability. High-speed interconnection of multiple controllers is supported via the 100 Gb/s RDMA protocol, and the uniquefull-interconnection design tolerates failures for 3 out of 4 and even 7 out of 8 controllers and failure for 1 out of 2 controller enclosures to ensure zero service interruption, setting a new benchmark for storage reliability. The front-end interface modules connect to 4 controllers simultaneously. If a controller fails, services can be switched to an operational controller in seconds, without any host link interruption or any impact on upper-layer services. Application servers can access LUNs through any controller, instead of just a single controller. Multiple controllers share workload pressure using the load balancing algorithm. If a controller fails, other controllers take over services smoothly without any service interruption. Product –enhanced hardware and software: Product design is a systematic process. Before a stable storage system is commercially released, it must ensure that it meets the demands from both software and hardware, and can faultlessly host key enterprise applications. The OceanStor Dorado8000/18000 are equipped with hardware that adopts a fully redundant architecture and supports dual-port NVMe and hot swap, preventing single points of failure. The innovative 9.5 mm palm-sized SSDs and biplanar orthogonal backplane design provide 44% higher capacity density and 25% improved heat dissipation capability, and ensure stable operations of 2U 36-slot SSD enclosures. The smart SSD enclosure is the first ever to feature built-in intelligent hardware that offloads reconstruction from the controller to the smart SSD enclosure. Backed up by RAID-TP technology, the smart SSD enclosure can tolerate simultaneous failures of three SSDs and reconstruct 1 TB of data within 15 minutes. In addition, the storage systems offer comprehensive enterprise-grade features, such as 3-second periodic snapshots, that set a new standard for storage product reliability.Solution –gateway-free active-active solution: Flash storage is designed for enterprise applications that require zero data loss or zero application interruption. OceanStor Dorado8000/18000 use a gateway-free A-A solution for SAN and NAS to prevent node failures, simplify deployment, and improve system reliability. In addition, the A-A solution implements A-A mirroring for load balancing and cross-site takeover without service interruption, ensuring that core applications are not affected by system breakdown. The all-flash systems provide the industry's only A-A solution for NAS, ensuring efficient, reliable NAS performance. They also offer the industry's firstRoCE transmission to improve performance by 50% compared with traditional IP solutions. In addition, the solution can be smoothly upgraded to the geo-redundant 3DC solution for high-level data protection.Cloud –gateway-free cloud DR*: Traditional backup solutions are slow, expensive, and the backup data cannot be directly used. Huawei OceanStor Dorado 8000/18000 high-end all-flash systems provide a converged data management solution. It improves the backup frequency 30-fold using industry-leading I/O-level backup technology, and allows backup copies to be directly used for development and testing. The disaster recovery (DR) and backup are integrated in the storage array, slashing TCO of DR construction by 50%. Working with HUAWEI CLOUD and Huawei jointly-operated clouds, the solution achieves gateway-free DR and DR in minutes on the cloud.Efficient O&M with Intelligent Edge-Cloud Synergy Intelligence throughout service lifecycle: Intelligent management covers resource planning, provisioning, system tuning, risk prediction, and fault location, and enables 60-day and 14-day predictions of performance bottleneck and disk faults respectively, and immediate solutions for 93% of problems detected.On and off-cloud synergy: Huawei OceanStor Dorado8000/18000 high-end all-flash systems combine general-purpose cloud intelligence with customized edge intelligence over a built-in intelligent hardware platform, providing incremental training and deep learning for a personalized customer experience. The eService intelligent O&M and management platform collects and analyzes over 190,000 device patterns on the live network in real time, extracts general rules, and enhances basic O&M.Extreme convergence: Huawei OceanStor Dorado 8000/18000 high-end all-flash storage systems provide multiple functions to meet diversified service requirements, improve storage resource utilization, and effectively reduce the TCO. The storage systems provide both SAN and NAS services and support parallel access, ensuring the optimal path for dual-service access. Built-in containers support storage and compute convergence, reducing IT construction costs, eliminating the latency between servers and storage, and improving performance. The convergence of cross-generation devices allows data to flow freely, simplifying O&M and reducing IT purchasing costs.FlashEver: The intelligent flexible architecture implements component-based upgrades without the need for data migration within 10 years. Users can enjoy latest-generation software and hardware capabilities without investing again in the related storage software features.Technical SpecificationsModel OceanStor Dorado 8000 OceanStor Dorado 18000 Hardware SpecificationsMaximum Number of3232ControllersMaximum Cache (Dual512 GB-32 TB512 GB-32 TBControllers, Expanding withthe Number of Controllers)Supported Storage Protocols FC, iSCSI, NFS*, CIFS*Front-End Port Types8/16/32 Gbit/s FC/FC-NVMe*, 10/25/40/100 GbE, 25 Gb NVMe over RoCE*Back-End Port Types SAS 3.0/100 Gb RDMA28Maximum Number of Hot-Swappable I/O Modules perController Enclosure96Maximum Number of Front-End Ports per ControllerEnclosureMaximum Number of SSDs6,4006,400SSDs 1.92 TB/3.84 TB/7.68 TB palm-sized NVMe SSD,960 GB/1.92 TB/3.84 TB/7.68 TB/15.36 TB SAS SSDSCM Supported800 GB SCM*Software SpecificationsSupported RAID Levels RAID 5, RAID 6, RAID 10*, and RAID-TP (tolerates simultaneous failures of 3 SSDs)Number of LUNs65,536Value-Added Features SmartDedupe, SmartVirtualization, SmartCompression, SmartMigration, SmartThin,SmartQoS(SAN&NAS), HyperSnap(SAN&NAS), HyperReplication(SAN&NAS),HyperClone(SAN&NAS), HyperMetro(SAN&NAS), HyperCDP(SAN&NAS), CloudBackup*,SmartCache*, SmartQuota(NAS)*, SmartTier*, SmartMulti-Tenant(NAS)*,HyperMetro-Inner(SAN&NAS), SmartContainer*DeviceManager UltraPath eServiceStorage ManagementSoftwarePhysical SpecificationsPower Supply SAS SSD enclosure: 100V–240V AC±10%, 192V–288V DCController enclosure/Smart SAS SSD enclosure/Smart NVMe SSD enclosure: 200V–240VAC±10%, 192V–288V DCTechnical SpecificationsModel OceanStor Dorado 8000 OceanStor Dorado 18000 Physical SpecificationsDimensions (H x W x D)Controller enclosure: 175 mm ×447 mm ×865 mmSAS SSD enclosure: 86.1 mm ×447 mm ×410 mmSmart SAS SSD enclosure: 86.1 mm x 447mm x 520 mmSmart NVMe SSD enclosure: 86.1 mm x 447mm x 620 mmMax. bay dimensions: 2000 mm ×600 mm×1200 mmWeight Controller enclosure: ≤ 90 kgSAS SSD enclosure: ≤ 20 kgSmart SAS SSD enclosure: ≤ 30 kgSmart NVMe SSD enclosure: ≤ 35 kg System bay: ≤ 700 kg Disk bay: ≤ 600 kgOperating Temperature–60 m to +1800 m altitude: 5°C to 35°C (bay) or 40°C (enclosure)1800 m to 3000 m altitude: The max. temperature threshold decreases by 1°C for everyaltitude increase of 220 mOperating Humidity10% RH to 90% RHCopyright © Huawei Technologies Co., Ltd. 2021. All rights reserved.No part of this document may be reproduced or transmitted in any form or by any means without the prior written consent of Huawei Technologies Co., Ltd.Trademarks and Permissions, HUAWEI, and are trademarks or registered trademarks of Huawei Technologies Co., Ltd. Other trademarks, product, service and company names mentioned are the property of their respective holders.Disclaimer THE CONTENTS OF THIS MANUAL ARE PROVIDED "AS IS". EXCEPT AS REQUIRED BY APPLICABLE LAWS, NO WARRANTIES OF ANY KIND, EITHER EXPRESS OR IMPLIED, INCLUDING BUT NOT LIMITED TO, THE IMPLIEDWARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE, ARE MADE IN RELATION TOTHE ACCURACY, RELIABILITY OR CONTENTS OF THIS MANUAL.TO THE MAXIMUM EXTENT PERMITTED BY APPLICABLE LAW, IN NO CASE SHALL HUAWEI TECHNOLOGIESCO., LTD BE LIABLE FOR ANY SPECIAL, INCIDENTAL, INDIRECT, OR CONSEQUENTIAL DAMAGES, OR LOSTPROFITS, BUSINESS, REVENUE, DATA, GOODWILL OR ANTICIPATED SAVINGS ARISING OUT OF, OR INCONNECTION WITH, THE USE OF THIS MANUAL.Tel: + S h e n z h en 518129,P.R.C h i n aBantian Longgang DistrictHUAWEI TECHNOLOGIES CO.,LTD.To learn more about Huawei storage, please contact your local Huawei officeor visit the Huawei Enterprise website: .Huawei Enterprise APPHuawei IT。
OceanStor T Series Unified StorageHighlightscationUnified SAN and NAS: Supports SAN and NAS storage protocols, structured and non-structured data within one storage system Unified protocols: Compatible with various storage networks and protocols, including iSCSI, FC, NFS, CIFS, HTTP, and FTPGUI-based central storage management:Provides a graphical user interface for central management of fi les and data blocks. The wizards guide users through every con fi gurationFlexibility and ReliabilityUpgrade: Users can easily upgrade block-level storage to uni fi ed storage Hot swapping modules: Users can hot-swap controllers, fans, power supplies, I/O modules, and hard disks without compromising ongoing user servicesDiversified disk types: Supports SAS, NL SAS, SATA, FC and SSD disks, tting into various scenariosReliable architecture: Full component redundancy prevents single points of failure. Data coffer and fi le system mirror improve system reliability Advanced I/O port scalability and flexibility: Supports up to 12ModelS2600TS5500TS5600TS5800TBlock Storage Component Storage processor Multi-core processors Cache size8GB/16GB 8GB/16GB/32GB 24GB/48GB 96GB/192GB Extended cache1.2TB 1.2TB2.4TB3.6TBNumber of controllers 2Front-end port types 8Gbps FC, 1Gbps iSCSI, 10Gbps Iscsi(TOE)8Gbps FC, 1Gbps iSCSI, 10Gbps iSCSI (TOE), 10Gbps FCoE Back-end port types 6Gbps SAS 2.0 wide port 6Gbps SAS 2.0 wide port 4Gbps FC,6Gbps SAS 2.0 wide port 4Gbps FC,6Gbps SAS 2.0 wide port Number of onboard I/O ports Front end: 12 x 1 Gbps iSCSI ports;Back end: 4 x SAS 2.0 wide ports Front end: 8 x 8 Gbps Fibre Channel ports;Back end: 4 x SAS 2.0 wide ports 00Maximum. number of I/O modules221012Maximum number of disk slots 27652811521440Supported disk types SAS, NL SAS, SATA, SSD SAS, NL SAS, SATA, SSD SAS, NL SAS, SATA, SSD,FC SAS, NL SAS, SATA, SSD,FC RAID levels0,1, 3, 5, 6, 10, 50Maximum number of snapshots 256102420482048Maximum number of LUNs 2048409640968192Mobile Management Supported.N/A N/A N/A TurboModule Supported.Functional software HyperImage (snapshot),HyperCopy (LUN copy), HyperClone (split mirror), HyperMirror (synchronous/asynchronous remote replication), HyperThin (thin provisioning), UltraPath (multipathing), DiskGuard (host-side data protection), SmartCache (dynamic data caching in TurboBoost)File Storage Component Number of file engine nodes 22, 42, 4, 62, 4, 6, 8Cache size per node 16GB 16GB 24GB 24GB File softwareDST (dynamic storage tiering), Snapshot (file system snapshot), Mirror (file system mirror),Replication (file system remote replication), Symantec NetBackup Client (embedded Symantec network backup client)ProtocolFC, iSCSI, NFS, CIFS, FTP , HTTPCompatible operating system Including AIX, HP-UX, Solaris, Linux, WindowsVirtual Environment Virtual machine VMware, Citrix, Hyper-VValue-added feature VMware VAAI support for VSphere and VCenter integrationPhysical Specifications Power supplyAC: 100 V to 127 V, or 200 V to 240 V DC: –60 V to –48 VArray power consumption 2 U controller enclosure: ≤380W4 U controller enclosure: ≤527W2 U controller enclosure: ≤ 539W2 U disk enclosure: ≤307W4 U disk enclosure: ≤ 527W4 U controller enclosure: ≤598W 2 U disk enclosure: ≤307W 4 U disk enclosure: ≤527W File engine power consumption 4 U file engine: ≤ 800WArray dimensions (H x W x D)2 U controller enclosure: 86.1mm x 446mm x 582mm 4 U controller enclosure: 175mm x 446mm x 502mm 4 U disk enclosure: 175mm%446mm%412mm 2 U disk enclosure: 86.1mm x 446mm x 412mm 4 U disk enclosure: 175mm x 446mm x 412mm File engine dimensions (H x W x D) 4 U, 175mm x 446mm x 502mmWeight2U Controller enclosure≤ 22.98kg4U Disk enclosure ≤ 25.2kgController enclosure ≤ 23.9kg 2 U SAS disk enclosure ≤ 14.9kg 4 U SAS disk enclosure≤ 25.2kg Controller enclosure ≤ 43.6kg2 U SAS disk enclosure ≤ 14.9kg4 U SAS disk enclosure ≤ 25.2kg4 U FC disk enclosure ≤ 24.9kgTechnical Speci ficationsHUAWEI TECHNOLOGIES CO., LTD.Huawei Industrial BaseBantian LonggangShenzhen 518129, P .R. ChinaTel: +86-755-28780808Copyright © Huawei Technologies Co., Ltd. 2013. All rights reserved.THIS DOCUMENT IS FOR INFORMATION PURPOSE ONLY, AND DOES NOT CONSTITUTE ANY KIND OF WARRANTIES.。
华为OceanStor 18000系列高端存储系统RAID2.0+技术白皮书文档版本01 发布日期 2013-8-12华为技术有限公司版权所有© 华为技术有限公司2013。
保留一切权利。
非经本公司书面许可，任何单位和个人不得擅自摘抄、复制本文档内容的部分或全部，并不得以任何形式传播。
商标声明和其他华为商标均为华为技术有限公司的商标。
本文档提及的其他所有商标或注册商标，由各自的所有人拥有。
注意您购买的产品、服务或特性等应受华为公司商业合同和条款的约束，本文档中描述的全部或部分产品、服务或特性可能不在您的购买或使用范围之内。
除非合同另有约定，华为公司对本文档内容不做任何明示或默示的声明或保证。
由于产品版本升级或其他原因，本文档内容会不定期进行更新。
除非另有约定，本文档仅作为使用指导，本文档中的所有陈述、信息和建议不构成任何明示或暗示的担保。
华为技术有限公司地址：深圳市龙岗区坂田华为总部办公楼邮编：518129网址：客户服务邮箱：support@客户服务电话：4008302118目录1 RAID2.0+概述 (1)1.1 RAID技术演变 (1)1.2 华为RAID2.0+简介 (2)2 RAID2.0+原理 (3)2.1 RAID2.0+基本原理 (3)2.2 RAID2.0+实现框架 (4)2.3 RAID2.0+逻辑对象 (5)3 RAID2.0+技术亮点 (1)3.1 安全可信 (1)3.1.1 自动负载均衡，降低整体故障率 (1)3.1.2 快速精简重构，改善双盘失效率 (2)3.1.3 故障自检自愈，保证系统可靠性 (3)3.2 弹性高效 (4)3.2.1 虚拟池化设计，降低存储规划管理难度 (4)3.2.2 增加LUN所跨硬盘数，大幅提升单LUN性能 (4)3.2.3 空间动态分布，灵活适应业务变化 (5)4 附录A：RAID2.0+ FAQ (6)5 附录B：RAID2.0+周边资源 (9)6 缩略语表/Acronyms and Abbreviations (10)修订记录/Change History1 RAID2.0+概述1.1 RAID技术演变RAID（Redundant Array of Independent Disk，独立冗余磁盘阵列）技术诞生于1987年，最初由美国加州大学的伯克利分校提出，其基本思想是把多个独立的物理硬盘通过相关的算法组合成一个虚拟的逻辑硬盘，从而提供更大容量、更高性能，或更高的数据容错功能。
华为OceanStor 18000系列高端存储系统可靠性技术白皮书文档版本01 发布日期 2014-3-18华为技术有限公司版权所有© 华为技术有限公司2014。
保留一切权利。
非经本公司书面许可，任何单位和个人不得擅自摘抄、复制本文档内容的部分或全部，并不得以任何形式传播。
商标声明和其他华为商标均为华为技术有限公司的商标。
本文档提及的其他所有商标或注册商标，由各自的所有人拥有。
注意您购买的产品、服务或特性等应受华为公司商业合同和条款的约束，本文档中描述的全部或部分产品、服务或特性可能不在您的购买或使用范围之内。
除非合同另有约定，华为公司对本文档内容不做任何明示或默示的声明或保证。
由于产品版本升级或其他原因，本文档内容会不定期进行更新。
除非另有约定，本文档仅作为使用指导，本文档中的所有陈述、信息和建议不构成任何明示或暗示的担保。
华为技术有限公司地址：深圳市龙岗区坂田华为总部办公楼邮编：518129网址：客户服务邮箱：support@客户服务电话：4008302118目录1 概述 (1)1.1 OceanStor18000系列高端存储系统产品概述 (1)1.2 OceanStor 18000系列高端存储系统可靠性概述 (2)2 系统可靠性设计 (3)2.1 架构可靠性设计 (3)2.2 基本可靠性设计 (4)2.3 模块级可靠性设计 (5)2.4 多重硬盘故障容错设计 (5)2.5 端到端的数据完整性保证设计 (6)2.6 创新的数据保护设计 (7)2.7 智能的QoS设计 (8)2.8 完善的数据备份和容灾方案 (9)3 精益的制造加工 (12)3.1 单板-整机制造全流程质量保证 (12)3.2 硬盘生产质量保证 (13)3.3 高端存储整柜制造及交付 (14)4 完善的运维流程 (15)4.1 在线维护 (15)4.2 高效及时的Cloud Service服务 (16)4.3 原厂维保服务 (16)5 缩略语表/Acronyms and Abbreviations (17)修订记录/Change History1 概述1.1 OceanStor18000系列高端存储系统产品概述OceanStor 18000系列高端存储系统是华为技术有限公司（以下简称华为）根据存储产品应用现状和存储技术未来发展趋势，针对企业大中型数据中心，推出的新一代（虚拟化、混合云、精简IT和低碳等）存储系统，聚焦于大中型企业核心业务（企业级数据中心、虚拟数据中心以及云数据中心等），能够满足大中型数据中心对海量数据存储、高速数据存取、高可用性、高利用率、绿色环保和易于使用等需求。
华为 OceanStor 18000 V5 高端混合闪存存储系统技术白皮书华为技术有限公司目录1摘要 (1)2简介 (2)2.1产品系列 (2)2.2客户价值 (3)3系统架构 (5)3.1硬件架构 (5)3.1.1后端全互连 (5)3.1.2PCIe Scale-out. (7)3.1.3硬件全冗余 (8)3.1.4门卫式数据加密（国内适用） (9)3.1.5SED 数据加密（国外适用） (10)3.2软件架构 (11)3.2.1块级虚拟化 (12)3.2.2SAN/NAS 一体化 (15)3.2.3负载均衡 (15)3.2.4数据缓存 (16)3.2.5端到端数据完整性保护 (17)3.2.6丰富软件特性 (17)3.2.7面向闪存的系统优化 (17)4精简高效Smart 特性系列 (19)4.1异构虚拟化（SmartVirtualiztaion） (19)4.2数据迁移（SmartMigration） (21)4.3数据重删压缩（SmartDedupe&SmartCompression） (22)4.4智能数据分级（SmartTier） (25)4.4.1块数据分级（SmartTier for Block） (25)4.4.2文件数据分级（SmartTier for File） (26)4.5智能精简配置（SmartThin） (27)4.6智能服务质量控制（SmartQoS） (27)4.7智能缓存分区（SmartPartition） (29)4.8SSD 智能缓存（SmartCache） (31)4.9LUN 销毁（SmartErase） (31)4.10多租户（SmartMulti-Tenant） (32)4.11智能配额（SmartQuota） (33)4.12智能数据迅移（SmartMotion） (34)5数据保护Hyper 特性系列 (35)5.1快照（HyperSnap） (35)5.1.1LUN 快照（HyperSnap For Block） (35)5.1.2FS 快照（HyperSnap For File） (36)5.2克隆（HyperClone） (38)5.2.1LUN 克隆（HyperClone For Block） (38)5.2.2FS 克隆（HyperClone For File） (40)5.3远程复制（HyperReplication） (41)5.3.1LUN 同步远程复制（HyperReplication/S For Block） (42)5.3.2LUN 异步远程复制（HyperReplication/A For Block） (44)5.3.3FS 异步远程复制（HyperReplication/A For File） (45)5.4阵列双活（HyperMetro） (47)5.4.1阵列双活（HyperMetro For Block） (47)5.4.2阵列双活（HyperMetro For File） (49)5.5一体化备份（HyperVault） (51)5.6LUN 拷贝（HyperCopy） (51)5.7卷镜像（HyperMirror） (53)5.8WORM（HyperLock） (55)5.9两地三中心（3DC） (57)6最佳实践 (59)A 附录 (60)A.1更多参考信息 (60)A.2如何反馈意见 (60)A.3缩略语表 (61)1摘要华为OceanStor 18000 V5高端混合闪存存储系统（以下简称OceanStor 18000 V5高端存储系统）是面向企业级应用的新一代统一存储产品。
华为OceanStor 5300F, 5500F, 5600F, 5800F, 6800F, 18000F V5 全闪存存储系统技术白皮书目录1闪存的演进及挑战 (1)1.1SSD 的产生与优势 (1)1.2SSD 的架构与现状 (2)1.3当前SSD 在企业级存储阵列使用中存在的问题 (3)1.3.1针对HDD 设计的存储阵列软件无法发挥SSD 的性能优势 (3)1.3.2针对HDD 设计的存储阵列软件无法保证SSD 的可靠性 (5)1.4 华为对SSD 在存储产品中应用的构想 (6)2华为OceanStor F V5 全闪存存储系统 (7)3OceanStor F V5 全闪存存储技术原理 (8)3.1华为在闪存领域的技术储备 (8)3.2面对未来全闪存数据中心的存储架构设计 (9)3.2.1华为SSD (9)3.2.2全新的Smartmatix2.0 架构 (10)3.2.2.1SAS 3.0 后端全互连 (10)3.2.2.2缓存持续镜像 (11)3.2.34S 弹性扩展 (12)3.2.4华为针对SSD 优化的RAID2.0 技术 (13)3.2.4.1数据动态负载均衡 (14)3.2.4.2快速精简重构，改善双盘失效率 (15)3.3 深度优化的全闪存阵列 (15)3.3.1 优化IO 流程降低存储阵列的处理时延 (15)3.4针对闪存架构的增值业务优化 (20)3.4.1服务质量分级（QoS） (20)3.4.2虚拟机优化，提升华为全闪存存储效率 (21)4OceanStor F V5 丰富的企业级特性 (23)5平滑的迁移到OceanStor F V5 全闪存阵列 (24)5.1老存储性能优化迁移（SmartMigration） (24)5.1.1LUN 迁移 (24)5.2异构迁移 (26)5.2.1存储异构虚拟化 (26)5.2.2从异构存储在线迁移到华为OceanStor F V5 全闪存存储系统 (27)6缩略语表 (29)1 闪存的演进及挑战1.1 SSD 的产生与优势计算、网络、存储是现代IT 系统的基本组成单元。
华为OceanStor Dorado 全闪存存储系统技术白皮书华为OceanStor Dorado V3 全闪存存储系统品技术白皮书(中国区企业版本) 目录目录1摘要 (1)2简介 (2)2.1产品系列 (2)2.2客户价值 (3)3系统架构 (5)3.1相关概念 (5)3.1.1控制框 (5)3.1.2控制器 (6)3.1.3硬盘框 (7)3.1.4硬盘域 (7)3.1.5存储池 (9)3.1.6RAID 技术 (10)3.2硬件架构 (14)3.2.1设备形态 (15)3.2.2自研HSSD (16)3.2.2.1盘内磨损均衡 (17)3.2.2.2坏块管理 (17)3.2.2.3数据冗余保护 (17)3.2.2.3.1后台巡检 (18)3.2.2.3.2支持SAS 和NVMe 协议 (18)3.2.3自研芯片 (19)3.2.4硬件扩展能力 (20)3.2.5硬件架构特征 (24)3.3软件架构 (24)3.3.1FlashLink (26)3.3.1.1冷热数据分流 (27)3.3.1.2端到端IO 优先级 (27)3.3.1.3ROW 满分条写 (28)3.3.1.4全局垃圾回收 (29)3.3.1.5全局磨损均衡/反磨损均衡 (29)3.3.2读缓存 (31)3.3.3IO 流程 (31)3.3.3.1写流程 (31)3.3.3.2读流程 (33)3.3.4丰富软件特性 (34)3.3.5软件架构特征 (35)4精简高效Smart 系列特性 (36)4.1在线重删（SmartDedupe） (36)4.2在线压缩（SmartCompression） (37)4.3智能精简配置（SmartThin） (39)4.4智能服务质量控制（SmartQoS） (39)4.5异构虚拟化（SmartVirtualization） (41)4.6智能数据迁移（SmartMigration） (42)4.7多租户（SmartMulti-Tenant for File） (44)4.8智能配额（SmartQuota for File） (46)5数据保护Hyper 特性 (48)5.1快照（HyperSnap） (48)5.1.1LUN 快照（HyperSnap For Block） (48)5.1.2FS 快照（HyperSnap For File） (51)5.2HyperCDP (52)5.3HyperCopy (54)5.4克隆（HyperClone） (57)5.4.1LUN 克隆（HyperClone For Block） (57)5.4.2FS 克隆（HyperClone For File） (59)5.5远程复制（HyperReplication） (61)5.5.1LUN 同步远程复制(HyperReplication/S For Block) (61)5.5.2LUN 异步远程复制(HyperReplication/A For Block) (64)5.5.3FS 异步远程复制（HyperReplication/A For File） (66)5.6阵列双活（HyperMetro） (68)5.6.1LUN 双活（HyperMetro For Block） (68)5.6.2FS 双活（HyperMetro For File） (69)5.7两地三中心（3DC） (72)5.8一体化备份（HyperVault for File） (72)5.9WORM（HyperLock for File） (73)6云灾备Cloud 特性 (76)6.1云复制（CloudReplication） (76)6.2云备份（CloudBackup） (77)7系统安全和数据加密 (80)7.1系统数据加密（Data Encryption） (80)7.2基于角色的访问控制管理 (81)8系统管理及兼容性 (82)8.1系统管理 (82)8.1.1Device Manager (82)8.1.2CLI (82)8.1.3Call Home 服务 (82)8.1.4Restful API (83)8.1.5SNMP (83)8.1.6SMI-S (83)8.1.7配套工具 (83)8.2生态集成及兼容性 (83)8.2.1VVol（Virtual Volumes） (83)8.2.2OpenStack 集成 (84)8.2.3虚拟机环境插件 (84)8.2.4主机兼容性 (84)9最佳实践 (85)10更多参考信息 (86)11如何反馈意见 (87)12缩略语 (88)1 摘要华为公司OceanStor Dorado V3 是面向企业关键业务打造的全闪存存储系统，采用专为闪存设计的FlashLink® 技术，实现0.5ms 稳定低时延；免网关双活技术，为客户提供端到端双活数据中心解决方案，并可平滑升级到两地三中心容灾方案，实现方案级99.9999%的可靠性；在线重删和压缩技术，提供更多的客户可用容量，减少TCO。
OceanStor 18000 V3系列高端存储系统V300R003产品技术白皮书文档版本1.2 发布日期 2016-03-24华为技术有限公司版权所有© 华为技术有限公司2016。
保留一切权利。
非经本公司书面许可，任何单位和个人不得擅自摘抄、复制本文档内容的部分或全部，并不得以任何形式传播。
商标声明和其他华为商标均为华为技术有限公司的商标。
本文档提及的其他所有商标或注册商标，由各自的所有人拥有。
注意您购买的产品、服务或特性等应受华为公司商业合同和条款的约束，本文档中描述的全部或部分产品、服务或特性可能不在您的购买或使用范围之内。
除非合同另有约定，华为公司对本文档内容不做任何明示或默示的声明或保证。
由于产品版本升级或其他原因，本文档内容会不定期进行更新。
除非另有约定，本文档仅作为使用指导，本文档中的所有陈述、信息和建议不构成任何明示或暗示的担保。
华为技术有限公司地址：深圳市龙岗区坂田华为总部办公楼邮编：518129网址：客户服务邮箱：support@客户服务电话：4008302118目录1 执行摘要/Executive Summary (1)2 简介/Introduction (2)3 解决方案/Solution (3)3.1 系统架构 (3)3.1.1 后端全互连 (3)3.1.2 PCIE Scale-Out (4)3.1.3 负载均衡 (5)3.1.4 数据缓存 (5)3.1.5 SAN/NAS一体化 (9)3.2 块级虚拟化 (10)3.2.1 块级虚拟化原理 (10)3.2.2 快速重构 (11)3.2.3 硬盘负载均衡 (12)3.2.4 最大化硬盘资源利用率 (12)3.2.5 提升存储管理效率 (12)3.3 稳定可靠 (12)3.3.1 硬件全冗余 (12)3.3.2 端到端DIF (13)3.3.3 本地数据保护 (13)3.3.3.1 快照（HyperSnap） (13)3.3.3.2 克隆（HyperClone） (15)3.3.4 远程数据保护 (17)3.3.4.1 同步远程复制（HyperReplication/S） (17)3.3.4.2 异步远程复制（HyperReplication/A） (20)3.3.5 阵列双活（HyperMetro） (21)3.4 安全高效 (22)3.4.1 性能效率提升 (22)3.4.2 关键业务保障 (23)3.4.3 LUN销毁 (24)3.4.4 静态数据加密 (24)3.4.4.1 门卫式数据加密（国内适用） (24)3.4.4.2 硬盘加密（海外适用） (25)3.5 弹性融合 (26)3.5.1 最大扩展能力 (26)3.5.2 8Gbps FC高密接口卡 (26)3.5.3 虚拟机环境优化 (26)3.5.4 SAN/NAS融合 (27)3.5.5 面向闪存的系统优化 (27)3.5.6 高中低端复制互通 (28)3.5.7 异构虚拟化（SmartVirtualization） (28)3.5.8 智能数据迁移（SmartMigration） (29)3.5.9 一体化备份（HyperV ault） (30)4 推广/Experience (32)5 结论/Conclution (36)6 缩略语表/Acronyms and Abbreviations (37)图表目录图 1 OceanStor 18000 V3四控引擎示意图 (4)图 2 OceanStor 18000 V3后端硬盘连接示意图 (4)图 3 OceanStor 18000 V3 PCIe Scale-out示意图 (5)图 4 本地写流程示意图 (6)图 5 非本地写流程示意图 (7)图 6 本地读流程示意图 (8)图7 非本地读流程示意图 (9)图8 华为SAN/NAS融合架构示意图 (9)图9 友商SAN/NAS集成架构示意图 (10)图10 RAID2.0块虚拟化 (10)图11 RAID 2.0快速重构示意图（一） (11)图12 RAID 2.0快速重构示意图（二） (11)图13 快照应用示意图（一） (14)图14 快照应用示意图（二） (15)图15 克隆技术原理示意图 (16)图16 克隆技术应用效果示意图 (17)图17 同步复制技术原理示意图 (18)图18 同步复制主从切换示意图 (19)图19 同步复制一致性组示意图 (19)图20 异步复制技术原理示意图 (20)图21 阵列双活示意图 (21)图22 门卫式数据加密示意图 (24)图23 硬盘加密示意图 (25)图24 8Gbps FC高密接口卡/MPO-4DLC光纤 (26)图25 异构虚拟化技术示意图 (28)图26 高性能方案 (33)图27 高密度虚拟机方案 (34)图28 高可靠方案 (34)图29 高可用方案 (35)产品技术白皮书 1 执行摘要/Executive Summary1 执行摘要/Executive Summary本文从存储技术的发展趋势为切入点，结合用户需求，从高性能、高可靠、高扩展、存储效率、数据保护等方面详细介绍了华为公司OceanStor 18000 V3系列高端存储系统的功能及亮点，旨在突出华为高端存储系统独有的亮点以及为客户带来的价值。
产品技术白皮书 2 简介/Introduction2 简介/Introduction当今世界，越来越多的企业采用虚拟化与云计算技术来构建IT系统，提升IT系统的资源利用率，并在保证服务级别水平的前提下降低成本；同时帮助业务更加具有敏捷性，加速新业务的上线时间。
然而，虚拟化与云计算技术的广泛应用也给后端的存储系统提出更加严峻的挑战。
如：需要存储系统能够承载更多的业务、更高的性能与可靠性、更好的扩展性、保证关键业务服务级别水平并降低成本的关键技术等。
华为公司全力打造的OceanStor 18000 V3系列高端存储系统正是以高性能、高可靠、高扩展、存储效率、数据保护为其设计理念，充分满足企业未来业务需求，帮助其IT系统转型以更快更好地应对日益激烈的竞争环境，实现与客户的共同成长。
3 解决方案/Solution随着企业面临的竞争环境越来越激烈、新业务上线时间要求越来越短，其IT系统需要从传统的成本中心转变为提升企业竞争力的利器，帮助企业提升竞争力并实现商业成功。
作为存放核心业务数据的高端存储系统，不但要满足核心业务所需要的高性能、高可靠等基本诉求，更要满足未来业务的发展、提升业务的敏捷性，帮助业务更快更好地适应竞争环境的需要。
华为OceanStor 18500/18800 V3高端存储致力于打造企业高端存储新标杆，为企业核心业务提供最高水平的数据服务。
凭借业界领先的SmartMatrix 2.0系统架构、HyperMetro免网关A-A双活、面向闪存的融合技术、持续领先一代的硬件平台以及丰富的效率提升和数据保护方案，OceanStor 18500/18800 V3高端存储在可靠性、性能和解决方案方面都达到业界领先水平，满足了大型数据库OLTP/OLAP、云计算等各种应用下的数据存储需求，广泛适用于政府、金融、电信、能源、交通、制造等行业，是企业核心应用的最佳选择。
3.1 系统架构3.2 块级虚拟化3.3 稳定可靠3.4 安全高效3.5 弹性融合3.1 系统架构3.1.1 后端全互连OceanStor 18000 V3系统高端存储系统每个引擎包含4个控制器，4个控制器直接通过机框无源背板上的PCIe 3.0高速通道互联，4控以内的配置不需要通过外部线缆和交换机，部署更简单，可靠性更好，性能也更好。
下面左图为引擎前视图，最上面是4个BBU，下面是4个呈“田”字分布的4个控制器；右图为引擎内部连接示意图。
图 1 OceanStor 18000 V3四控引擎示意图OceanStor 18000 V3高端存储系统使用SAS 3.0后端全互连接口卡，该接口卡由引擎4个控制器共享，与4个控制器都有连接。
某一个控制器发生故障时，引擎到硬盘框的连接仍然是冗余的，后端连接的可靠性不会降低。
下面左图为引擎后视图，中间4个槽位所插接口卡，即为后端全互连接口卡，高度为4U；右图为共享SAS接口卡的连接示意图。
图 2 OceanStor 18000 V3后端硬盘连接示意图OceanStor 18000 V3高端存储系统支持持续镜像（Persistent Cache）技术。
引擎中的4个控制器，正常情况下A/B控的Cache相互镜像，C/D控的Cache相互镜像。
当一个控制器故障后，假设B控故障，此时按照传统设计，为了保证数据可靠性，A控Cache将转为透写，性能急剧下降，而持续镜像技术会将A控Cache数据重新镜像到C或D控（由内部算法动态选择），以保证Cache数据可靠性，避免转透写带来的性能急剧下降。
3.1.2 PCIE Scale-OutOceanStor 18000 V3系列高端存储系统采取多控智能矩阵（SmartMatrix 2.0）架构设计，控制器之间采用PCIe光互联设计，实现控制器间的业务交换。
最大支持4引擎，每个引擎包含4个控制器，整个系统最大支持16个控制器。
每个控制器分别与2个交换平面通过PCIe光缆进行互连实现数据转发；此外，引擎内的4个控制器之间还可以通过引擎背板上的PCIe互联通道进行数据转发。
如下图所示：每个控制器在3号槽位配置一张PCIe接口卡，每张卡有两个PCIe光口，分别用光缆连接到两个PCIe交换机（为避免图中连线太多，引擎2/引擎3的线没有连）。
图 3 OceanStor 18000 V3 PCIe Scale-out示意图16个控制器通过QSFP光缆连接到两个冗余的DSW中，在DSW中实现数据交换，采用全PCIe的互联架构的优势在于减少协议转换的延时，可以实现更加高效的数据交换。
采用全光互联的设计一方面提高了长距离数据传输的可靠性，另外一方面对机柜之间的距离要求减少，有利于客户机房内部的机柜布局设计；每台PCIe交换机提供16个PCIe交换端口，每个端口4GB/s的交换带宽，两台PCIe交换机共提供128GB/s（2*16*4GB/s=128GB/s）的交换带宽；每个引擎内的4个控制器之间有128GB/s(PCIe3.0*64)的背板PCIe互联带宽，用于引擎内控制器之间的数据交换。
则OceanStor 18000 V3 16控配置下，总的系统交换带宽为640GB/s（引擎内交换带宽128GB/s*4+跨引擎交换带宽128GB/s=640GB/s）。
3.1.3 负载均衡默认情况下，系统自动将不同LUN均衡分配到不同控制器，LUN空间均衡打散到系统内所有硬盘。
