Software Defined Storage PRIMERGY szerverek és eszközök Microsoft Storage Spaces tárolómegoldásokhoz Taál Péter, DataCenter Pre-Sales 2015-10-21 Copyright 2011 FUJITSU

Ki tudja milyen nap van ma ? Copyright 2011 FUJITSU

1985-ös elképzelések szerint így nézünk ki ma  Copyright 2011 FUJITSU

Tartalom Storage Spaces – a Microsoft technológiája Storage Spaces – teljesítmény Tárhely rendelésre – PRIMERGY és eszközök Kitekintés – „Hyper-Converged” és elkülönített adattárolás S2D technológiával Copyright 2011 FUJITSU

Mi az a Microsoft Storage Spaces? Szoftveresen definiált adattárolás szervereken Windows Serverrel. . Na, azért ennél kicsit több... 

Gartner IT Market Clock Server Technology and SDx, 2014 Technology is still in its early market life stages Microserver (Broadwell-DE) Towers are steadily losing ground, but the market is not dead! Software-defined Architectures gaining momentum SDC* takes the concepts of virtualization, and applies them across physical servers Rack-optimized Servers represent the >10 years Multinode Servers still growing, opportunity for ODMs, potential competition from ELE servers PQ RX Quad BX VIOM SDSP RSA 0.5 Integrated Systems continues to grow at 30% to 40% Blade servers peaked in 2010, but has remained broadly static ever since PRIMERGY DCS Server Use Cases under consideration Source: Gartner it_market_clock_for_server_t_262843.pdf SDC (Software-Defined Compute) Definition: Software-defined compute (SDC) takes the concepts and abstraction of virtualization, containers and applies them across physical servers, hosts and virtual machines. This can happen at many levels, not just hypervisors, but requires an abstracted management and control plane. Copyright 2011 FUJITSU

Storage Spaces – Célok – Windows Server 2012 R1 Tároló virtualizáció RAID funkciók Thin provisioning Script-alapú felügyelet PowerShellel Hatékony fájlrendszer javítás Cluster Shared Volumes (CSV) integráció Szoftveresen definiált tároló Copyright 2011 FUJITSU

Storage Spaces – Újdonságok – Windows Server 2012 R2 Functionality Új? Leírás Storage Tiering Új A rendszer automatikusan tárolja a gyakrabban elért adatokat SSD a ritkábban használt adatokat HDD lemezeken. Write-back cache Egyfajta SSD írási cache ami felgyorsítja az írási műveleteket. Parity Space support for failover clusters Paritás létrehozása a fürtökben Dual Parity Spaces Két lemez együttes hibáját engedi meg a vlemezekben. Automatically rebuild Storage Spaces from storage pool free Space Gyorsabb helyreállítást tesz lehetővé a vlemezeken a fel nem használt üres területekre fizikai lemez hiba esetén „hot-spare” lemez nélkül JBOD enclosure awareness Megengedi a vlemezek létrehozását a lemez fiókok között, így az adatok elérhetőek maradnek egy teljes fiók meghibásodása esetén is. File sync between work folders „Sync Share”-ek létrehozása ellenőrzött felhasználók gépein, hogy azok offline is hozzáférjenek az adatokhoz. Datadeduplication fejlesztve Csökkentett adathasználat, és redundancia a hatékonyabb kiszűrése Copyright 2011 FUJITSU

Storage Spaces – definíciók Software Defined Storage: Physical disk  Storage Pool  Storage Space  Volume  Data Storage pool – egy vagy több fizikai lemez adminisztrációs egysége Kapacitás = fizikai lemezek összessége Storage Spaces – virtuális lemezeket lehet létrehozni a tárolópoolon belül Hibatűrés: striping, tükrözés vagy paritás Adatok kötetre helyezése Növekedés esetén a poolhoz további fizikai lemezek adhatók - Szolgáltatás leállása nélkül Storage Tiering – Az SSD-k teljesítményelőnyeit a HDD-k nagy kapacitásával és kis költségével ötvözi Storage space Storage space storage space Windows virtualized storage Storage pool Storage pool SSD Tiered physical storage HDD (Shared) SSD, HDD, SAS or SATA Copyright 2011 FUJITSU

Storage Spaces – Hibatűrés és fontos tények A hibatűrés szintje a RAID-hez hasonló, de a Storage Spaces nem RAID-megoldás Méretezés Max. 240 HDD/SDD vagy 480 TB egy storage poolban, és max. 128 Storage Space; több storage pool is kialakítható Fürt esetén: max. 4 storage pool, valamennyi lemeznek megosztott SAS-nak kell lennie; a WS 2016 megjelenésekor változni fog A Storage Spaces adatoknak készült  nem lehet róla bootolni; bootolni RAID-ről, SATA DOM-ról vagy a jövőben M.2-ről lehet Storage Spaces layout Fail-safety Min. # of disks Min. # of disks, cluster Compare with Compare with RAID Description Simple None 1 3 RAID 0 Striping w/o redundancy Mirror 2-way 1 drive failure 2 RAID 1, 10 Striping w/ simple redundancy Mirror 3-way 2 drives failures 5 6 N/A Striping w/ double redundancy Single Parity RAID 5 Striping w/ simple parity redundancy Dual Parity 7 RAID 6 Striping w/ double parity redundancy Copyright 2011 FUJITSU

Storage Spaces – javasolt felület Powershell Nem minden funkció érhető el a GUI felületén, ezért a Powershell a javasolt kezelőfelület Néhány példa: Utasítások listázása : Get-Command –Module Storage Storage pool létrehozása : $s = Get-StorageSubSystem New-StoragePool -StorageSubSystemId $s.UniqueId -FriendlyName Pool1 -PhysicalDisks (Get-PhysicalDisk - CanPool $true) Diszkek kilistázása a poolban : Get-StoragePool Pool1 | Get-PhysicalDisk | Sort Size | FT FriendlyName, Size, MediaType, HealthStatus, OperationalStatus –AutoSize Copyright 2011 FUJITSU

Storage Spaces – javasolt felület Powershell 2. Tier-ek létrehozása : Get-StoragePool Pool1 | New-StorageTier –FriendlyName SSDTier –MediaType SSD Get-StoragePool Pool1 | New-StorageTier –FriendlyName HDDTier –MediaType HDD Pool mérete : Get-StoragePool Pool1 | FL Size, AllocatedSize 256MB diszkenként lefoglalvásra kerül metadata tárolására. Egy simple és egy mirror virtuális diszk (space) létrehozása: $SSD = Get-StorageTier -FriendlyName SSDTier $HDD = Get-StorageTier -FriendlyName HDDTier Get-StoragePool Pool1 | New-VirtualDisk -FriendlyName Space1 -ResiliencySettingName Simple –StorageTiers $SSD, $HDD -StorageTierSizes 8GB, 32GB -WriteCacheSize 1GB Get-StoragePool Pool1 | New-VirtualDisk -FriendlyName Space2 -ResiliencySettingName Mirror -StorageTiers $SSD, $HDD -StorageTierSizes 8GB, 32GB –WriteCacheSize 1GB Copyright 2011 FUJITSU

Storage Spaces – többszintű adattárolás Gyorsabb hozzáférés a legfontosabb adatokhoz Különböző típusú lemezek SSD-k hozzáadása a poolhoz A pool SSD-kből és HDD-kből áll Automatikusan optimalizált adatelhelyezés A többszintű adattárolás aktiválása Storage Space instanciánként történik A „forró” adatok (SSD-k) és a „hideg” adatok (HDD-k) egyensúlyának automatikus megteremtése Fájl alatti szintű adatmozgatás Kiegészíti a visszaíró gyorsítótárazást Administrative Controlled Pinning A „forró” fájlok gyorsabb SSD-szinthez rendelése Példa: VDI poolba foglalt VM-ek virtuális merevlemeze (VHD) Virtuális gépek Tárhely SSD-szint 400 GB EMLC SAS SSD „Forró” adatok „Hideg” adatok HDD-szint 4 TB 7200RPM SAS HDD Forrás: Microsoft

Storage Spaces - Visszaíró gyorsítótár Random lemezhozzáférés A virtualizált rendszerek tárolóhozzáférési mintáira jellemző Az SSD-k magasabb IOPS sebességet nyújtanak a random hozzáféréshez Jobb teljesítmény valós feladatoknál Az SSD-k magas IOPS-szinteken fogadják a random írási műveleteket Zökkenőmentes integráció és ismerős felügyelet Virtuális gépek Tárhely SSD-szint és WBC 400 GB EMLC SAS SSD „Forró” adatok „Hideg” adatok HDD-szint 4 TB 7200RPM SAS HDD Forrás: Microsoft

PowerShell & System Center Management A számítási és a tárolóerőforrások szétválasztása – szoftveresen definiált tároló Hyper-V fürtök PowerShell & System Center Management Csökkenti az adattárolási szolgáltatások költségét és munkaigényét A számítási és a tárolóerőforrások szétválasztása Minden réteg külön kezelhető és skálázható FUJITSU PRIMERGY szerverek, FUJITSU ETERNUS tárolók és hálózati elemek Megfizethető hálózatok Megfizethető osztott JBOD adattárolás Célpiac Szolgáltatócégek Privát felhő környezetek SMB3 Horizon-tálisan skálázható fájlszerver-fürtök Storage Spaces Osztott JBOD-ok és SAS kapcsolóhálózat a horizontálisan skálázható fájlszerver node-ok mögött Osztott JBOD adattárolás

Tartalom Storage Spaces – a Microsoft technológiája Storage Spaces – teljesítmény Tárhely rendelésre – PRIMERGY és eszközök Kitekintés – „Hyper-Converged” és elkülönített adattárolás S2D technológiával Copyright 2011 FUJITSU

Storage Spaces – mérési paraméterek Szerver konfiguráció: 2x E5-2670v2, 8 x 900GB 10K 2,5col, 3 x 400GB SSD, 1GB HW RAID, CP200i SAS, Iometer 2006.07.27. , fájl méret 32GB Mérési profilok: File Copy : random, 50% read, 64Kb block File Server : random, 67% read, 64Kb block Database : random 67% read, 8Kb block Copyright 2011 FUJITSU

Storage Spaces vs. SS R2 Copyright 2011 FUJITSU

Storage Spaces R2 dual parity vs. R1, HW Raid 6 Copyright 2011 FUJITSU

Storage Spaces – vs. SS R2 Copyright 2011 FUJITSU

Tartalom Storage Spaces – a Microsoft technológiája Storage Spaces – teljesítmény Tárhely rendelésre – PRIMERGY és eszközök Kitekintés – „Hyper-Converged” és elkülönített adattárolás S2D technológiával Copyright 2011 FUJITSU

Storage Spaces – kulcseszköz: SAS HBA PSAS CP400i PCIe SAS HBA Mindent egy vezérlő támogat, egyidejűleg RAID 0, 1 lemezek a Windows Server bootolásához SAS/SATA SSD/HDD Storage Spaces lemezek az adatok számára Ábra Fujitsu PSAS CP400i SAS vezérlő Backplane SAS expanderrel RAID 0, 1 bootoló lemezek Storage Spaces Copyright 2011 FUJITSU

Storage Spaces – JBOD hozzárendelése Egyszerű tárhelybővítés Lemezek hozzáadása ETERNUS JX40 S2 vagy JX60 JBOD rendszeren keresztül PSAS CP400e PCIe SAS HBA kell a PRIMERGY-hez A tárhelyet az összes Storage Spaces lemez alkotja, függetlenül attól, hogy a PRIMERGY vagy ETERNUS JX belsejében található Fujitsu PSAS CP400e SAS vezérlő ETERNUS JX 40 vagy JX60 Storage Spaces – 1 hozzáadása .. 60 további lemez/JBOD … … Fujitsu PRIMERGY RX2540 M1 szerver: PSAS CP400i, 8 port, 12Gb/s SAS+SATA PCIe Host Bus Adapter, és/vagy PSAS CP400e, 8 port, 12 Gb/s SAS+SATA külső PCIe Host Bus Adapter ETERNUS JX40 vagy JX60 JBOD tároló-alrendszer SAS/SATA SSD/HDD lemezekkel. Copyright 2011 FUJITSU

Storage Spaces – Kulcseszköz: JBOD ETERNUS JX40 S2 (24 x 2,5”, 12 x 2,5”, HDD, SSD), JX60 (60 x 3,5” HDD) JBOD = Just a Bunch of Disks, nincs RAID-funkcionalitás JX40, JX60 = óriási backplane nagy számú HDD-vel külső házban A hibatűrés szintjét a host határozza meg: Microsoft Storage Spaces Használat módja Egyportos (nem fürt), kétportos (fürt, csak SAS lemezekkel) Ha kettőnél több PRIMERGY szerver van egy fürtben, SAN-switch szükséges JX40 S2 JX60

Melyek a megfelelő alkotóelemek? 1 2 3 4 5 Rendszer Bootolás Vezérlő Adatlemezek Szoftver PSAS CP400i (SAS expanderrel) HDD: SAS, SATA PSAS CP400i HDD: SAS, SATA RX2530 M1: 10x 2,5” RX2520 M1: 12x 3,5” SSD: SAS, SATA (AHCI) PCIe (NVMe) SATA DOM PSAS CP400e RX2540 M1: 12x 3,5” vagy 24x 2,5” Ingyenes Microsoft Hyper-V Server 2012 R2 Windows Storage Server 2012 R2 Szabványos RX/TX 2560 M1: max. 32x 2,5” JBOD: JX40, JX60

További hivatkozások Fujitsu-adatlapok az interneten Fujitsu Extranet SAS HBA PSAS CP400i http://docs.ts.fujitsu.com/dl.aspx?id=c2beb62a-b2f5-4fe4-8d1a-544f00ca6e1b SAS HBA PSAS CP400e http://docs.ts.fujitsu.com/dl.aspx?id=12a79e1b-637e-40ab-bf3f-08f722af4bbf Windows Server 2012 R2 http://docs.ts.fujitsu.com/dl.aspx?id=a1672f46-e198-48e0-b023-b467fe076717 Fujitsu Extranet Windows Server 2012 R2: https://partners.ts.fujitsu.com/com/products/servers/primergy/opsys/WindowsSe rver/Pages/WS2012R2.aspx Copyright 2011 FUJITSU

Tartalom Storage Spaces – a Microsoft technológiája Storage Spaces – teljesítmény Tárhely rendelésre – PRIMERGY és eszközök Kitekintés – „Hyper-Converged” és elkülönített adattárolás S2D technológiával Copyright 2011 FUJITSU

Fujitsu – Fejlesztési partner az S2D adattárolásban Microsoft Ignite, 2015 – BRK3474 sz. előadás https://channel9.msdn.com/Events/Ignite/2015/BRK3474 MP4 Video az Ignite-tól http://video.ch9.ms/sessions/ignite/2015/BRK3474-mobile.mp4 4x PRIMERGY RX2540 M1, mindegyik az alábbiakkal: 2x Intel Xeon E5-2680 v3 12C/24T 2,50 GHz Nyilvános bejelentés: Ignite, Chicago, 2015. május 4-8. Copyright 2011 FUJITSU

Választási lehetőség az osztott SAS és a DAS között Mindkét hardverarchitektúrát támogatja a Windows Server 2016 Technical Preview Storage Spaces osztott SAS-sal Kétnode-os konfigurációig skálázható lefelé Kevesebb hardverrel támogatja a dupla paritást PSAS CP400e PCIe Storage Spaces Direct (S2D) Új – Windows Server 2016 Támogatja a SATA és NVME eszközöket Egyszerű skálázhatóság közvetlen elérésű eszközökkel PSAS CP400i PCIe Fürtnode-ok Fürtnode-ok SAS JBOD Copyright 2015 FUJITSU

S2D – Telepítési lehetőségek 2018.09.05. 18:19 Microsoft Ignite 2015 S2D – Telepítési lehetőségek „Hyper-Converged” privát felhő A számítási- és tárolóerőforrások együtt A számítási- és a tárolóerőforrások skálázása és felügyelete közösen történik Jellemzően kis és közepes „scale-out” rendszereknél A privátfelhő tárolója A számítási- és a tárolóerőforrások külön A számítási- és a tárolóerőforrások skálázása és felügyelete egymástól függetlenül történik Jellemzően nagyobb „scale-out” rendszereknél Hyper-V fürt(ök) SMB3 adattárolási hálózat Hyper-V fürt Scale-Out fájlszerver-fürt © 2015 Microsoft Corporation. Minden jog fenntartva. A MICROSOFT SEM KIFEJEZETT, SEM HALLGATÓLAGOS, SEM TÖRVÉNYI GARANCIÁT NEM VÁLLAL A PREZENTÁCIÓBAN FOGLALT TÁJÉKOZTATÁSÉRT.

Copyright 2011 FUJITSU