28
Storage News wie viele IOPS sind zeitgemäß? Mathias Riediger & Sven Willholz Systems Engineering 1

Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

  • Upload
    others

  • View
    7

  • Download
    0

Embed Size (px)

Citation preview

Page 1: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Storage News wie viele IOPS sind zeitgemäß?

Mathias Riediger & Sven Willholz Systems Engineering

1

Page 2: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Agenda

2

Was macht NetApp eigentlich?

NetApp Portfolio

Wie viel IOPs sind zeitgemäß?

Q & A

Page 3: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Was macht NetApp eigentlich?

3

Speichersysteme/Daten speichern

Flash Speicher verändert die Datenwelt

Anforderungen an Daten wie WORM

Verschlüsselung

Sicherung

Mandantenfähigkeit

. . .

Page 4: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

NetApp – ein Portfolio Anbieter!

Vertraulich, nur für die interne Verwendung des Kunden

144 Drives

400GB VST

Flash

60 Drives

400GB VST

Flash

FAS 2520

FAS 255X

480 Drives

6TB

VST Flash

720 Drives

12TB

VST Flash

1200 Drives

18TB

VST Flash

FAS 8020

FAS 8040

FAS 8060

1440 Drives

36TB

VST Flash

FAS 8080

EF-Series E-Series

Page 5: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Industry-Leading Storage Innovation

Vertraulich, nur für die interne Verwendung des Kunden 5

Flash Arrays for ultrahigh performance

E-Series for price/performance at scale

StorageGRID®

for web-scale object storage

Clustered Data ONTAP®

for shared infrastructure

Corporate

Data Centers

Cloud

Data Centers

Page 6: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Workloads und Benutzer

Server für

„Big Data“

Virtualisierte Server Nicht virtualisierte

Server

K B C D E

Richtlinienbasiertes Datenmanagement

Erstellen von Replizierungskopien

- Workload A

Unerwartetes Wachstum

in Workload B Erstellen von Backup-Kopien

- Workload C

Performance-Problem

- Workload D

Unerwartetes Wachstum

- Workload E System-Upgrade erforderlich

Performance-Problem

behoben Kapazitätserweiterungen erforderlich Wachstumsproblem gelöst

Alle Aktionen sind

für Benutzer unterbrechungsfrei.

A1

C1

B C D E A

Unified Datennetzwerk

FCP FCoE iSCSI

CIFS/SMB NFS/pNFS

NetApp Basics

Page 7: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Wie viel IOPs sind zeitgemäß?

© 2014 NetApp. Alle Rechte vorbehalten. NetApp vertraulich – eingeschränkte Nutzung 7

Page 8: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Wer hat mehr Leistung?

Wer kopiert eine Datei schneller (Single Task) ? # dd if=/tmp/source of=/tmp/target bs=64k

8

240km/h

150km/h bis 45.000 IOPs

6.8ms mittlere Latenz

bis 25.000 IOPs

4.3ms mittlere Latenz

9.19 MB/sec

14.53 MB/sec

(1000ms / 4.3ms = 232.5

232.5 * 64K / 1024 = 14.53 MB/sec)

(1000ms / 6.8ms = 147.1

147.1 * 64K / 1024 = 9.19 MB/sec)

Page 9: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Wer hat mehr Leistung?

Wer bietet insgesamt mehr System-Durchsatz (Gesamt)?

9

240km/h

150km/h bis 45.000 IOPs

6.8ms mittlere Latenz

bis 25.000 IOPs

4.3ms mittlere Latenz

1000ms / 6.8ms = 147.1

45.000 / 147.1 = 305.9

305.9 * 9 MB/sec = 2,753 MB/sec

1000ms / 4.3ms = 232.5

25.000 / 232.5 = 107.5

107.5 * 14 MB/sec = 1,505 MB/sec

Page 10: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Noch was wichtig?

Was war bei dieser Betrachtung neben Geschwindkeit und Last pro Sekunde noch wichtig?

10

240km/h

150km/h bis 45.000 IOPs

6.8ms mittlere Latenz

bis 25.000 IOPs

4.3ms mittlere Latenz

Page 11: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Der magische Performance Quadrant

11

Random Read

Random Write

Sequential Read

Sequential Write

kleine

Blöcke

große

Blöcke

strukturierte

Daten

unstrukturierte

Daten

© Georg Mey

Page 12: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Quelle: https://www.heinlein-support.de/upload/slac08/Heinlein-RAID_Mathematik_fuer_Admins.pdf

Was will ich? MB/s vs. IOPS

© 2014 NetApp. Alle Rechte vorbehalten. NetApp vertraulich – eingeschränkte Nutzung 12

Page 13: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Durchschnittliche IO Rate pro Disk:

13

Reads

only

Writes

only

70/30

Read/Write

Reference

3,5” 15K SAS 179 164 174 Seagate Cheetah 15K.7

2,5” 15K SAS 204 189 199 Seagate Savvio 15K.3

2,5” 10K SAS 152 143 149 Seagate Savvio 10K.6

3,5” 7200 SATA 79 73 77 Seagate Constellation ES.3

2,5” 5400 SATA 52 50 52 HGST Travelstar Z5K500

2,5” eMLC SSD 48000 15000 23000 Seagate Pulsar.2

Page 14: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

1 2 3 4 5 6 7 8 9 10 11

Wo entstehen Latenzen innerhalb von trad. Disks

14

10K RPM

15K RPM

7200 RPM

5400 RPM

Seek Time

Disk Controller Overhead

RAID Controller Overhead

Data Transfer Time

Disk Seek Time

Disk Rotational Latency

Disk Service Time

IO Service Time

Diese Wartezeiten entfallen bei Flash

Page 15: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

All Flash Hard Drives

mit Flash Acceleration

Traditional Hard Drives

Balance zwischen Performance und Kapazität

© 2014 NetApp, Inc. All rights reserved.

Perf

orm

ance

Kapazität

Bester €/GB

Bester mix €/GB and €/IOPS

Bester €/IOPS

Page 16: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Wo setzt NetApp Flash ein

© 2014 NetApp. Alle Rechte vorbehalten. NetApp vertraulich – eingeschränkte Nutzung 16

Page 17: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

NetApp – Flash Cache, Flash Pool, Server Level Flash

17

Controller level Flash Cache

Array level (hybrid) Flash Pool

(Data cache)

Flash Aggregates

(Persistent)

Server level Fusion-io (resell)

Shared Storage Virtual Storage Tiering Dedicated Storage

EF540

FlashRay

E-series

All Flash Arrays

(Persistent)

Hybrid Arrays (Persistent or cache)

FAS

Page 18: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Flash-beschleunigter Storage

All-Flash Arrays

Ideal für performance-sensetive Apps

niedrige Latenz für jeden I/O

© 2014 NetApp, Inc. All rights reserved.

Flash Only

Flash + HDD Hybrid Array

Perfekt für meisten mixed Workloads (bevorzugt reads)

Speed von flash mit Kapazität von HDDs

Page 19: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Hybrid Arrays

© 2014 NetApp, Inc. All rights reserved.

Page 20: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Data sollen schnell

sein wenn Hot

und kostengünstig

wenn cold

Ziel

Intellegentes Beschleunigen

von “hot” Daten auf schnellem

Storage Medium

Primary Storage Pool

Alle Daten: Hot and cold

Herausforderung: Wo liegen meine Daten?

© 2014 NetApp, Inc. All rights reserved.

1 0 0 1 0 1 1 0 0 1 1

1 0 1 1 0 0 0 1 0 1 0

0 1 1 0 1 0 1 0 0 1 1

1 0 1 0 1 1 0 0 1 0 0

0 1 0 1 1 0 1 1 0 1 0

Page 21: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Virtual Storage Tiering: Hybrides Storage für Data ONTAP

Intellegentes plazieren von“hot” Daten auf schnellstem Storages Medium in Echtzeit

effiziente Nutzung von Flash

Einfache Installtion

Self managing

unterbrechungsfreie Nutzung

Echtzeit Optimierung

Liefert besten mix von €/IOPS and €/GB

Speed von Flash plus Kapazität von Disks

© 2014 NetApp, Inc. All rights reserved.

Daten getrieben Echtzeit konfigurationslos

Virtual Storage Tier

HDD Storage

Array Flash

Flash Cache Flash Pool

Page 22: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Benefits of Hybrid Array

Kostenvorteil

34% niedrigere Kosten pro TB

40% niedrigere Kosten pro IOPS

40% weniger Energie und Abwärme

Flexibilität

28% mehr IOPS

17% mehr Speicher

18% bessere Antwortzeiten (Latenz)

Before

144TB system

240 x 600GB 10k rpm disks

After

168TB system

168 x 1TB 7200 rpm disks

1TB Flash Cache™

© 2014 NetApp, Inc. All rights reserved.

Page 23: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Herzlichen Dank!

23

Page 24: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Die Flash Factory

© 2014 NetApp, Inc. All rights reserved. 24 |

http://youtu.be/_dssCip7ZbA

Page 25: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Latenz- und Durchsatz-sensitive Workloads

Anwenden von All Flash wo es Sinn macht

Transactional workloads (OLTP)

Decision-making systems

Reservation/customer service systems

Virtual desktop infrastructure

Web services

Technical computing

Analytics (OLAP)

© 2014 NetApp, Inc. All rights reserved.

Page 26: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

NetApp Flash Leadership Metrics through July 2014

© 2014 NetApp, Inc. All rights reserved. NetApp Proprietary – Limited Use Only 26

hybrid systems shipped all-flash systems shipped flash shipped in last two quarters

100 200 ~ flash-related

patents

petabytes of

flash shipped +

Page 27: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

Award Winning All-Flash Systems

© 2014 NetApp, Inc. All rights reserved.

Page 28: Storage News wie viele IOPS sind zeitgemäß? · Agenda 2 Was macht NetApp eigentlich? NetApp Portfolio Wie viel IOPs sind zeitgemäß? Q & A

http://media.wiley.com/assets/7139/36/9781118660508_custom.pdf

28