Mobile Sync & Share

HNAS & 3rd Party NAS Tiering

Backup-free Remote Office Filer

Compliance Archive Email, SAP, PAX ...

Ultimate Object Store

Big Data Archive Search & Analytics

S3/Swift Private Cloud

Public & Private Cloud Encryption & Caching

Public Cloud Tiering & Virtualization

Openstack Swift Cloud

Files

Archives §

HDI

Virtual Appliance or

Hitachi Server

HITACHI Cloud Technologien Große Datenbestände sicher und einfach zur Verfügung stellen

Daniel Maiworm Sales Lead – Content Solutions

Hitachi Data Systems

JEDE BRANCHE IST UNTER DRUCK

NEUE WETTBEWERBER MIT REVOLUTIONÄREN GESCHÄFTSMODELLEN

ALTE FIRMEN LEIDEN ODER STERBEN

REVOLUTIONÄRE GESCHÄFTSMODELLE 1. Das weltgrößte Taxiunternehmen besitzt keine Autos 2. Der größte Anbieter von Unterkünften besitzt keine Immobilien 3. Der größte Kommunikationsanbieter betreibt keine Leitungen 4. Der wertvollste Einzelhändler hat kein Lager 5. Die beliebteste Medienplattform erzeugt keinen Content 7. Der größte Filmvorführer besitzt keine Kinos

UND IN DEUTSCHLAND?

UND IN DEUTSCHLAND?

DIGITALE TRANSFORMATION Kosteneffizienz &

schnelle Markteinführung durch Umbau von

BETRIEB UND PROZESSEN

PROZESSAUTOMATION WORKFORCE MOBILITÄT

EFFIZIENZ DER SUPPLY CHAIN

Loyalität und Umsatzsteigerung

durch Verbesserung des KUNDEN-

ERLEBNISSES

MOBILE COMMERCE ECHTZEITINFORMATION

INDIVIDUELLE ANSPRACHE

Neue Einnahmequellen in neue Märkten

durch Entwicklung von NEUEN GESCHÄFTS-

MODELLEN

DATENORIENTIERTE SERVICES GLOBALE EXPANSION

E-COMMERCE

ERWARTUNGEN AN I.T. IN DIGITALISIERTEN UNTERNEHMEN

INNOVATION BESCHLEUNIGEN

RISIKEN MANAGEN

MEHR GELD VERDIENEN

CEO

RATGEBER

DATEN-MAKLER INNOVATOR

CIO

ERWARTUNGEN AN I.T. IN DIGITALISIERTEN UNTERNEHMEN

FIRMEN STELLEN SICH DEM

WANDEL ODER WERDEN

IRRELEVANT

LÜCKE

WAS BEHINDERT DIGITALE TRANSFORMATION?

Netzwerk

Storage

Server

Virtuelle Maschinen

Betriebssysteme

Datenbanken

Middleware Anwendungen

IT-SICHTWEISE BUSINESS-SICHTWEISE

DIGITALE TRANSFORMATION BETRIEB UND

PROZESSE

Kosteneffizienz Time to Market

KUNDEN

Loyalität und

Umsatz

GESCHÄFTS-FELDER

Einnahme-quellen und neue Märkte

DATEN DIE GRUNDLAGE JEDER

DIGITALEN TRANSFORMATION

DATA SOURCES Structured Data Unstructured Data IoT Data

Mobile

101100101010010101010 011010101001001100101

DATA MANAGEMENT

Abstract

Automate Accelerate

Access

Data Independence

DATA MOBILITY

Any Cloud Any App

Anywhere Any Use

Data Access

DATA ANALYTICS

Data-Driven Insight

Vom Storagekonzept zur Datenstrategie

DATA GOVERNANCE

Data Control

GOTT erschuf die Welt in 7 Tagen...

... denn er mußte keine installierte Basis betreuen!!

HITACHI PROTON BEAM THERAPY Advanced Cancer Treatment

HITACHI PROTON BEAM THERAPY Powered by Particle Acceleration

INFORMATION INTELLIGENCE CONTENT

MANAGEMENT

SOFTWARE-DEFINED INFRASTRUCTURE Scalable compute and data access platforms for real-time analytics and decisions

Vendor neutral archive to store, retrieve, protect and repurpose medical records, images and diagnostic outcomes

Analysis of multi-patient treatment outcomes to improve cancer therapies

DIGITALER WANDEL

CLOUD

250GB Daten pro Patient Hochauflösenden Gehirnscans (CT, MRT, etc.) 3D-Simulationsdaten (für die Führung des Strahls) Log-Files des Systems Laborwerte (Blut, ggf. Gendaten) Digitale Pathologie

LOS ANGELES

US EMEA ASIA

NEW YORK

LONDON

MADRID FRANKFURT

TOKYO

Hitachi Ltd. > 120 Research Facilities in Japan > 300 across the world

REMOTE SITE

CHICAGO

MIAMI

OSLO

MOSKAU

SYDNEY

HITACHI EXAMPLE SUBSIDIARY

Global Research facilties for Hitachi Medical... (Simplified for demonstration purposes)

Typische Geräte in Medizin-Labors

NAS Filer (Clustered)

Dedup Appliance or Tape Library

Backup Server

• Hardware zu groß oder zu klein • Upgrades von Disk, Backup, Lizenzen • Manuelle Auslagerung auf USB-Disks (!)

• Daten im „Silo“ – Teamarbeit schwierig • Keine Lösung für externe Forscher

Studien über ALLE Fälle nicht möglich

0,25/$ per GB*

AWS: 0,036/$ per GB

Cloud als Lösung, aber wir mussten sie „In-House“ bauen

Monatliche Kosten:

Die Storagewelt schaut gebannt auf die Cloud

Kein großer Cloud Dienst läuft vom Fileshare!

… sondern nutzt “Objekt-Technologie” in mehreren Data Centern

“In the next 4 years 25% of IT shops will completely replace NAS with object, and 45% see object causing a significant reduction in NAS footprint.” ESG (2015)

Objekt Storage für die “In-House Cloud”

Highly available Routes around individual component failures, ensuring business continuity

Globally accessible Multitude of protocols, write from one, read from another

Catalog for discovery Catalog using custom metadata and query on metadata

Self managing Policies and services for data protection, data governance, and storage optimization

Backup free Replication keeps geo-redundant copies and historic versions on device

Flexible Add storage whenever and wherever needed

A Cloud Datacenter

in a box!

Mobile Sync & Share

HNAS & 3rd Party NAS Tiering

Backup-free Remote Office Filer

Compliance Archive Email, SAP, PAX ...

Ultimate Object Store

Big Data Archive Search & Analytics

S3/Swift Private Cloud

Public & Private Cloud Encryption & Caching

Public Cloud Tiering & Virtualization

Openstack Swift Cloud

Files

Archives §

HDI

Virtual Appliance or

Hitachi Server

Wie speichern wir Objekte? (DPL2 – 2 Standorte)

London Amsterdam

Replication

3 – Speicher auf 1..HCP

1 - Applikation hält Objekt in Warteschlange

4 – Erstelle 2.. Kopie

5 – 2 weitere Kopien am Fail-Over Standort

6 – Applikation erhält “Commit”

7 – Objekt wird aus Warteschlange entfernt

3

Enterprise Vault

SHA 256 - AE9D587B80 BC7142639A4B789C71

4

5

5

1 7

2 – Hochladen via HTTP (Load Balancer)

Load Balancer

2 (Upload) 6 (Commit)

Gerne auch rund um den Planeten… (DPL 1 - 4 Sites)

London Amsterdam

Replication

Enterprise Vault

SHA 256 - AE9D587B80 BC7142639A4B789C71

Load Balancer

New York Tokyo

Intelligenter Frontend: G10 Cluster

Fron

t-end

Net

wor

k B

, 10G

b

Private Back-end Network

Fron

t-end

Net

wor

k A

, 10G

b

HCP G10 Nodes

HCP Nodes bilden Cluster ‒ Min. 4 Nodes pro Rechenzentrum (Max. 80)

‒ Optimale Ausfallsicherheit

‒ Datenablage auf min. 2 Nodes (pro RZ)

Verfügbarkeit über mehrere Standorte ‒ Bis zu 10 Cluster im Verbund

‒ Datenreplikation an bis zu 5 Standorte

‒ Alle Cluster sind Aktiv/Aktiv

Skalierbares Backend: S30

Kapazität für hunderte Petabyte ‒ Erweitert HCP um einen massiv skalierbares

Storagebackend: 2 Server + 16 EInschübe

‒ 16 Trays mit jeweils 60x6TB Disks (4.1PB)

‒ 20+6 Erasure Coding gegen Multi-Disk Fails

Günstigster Speicher im HDS Portfolio ‒ Preis GB/Mon unterhalb AWS & Azure Niveau

‒ Bis zu 80 S30-Nodes an einer HCP Max. 330PB (usable) in 75.000 Disks

‒ Spricht S3 mit dem Frontend

LOS ANGELES

HCP US HCP EMEA HCP ASIA

NEW YORK

LONDON

MADRID FRANKFURT

TOKYO 2

1

2 2

1 1

MIAMI

1 R

R

R R R

Unsere Labor-Daten Clouds...

While each region has its own cloud... ... some data gets globally replicated!

VPN oder Internet

HTTP/S

CIFS

HTTP/S

HTTP/S

- Sichert die Daten innerhalb von Minuten - „Unbegrenzte“ Kapazität - Monatlicher Charge-Back - Zentrale Administration - Rechtssichere Speicherung nach Archivstandards

File-Cache/Gateway fürs Labor

Wie verbinden wir unsere Geräte mit der Cloud?

Amazon Datacenter Locations

Akamai CDN

LOS ANGELES

HCP US HCP EMEA HCP ASIA

NEW YORK

LONDON

MADRID FRANKFURT

TOKYO 2

1

2 2

1 1

HDI

HDI CIFS & NFS Backup-free Elastic (3-30TB) Cost-effective

HCP Backup-free Compliant Low Admin Elastic (4TB-300PB) Extremely cost-effective

CHICAGO

MIAMI

OSLO

MOSKAU

SYDNEY

MOBILE USER

HCP ANYWHERE Enterprise Drop-Box

1 R

R

R R R

Statt „CDNs“ verwenden wir „File/Cloud-Gateways“

Die “Labor Daten Cloud”

• Eine Größe für alle Standorte (20 TB Cache vor Ort) • Alte Daten in HCP Cloud, sichtbar für App und Benutzer • Zentrales Management, Sicheres Networking

• Kein Silos, Daten replizieren weltweit • Bessere Antwortzeiten für alle Teams • Externe Forscher nutzen HCP Anywhere („Dropbox“)

0,025/$ per GB

Kostenreduktion um 90%

Unsere In-House Cloud ist billiger als Amazon

Monatliche Kosten:

MS Azure Amazon S3

Public Cloud als 3. Tier

NFS (SAM-FS) Google CP

Lab Data Store (Open)

Store (Encrypted)

In-House Cloud (0-5 Jahre) Public Cloud (>5 Jahre)

500 TB

Lernen von Amazon & Ebay:

Metadaten als Schlüssel des Erfolgs

Car manufacturer needs to keep test data for “self driving”…

• Test-drives on 3 continents with a

dozen cars per model.

• New Sensors & Actors Lane-Assistant, Break-Assistant, Future: Self-Driving

What’s the problem?

• Data (1M km) to be kept for European and American regulators

• Test-Data is Content • Front Camera • Sensor-Logs • Handwritten Notes

• Needs to be available

• Testing department, • Engineering • Shared with suppliers

Big Data / Intelligent Objects

System Metadata Filename: NZ219983.JPG Created: January 4, 2012

Last modified: January 4, 2012

File + Metadata = Object

Custom Metadata

System Metadata

File

Enable apps and users to store their unique metadata separately from one another

File Class = Image

Custom Metadata Annotation 2 Subject: Sensor Debug Department: Engineering Assigned to: Herbert Michel Severity: Medium IncidentID: 547968840

Custom Metadata Annotation 1 Subject: Sensor Failure Vehicle ID: A5-36287 Department: Testing IncidentID: 547968840

Example: Annotating a Video file…

<Sensor>

<SensorID>H93-8K</SensorID>

<SensorType>FrontCamera</SensorType>

<DataFormat>MPEG4</DataFormat>

<VidResolutionH>1920</VidResolutionH>

<VidResolutionV>1080</VidResolutionV>

<VidColorBits>24</VidColorBits>

<VidFramesSec>60</VidFrameSec>

<EndTime>UTC013:06:23</EndTime>

...

</Sensor>

Example: Annotating a Video file…

<Roadtest> <TestID>34973-8K</CarType> <TestOwner>Rai Kavany</TestOwner> <TestType>SensorTrial</CarType> <CarType>8R</CarType> <CarModel>B8</CarModel> <StartDate>27/03/2005</StartDate> <StartTime>UTC09:15:43</StartTime> <EndDate>27/03/2005</EndDate> <EndTime>UTC013:06:23</EndTime> <driverName>Tom Brook</driverName> <driverEmpID>P35995</driverEmpIDe> <StartGPSLat>52.518611</StartGPSLat> <StartGPSLon>13.376111</StartGPSLon> <EndGPSLat>52.518611</EndGPSLat> <EndGPSLon>13.376111</EndGPSLon> <Country>Sweden</Country> </Roadtest>

Example: Annotating a Video file…

<Incident>

<IncidentID>34973-8K-4563</IncidentID>

<IncReported>Auto</IncReported>

<IncType>SignalLoss</IncType>

<IncSeverity>Medium</IncType>

<IncDebugDate>Yes</IncDebugData>

<IncStartDate>27/03/2005</IncStartDate>

<IncStartTime>UTC09:15:43</IncStartTime>

<IncEndDate>27/03/2005</IncEndDate>

<IncEndTime>UTC013:06:23</IncEndTime>

...

</Incident>

Perspective (View Trips,

Drivers, Cars, Sensors)

Criteria e.g. Trip Date, Sensor Type, Driver Name

See filtered Documents,

Videos, Sensor Data

Mobilgerät

Lernen von Amazon: Von überall auf Dateien zugreifen…

Desktop Browser

AD Passwort...

Nach Dateien suchen...

Oder Dateien einfach öffnen. (Doppel-Tap)

Nach links schieben für weitere Optionen

Sharing-Modell auswählen • Tage verfügbar • Intern (AD) oder Public • Zugriffscode (2-Faktor)

Email erstellen...

Absenden ... FERTIG!

VPN

Der Zugriff ist immer sicher und geschützt…

Internet (HTTP/S)

Verschlüsselt

Authentifiziert

Regel-gesteuert

US Government National Archives and Records Administration (NARA) – digital Content Depot

Perpetual storage of government records Provide access to electronic records for

agencies & subscribers, No dependence on hardware or software No precedent for a project of this scale Security, monitoring and reporting to protect

& automatically monitor integrity of data Efficient indexing and federated search Appr 400 Million records in Phase 1 Immutable, encrypted, access controlled Quality, reliability and high-availability

National Archives Service, Korea http://www.archives.go.kr/

NARS is Central Records Management office of Korea Govt. Policy making for Records Management in Govt Agencies Manage valuable records of the nation and preserve them for

future generation Good Records Management supports Accountability

Preservation of important records Rights of entitlement for Govt and citizens

Scope Create Records Management Infrastructure for 41 Central

Govt Agencies in NARS data center Customized Record Management System (RMS) from

Torpedo

Gyu-Hyup, archives information team manager, NARS “After rigorous testing and benchmarking, we selected the Hitachi Content Archive Platform and were very pleased with its availability and performance. We’ve now implemented the Hitachi Content Archive Platform as WORM devices for our record management system for archiving government documents.”