S&T Serbia - uprava.vojvodina.gov.rs day/Savremena resenja... · Stalni nedostatak prostora za smeštanje rastu će koli čine podataka Bezbednost i visoka dostupnost uskladištenih

S&T Serbia Savremena rešenja skladištenja i bekapa podataka

www.snt.rs

Bojan Petrovi ć

High Availability Systems Support Engineer

Prezentacija novih informacionih tehnologija

Seminar za lokalnu samoupravu Vojvodine

11.11.2009. Novi Sad

Savremena rešenja skladištenja i bekapa podataka

O čemu pri čaju korisnici?

� Stalni nedostatak prostora za smeštanje rastu će koli čine podataka

� Bezbednost i visoka dostupnost uskladištenih podatak a

� Spor/nemogu ć oporavak podataka

� Nema mogu ćnosti oporavka od katastrofalnog doga ñaja (DR)� Nema mogu ćnosti oporavka od katastrofalnog doga ñaja (DR)

� Velika koli čina podataka arhivskog tipa koja se čuva iz zakonskih razloga

zauzima diskovni prostor i skupe resurse

� Komplikovano administriranje heterogenih IT sistema

Savremene storidž tehnologije



Storidž tehnologije

Vrsta protoka podataka

SANSANStorage Area Storage Area

NetworksNetworks

Fibre ChannelIP (iSCSI, FCIP, iFCP)

NASNASNetworkNetwork--Attached Attached

StorageStorage

IP, Fibre Channel (MPFS)

CASCASContent Addressed Content Addressed

StorageStorage

IP


Tipi čne aplikacije

Vrsta podataka

Potreba za klju čem

Online transaction processing, data warehousing, Enterprise Resource Planning

Block

Deterministicperformance

Software and product development, file server consolidation

File

Multi-protocolsharing

Contentmanagement

Longevity, integrity assurance

Object, fixed content

• Bekap podataka

• Administrativni troškovi

• Nepotrebno dodavanje kapaciteta

• Nelagodna administracija

• Konstantna zamena storidž prostora

• Storidž za jednu upotrebu

Nekonsolidovano okruženje• Previše starog hardvera (mnogo

servera), neki od njih no-name.

• Loša zastita podataka i uopštesigurnosti:nedostatak redundantnosti, razli čitostbekapa...

• Mnogo zauzetog prostora , kablova ,


• Storidž za jednu upotrebu

• Kratak koristan vek ure ñaja

• Pad sistema

(downtime)

• Replikacija

podataka

• Povra ćaj

podataka

• Mobilnost

informacijaFull

1/2Full

1/3Full

3/4Full

Full 1/2Full

TestingTesting

DW loadDW load

TuningTuning

BackupBackupBackupBackupBackupBackupBackupBackupBackupBackup

TestingTesting

TuningTuning

TuningTuning

TestingTesting

• Mnogo zauzetog prostora , kablova , velika potrošnja struje...

• Mnogo razli čitih dobavlja čahardvera, mnogo ugovora o održavanju.

• Nedostatak centralizovanogmonitorisanja i upravljanja.

• Nemogu ćnost ubrzavanja servera i servisa.

• Nemogu ćnost brzog i lakog dodavanja novog hardvera.

� Redukcija troškova nakon standardizacije i konsolidacije

� Poboljšana produktivnost

� Obezbeñena fleksibilnost sistema

� Visoka pouzdanost sistema

� On-the-fly upgrade sistema

�

Konsolidovano okruženje


S&T Storage

� Add/remove serveri

� Poboljšano iskoriš ćenje resursa

� Centralizovana administracija

� Obezbeñena mobilnost informacija

� Iskoriš ćene prednosti softverskih funkcionalnost

� Omogu ćen failover servera

� Podrška klasterima

� Local/remote kopije podataka

� Disaster recovery

Homogenizacija heterogenih sredina

� Primarni storidž (iSCSI, FC, LAN)� HP

� MSA� EVA� XP

� IBM � DS3000� DS4000/5000� DS6000/8000

Storidž ure ñaji namenjeni od entry levela, prekomid-range do enterprise okruženja sa širokim opsegom zahteva aplikacija

� Visoko performantni� Visoko pouzdani� Skalabilni� Energetski efikasni� FC, SATA, iSCSI


� DS6000/8000� EMC

� Clariion AX/CX� Symmetrix

� Sekundarni storidž� EMC Centera

� Pregled i održavanje sistema� Dijagnostika problema� Redovno održavanje sistema� Interventno održavanje� 24x7 održavanje

� Lokalna replikacija podataka� EMC

� SnapView� TimeFinder� SanCopy� OpenReplicator� Replication Manager

� HP� BusinessCopy EVA


� BusinessCopy EVA� IBM

� FlashCopy� VolumeCopy

� Udaljena replikacija podataka (sinhrona i asinhrona)� EMC

� MirrorView� SRDF

� IBM� Enhanced Remote

Mirroring

Primarna lokacija Udaljena lokacija

Sekundarna storidž lokacija

WANNetwork

Primarna storidž lokacija


� HP� MSA

� IBM � DS3000

� EMC� Clariion AX� Clariion AX

� Ureñaji namenjeni “entry” nivou korisnika i zahteva� Pouzdanost� Bezbednost informacija� Visoka raspoloživost podataka� Potreba za kapacitetom


� HP� EVA

� IBM � DS4000/5000

� EMC� Clariion CX� Clariion CX

� Ureñaji namenjeni “mid-range” nivou korisnika i zahteva� Pouzdanost� Bezbednost informacija� Visoka raspoloživost podataka� Potreba za kapacitetom� Performanse i funkcionalnost

Koji su problemi bekapa i povratka podataka?

� Kratak vremenski interval za bekap (backup window)?� Problemi sa mehani čkim ure ñajima?� Problemi sa drajverima, firmverima?� Konstantno podešavate sistem?


� Konstantno podešavate sistem?� Jeste li sigurni da znate gde se nalaze Vaše bekap tr ake?� Da li ste sigurni da je traka sa bekapom čitljiva?� Spor povratak podataka (restore)?

Šta je


Šta je Virtual Tape Library?

Najbrži na čin za poboljšanje sistema za bekap i povratak podataka


Virtual tape library (VTL)Alternativa tradicionalnom bekapu na trakePojavljuje se, deluje i ponaša kao fizički ureñaj za bekap aplikaciju

Visoke performansePovratak podataka je višestruko brži

PouzdanostPodaci na diskovima zaštićeni upotrebom RAID-a

Upravljanje sistemomBrže setovanje i podešavanje sistema

Lak za instalacijuNe zahteva upgrade bekap aplikacije


Ne zahteva upgrade bekap aplikacijeNe zahteva nikakve promene radno-aktivnih procesa

Čuvanje podatakaMogućnost kopiranja podataka na udaljenu lokacijuUpotreba kompresije

DeDuplikacija podatakaSmanjenje troškova storidž rešenja i replikacije podataka

Energetska efikasnostSmanjuje zahteve za energijom i rashladnim ureñajima

Brzo rukovanje operacijama sistemaNema čekanja na mount trakaNema čekanja na load podataka

Uštede u software-uNema troškova na dodatne licence za šerovanje drajvova

Disk Library

Application/backup hostsPovezivanje Disk Library-ja(VTL-a) u sistem


Standard tape library

IP i/ili SAN

Bekap podataka


Da li Vam je potreban bekap podataka?


Da li Vam je potreban brz i pouzdan povratak podataka?

� Hardware� Biblioteke traka

� Quantum� HP� IBM

� Diskovi – backup to disk� Virtuelne biblioteke traka

� Software� EMC

� NetWorker� NetWorker FastStart

� IBM� Tivoli Storage Manager

� HP� Data Protector


� Virtuelne biblioteke traka� EMC� HP

� Data Protector� Symantec

� Backup Exec� NetBackup

� Iron Mountain� Connected Backup

� EMC NetWorker

Pouzdan, sveobuhvatan, inteligentan, lako razumljiv i automatizovan software namenjen zaštiti podataka u heterogenim sredinama.

� NetWorker server, Storage nodovi, klijenti� NetWorker Moduli� DiskBackup option


� Virtual Tape Library option� Autochanger modules� CBRM – Centera Module� Archive option� Cloning option� Staging option� SnapImage� SNMP Module� Dynamic Drive Sharing� NDMP Client Connection

� Pouzdan, sveobuhvatan, inteligentan, lako razumljiv i automatizovan software namenjen zaštiti podataka u heterogenim sredinama.


Bekap konzola

Deduplikacija podataka


Fajl A P P

Duplicirani podaci Duplicirani podaci Duplicirani podaciDuplicirani podaci

4 KB Klizni prozor 4 KB Klizni prozor

Data De-Duplication = 3D


Kompresija: � Vodi ra čuna o podacima, tj. nizovima podataka, koriš ćenjem metode kliznih prozora� Duplikati unutar tog prozora se zamenjuju pokaziva čima ka istovetnim originalima unutar tog

kliznog prozora� Duplikati van kliznog prozora ostaju netaknuti – ne zam enjuju se pokaziva čima� Obično ograni čena na 2:1 ili manji odnos� SW kompresija može da uspori protok podataka

DeDuplikacija:� Deli fajlove, podatke, na jedinstvene blokove, vari jabilne veli čine, i dodeljuje im jedinstvene

potpise (signature)� Snima samo nove, jedinstvene blokove i ažurira listu potpisa

Duplicirani podaci Duplicirani podaci Duplicirani podaciDuplicirani podaci

In-band DeDuplikacija� Podaci se redukuju kako bekap aplikacija dolazi do njih� Drugi naziv je in-line ili neposredna deduplikacija� Rezultujući deduplicirani podaci se smeštaju na diskove� Bekap se završava kada se završi deduplikacija� Najbolja primena kada je kapacitet bekapa najveći

Vrste DeDuplikacije


� Najbolja primena kada je kapacitet bekapa najveći problem

Post process DeDuplikacija� Bekap podaci se prenose na disk� Deduplikacija se izvodi kao dodatni proces nakon

snimanja bekap podataka� Drugi naziv je out-of-band deduplikacija� Prostor na diskovima se oslobaña nakon deduplikacije� Najbolja primena kada su bekap performanse

najveći problem

� Slanje i skladištenje svakog bloka samo jednom

� EMC EMC EMC EMC AvamarAvamarAvamarAvamarbekap skladište

� Deli podataka na varijabilne blokove

OOOO

HHHHHHHH

OOOO

HHHHHHHH

OOOO


Proces DeDuplikacije

Na izvorištu (source) — deduplikacija podataka pre slanja istih kroz mrežu

Na odredištu (destination) — deduplikacija podataka nakon slanja istih kroz mrežu

Deduplicirani podaci

OOOO HHHH

HHHHHHHH

OOOO

HHHHHHHH

OOOO

HHHHHHHH

OOOO

HHHHHHHH

Remote Site 2� Modifikovana instanca

DataCenter� Prva instanca

Remote Site 1� Replicirana instanca


Način rada – EMC Avamar

Samo jedinstveni blokovi podataka su bekapovani

Modifikovani segment podataka

je identifikovan i bekapovan

Podaci su već bekapovani, tako da se na njihovo mesto

smeštaju pokazivači na jedinstvene blokove (20B)

Deduplikacioni server(uskladišteni bekap podaci)

A B C D

AB

CD

E

E

Vrste podatakaVeličina

primarnog bekapa

Koli čina podataka u dnevnom

transportu

Deduplikacioni odnos

Windows fajl sistemi 3,573 GB 6.1 GB 586:1

Mix Windows, Linux, i UNIX fajl sistema 5,097 GB 11.7 GB 436:1


Brojke i slova

NAS fajlovi 3,265 GB 24.2 GB 135:1

Mix 20% baza podataka i 80% fajl sistema (Windows i UNIX)

9,583 GB 80.0 GB 120:1

Mix Linux fajl sistema i baza podataka 7,831 GB 104.2 GB 75:1

Prednosti koje donosi deduplikacija podataka su:

� Smanjenje potreba i efikasnije iskorišćenje skladištnog prostora,

� Duži period čuvanja podataka na primarnom skladištnom prostoru,

� Bolji RTO (Recovery Time Objective – vreme povraćaja podataka),

� Smanjenje potreba za mrežnom infrastrukturom prilikom prenosa podataka (lokal i van).

Implementirana storidž i bekap rešenja



CLARiiON

CX3-20

EMC Clariion HP MSL 6030 Tape Library

� Rešenje centralizovane IT

infrastrukture za SAP

� SAP / Oracle / SuSE SLES

Linux

� ServiceGuard produkcioni

klaster


FCS FCS

StorageTape Library

HP ML370 SERVERS

DEMOTESTRAZVOJ

HP DL560 SERVERSPRODUCTION CLUSTER

� Računarska mreža:

� izgradnja celokupne

pasivne mreže

� izgradnja aktivne mreže

� povezivanje sa

distributivnim centrima

� uvo ñenje IP telefonije

(Cisco Call Manager

Cluster + GSM gateway)


infrastrukture za SAP

� SAP / MS SQL / Windows

� Instalacija bekap softvera:

HP DataProtector

EMC NetWorker


EMC NetWorker

� SAP produkcioni klaster

Dijagram izvedenog stanja� Konsolidovano rešenje za

skladištenje, upravljanje, bekap i arhiviranje podataka

BeonasWindows

VisualSAN, VisualSRMNetWorker Storage Node

BeoExchangeWin2003

NetWorker client

CLARii

ON

CX3-20

Autochanger

CLARiiONCX3-20

Sun StorageStorEdge 3511

Sun StorageStorEdge 3511

Secondary storage

Primary storage

SQL cluster


podatakaBackup-sun

SolarisNetWorker Server

NetWorker clients

Centera

BeoSQLdata1Win2003

NetWorker client

BeoSQLdata2Win2003

NetWorker client

BeoIsa01Win2003

NetWorker client

BeoPrintServerWin2003

NetWorker client

BeoDC01Win2003

NetWorker client

BeoUpdateWin2003

NetWorker client

BeoexcextWin2003

NetWorker client

BeoSAPSun Solaris

BeoSap01 BeoSap03BeoSap02

1 Gb LAN

SAN

FCS FCS

BeoSpareWin2003

NetWorker client

BeoFileServer01Win2003

DiskExtenderNetWorker client


infrastrukture

� SAP / MS SQL / MS Exchange

� Windows / Unix / Linux / Solaris

� Instalacija bekap softvera:

EMC NetWorker

� SAP produkcioni klaster

� Arhiviranje podataka - Centera

� Centralizovan storidž prostor – EMC Symmetix DMX-3

� Povezivanje prvih sistema

- 2 x IBM pSeries za Oracle DB

- Intel bazirani serveri (e-mail i file serveri)

� Povećanje iskoriš ćenosti prostora


� Povećanje iskoriš ćenosti prostora na diskovima (disk utilization)

� Povećanje faktora TB/administrator (TB-per-administrator improvement)

� Povećanje iskoriš ćenosti prostora

� Brži odgovor na zahteve za novim storidž prostorom

� Bolja zaštita kriti čnih podataka

� Povećanje I/O performansi

� Skalabilnost (non-disruptive scalability)

� EMC NetWorker - Telekom Srbija a.d.� Više od 300 klijenata na razli čitim platformama sa par TB bekapa dnevno� VCB bekap virtualnih mašina� Bekap na trake – biblioteke traka na obe lokacije – F C i SCSI drajvovi� EDL bekap – bekap na virtualne biblioteke traka� Kloniranje traka – primarni sajt, sekundarni sajt� Bekap Exchange-a, SQL-a, Oracle-a� Replikacija bekap servera izme ñu primarnog i sekundarnog sajta sa


� Replikacija bekap servera izme ñu primarnog i sekundarnog sajta sa failover opcijom u slu čaju disaster situacije

� EMC NetWorker – Telenor� Više od 200 klijenata na razli čitim platformama sa par TB bekapa dnevno� VCB bekap virtalnih mašina� Bekap na trake – biblioteke traka na primarnoj i sek undarnoj lokaciji� EDL bekap – bekap na virtualne biblioteke traka� Kloniranje traka – primarni sajt, sekundarni sajt� Bekap Exchange-a, SQL-a, Oracle-a, SharePoint-a� Replikacija bekap servera izme ñu primarnog i sekundarnog sajta sa

failover opcijom u slu čaju disaster situacije

� EMC NetWorker – Lukoil Technology Services� Bekap SAP-a, Exchange-a, MS SQL-a� Bekap na trake� Backup2disk option� Stageing� Centera Backup� PowerSnap


� EMC NetWorker – Direktna Trgovina� Bekap SAP-a preko MS SQL-a� Bekap MS SQL-a� Bekap na trake

� EMC NetWorker – Državna Lutrija Srbije� Custom konfiguracija bekap rešenja u custom okruženj u� Pravljenje SnapShot-ova i Clone-ova na storidžu, mou nt-ovanje i direktni

bekap sa bekap servera� Bekap na trake

� Bekap podataka – pregled sistema


� Bekap podataka – kloniranje traka


� Bekap sistem – tok bekap podataka koriš ćenjem disk library-ja

Primarna lokacija


Sekundarna lokacija

WAN

Zašto?• Korisnici žele da unaprede IT infrastrukturu tehnolo gijama koje mogu

brzo i efikasno da odgovori na ubrzane zahteve poslova nja uz beskompromisni zahtev za neprekidnoš ću poslovanja (“business continuity”)

Kako?


• Primenom savremenih tehnologija uz pažljiv dizajn reše nja, ali vode ći računa o odnosu cena/kvalitet

• Izborom partnera od poverenja sa iskustvom i referen cama koje to garantuju

Zašto S&T Serbia?

S&T je dugogodišnji i pouzdan partneru dizajnu, implementaciji i održavanju rešenja bazi ranih

na primeni novih tehnolgija

Prednosti za korisnika koje donosi ekspertiza S&Tstru čnjaka:

� Maksimizovanje povratka korisnikovih investicija u h ardver i softver

� Upravljanje informacijama čija se vrednost menja tokom vremena, tako da se dobije najmanja ukupna cena koštanja

Savremena rešenja bekapa i skladištenja podataka

da se dobije najmanja ukupna cena koštanja

� Obezbeñenje neprekidnosti toka informacija izme ñu korisnikovih, obi čno decentralizovanih, podorganizacija, kao i sa organ izacijama sa kojima sara ñuje

� Minimizovanje rizika gubitka podataka i njihove sigur nosti

� Povećanje brzine i efikasnosti kojom korisnik pristupa sa čuvanim informacijama

� Efikasno upravljanje sve ve ćom kompleksnoš ću i rastom sistema

� 365x24x7 podrška

� Sistem integrator

� Heterogena rešenja korisnika i vendora pretvaramo u

homogena rešenja

� High Availability sistemi i rešenja

� Napredna network/security/


� Napredna network/security/OSS/BSS rešenja

� Business continuity i Disaster recovery

� 24x7 Hardware i Software podrška sistema

� Maksimizacija iskoriš ćenja ve ć postoje ćih resursa

� Inteligentne IT usluge


Prednosti (benefiti) predloženih rešenja:

� Maksimizovanje povratka korisnikovih investicija u h ardver i softver

� Povećana produktivnost sistema i resursa

� Iskoriš ćenost resursa

� Visoka pouzdanost sistema� Visoka pouzdanost sistema

� Visoka dostupnost sistema i podataka

� Performantnost

� Neprekidnost u radu

� Centralizovana i olakšana administracija

� Mobilnost informacija

� Fleksibilnost sistema

� Funkcionalnost sistema

� Redukcija troškova


Najveća benefit S&T rešenja?

Miran san.


Hvala na pažnji!

[email protected]@snt.rsbackup @snt.rs


backup @snt.rs

Documents

S&T Serbia - uprava.vojvodina.gov.rs day/Savremena resenja... · Stalni nedostatak prostora za smeštanje rastu će koli čine podataka Bezbednost i visoka dostupnost uskladištenih