violin technologický partner fujitsu bleskově zrychlete ...€¦ · mongodb hbase database v2.0...

21
Copyright 2011 FUJITSU Violin Technologický partner Fujitsu Bleskově zrychlete váš business Martin Káňa Storage World

Upload: others

Post on 20-Jun-2020

14 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

Copyright 2011 FUJITSU

Violin – Technologický partner Fujitsu

Bleskově zrychlete váš business

Martin Káňa

Storage World

Page 2: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

1 FTS PUBLIC

Violin Memory Company

• Založena v roce 2005, první flashový

produkt uveden v roce 2009

• Nasazení u více než Top 200 zákazníků

• Investor je Toshiba/ Dohoda o

strategických dodávkách & roadmapách

• Celosvětová působnost

– Centrála v Silicon Valley, USA, pobočky v severní

Americe, EMEA a APAC

– Více než 350 zaměstnanců

• srpen 2011 - ocenění ‘Firma roku’ Silicon

Valley

– Předchozí vítězové – Google, Salesforce.com,

YouTube, Twitter, MySQL

Page 3: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

2 FTS PUBLIC

„Business critical“ aplikace v podnikovém segmentu

Virtualizace serverů

Analýza Big Dat Business Critical

Databáze

Virtualizace desktopů

Podnikové aplikace

Page 4: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

3 FTS PUBLIC

Svět se změnil

Všechno je propojeno.

Informace jsou vytvářeny a

a je k nim přistupováno

odevšad a kdekoliv.

Králem jsou metadata.

Je očekáván přístup k datům

v reálném čase.

Cloud

Mobily/

Vlastní zařízení

Virtualizace

Místní

služby

Big Data

Analýzy v reálném

čase

Rozšiřování

internetu

Page 5: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

4 FTS PUBLIC

Problém

Databáze a disková pole jsou

technologicky dekády za daty a

nemohou se vyrovnat s

požadovanými úkoly dnešního

byznysu a potřeb aplikací.

Chybějící SLA Problémy s nasazením

aplikací

Růst nákladů

Ceny SLA jsou vyšší

Sady dat jsou větší

Dotazy jsou složitější

Zdroje dat jsou různorodější

Růst rizika

Page 6: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

5 FTS PUBLIC

Jaké jsou dostupné volby?

Hotová

zařízení ExaData

ExaLogic

ExaLytics

Big Data

Hadoop

Cassandra

MongoDB

HBase

Database V2.0 Vertica

Greenplum

NoSQL

BigTable

Větší HW

Zvýšení počtu

CPU,

škálovatelný CPU

grid

Zvětšování

storage

Jednoúčelové, taktické, riskantní Drahé/

neefektivní

„In Memory“

databáze SAP HANA

SAS

SQLite

Taktické/rozvíjející se technologie

Page 7: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

6 FTS PUBLIC

Standardní dnešní přístup (Velký HW)

Škálování – kupme více serverů

• Desítky až stovky CPU jader čekající na data

• přidání DRAM

Maskování úzkého hrdla u I/O – kupme více disků

• Stovky až tisíce plně nevyužitých disků

• Použijme software a skenování dat k řízení problémů s IOPS

Upgrade – kupme více softwaru

• Cena software je často závislá na počtu jader

• Údržba

Více místa – kupme další budovy?!

• Nárůst spotřeby elektřiny, chlazení a prostoru vyhrazeného pro zpracování

dat v reálném čase

Dis

k. p

ole

S

erv

er

Ap

lika

ce

P

rostř

ed

í

Page 8: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

7 FTS PUBLIC

Řešení problému

Vyměňte staré diskové řešení za nové

s extrémně nízkou & předvídatelnou latencí

Až 10:1 redukce

infrastukturyure cost

50%-70% redukce v

aplikacích cost

Data Sets are Larger

Queries are more complex

Data sources are more varied

10x-50x nárůst možnosti

užití virtuálních

strojů/virtuálních

desktopů Až 10x nárůst v velikosti datového setu

10x-30x nárůst souběžných dotazů

10x-30x nárůsti současných updatů

10x-50x nárůst v počtu

transakcí

Až 80% redukce v oknech

dávkových procesů

Až 90% redukce času běhu

reportů

Ceny SLA jsou vyšší

Sady dat jsou větší

Dotazy jsou složitější

Zdroje dat jsou různorodější

Flashové paměťové pole Violin

Page 9: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

8 FTS PUBLIC

A výsledek nasazení Violinu je… S

tora

ge

S

erv

er

Ap

lika

ce

S

ítě

30% - 70% redukce SW licencí

Méně jader, méně disků a portů pro běh užití licencí

30% - 80% Snížení počtu procesorů

Dramatická redukce “ IO wait state”

50% - 90% Snížení počtu storage

Snížení over-provisioning disků pro řízení úzkého hrdla

60% - 90% redukce spotřeby proudu, chlazení

a prostoru

Racky plné disků a serverů a nejsou déle potřebné pro dosažení

SLA

Silicon datacentre Status - quo

Page 10: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

9 FTS PUBLIC

Typická optimalizace infrasturkury – 250,000 IOPs

Porovnání s tradičním diskovým polem

Diskové

pole Violin

150U Místo v racku 6U

3.55 Racky 0.14

475 HDDs/SSDs 0

261 Kapacita (TB) 32

205,930 Spotřeba

(kW/r) 34,270

88.55 Uhlík (tun/r) 14.74

Příklad typického nasazení

• 5000 virtuálních desktopů

• Konsolidace aplikací

Page 11: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

10 FTS PUBLIC

Flash

Network

Server

Umožnění správného mixu práci počítače, sítě a storage

Vysoce výkonné vícejádrový

servery

Vysoká rychlost Nízká latence

Sítě

Vysoký výkon Nízká latence Flashové pole

Page 12: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

11 FTS PUBLIC

Dodaný výkon

Co brzdí VAŠI

aplikaci? IOPS

Latence Propustnost

Dávková průchodnost

Zrychlení

aplikace

Rozšiřitelnost

aplikace

Page 13: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

12 FTS PUBLIC

Původní

• Izolované aplikace

• Složité a pomalé

• Různorodé platformy

• Složité na správu

Omezení

Akcelerace

• Jednoduché na nasazení

• Nárůst produktivity

• Maximalizace ROI

• Překročení SLA

Nasazení

Konsolidace

• Snížení operačních nákladů

• Zjednodušení

• Vyšší úroveň služeb

• Snížení počtu licencí

Sdílení

Virtualizace

• Nejvyšší úspory nákladů

• Samoobslužnost

• Nárůst pružnosti

• Zjednodušení

Privátní cloud

Aplikační cesta Violinu

Page 14: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

13 FTS PUBLIC

• Big Data

• Funkční aplikace - OLTP / Analýzy / SAS

• Podnikové aplikace - SAP / Oracle

• Přechod na cloud - mobilní BI

• Virtuální desktopy

• Nelimitovaní IO pro vývojáře

Application

Acceleration

• Fyzická konsolidace - 10:1

• Snížení licencí pro správu storage

• Optimalizace serverů – méně serverů

• Úspora OPEX – elektřina, prostor, maintenance

• Snížení licencí na jádro – méně jader pro Oracle

Optimalizace

infrastruktury

Akcelerace

aplikací

Page 15: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

14 FTS PUBLIC

Kde vyhráváme!

Finanční služby & pojištění

Trading

• Front office: algoritmické modelování, zpětné

testování & optimalizace

• Middle office: Sankce, analýza rizik, Ticketing,

dohled nad obchodem

• Back office: Zpracování dohod, uzavíraní

obchodů, & zrychlení dávkových úloh

Odhalování podvodů

Komunikace, média & zábavní průmysl

Komunikace: odhalování podvodů,

účtování, dodávka obsahu, analýzy, lokálně

umístěné služby

Zábava: on-line sázky & gaming

Výroba & Retail

Retail: Loyalty programy, analýzy v reálném

čase, řízení skladů on-line

Výroba: Analýzy, spolupráce pracovních

skupin

Veřejný sektor, Zdravotnictví & Výzkum

Veřejný sektor: výzvědné služby, VDI

Z&V: Zkoumání genů

Energetika & Distribuce

Chytré měření

Logistika

Page 16: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

15 FTS PUBLIC

Paměťové pole Violin

Array

VIMM Configurations Capacity (TB) Useable (TB) after Format

Flash

Type Capacity

(GB) Total

Qty #

Data #

Parity #

Spares Raw

RAID

Protected 50% 65% 78% 84% 87%

V6212 MLC 512 24 16 4 4 12.29 8.19 4.10 5.32 6.39 6.88 7.13

V6232 MLC 512 64 48 12 4 32.77 24.58 12.29 15.97 19.17 20.64 21.38

V6606 SLC 256 24 16 4 4 6.14 4.10 2.05 2.66 3.19 3.44 3.56

V6616 SLC 256 64 48 12 4 16.38 12.29 6.14 7.99 9.58 10.32 10.69

Page 17: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

16 FTS PUBLIC

Flash VIMMs

SLC Flash – 16 TB RAW na 3U

– latence 20 µsec (6616, 4K zápis)

– 162.5K IOPS na užitý TB

– Kapacita systému v zápisu (6616, 10 let)

Integrovaný Flash Controller a Metadata DRAM

VIMM jsou hot-swap a chráněny RAIDem

Akcelerace aplikací

• Analýzy

• Transakční DB

• Vysoce výkonné storage

• DWH

• BI

• Virtualizové storage

• Webový obsah

128GB SLC Flash VIMM

Kapacitní Flash – 32 TB RAW na 3U

– latence 20 µsec (6232, 4K zápis)

– 47K IOPS na užitý TB

– Kapacita systému v zápisu za den (6232, 5 let)

256GB SLC Flash VIMM

Konsolidace infrastruktury

512GB Capacity Flash VIMM

Page 18: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

17 FTS PUBLIC

Violin – Výhoda inovace

Technologická inovace na každé vrstvě od HW po SW

Intelektuální vlastnictví vyústilo ve zásadně unikátní řešení

Důkladná integrace HW a SW

Partnerství s Toshibou

Architektura přepínaných pamětí Violin

VMOS - Violin Memory Operating System optimalizovaný pro flash

vRAID - Flashově optimalizovaný RAID

Toshiba

Flash VIMM

vRAID Group

Violin

Memory Flash

Array

Page 19: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

18 FTS PUBLIC 1

8

Plně redundantní

100% hot swap

Ochrana vRAID

Bez cache

Vícenásobný přístup k serverům

pro failover

Vysoká dostupnost, pružnost a zabudovaný výkon

Gateway (2x)

Fans (x6)

Power Supplies (x2)

VIMMs (x64)

Array Controller (x2)

Network Interface (x4)

Violin 6000 Series Memory Arrays

Power Controller (x2)

Page 20: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

19 FTS PUBLIC

Děkuji.

Page 21: Violin Technologický partner Fujitsu Bleskově zrychlete ...€¦ · MongoDB HBase Database V2.0 Vertica Greenplum NoSQL BigTable Větší HW Zvýšení počtu CPU, škálovatelný

20 FTS PUBLIC