almacenamiento para la era cognitiva - ibm...almacenamiento para la era cognitiva albert valls badia...

Almacenamiento para la era Cognitiva

Albert Valls Badia Systems Achitect [email protected]

mailto:[email protected]

mailto:[email protected]

Agenda

• Visión y Estrategia de almacenamiento• Técnicas y Tácticas de reducción de costes en

almacenamiento• Últimos anuncios de almacenamiento

© Copyright IBM Corporation 2016 3

IT Infrastructure tuned for cognitive workloads

Cog

nitiv

e St

rate

gy

Dat

a an

d an

alyt

ics

foun

datio

n

Clo

ud S

ervi

ces

Secu

rity

El almacenamiento como pilar en la era cognitiva y las HyC

El dato no estructurado crece a un ritmo exponencial

© Copyright IBM Corporation 2016

Mas del 90% de los datos actuales se han creado en los dos últimos años.

Source: IDC FutureScape: WorldWide Cloud 2016 Predictions – Mastering the Raw Material of Digital Transformation

El crecimiento del dato amenaza con agotar nuestros recursos

El crecimiento de los datos no estructurados oscila entre un 60-80% cada año, creando una

nueva escala de necesidades de almacenamiento

4


Dos motores de transformación: Flash y Software Defined Storage

Intelligent automation for hybrid cloud

Software defined storage on generic hardware

CAMSS

Software defined storage integrated in applications

Unstructured Data on and off premises,

Object FormatCentralized

Structured Data on premises,

Block Format

Client-Server

Structured Data on premises,

File FormatDistributed

Cloud

Transaction

Integrated disk-based appliances

Software defined storage introduced

Flash acceleration

Almacenamiento antes del 2014

Más allá de 2015

5


Nº 1 a nivel mundial en PBs FLASH instalados en clientes.A9000, V9000, FS900, DS8888

SPECTRUM VIRTUALIZE:Virtualizador de facto del Mercado de almacenamiento

SPECTRUM SCALE:Mejor solución de virtualización para nuevas cargas de trabajo

SPECTRUM ACCELERATE:Solución de gama alta para soluciones hiperconvergentes

Lider del Mercado de almacenamiento por objetos según GartnerCLEVERSAFE!

Nuevas estrategias de protección datos Backup y restore

Liderando un Nuevo paradigma de la protección del dato en entornos de backup y restore.Virtualización y máxima eficiencia.

Transformación del mundo de almacenamiento: SDS & FLASH

Glance

6


Flexibilidad para usar servidores y almacenamiento y servicios cloud de cualquier fabricante

IBM Storwize, XIV, DS8000, FlashSystem y sistemas de cintas

Almacenamiento no IBM, incluyendo servidores commodity and non-IBM clouds

Storage Management

Policy Automation

Analytics & Optimization

Snapshot & Replication

Management

Integration & API Services

Data Backup and Archive

Plano de controlSelf Service

Storage

IBM Spectrum Control IBM Spectrum Protect

Plano de datosAplicaciones tradicionales Aplicaciones de nueva generación

Virtualized SAN Block Global File & ObjectHyperscale Block Active Data Retention

IBM Spectrum ArchiveIBM Spectrum Virtualize IBM Spectrum Accelerate IBM Spectrum Scale

7

Infraestructura y Software Defined – Oferta de almacenamiento de IBM


MicrolatenciaFlashSystem 900

IBM FlashCore™ Technology Optimized

DeepFlash150

DS8888Storwize V5000F

FlashSystem A9000

StorwizeV7000F

FlashSystem V9000

FlashSystem A9000R

Datacenter Virtualizado Enterprise Mid-Range

•Reducción total de datos

•Cargas de trabajo: Cloud, VDI, VMware

Escalabilidad maxima

High End Server

•Enterprise class Servicios heterogeneos, versatilidad.

•Mainframe•Power High END

Big Data

•Gama media, servicios heterogeneos.

•Gran Capacidad•Gran densidad• IAAS / Openstack

•Gama alta, virtualización, reducción de datos, ACT/ACT.

MSPs & High end

SVC

IBM FlashCore™ Technology Optimized

Soluciones IBM All-FlashPosicionamiento de las diferentes soluciones ALL FLASH IBM.

•Reducción total de datos

•Cargas de trabajo: Cloud, cargas mixtas masivas

8


IBM Software Defined Storage FamilySpectrumSuite

A single software license for all your changing software-defined storage needs. Straightforward per-TB pricing for the entire Spectrum Storage suite

SpectrumControl

Analytics-driven data management to reduce management costs by up to 50%

Spectrum Protect Optimized data protection to reduce backup costs by up to 38%

Spectrum Archive

Fast data retention that reduces TCO for active archive data by up to 90%

Spectrum Virtualize Virtualization of mixed environments stores up to 5x more data

SpectrumAccelerate Enterprise storage for cloud deployed in minutes instead of months

SpectrumScale High-performance highly scalable storage for unstructured data

Massively scalable and highly efficient object storage IBM Cloud Object Storage System

9


• Que necesita la siguiente generación de Almacenamiento:• Debe ser Escalable

• Debe ser mas eficiente

• Debe estar disponible Siempre

• Debe ser accesible geográficamente

• Debe proteger la integridad y seguridad del dato

• Almacenamiento tradicional no esta pensado para estas nuevas necesidades– Escalabilidad mas allá del PB

– La protección del dato reside en la replicación del mismo.

o Un HDD de 4 TB Drives “tarda” mas de 10 horas

o RAID reconstruir 20 TB (7,400 - 15,000 rpm) puede tardar días

¿Por qué almacenamiento por Objetos?

10

http://searchsmbstorage.techtarget.com/tip/Five-ways-to-control-RAID-rebuild-times


Como funciona IBM Cloud Object Storage (Cleversafe)

CONTENT TRANSFORMATION

Cleversafe software encrypts, slices and applies Information Dispersal Algorithms otherwise known as erasure coding policies to the data.

Data Ingest

Accesser software

Storage Nodes

Site 1 Site 2 Site 3

Physical Distribution

Slices are distributed to separate disks and industry standard x86 hardware across geographic locations.

Data Retrieval

Storage Nodes

Reliable Retrieval

An operator defined subset of slices is needed to retrieve data bit perfectly in real time.


BENEFITS

The level of resiliency is fully customizable resulting in a massively reliable and efficient way to store data at scale as opposed to RAID and replication techniques.

Accesser software

Slicestor software

Mobile access, upload/download http:// PUT & GET 11


¿Como están usando los clientes IBM Cloud Object Storage?

Cleversafe no esta pensado para• Flujos de trabajo con gran número

de IOPS• Procesos transaccionales• ILM propio

12

¿Como reducir la factura en almacenamiento?


¿Cómo reducir la factura en almacenamiento?§ Menores costes de la tecnología:

– Tecnología Flash más económica.– Discos de alta densidad NL-SAS cada vez mayores.

§ Uso de tecnología estándar:– Entornos hiperconvergentes basado en servidores con discos internos.– Arquitectura con tecnologías abiertas: PCIe, SAS, OpenStack, RESTful APIs…

§ Eficiencia en el uso del almacenamiento:– Thin Provisioning.– Compresión en Tiempo Real.– Deduplicación.– Reclamación de espacio.

§ Analítica del dato:§ Ubicación del dato en el Tier adecuado.§ Uso eficiente de la capacidad Flash.

14


¿Cómo funciona IBM Real Time Compression?

La tarea de actualizar un fichero requiere más I/Os

Los bloques de datos se desplazanImpacto negativo en la deduplicación

No hay noción de la localización del dato, se procesa secuencialmente

La tarea de actualizar un fichero implica las mismas o menos I/Os

Solo se modifican los bloques que cambianMantiene la eficiencia de la deduplicación

Se mantiene la localidad del dato

15


Ahorros esperables con RTC

16


Deduplicación inline

2007

2008

2016

IBM emplea Advanced Single Instance Store (A-SIS) en sus sistemas N-Series

IBM adquiere Diligent e introduce su VTL

ProtecTIER TS7600 con deduplicación de datos en

línea

IBM introduce la deduplicación inline en almacenameinto Flash

con A9000 y lo ofrece en sus soluciones de backup ProtecTIER y Spectrum

Protect (TSM)

17


Y la conjunción de ambas tecnologías

Salvo en entornos virtuales y backups, la compresión es más eficaz ahorrandoespacio que la deduplicación.Fuente: http://community.netapp.com/t5/Tech-OnTap-Articles/Storage-Efficiency-in-Clustered-Data-ONTAP/ta-p/86822

18

http://community.netapp.com/t5/Tech-OnTap-Articles/Storage-Efficiency-in-Clustered-Data-ONTAP/ta-p/86822


No se vayan todavía, aún hay más: Turbocompresión

+

=TurboCompression es una forma única de combinar tecnologías

existentes para construir infraestructuras económicas

19


Vale, pero… ¿sólo se ahorra en base a tecnología?

¿No hay otras formas de proteger mi inversión?

20

© Copyright IBM Corporation 2016 21

IBM Spectrum Storage SuiteUna nueva aproximación al licenciamiento flexible y sin ataduras

• Una sola licencia para adaptarse a la evolución de las necesidades de almacenamiento definido por software.– Desde almacenamiento SAN a las infraestructuras

basadas en servidores ricos en almacenamiento– De acceso bloque al crecientemente utilizado acceso de

ficheros y objetos– Para todos sus datos: cargas tradicionales, big data,

analítica, cargas cognitivas, recuperación y archivado de datos

• Para nuevos clientes es una manera eficiente en costes de iniciar su andadura en el almacenamiento definido por software

• Para clientes que ya están desplegando infraestructuras definidas por software, le aporta una tremenda flexibilidad a la hora de evolucionar su almacenamiento

Control Protect Archive

Virtualize Accelerate Scale


Escenario de evolución desde IT tradicional• Comencemos con 750 TB de almacenamiento SAN tradicional. Con 750 TB de Spectrum Storage Suite,

podríamos, por ejemplo, desplegar Spectrum Control + Virtualize para acceso en modo bloque

SAN Storage

750TB

Storage RichServers200TB

SAN Storage

650TB

850TB

evolución


SAN Storage

600TB


950TB

evolución

• Con el tiempo, el almacenamiento SAN puede reducirse en favor de Servidores ricos en almacenamiento. En ese caso se pueden ajustar las capacidades desplegando Spectrum Control + Accelerate

• Otros casos de uso pueden requerir acceso mediante ficheros / objetos. En ese caso parte del despliegue puede realizarse con Spectrum Scale y emplear parte de la capacidad para protección con Spectrum Protect (TSM) en un Pool deduplicado

22


Almacena cada dato en su ubicación adecuadaAjustando rendimiento , costes y tipo de acceso

• Desafíov Gestión del crecimiento del dato

o Reducción sus costeso Manejando la recepción del dato y el soporte a aplicacioneso Manteniendo los niveles de protección adecuados

IBM Spectrum SuiteIBM Spectrum Suite

Flash Disco Hiperconvergencia Cloud

Bloque Fichero Objeto

23


IBM Cloud Object Storage

ACCESO DIRECTO MEDIANTE API

Aprovechan la simplicidad de los interfaces de programación e independizan a las aplicaciones del almacenamiento sobre el que trabajan

Datos


S3 Compatible API Swift API Simple Object API

ACCESO MEDIANTE SOFTWARE

Para entornos cuyas aplicaciones no están todavía preparadas para emplear almacenamiento de objetos

Capa almacenamiento

Capa de acceso

NAS (CIFS/NFS) Backup/Archivado ColaboraciónAnalytics

Spectrum Scale

24


El portfolio de soluciones IBM Storage System

Soluciones integradas

Sistemas de almacenamientoTier 0 Acceleration FlashSystem

family

Enterprise Storage SystemsXIV

DS8000

Midrange & Entry Storage Systems

Tape and Virtual Tape SystemsTape Library

and Automation

Tape drives for Enterprise and

LTO7

ProtecTIERDeduplication

IBM Elastic Storage Server

IBM Spectrum StorageIBM Spectrum ControlIBM Spectrum ProtectIBM Spectrum ArchiveIBM Spectrum VirtualizeIBM Spectrum AccelerateIBM Spectrum ScaleIBM Cloud Object Storage

VersaStack

Storwize V7000 Unified

Storwize V5000

Storwize V3700

Storwize V7000

FlashSystem V9000A9000/R

25

Últimos anuncios de almacenamiento

IBM Systems

What is IBM Storage announcing on August 23?

• IBM Storwize V7000F and Storwize V5030F• IBM FlashSystem V9000• IBM Storwize V7000 Gen2+• IBM SAN Volume Controller (SVC)• IBM Spectrum Virtualize as software

New IBM all-flash and software-defined solutions to accelerate applications and drive efficiency for on-premises and hybrid cloud

• Transparent Cloud Tiering • Tier 1 SSDs with Easy Tier ( 7 & 15TB)• Model 92F Dense Drawer/Drive Count Increases/Model Conversions

What is IBM Storage announcing on October 27?FlashSystem V9000

• IBM Spectrum Virtualize Version 7.8– Transparent cloud tiering– Support for IBM Security Key Lifecycle Manager– Improved flash drive support

• IBM Spectrum Virtualize family flash enhancements

What is IBM Storage announcing on November 2?

| 27

IBM Systems

Introducing IBM Spectrum Virtualize Transparent Cloud Tiering

Interfacing cloud storage into an existing on-premises storage environment

• Preserves performance of local storage • Preserves agility of deployment of cloud storage• Preserves simplicity of configuration across

many host types • Uses existing SAN configuration skillsAlmost 400 storage systems

from IBM and others

| 28

IBM Systems

IBM Spectrum Virtualize Cloud FlashCopy

Mon Tue Wed

Full and incremental snapshots

• Full and incremental restore from cloud snapshots• Supports volume groups for mutual consistency• Import and export of volumes between systems• Supported cloud providers: IBM Softlayer, Openstack

Swift, Amazon S3

| 29

IBM Systems

IBM Spectrum Scale Cloud Data SharingHybrid cloud persistent storage with native protocols2nd Generation Transparent Cloud Tiering• Federated storage• In/Out Scale In/Out IBM COS• Policy driven replication• Metadata maintained by each

• Eventual consistency• Last update wins • sync granularity set by policy• Scale: File and/or Object, plus NFS, etc. • IBM COS: object protocols

• Still support archive to object/cloud (announced June 2016)• Consistency, but all access via IBM Spectrum Scale

Announce: 11/02

17

IBM Systems

Introducing IBM DeepFlashTM 150Combined with IBM Spectrum Scale Software

| 31

• 3U chassis starting at 128TB up to 512TB • 8 to 64 8TB flash cards

Higher Reliability

• 1.5+ million hours MTBF (mean time between failure)

• Hot-swappable architecture - easy FRU of fans, SAS expander boards, power supplies, flash cards

Higher Density

Game changing performance

Solution with IBM Spectrum Scale

• 150W(idle), 750W(abs -max), typical workload 450W

• 30% to 50% lower power and cooling power requirement of a equivalent HDD array

Lower Energy Consumption

• Up to 2M Raw IOPS • 1ms latency• 12GB/s throughput per enclosure

• Unified data access including, file, object, HDFS and OpenStack

• Scales to exabytes of capacity and hundreds of TB per seconds of throughput under a single name space

• Low overhead encryption• IBM lab services implementation

IBM Systems

IBM DeepFlash™ Elastic Storage Server (Spectrum Scale appliance)

| 32

2 Enclosures, 10U360 TB of usable flash; 20 GB/Sec

Concurrently upgradable to 720 TB in 2017

1 Flash Enclosure, 7U180TB of usable flash; 10 GB/Sec

Concurrently upgradable to 360TB in 2017

8 Times Faster 8 times lower latency compared to HDD version based on SPEC SFS results

DeepFlash 150 JBOF

IBM Spectrum Scale I/O server

DeepFlash 150 JBOF

DeepFlash150 JBOF

IBM Spectrum Scale I/O server

21

IBM Systems

IBM Spectrum Virtualize Family High Density Expansion

• Supports business growth in space constrained data centers with up 3x better drive density than 24-drive 2U enclosures

• New enclosure supports up to 92 drives in only 5U rack space– 920TB with 10TB NL-SAS HDDs– 1380TB with 15TB flash drives

• Both LFF and SFF drives supported (SFF drives in LFF carrier)– Drives not interchangeable with 2U enclosures

• May be intermixed with 2U enclosures in same system• Supported with Storwize V5000 Gen2, Storwize V7000 Gen2/Gen2+, FlashSystem V9000,

SAN Volume Controller (DH8 and SV1), and VersaStack• Requires IBM Spectrum Virtualize V7.8 software• New drives for all enclosures: 10TB NL-SAS HDD, 7TB, 15TB flash

| 33

Estamos a su disposiciónMuchas gracias

almacenamiento para la era cognitiva - ibm...almacenamiento para la era cognitiva albert valls badia...

Documents