arquitectura en alta disponibilidad para servicio pop/imap...arquitectura en alta disponibilidad...

Arquitectura en alta disponibilidad para servicio

POP/IMAP

ATICA, Universidad de MurciaAngel L. [email protected]

Contenido

●Contextualización●Evolución 2007-2013●Problemas●Arquitectura actual●Conclusiones

ATICA - Universidad de MurciaAngel L. Mateo 3/24

Contextualización

• ≈59900 usuarios– 51443 usuarios “activos”– Alumnos: 43039– PDI: 2595– PAS: 1483– Otros: 12795– Ocupación: 11.5TB


ContextualizaciónOcupación

• 11.5TB de correo real• 9.8TB de ocupación en disco• 13TB de backup mensual

9,2

13

2,52

Disco utilizado

Total 26.5TB

Usuario Backup Otros


Infraestructura 2007

smtp.um.es

pop.um.esimap.um.es

LAN NFS

2x1Gbps1x1Gbps


Infraestructura 2007 (II)

• Hardware– 4 VM Xen– 1 GB RAM– 1 core

• Software– Postfix– courier-imap


2007-2012

• Noviembre 2008: Paso global a IMAP

• Marzo 2009: – 8 VM Xen

– 5 GB RAM

– Separación de servidores: servidores específicos para webmail

• Julio 2009: Migración a dovecot 1.x

• Julio 2012: Migración a dovecot 2.1– 6 VM vmware

• 2 proxies dovecot directors

• 4 backends POP/IMAP

– 32 GB RAM

– 6 core

– Diversas optimizaciones NFS:• Jumboframes

• Datamover específico

– Optimizaciones dovecot:

• Compresión de mensajes

• lazy_expunge


Evolución2008-2012

11/2008

Paso a IMAP

8 VM Xen5GB RAM

Granjas específicas

3/2009

Dovecot 1.x

7/2009

2008

2012


Evolución2012-2013

Dovecot 2.06 VM VmWare (2+4)

32GB RAM6 cores/VM

Jumboframesnordirplus

7/2012

zliblazy_expunge

10/2012

2012

2014

03/2013


Problemas

• Distribución de listas “oficiales”• Copias de seguridad

– Tamaño– Ventana de backup

• Vuelta de vacaciones• “Sensibilidad” en operaciones

cabina NFS


• Resultado:– Marzo 2013– Estudio migración de alumnos a la

nube.

Evolución2012-2013


Arquitectura Julio 2013

pop.um.esimap.um.es

director

popimapclu1.um.es

4Gbps

Fibre Channel

Pacemaker+cman


Plataforma OcupaciónVirtual

OcupaciónReal

RelaciónV/R

Ahorro

NFS* ≈11.5TB ≈10TB 86% 14%

Fibra** ≈1TB ≈400GB 40% 60%

Situación Octubre 2013

*: maildir+zlib

**: mdbox+zlib+SiS


• Migrados 771 usuarios• 1TB de ocupación virtual• 400GB de ocupación real• 2.4TB de backup diario

Usuarios Ocupación Virtual

Ocupación Real Backup

771 ≈1TB ≈400GB 2.4TB

59900 11.5TB ≈4,6TB ≈26TB


Ocupación discov2013

4,28

6,05

2,52

Disco utilizado

Total 12,8TB


4,28

26,29

2,52

Disco utilizado

Total 33TB



ComparativaOcupación disco v2007 vs v2013

Usuario Backup Otros0

2000

4000

6000

8000

10000

12000

14000

Ocupación en disco

Comparativa entre NFS y Fibra

Arquitectura NFS Arquitectura FC

Ocu

pa

ció

n (

GB

)


ComparativaLoad Average v2007 vs v2013


Comparativaiowait v2007 vs v2013


ComparativaUso correo v2007 vs v2013


Conclusiones

Febrero 2013 Octubre 2013

Situación insostenible Rendimiento muy bueno

Preocupación en dirección Ánimos calmados

Problemas serios de almacenamiento Gran ahorro en almacenamiento

Imprescindible paso a nube ???

arquitectura en alta disponibilidad para servicio pop/imap...arquitectura en alta disponibilidad...

Documents