Comunicación para Clientes sobre Problemas con el Almacenamiento S3 para Veeam

Estimados clientes,

Queremos informarles sobre una situación que afecta al repositorio EU MAD S3 IN de nuestro almacenamiento S3 para Veeam. A través de nuestra monitorización, detectamos problemas de rendimiento en este repositorio a las 2:00 AM del 08/01/2025, relacionados con la gestión de las peticiones de inmutabilidad, el tamaño medio de los objetos y la gran cantidad de objetos generados por las copias. Este inconveniente se ha hecho evidente al escalar el sistema a cientos de TB, una escala superior a las pruebas realizadas inicialmente, que fueron sobre decenas de TB.

Actualmente, nuestro equipo técnico está trabajando intensamente para solucionar este problema. Tras realizar varias consultas con los fabricantes, hemos decidido implementar una solución alternativa basada en un almacenamiento inmutable por bloques de datos, en lugar de objetos. Esta nueva solución sigue garantizando la inmutabilidad de los datos como la anterior, pero gestionará internamente bloques en lugar de objetos, lo que permitirá un rendimiento y escalabilidad óptimos.

Durante la jornada de hoy, se desplegarán 1 PB de almacenamiento con esta nueva solución para garantizar la continuidad del servicio. En las próximas horas, se proporcionará información adicional sobre el cambio de repositorio que será necesario realizar. Les pedimos su paciencia y colaboración mientras llevamos a cabo este proceso. Durante este tiempo, el repositorio EU MAD S3 IN será puesto en modo mantenimiento.

Además, para estabilizar la situación de los clientes actuales, los nuevos pedidos de almacenamiento serán demorados hasta 48 horas. Esta medida nos permitirá priorizar la estabilidad y el rendimiento de los servicios existentes.

Somos conscientes de que no todos los clientes siguen la política de copias 3-2-1 y que sus copias almacenadas en nuestro sistema son críticas en caso de incidente. Queremos recalcar que, aun con esta situación, EDH garantiza que las copias almacenadas en los repositorios EU MAD permanecen inalteradas y seguras. Seguimos comprometidos con la integridad de los datos de nuestros clientes.

Finalmente, debido al gran volumen de tickets automáticos e incidencias relacionadas con esta situación, los tiempos de respuesta del soporte técnico pueden ser algo superiores a lo habitual. Les aseguramos que estamos trabajando para atender todas las solicitudes lo más rápido posible.

Lamentamos profundamente los inconvenientes que esto pueda causar y agradecemos su comprensión mientras implementamos esta mejora de manera definitiva.

Si tienen alguna pregunta o requieren asistencia adicional, no duden en ponerse en contacto con nuestro equipo de soporte.

Atentamente,

--------------

ACTUALIZACION : 09/01/2025

La incidencia ha quedado resulta, a las 20.00 PM de 08/01/2025. Se ha promocionado 1PB de almacenamiento Inmutable para clientes, con las siglas "EU MAD IN".

Todos los datos guardados en EU MAD S3 IN estaran disponibles hasta el dia 29 de Febrero.

Como todos los clientes conoceis estamos en la transicion hacia la inmutabilidad completa de vuestros datos garantizando otra capa extra mas.

Por ello todos los clientes recibiran un email con instrucciones acerca de EU MAD IN. 

Se recomienda a todos los clientes a rescanear su acceso a Veeam Cloud Connect y clonar las politicas de backup / backup copy hacia el nuevo repositorio EU MAD IN.

Este repositorio ha sido testeado durante la tarde del 08/01/2025 dando un rendimiento correcto para el caso de uso.

Lamentamos profundamente los inconvenientes que esto pueda causar, mejoraremos nuestros procesos de testeo en escala para proximas intervenciones. 

Agradecemos su comprensión mientras implementamos esta mejora de manera definitiva.

Si tienen alguna pregunta o requieren asistencia adicional, no duden en ponerse en contacto con nuestro equipo de soporte.

Atentamente,