Prueba gratis 14 días

Optimización de costos de almacenamiento en AWS: Guía SRE para gp3 y ciclo de vida de S3

Reduzca los costos de almacenamiento en AWS un 35%. Domine la migración a gp3, políticas de ciclo de vida de S3 y limpieza de discos con CostGlass.

Optimización de costos de almacenamiento en AWS: Guía SRE para gp3 y ciclo de vida de S3
Figure 1: Architectural overview of Optimización de costos de almacenamiento en AWS: Guía SRE para gp3 y ciclo de vida de S3.

La migración de volúmenes heredados Elastic Block Store (EBS) gp2 a gp3 y la implementación de transiciones precisas de ciclo de vida en Simple Storage Service (S3) pueden reducir de inmediato los gastos de almacenamiento entre un 20% y un 50%. Sin embargo, dado que los recursos de almacenamiento se acumulan de manera gradual a lo largo de cientos de cuentas de desarrolladores, estas oportunidades con frecuencia se pasan por alto hasta que representan una porción sustancial de la factura de la nube.

Esta guía describe los mecanismos técnicos precisos para optimizar EBS y S3, proporciona pasos concretos de corrección y explica cómo traducir las acciones de ingeniería en un impacto directo sobre el margen bruto para la junta directiva.

El costo real de la inercia del almacenamiento

A diferencia de las instancias de cómputo, que pueden programarse o apagarse, el almacenamiento es persistente. Genera costos las 24 horas del día, los 365 días del año, independientemente de si las máquinas virtuales asociadas están en ejecución o inactivas.

En muchos entornos maduros de AWS, tres antipatrones arquitectónicos principales impulsan el desperdicio de almacenamiento:

  1. Volúmenes gp2 sobredimensionados: Depender de volúmenes heredados gp2 donde las operaciones de entrada/salida por segundo (IOPS) y el rendimiento (throughput) están vinculados artificialmente al tamaño del disco, forzando a los equipos a comprar gigabytes adicionales solo para alcanzar los objetivos de rendimiento.
  2. Volúmenes EBS y snapshots huérfanos: Conservar volúmenes de almacenamiento en bloque después de haber terminado sus instancias host EC2, o mantener snapshots diarios de respaldo indefinidamente sin una política de rotación.
  3. Mala gestión de clases de almacenamiento de S3: Almacenar petabytes de registros históricos, respaldos de bases de datos sin procesar o artefactos analíticos transitorios en S3 Standard de forma permanente, en lugar de moverlos a Glacier o Intelligent-Tiering mediante niveles escalonados.

Al abordar sistemáticamente estas áreas, los ingenieros de plataforma pueden recuperar miles de dólares en gasto desperdiciado cada mes en la nube.


EBS gp2 vs. gp3: Matemáticas de rendimiento y financieras

En 2020, AWS presentó gp3 para desacoplar el rendimiento de almacenamiento de la capacidad. Con gp2, los volúmenes reciben un rendimiento de línea base de 3 IOPS por GB, hasta un máximo de 16,000. Si una aplicación requiere 3,000 IOPS, los ingenieros se ven forzados a aprovisionar un volumen de 1,000 GB, incluso si solo necesitan 50 GB de capacidad real de almacenamiento.

Por el contrario, gp3 ofrece una línea base fija de 3,000 IOPS y 125 MB/s de throughput incluidos en el precio base del almacenamiento, de forma completamente independiente del tamaño del volumen. Es posible aprovisionar un volumen de 10 GB y seguir recibiendo 3,000 IOPS.

Comparación de costos unitarios

Métrica Volumen gp2 (Línea base) Volumen gp3 (Optimizado) Ahorro neto
Costo de almacenamiento por GB-mes $0.10 $0.08 20% de reducción
IOPS de línea base incluidos 3 IOPS por GB (mín. 100, máx. 16k) 3,000 (independientemente del tamaño) Rendimiento gratuito
Throughput de línea base incluido N/A (vinculado al tamaño del volumen) 125 MB/s (independientemente del tamaño) Rendimiento gratuito
Costo para 10 TB (3,000 IOPS) $1,000.00 $800.00 $200.00 (20% ahorrado)
Costo para 100 GB (10,000 IOPS) $1,000.00 (forzado a un tamaño de 3,333 GB) $138.00 ($8.00 almacenamiento + $130.00 IOPS) $862.00 (86.2% ahorrado)

Ejecución de migraciones de gp2 a gp3 en línea

Los volúmenes EBS se pueden modificar en caliente sin desmontar el volumen ni reiniciar la instancia. AWS Elastic Volumes procesa la transición en segundo plano sin tiempo de inactividad. Los SRE pueden ejecutar esta transición mediante la AWS CLI:

aws ec2 modify-volume \
  --volume-id vol-0123456789abcdef0 \
  --volume-type gp3 \
  --iops 3000 \
  --throughput 125

Para ejecutar esta migración de forma segura y a escala, los equipos de plataforma deben utilizar Terraform. Esto garantiza que su infraestructura como código (IaC) permanezca sincronizada con su entorno de nube real, evitando la desviación de configuración:

resource "aws_instance" "app_server" {
  ami           = "ami-0c55b159cbfafe1f0"
  instance_type = "m7g.xlarge"

  root_block_device {
    volume_type           = "gp3"
    volume_size           = 100
    iops                  = 3000
    throughput            = 125
    delete_on_termination = true
  }
}

Ingeniería de ciclo de vida de S3 e Intelligent-Tiering

Amazon S3 resulta engañosamente económico a $0.023 por GB-mes para el nivel Standard. Sin embargo, cuando el almacenamiento escala a cientos de terabytes, las facturas de S3 se convierten en un componente significativo del costo de los bienes vendidos (COGS).

Comprensión de los niveles de almacenamiento de S3

  • S3 Standard ($0.023/GB): Diseñado para datos activos a los que se accede con frecuencia.
  • S3 Standard-IA ($0.0125/GB): Para datos consultados menos de una vez al mes, pero que exigen recuperación en milisegundos. Considere el cargo por recuperación ($0.01 por GB).
  • S3 Glacier Instant Retrieval ($0.004/GB): Ideal para registros médicos o archivos multimedia consultados una o dos veces al año, con recuperación instantánea.
  • S3 Glacier Deep Archive ($0.00099/GB): El nivel de menor costo, diseñado para respaldos de cumplimiento normativo a largo plazo con tiempos de recuperación de 12 horas.

La trampa de las tarifas de transición en S3

Los SRE a menudo configuran políticas de ciclo de vida agresivas para migrar objetos a Glacier sin calcular los costos de transición. AWS aplica un cargo por solicitud de transición por cada 1,000 objetos (entre $0.03 y $0.05 según el nivel de destino).

Si almacena 10 millones de archivos pequeños (cada uno inferior a 100 KB) en un bucket S3, migrarlos a Glacier Deep Archive cuesta $500 solo en llamadas a la API, mientras que el ahorro mensual de almacenamiento podría ser de apenas $5.

Regla práctica: Realice la transición solo para objetos grandes (> 1 MB) hacia niveles fríos, o empaquete los archivos pequeños en archivos comprimidos de mayor tamaño antes de subirlos.

Implementación de S3 Intelligent-Tiering

Para buckets con patrones de acceso impredecibles, S3 Intelligent-Tiering mueve automáticamente los objetos entre niveles de acceso frecuente, poco frecuente y de archivo según el historial de uso. No aplica tarifas por recuperación, solo un pequeño cargo de monitoreo de $0.0025 por cada 1,000 objetos (para objetos mayores a 128 KB).

A continuación se muestra un comando de la AWS CLI para aplicar una configuración de Intelligent-Tiering a un bucket S3 existente:

aws s3api put-bucket-lifecycle-configuration \
  --bucket my-production-data-lake \
  --lifecycle-configuration '{
    "Rules": [
      {
        "ID": "AutoTieringRule",
        "Status": "Enabled",
        "Filter": {
          "Prefix": ""
        },
        "Transitions": [
          {
            "Days": 0,
            "StorageClass": "INTELLIGENT_TIERING"
          }
        ]
      }
    ]
  }'

La trampa de construir frente a comprar en gobernanza de almacenamiento

Para controlar los costos de almacenamiento, muchas organizaciones de ingeniería intentan construir pipelines de automatización internos. Por lo general, esto implica desarrollar scripts en Python que se ejecutan como funciones nocturnas en AWS Lambda para consultar la API de EC2, identificar volúmenes EBS desasociados, localizar snapshots antiguos y enviar alertas a los ingenieros vía Slack.

Este enfoque casero casi siempre fracasa con el tiempo:

  • Sobrecarga de mantenimiento: Los esquemas de la API cambian, los scripts fallan y los SRE dedican horas valiosas de ingeniería a mantener paneles internos en lugar de centrarse en las funciones clave del producto.
  • Fatiga de alertas: Las alertas crudas en Slack que enumeran cientos de discos desasociados son ignoradas por equipos de desarrollo sobrecargados, lo que deja el desperdicio sin resolver.
  • Falta de visibilidad unificada multinube: Si su organización también utiliza Azure Managed Disks o Google Cloud Persistent Disks, los SRE deben programar y mantener scripts complejos e independientes para cada proveedor de nube.

Cómo CostGlass elimina el desperdicio de almacenamiento de forma nativa

En lugar de consumir recursos internos de ingeniería construyendo herramientas de seguimiento frágiles, CostGlass se conecta a sus entornos de AWS, Azure y Google Cloud en cinco minutos mediante roles IAM de solo lectura completamente seguros.

CostGlass identifica y agrupa de inmediato el desperdicio de almacenamiento en toda su infraestructura multinube:

  1. Detección de volúmenes inactivos: Identifica volúmenes EBS desasociados, Azure Managed Disks y GCP Persistent Disks, destacando con precisión cuánto dinero se pierde en almacenamiento huérfano.
  2. Recomendaciones de rightsizing de gp2 a gp3: Examina todos los volúmenes EBS activos, calcula los ahorros potenciales de migrar a gp3 y proporciona los comandos exactos de Terraform o AWS CLI para ejecutar la migración.
  3. Análisis de buckets S3: Visualiza las tendencias de crecimiento del almacenamiento e identifica los buckets idóneos para S3 Intelligent-Tiering o políticas de transición a Glacier.

Además, en el plan Scale ($1,499/mes), ni siquiera necesita escribir el código de corrección usted mismo. CostGlass incluye 8 horas de trabajo dedicado de ingenieros senior de DevOps y SRE cada mes. Nuestros ingenieros redactarán los pull requests de Terraform, configurarán las políticas de ciclo de vida de S3 y limpiarán los volúmenes huérfanos por usted, generando un ROI inmediato sin distraer a su equipo de producto principal.


Flujo de trabajo paso a paso para la corrección del almacenamiento con CostGlass

Para erradicar sistemáticamente el desperdicio de almacenamiento en su organización, siga este flujo de tres pasos utilizando CostGlass:

Paso 1: Aislar el gasto de almacenamiento en Cost Explorer

Inicie sesión en su cuenta de CostGlass y acceda a Cost Explorer. Filtre su registro multinube por Service (por ejemplo, AmazonEC2 y AmazonS3) y agrupe por UsageType o Resource ID. Esto revelará con total precisión los volúmenes y buckets que impulsan sus costos de almacenamiento.

Paso 2: Revisar las recomendaciones de rightsizing

Vaya a la Guía de rightsizing para consultar una lista priorizada de volúmenes inactivos y candidatos a migración de gp2 a gp3. CostGlass calcula el ahorro mensual exacto para cada recurso, considerando las configuraciones de IOPS y throughput para evitar cualquier degradación de rendimiento.

Paso 3: Autorizar la ejecución

Si cuenta con el plan Scale o Enterprise, marque las recomendaciones aprobadas en su panel. Su SRE asignado en CostGlass tomará las tareas, redactará el código de Terraform necesario y coordinará con su equipo para aplicar las actualizaciones de manera segura durante sus ventanas estándar de mantenimiento.


Preguntas frecuentes

¿La migración de gp2 a gp3 provocará tiempo de inactividad en la aplicación?

No. AWS Elastic Volumes le permite modificar el tipo de volumen, el tamaño y los IOPS de los volúmenes EBS activos mientras están conectados a instancias en funcionamiento, sin generar ningún tiempo de inactividad. No obstante, el rendimiento del volumen puede verse ligeramente reducido durante el estado de modificación, por lo que recomendamos realizar las migraciones fuera de las horas pico.

¿Existen escenarios en los que gp2 sea más económico que gp3?

No. A $0.08 por GB-mes, el almacenamiento gp3 es un 20% más económico que gp2 ($0.10 por GB-mes) en términos netos. El único caso atípico surge si aprovisiona niveles extremadamente altos de IOPS (> 3,000) y throughput (> 125 MB/s) en volúmenes sumamente pequeños, donde los costos adicionales de rendimiento de gp3 podrían teóricamente superar el costo base. El motor de recomendaciones de CostGlass detecta automáticamente estos escenarios excepcionales y solo sugiere migraciones que garanticen un ahorro positivo comprobado.

¿Cómo gestiona S3 Intelligent-Tiering el archivo profundo?

S3 Intelligent-Tiering incluye dos niveles de acceso de archivo opcionales: Archive Access (tras 90 días de inactividad) y Deep Archive Access (tras 180 días de inactividad). Una vez activados, los objetos se transfieren automáticamente a estos niveles de costo ultrabajo, igualando las tarifas de Glacier y Glacier Deep Archive, al tiempo que conservan la recuperación automática si los datos vuelven a solicitarse.

¿Listo para dejar de pagar el impuesto del almacenamiento heredado? Descubra cómo automatizar la limpieza de almacenamiento y las migraciones a gp3 consultando nuestro Playbook de ahorro. Para ver cómo se comparan los planes de tarifa plana de CostGlass frente a herramientas basadas en porcentaje de gasto, revise nuestra Comparación de CostGlass vs. CloudZero. Para conocer nuestros precios fijos transparentes a partir de $0, visite los Precios de CostGlass.

Ready to unify your multi-cloud costs?

See your AWS, Azure, GCP, and Kubernetes spend in canonical FOCUS 1.0 in under 15 minutes.

Start 14-day free trial →

Más del blog

Ver todos →