Casos de uso de EFS en arquitecturas escalables en AWS

Clase 29 de 37 • Curso Práctico de Storage en AWS

Resumen

¿Cuál es el uso de EFS en arquitecturas de escalado automático?

EFS (Elastic File System) es una solución de almacenamiento de archivos en la nube de AWS que se integra efectivo con otras arquitecturas y servicios como el auto-scaling. Aquí te mostramos cómo se aprovecha en contextos de alta demanda.

¿Cómo funciona EFS en combinación con el auto-scaling?

El auto-scaling es una práctica común cuando se tiene un sitio web o aplicación que requiere mantener el rendimiento a medida que aumenta la demanda de usuarios:

Instancias escalables: Permite que la infraestructura escale automáticamente al crear instancias adicionales en respuesta a métricas configurables, como el uso de CPU.
Consistencia de datos: Cuando se generan nuevas instancias para manejar la carga, estas acceden a EFS para asegurarse de que todas tengan acceso a la misma información.
Integración con S3: Para separar la aplicación de los datos estáticos, las instancias también pueden recoger información desde Amazon S3, maximizando el performance y carga conjunta con datos en EFS.

¿Por qué usar EFS y no otro tipo de almacenamiento?

Al elegir EFS sobre soluciones como S3 o Storage Gateway, se tiene en cuenta varios aspectos importantes:

Conexiones múltiples: EFS se puede montar en miles de instancias EC2 simultáneamente, permitiendo acceso conjunto a archivos.
Rendimiento optimizado: Se encuentra ajustado para alto rendimiento con sistemas operativos Linux esenciales en EC2.
Costo: Aunque el costo de EFS es elevado y basado en el sistema de archivos usados, ofrece una relación costo-eficiencia mejor para aplicaciones que requieren alta coherencia de datos entre múltiples usuarios.

¿Cómo podemos visualizar el uso eficaz de EFS?

Para entender precisamente dónde se utilizaría EFS, crear diagramas prácticos es una práctica recomendada:

Casos de uso específicos: Piensa en una aplicación web basada en WordPress escalando sobre instancias con alta concurrencia. Así todas las instancias miraran la misma data desde EFS.
Comparativas: Dibuja diagramas que contrasten esquemas de uso de EFS versus S3 o un Storage Gateway.
Publica y aprende: Compartir diagramas en foros o secciones de comentarios permite recibir sinergia de ideas que favorecen el aprendizaje colaborativo e incrementan el conocimiento sobre el uso de EFS.

Esta práctica no solo nutre el entendimiento técnico sino brinda vías para analizar distintos escenarios y determinar la mejor utilidad de soluciones como EFS frente a necesidades específicas.

Jorge Guerrero Garrido

student•

Qué bueno los casos de uso, deberían de incorporarlo a más cursos.

Ernesto Jose Gabriel Lopez Bravo

student•

A nivel conceptual podria ser un servidor de base de datos que genera unos reportes los cuales se deben almacenar en una directorio, y despues otro servidor con un software de Business Inteligence jala esos reportes de esa ruta para hacer algún análisis.

Franco Fuentes

student•

Usaría como arquitectura, para una página web de moodle(servicio que provee páginas educativas), primero usar Amazon Route 53 para la configuración del dominio de la página, luego de eso con la instancia EC2 aplicaría un Load Balancer para el manejo del tráfico de la página, luego de eso configuraría un CloudFront, después generaría un autoescalling con instancias en diferentes zonas de disponibilidad, conectaría mis instancias con el servicio de base de datos de AWS RDS(elegir la base de datos que sea necesaria) en las instancias autoescaladas le pondría la base de datos master y la imagen de la base de datos en la otra instancia, por último conectaría el grupo de instancias con el autoescalling para el Amazon EFS.

Héctor Daniel Hernández Castillo

student•

Este maestro es una joya.

Oscar Lobo

student•

Un ejemplo es una empresa que provee páginas web como ejemplo wix, esta tiene una base de datos de archivos de imágenes y de plantillas disponibles para el usuario. Cuando un nuevo usuario crea una instancia de una pagina nueva o un sitio nuevo requiere de los archivos básicos para crear su web que están en un EFS. Cada nuevo sitio que se cree consume estos datos pero también puede subir o crear nuevos archivos o imágenes que se puede almacenar en un S3

AFU NANG TSE MUNDACA

student•

no generaría bloqueos de escritura en los archivos por la cantidad de instancias q lo solicitan?

Jair Israel Avilés Eusebio

student•

Los casos de uso seria para cargas asociadas a proceso de ML o provision de contenido a traves de un CMS, como lo describen en este video.

Tony Gael

student•

Características a tener en cuenta a nivel de EFS.

Mario Alexander Vargas Celis

student•

📂 Casos de Uso de Amazon EFS (Elastic File System)

Amazon EFS es un servicio de almacenamiento de archivos escalable, elástico y altamente disponible, ideal para entornos en los que múltiples instancias de EC2 necesitan acceso simultáneo a los mismos archivos. A continuación, te presento algunos de los casos de uso más comunes:

🎯 1️⃣ Aplicaciones Web y CMS

Caso: Plataformas como WordPress, Joomla o Drupal requieren acceso compartido a archivos, ya que varias instancias pueden estar detrás de un balanceador de carga.

Beneficio: ✅ Almacenamiento centralizado accesible por múltiples servidores. ✅ Facilita la escalabilidad horizontal de aplicaciones web. ✅ Sin necesidad de configurar servidores de archivos manualmente.

🔹 Ejemplo: Un sitio web con alta concurrencia que usa múltiples instancias EC2 con Auto Scaling para manejar picos de tráfico.

📊 2️⃣ Análisis de Datos y Big Data

Caso: Procesamiento de grandes volúmenes de datos con herramientas como Apache Spark, Hadoop y Amazon SageMaker, que requieren acceso rápido y compartido a archivos.

Beneficio: ✅ Soporte para cargas de trabajo intensivas en E/S. ✅ Escalabilidad automática sin intervención manual. ✅ Compatible con AWS DataSync para mover datos entre sistemas locales y la nube.

🔹 Ejemplo: Un equipo de ciencia de datos que necesita acceder a archivos de entrada y salida de modelos de Machine Learning.

🎬 3️⃣ Procesamiento y Edición de Medios

Caso: Empresas de producción audiovisual que trabajan con archivos pesados (videos, imágenes en alta resolución, archivos CAD) en múltiples estaciones de trabajo.

Beneficio: ✅ Permite edición colaborativa en tiempo real. ✅ Alta disponibilidad y escalabilidad. ✅ Acceso desde múltiples instancias en diferentes zonas de disponibilidad.

🔹 Ejemplo: Un estudio de animación renderizando escenas en 3D con múltiples nodos de cómputo en EC2.

📦 4️⃣ DevOps y Entornos de Desarrollo/Pruebas

Caso: Equipos de desarrollo que necesitan acceso compartido a archivos de código fuente, compilaciones y artefactos.

Beneficio: ✅ Facilita la integración y despliegue continuo (CI/CD). ✅ Almacena configuraciones y entornos de desarrollo. ✅ Compatible con herramientas como Jenkins, Git y Terraform.

🔹 Ejemplo: Un equipo de desarrollo con múltiples servidores de prueba y entornos de staging que acceden a los mismos archivos.

📁 5️⃣ Sistemas de Archivos Compartidos Empresariales

Caso: Empresas que necesitan un sistema de archivos centralizado para acceder a documentos, bases de datos y archivos internos.

Beneficio: ✅ Accesible desde múltiples oficinas y empleados remotos. ✅ Seguridad integrada con IAM y cifrado KMS. ✅ Integración con AWS Direct Connect y VPN para acceso híbrido.

🔹 Ejemplo: Una empresa multinacional que necesita compartir archivos financieros y reportes entre distintas sucursales.

🎮 6️⃣ Videojuegos y Simulación

Caso: Juegos en línea o simulaciones requieren un sistema de archivos rápido y escalable para almacenar estados de juego y perfiles de usuario.

Beneficio: ✅ Baja latencia para acceso a datos en tiempo real. ✅ Escalabilidad para miles/millones de jugadores. ✅ Integración con servidores de juegos en EC2 o ECS.

🔹 Ejemplo: Un juego multijugador en la nube donde cada servidor EC2 accede a configuraciones compartidas.

🛡 7️⃣ Backup y Almacenamiento a Largo Plazo

Caso: Empresas que necesitan respaldar datos empresariales en un almacenamiento accesible y con redundancia.

Beneficio: ✅ Compatible con AWS Backup para automatizar copias de seguridad. ✅ Alternativa más rápida que Amazon S3 para ciertos casos. ✅ Integración con EFS Lifecycle Management para optimizar costos.

🔹 Ejemplo: Un banco almacenando registros de transacciones con acceso frecuente para auditorías.

🔥 Conclusión

Amazon EFS es una solución potente y flexible para almacenamiento de archivos en la nube. Su capacidad de escalar automáticamente, soportar múltiples instancias EC2 y ofrecer acceso compartido lo hace ideal para aplicaciones web, análisis de datos, desarrollo, edición multimedia y más.

Bryan Castano

student•

WOwww que Genial esta Clase, Esta toda una Arquitectura Real de Nube AutoEscalable, Fantastico.

john ct

student•

pa resulmir>util el caso de util ---importante palabra autoscaling. Amazon Elastic File System (Amazon EFS) provides a simple, scalable, fully managed elastic NFS file system for use with AWS Cloud services and on-premises resources. It is built to scale on demand to petabytes without disrupting applications, growing and shrinking automatically as you add and remove files, eliminating the need to provision and manage capacity to accommodate growth.

Tony Gael

student•

Reto EFS a repasar y resolver.

Juan David Cajamarca Acuña

student•

En mi caso, utilizaría AWS EFS para conectarlo a los servidores de un grupo de autoscaling. De esta manera, cuando se ejecute la integración continua, no sólo se efectuarán los cambios sobre la instancia principal, sino en todas.

Usuario anónimo

user•

entendido :)

Jose Suarez

student•

Se podría usar EFS con web sites desplegados en docker?

Jair Israel Avilés Eusebio

student•

Si es posible habilitar la escritura a EFS desde servicios como ECS o EKS, aunque tomando en cuenta buenas practicas de seguridad, considera como se conectarian ambos servicios a traves de los servicios de redes y la configuracion de grupos de seguridad.