MASV x Qumulo: Transformación de la ingesta de datos y flujos de trabajo de alto rendimiento

Manejar la ingesta de grandes volúmenes de datos es difícil, pero hacerlo con rapidez y eficacia es otra montaña que escalar. Los profesionales de M&E y Investigadores de IA alike conoce muy bien este problema: ¿Cómo ingerir y mover conjuntos de datos masivos de forma rápida y segura sin encontrar cuellos de botella que acorten el tiempo?

Por eso MASV y Qumulo han unido sus fuerzas: Crear un canal de ingesta y acceso a datos de alto rendimiento. La combinación de las potentes capacidades de transferencia de archivos de MASV con el sistema de archivos nativo de la nube, escalable y de alto rendimiento de Qumulo, proporciona una canalización eficaz para la ingesta y el acceso a terabytes de datos no estructurados.

Veamos cómo funciona la integración, sus ventajas en el mundo real y por qué es una necesidad para los flujos de trabajo relacionados con la producción de medios a gran escala y los proyectos de IA basados en datos.

• MASV x Qumulo: Escala en cualquier lugar, ingiere en cualquier lugar
• Primeros pasos con MASV y Qumulo en AWS
• Funciones clave para los flujos de trabajo de datos modernos
• MASV x Qumulo: Envíalo, Almacénalo, Escálalo

MASV x Qumulo: Escala en cualquier lugar, ingiere en cualquier lugar

Para los profesionales de M&E e IA, los datos no son sólo un subproducto del trabajo: son el trabajo. Tanto si trabajas con películas 8K como con vastos conjuntos de datos de entrenamiento de IA o complejas secuencias de efectos visuales, la capacidad de ingerir y escalar datos sin problemas determina la rapidez con la que puedes producir resultados.

• Los flujos de trabajo on-prem tradicionales tienen dificultades para seguir el ritmo de la escala y la velocidad necesarias para la creación moderna de contenidos y el aprendizaje automático.
• Esto obliga a los equipos a luchar contra la lentitud de las cargas, los cuellos de botella del almacenamiento y la rigidez de la infraestructura, todo ello mientras corren contra el reloj de los plazos inminentes.

MASV y Qumulo CNQ en AWS están redefiniendo los flujos de trabajo en la nube, ofreciendo a los usuarios la posibilidad de ingiere big data desde cualquier lugar con MASV y escala a cualquier lugar con Qumulo CNQ.

Ingesta de grandes volúmenes de datos con MASV

MASV está diseñado para ofrecer sencillez, fiabilidad y velocidad nada más sacarlo de la caja, y puede gestionar con fiabilidad grandes paquetes de archivos de prácticamente cualquier tamaño.

• Para los investigadores de IA, esto significa que se pueden cargar terabytes de datos de entrenamiento sin interrupción, incluso desde redes inestables. MASV garantiza que estos conjuntos de datos se cargan de forma segura y aterrizan exactamente donde tienen que ir.
• Para los profesionales de M&E, significa Los equipos de producción pueden ingerir los archivos originales de la cámara y procesar los dailies en la nube al instante. Un acceso más rápido significa hacer más cosas. Los montadores y los equipos de efectos visuales pueden incluso combinar Multiconnect con la función Archivos crecientes de MASV para empezar a trabajar antes de que salga el último camión del estudio.

Como MASV se basa en el navegador, no requiere instalación ni otros quebraderos de cabeza informáticos: sólo tienes que coger tus archivos y empezar a subirlos. Sus funciones de reanudación automática y reinicio de puntos de control garantizan que las subidas continúen justo donde se quedaron, incluso si se cae tu conexión. Y la tecnología de aceleración de MASV utiliza todo el ancho de banda de Internet que le permitas, sin molestar a otros usuarios de la red.

Los clientes también pueden Multiconnect de MASV enlace de canales en la aplicación de escritorio MASV para mejorar la velocidad y fiabilidad de las transferencias desde prácticamente cualquier lugar de la Tierra.

En lugar de depender de una única conexión de red, Multiconnect enlaza múltiples fuentes de Internet -Ethernet, Wi-Fi e incluso datos móviles- para crear un canal de transferencia de archivos de gran ancho de banda y tolerante a fallos, que permite cargas más rápidas y fiables incluso desde ubicaciones con mala conectividad.

Cimientos en la nube con Qumulo CNQ

Una vez cargados los datos, deben ser accesibles, escalables y eficaces, y aquí es donde Qumulo CNQ en AWS cumple.

A diferencia de las soluciones de almacenamiento tradicionales, que requieren escalado de hardware y planificación manual de la capacidad, Qumulo CNQ está diseñado para escalar dinámicamente con tu carga de trabajo, ya sean miles de lecturas simultáneas de modelos de IA o el streaming de planchas 8K VFX a estaciones de trabajo en la nube en tiempo real.

Por qué Qumulo CNQ está diseñado para flujos de trabajo en la nube:

• Ampliación elástica del almacenamiento: Escala instantáneamente de terabytes a petabytes sin caídas de rendimiento ni migraciones de almacenamiento.
• Sistema de archivos de alto rendimiento: A diferencia del almacenamiento de objetos, Qumulo CNQ proporciona un acceso de baja latencia y alto rendimiento, crucial para el entrenamiento de modelos de IA y el procesamiento multimedia en tiempo real.
• Accesibilidad global: Las estaciones de trabajo de cualquier parte del mundo pueden transmitir, editar y analizar directamente desde Qumulo CNQ, sin necesidad de sincronizar o descargar archivos masivos.
• Gestión automatizada de datos: La organización inteligente en niveles te permite mover datos entre el almacenamiento de alto rendimiento y niveles de archivo S3 a la perfección, optimizando los costes sin sacrificar la accesibilidad.

Los equipos de IA pueden entrenar modelos de aprendizaje profundo sin preocuparse por los límites de almacenamiento gracias a la arquitectura nativa en la nube de Qumulo CNQ. Al mismo tiempo, las productoras de M&E pueden ingerir, editar y distribuir contenidos totalmente en la nube, reduciendo los costes de infraestructura y acelerando la entrega.

MASV x Qumulo: Un flujo de trabajo unificado en la nube

La ingesta ultrarrápida y nativa de la nube de MASV, combinada con el almacenamiento escalable instantáneo de Qumulo CNQ, permite un verdadero flujo de trabajo que da prioridad a la nube:

• Los equipos de IA pueden ingerir continuamente nuevos conjuntos de datos y comenzar inmediatamente el análisis o el entrenamiento.
• Los estudios de efectos visuales pueden escalar dinámicamente las cargas de trabajo de renderizado y composición sin esperar a las lentas transferencias de archivos.
• Los equipos de producción de medios pueden compartir activos sin problemas entre equipos globales, desde el rodaje hasta la entrega final.

Con MASV, tus archivos llegan más rápido. Con Qumulo CNQ, tus datos escalan al instante. Sin cuellos de botella ni pérdidas de tiempo: sólo flujos de trabajo de alto rendimiento, orientados a la nube y diseñados para el futuro.

Primeros pasos con MASV y Qumulo en AWS

Empezar a utilizar MASV y Qumulo es tan fácil como registrarte en MASV, configurar tu cuenta y vincularla a tu almacenamiento CNQ de Qumulo:

Paso 1: Reúne tu información

Antes de empezar, asegúrate de tener preparados los siguientes datos:

• Nombre del cubo Qumulo: La ubicación de almacenamiento en Qumulo donde quieres que se entreguen los archivos. Ver Documentación de Qumulo para obtener instrucciones de configuración.
• ID y secreto de la clave de acceso: Credenciales para autenticarse con Qumulo. Consulta la documentación de Qumulo.
• Dirección del punto final: La dirección de tu clúster o panel de control de Qumulo.
• Ruta del archivo de destino: Directorio dentro del cubo donde deben almacenarse los archivos.

Paso 2: Conectar MASV a Qumulo

1. Iniciar sesión al Aplicación web MASV como Propietario de Equipo o Administrador.
2. Navegue hasta Integraciones en la barra lateral izquierda.
3. Selecciona Integraciones disponibles y elige Qumulo en S3.
4. Rellena los campos del Añadir integración ventana:
   1. Nombre de la conexión: Crea un nombre descriptivo para tu integración.
   2. Cubo: Introduce el nombre del cubo de Qumulo.
   3. ID de la clave de acceso: Pega tu ID de clave de acceso a Qumulo.
   4. Clave secreta de acceso: Pega tu Secreto de Qumulo.
   5. Punto final: Introduce la dirección del cluster de Qumulo.
5. (Opcional) Define configuraciones adicionales:
   1. Directorio de objetivos: Especifica una ruta relativa para la entrega del archivo. Esto puede editarse posteriormente en la Aplicación Web MASV.
   2. Opciones de la carpeta padre: Deja la casilla sin marcar para guardar los archivos utilizando el nombre del paquete como directorio. Marca la casilla para entregar los archivos directamente en el directorio de destino.
6. Haz clic en Conectar para guardar la integración.

Paso 3: Actualizar y probar

• Actualiza la página de integraciones para actualizar y verificar el estado de la conexión.
• Ejecuta una pequeña subida de prueba utilizando MASV para asegurarte de que los archivos aterrizan en el directorio Qumulo designado.

Paso 4: Enlaza tus Portales MASV
Lleva tu flujo de trabajo aún más lejos vinculando esta integración con un portal MASV para la ingesta automatizada de datos:

1. Crea o selecciona un Portal existente en MASV.
2. Activa la integración de Qumulo con el Portal.
3. Comparte el enlace del Portal con tus colaboradores para realizar subidas automáticas directamente al almacenamiento de Qumulo.

Paso 5: ¡Empieza a subir!

• Utiliza tu Portal MASV para arrastrar y soltar archivos (sí, es así de fácil).
• Controla en tiempo real el progreso de la carga y recibe notificaciones una vez entregados los archivos.

Funciones clave para los flujos de trabajo de datos modernos

Profundicemos en lo que hace que esta integración sea crítica para los flujos de trabajo modernos, especialmente para los que aprovechan la infraestructura en la nube:

Ingesta eficiente de datos

Mover datos a escala de petabytes puede parecer como mover montañas: Lento, consume muchos recursos y antes sólo era posible en las novelas de fantasía. MASV elimina este cuello de botella con transferencias de archivos intuitivas y de alta velocidad, garantizando que tus datos lleguen a donde tienen que ir sin retrasos.

Flujos de trabajo de medios optimizados

Para los profesionales de M&E, la velocidad y fiabilidad de MASV + Qumulo permite una colaboración fluida entre equipos. Los montadores pueden acceder a las imágenes en bruto y editarlas al instante, los artistas de efectos visuales pueden empezar a crear y renderizar sin demora, y todos pueden crear e iterar más rápido. En un mundo en el que el tiempo es oro, este tipo de eficiencia es oro.

Almacenamiento escalable y preparado para la IA

Entrenar modelos de IA requiere inmensos conjuntos de datos. La infraestructura escalable de Qumulo garantiza que el almacenamiento en la nube se adapte a tus necesidades, mientras que MASV garantiza que los conjuntos de datos se carguen de forma rápida y fiable. Esto elimina la fricción de los flujos de trabajo con muchos datos, ayudando a los equipos a centrarse en la innovación.

Seguridad y conformidad de nivel empresarial

Las herramientas de seguridad y cumplimiento normativo de nivel empresarial de MASV incluyen encriptación TLS y AES-256 de los datos en vuelo y en reposo. MASV es miembro Gold de la lista de proveedores de la Red de Socios de Confianza (TPN) y cumple las normas SOC 2 e ISO 27001.