Ai2 ha lanzado la plataforma OlmoEarth, un sistema de infraestructura diseñado para llevar los modelos base de observación terrestre desde el ajuste fino hasta la inferencia a gran escala. La plataforma aborda los desafíos de ingeniería del procesamiento de terabytes de datos satelitales multimodales entre múltiples proveedores y resoluciones.
- La capa de ejecución divide los trabajos en tres etapas específicas de hardware: adquisición de datos basada en CPU, inferencia basada en GPU y postprocesamiento basado en CPU.
- Un mapa de riesgo de incendios forestales a escala continental para América del Norte utilizó 19.600 CPUs y 994 GPUs en paralelo, logrando una aceleración de 155× frente al cómputo secuencial.
- El sistema mantiene su propio índice de metadatos para evitar sobrecargar las APIs STAC externas, utilizando lecturas por ventana contra formatos optimizados para la nube como COG o Zarr.
- La inferencia en áreas a escala continental toma aproximadamente un día con un costo de fracciones de centavo por kilómetro cuadrado.
La plataforma permite a organizaciones sin grandes equipos de ingeniería monitorear cambios ambientales como la deforestación y el riesgo de incendios forestales, gestionando todo el ciclo de vida de la preparación de datos, la ejecución del modelo y la unión de salidas.