AllenAI выпустила OlmoEarth v1.3 с эмбеддингами всей планеты
AllenAI представила OlmoEarth v1.3 — модель, которая превращает спутниковые наблюдения в компактные векторы-признаки.
AllenAI представила OlmoEarth v1.3 — модель, которая превращает спутниковые наблюдения в компактные векторы-признаки. Она читает годовой ряд радарных снимков Sentinel-1 и мультиспектральных Sentinel-2 и Landsat, а на выходе даёт один 128-мерный вектор на каждый участок размером 10 метров; первые 64 измерения можно использовать как уменьшенную версию. Компания заранее рассчитала такие годовые эмбеддинги для всей Земли и открыла их на Source Cooperative, а также выпустила браузерный Embeddings Explorer, где картами можно пользоваться без регистрации и подготовки. Раньше работать с моделью приходилось через дообучение в OlmoEarth Studio, что требовало GPU и скачивания снимков; теперь достаточно обучить небольшой классификатор поверх готовых признаков, например для карт культур или анализа изменений. Внутри работают vision transformer, Attention Pooler и линейный слой, сжимающий данные до 128 чисел. В 27 тестах на шести континентах 128-мерная версия оказалась лучшей в 20 случаях и первой в общем зачёте, а 64-мерная победила в 18 из 27, обойдя AlphaEarth Foundations и Tessera v2. Модели, техотчёт, данные и код открыты.