Ai2 выпустила OlmoEarth v1.3 с эмбеддингами всей планеты и Explorer без регистрации
Ai2 выложила OlmoEarth v1.3: модель сжимает спутниковые снимки в эмбеддинги, готовые векторы на всю планету лежат в открытом доступе, а браузерный Explorer строит карты без аккаунта.
Ai2 выпустила OlmoEarth v1.3 — модель, которая превращает спутниковые снимки в готовые числовые признаки, эмбеддинги. За год радарных и мультиспектральных наблюдений она выдаёт один вектор из 128 чисел на каждый пиксель Земли размером 10 метров; первые 64 измерения работают и сами по себе, как компактная версия. Готовые эмбеддинги за 2023–2025 годы на всю планету и за 2017–2022 годы на отдельные страны Ai2 выложила на Source Cooperative.
Раньше OlmoEarth применяли через дообучение в OlmoEarth Studio: под каждую задачу нужно было обучать модель, скачивать снимки и держать GPU. Эмбеддинги снимают эту нагрузку. Достаточно добавить небольшой классификатор поверх готовых векторов и запустить его локально. Ai2 приводит примеры таких задач: классификация культур мелких фермеров в Кении, поиск кирпичных печей к западу от Дакки, оценка ущерба от пожаров в Индонезии и отслеживание золотодобычи в перуанской Амазонии.
Второй инструмент — OlmoEarth Embeddings Explorer, браузерная карта планеты, собранная из самих эмбеддингов. В ней можно листать годы, включать исходные снимки Sentinel-2 для проверки, искать места, похожие на выбранную точку, и обучать небольшой классификатор по нескольким размеченным точкам. Аккаунт не нужен, результат выгружается в GeoTIFF, а первый проход занимает секунды вместо часов дообучения.
Ai2 сравнила эмбеддинги с AlphaEarth Foundations и Tessera v2 на 27 тестах по шести континентам. Версия на 128 чисел показала лучший результат в 20 тестах из 27 и заняла первое место в общем зачёте, вдвое более компактная версия на 64 числа — в 18 из 27. Частью работы стал новый бенчмарк PLANTEUR для классификации культур в тропическом земледелии.
Обучение v1.3 обошлось дешевле прошлых версий: 53% вычислительного времени от v1.2 и 18% от v1, выбросы — 50% и 22% от них соответственно. Архив эмбеддингов занимает около 150 ТБ на год и покрывает сушу и прибрежные воды, а к каждому тайлу приложены таблицы происхождения со ссылками на исходные сцены Sentinel-1, Sentinel-2 и Landsat. Веса модели, данные и код предобучения открыты по лицензии OlmoEarth Artifact License.