Два набора данных для моделей погоды и климата

13 ноября Google DeepMind объявила об открытии SatWeave и PARDIG — наборов данных для исследователей и разработчиков приложений в области погоды, гидрологии и климата. Компания использовала их при создании модели WeatherNext 3: SatWeave даёт ей спутниковую картину развивающихся облаков и штормов, а PARDIG применялся для обучения прогнозированию осадков.

Для обоих наборов доступны текущие потоки и исторические архивы. Компания рассчитывает, что данные пригодятся не только для прогнозов погоды, но и для изучения других задач, в том числе мониторинга засух и наводнений.

SatWeave обновляет глобальную мозаику каждый час

SatWeave объединяет спутниковые изображения GOES-East и GOES-West, Meteosat 0 и Meteosat Indian Ocean, а также Himawari. По описанию Google DeepMind, набор охватывает 17 видимых, водяных паровых и инфракрасных каналов. Свести наблюдения в единую карту сложно из-за различий в проекциях, форматах, датчиках и расписаниях съёмки.

Мозаика обновляется раз в час, а её исторический архив охватывает более десяти лет. Google DeepMind отмечает, что это позволяет WeatherNext 3 получать новые данные чаще, чем модели, которые используют анализы с обновлением раз в шесть часов. Компания также предлагает изучить применение SatWeave для прогнозирования выработки солнечной энергии и мониторинга лесных пожаров.

PARDIG оценивает осадки с разрешением около 10 километров

PARDIG (Precipitation AI Reanalysis: Densely Inferred GPM) — созданный с помощью ИИ глобальный набор данных об осадках. Он обучен на разреженных наблюдениях бортового радара обсерватории NASA GPM Core Observatory. В качестве входных данных также используются изображения SatWeave и атмосферные поля ECMWF.

Карты PARDIG имеют временное разрешение 15 минут и пространственное разрешение около 10 километров; средняя задержка обновления составляет примерно пять часов. Google DeepMind сообщает, что сравнила набор с тремя континентальными сетями радаров в США, Европе и Японии, а также более чем с 36 000 метеостанций по всему миру.

По оценке компании, PARDIG превзошёл изученные глобальные аналоги, включая NASA IMERG-Final, по всем анализировавшимся уровням интенсивности осадков. Google DeepMind заявляет, что обнаружение осадков слабой и умеренной интенсивности по часовым данным улучшилось более чем на 30% относительно IMERG-Final. Компания также отмечает эффективность набора при выявлении экстремальных осадков.

Архивы доступны в Google Cloud Storage

Текущие потоки и исторические данные SatWeave и PARDIG опубликованы в Google Cloud Storage. Архив PARDIG охватывает период с 1999 по 2026 год; его исторические каталоги также доступны в Google Earth Engine.

Google DeepMind предлагает исследователям использовать наборы для разработки моделей прогнозирования наводнений, оползней и засух, в особенности в регионах без плотной сети наземных радаров.