Google и NASA JPL представили MAPL-EMIT, нейросеть для поиска утечек метана из космоса

Google Research совместно с Лабораторией реактивного движения NASA (JPL) описали в статье в журнале PNAS новую систему MAPL-EMIT (Methane Analysis and Plume Localization with EMIT), модель глубокого обучения, которая по спутниковым данным автоматически находит шлейфы метана, оценивает их концентрацию и определяет источник выброса.
Метан, мощный парниковый газ: за 100 лет его потенциал потепления в 30 раз выше, чем у углекислого газа, и на него приходится примерно 25% всего антропогенного потепления с начала индустриальной эпохи. Поскольку метан живёт в атмосфере относительно недолго, снижение его выбросов даёт быстрый эффект для климата, это отражено в Глобальном обязательстве по метану (Global Methane Pledge), которое подписали более 125 стран, взяв курс на сокращение выбросов на 30% к 2030 году.
Данные для модели собирает прибор EMIT (Earth Surface Mineral Dust Source Investigation) на борту Международной космической станции, изначально его разработали для картирования минерального состава пустынь, но его гиперспектральные датчики, фиксирующие сотни диапазонов света в каждом пикселе, позволяют учёным из NASA JPL и научного сообщества «видеть» химический след метана. В отличие от глобальных приборов вроде TROPOMI (широкая полоса обзора около 2600 км, но грубое разрешение около 5,5×3,5 км), EMIT рассчитан на точечные источники: поле обзора 80 км, пространственное разрешение 60 метров и спектральное разрешение 7,4 нм, этого достаточно, чтобы разглядеть утечку на уровне отдельного объекта.
MAPL-EMIT построена на архитектуре vision-трансформера Swin-S и работает по всему изображению целиком, а не попиксельно: модель анализирует не только спектральный сигнал, но и пространственный контекст сцены, что позволяет отличать настоящий шлейф метана, сносимый ветром, от участков земной поверхности со схожей спектральной сигнатурой, частой причины ложных срабатываний у более простых методов. Это же помогает модели распутывать сложные сцены, где выбросы от нескольких соседних объектов сливаются в одно облако: MAPL-EMIT одновременно решает задачи обнаружения шлейфа, оценки его концентрации и локализации источника.
Поскольку размеченного набора реальных утечек метана в глобальном масштабе не существует, авторы создали 3,6 миллиона синтетических шлейфов метана и встроили их в реальные снимки EMIT, используя лагранжевы модели дисперсии частиц, чтобы реалистично воспроизвести турбулентное поведение настоящего газового выброса. Обучение на таких синтетических данных позволило модели научиться находить метан в самых разных атмосферных и географических условиях.
При тестировании на золотом стандарте NASA, наборе данных L2B, по ~1100 гранулам снимков EMIT модель обнаружила 84% шлейфов, размеченных экспертами, и нашла примерно на 50% больше правдоподобных шлейфов, чем содержится в самом эталонном наборе, показав более высокое соотношение сигнал/шум по сравнению с существующими методами на основе согласованных фильтров (matched filter). Модель также успешно закартировала шлейфы на 24 из 25 крупнейших по выбросам полигонов твёрдых отходов (свалок) в мире. Как и у любой чувствительной модели, у MAPL-EMIT остаётся проблема ложных срабатываний, особенно на сложном рельефе, поэтому каждому найденному шлейфу присваивается оценка достоверности (по согласованности спектрального сигнала) и метка «низкая» или «высокая» уверенность, чтобы пользователи сами выбирали баланс между полнотой обнаружения и риском ложных тревог.
Google и NASA JPL открыли результаты работы для научного сообщества: глобальную базу найденных шлейфов метана, на платформе Earth Engine (вместе с приложением для интерактивной визуализации), обученную модель и синтетический набор данных, на Kaggle, библиотеку для инференса, на GitHub. Работа вписывается в более широкую инициативу Google Earth AI по применению ИИ к геопространственным данным. Авторы отмечают, что актуальность подобных инструментов будет расти: NASA готовит к запуску спектрометры нового поколения с кратно большим охватом, в 30, 50 раз шире, чем у нынешних приборов.
Ключевые факты
- Google Research и NASA JPL опубликовали в PNAS модель MAPL-EMIT, трансформер на архитектуре Swin-S, который по гиперспектральным снимкам спутникового прибора EMIT находит, оценивает и локализует шлейфы метана.
- Модель обучена на 3,6 млн синтетических шлейфов метана, встроенных в реальные снимки EMIT с помощью лагранжевых моделей дисперсии газа, реального размеченного набора утечек в таком масштабе не существует.
- На эталонном наборе NASA (L2B, ~1100 гранул EMIT) MAPL-EMIT находит 84% размеченных экспертами шлейфов и примерно на 50% больше правдоподобных шлейфов, чем в самом эталоне; успешно закартировала утечки на 24 из 25 крупнейших свалок мира.
- У модели остаются ложные срабатывания на сложном рельефе, поэтому каждому шлейфу присваивается оценка достоверности и метка уверенности.
- База найденных шлейфов открыта на Earth Engine, обученная модель и синтетические данные, на Kaggle, библиотека инференса, на GitHub; NASA готовит спектрометры нового поколения с охватом в 30, 50 раз шире текущих.
Почему это важно
Метан, второй по значимости парниковый газ после CO2: за 100 лет его потенциал потепления в 30 раз выше, а на него уже приходится около 25% всего антропогенного потепления с начала индустриальной эпохи. Из-за короткого времени жизни в атмосфере снижение выбросов метана даёт быстрый климатический эффект, поэтому свыше 125 стран взяли курс на сокращение выбросов на 30% к 2030 году (Global Methane Pledge). Для этого нужно уметь находить точечные источники утечек, на нефтегазовых объектах, свалках и фермах, в глобальном масштабе, а не выборочно. MAPL-EMIT впервые предлагает для этого автоматизированный ИИ-конвейер поверх уже существующего спутникового прибора, а не отдельную дорогостоящую миссию.
Кому это важно
Инструмент рассчитан на операторов нефтегазовой, коммунальной и сельскохозяйственной инфраструктуры, которым нужно быстро находить утечки на своих объектах; на регуляторов и политиков, отслеживающих выполнение обязательств по Global Methane Pledge; на исследователей климата и НКО, которые ведут независимый мониторинг выбросов. Открытая база на Earth Engine и обученная модель на Kaggle также полезны разработчикам, которые хотят строить собственные инструменты мониторинга поверх данных EMIT.
Как это применить
Google и NASA JPL открыли результаты для практического использования: глобальную базу найденных шлейфов метана на Earth Engine с приложением для интерактивной визуализации, саму обученную модель и набор из 3,6 млн синтетических шлейфов, на Kaggle, а библиотеку для запуска модели на новых снимках, на GitHub. Каждый найденный шлейф в базе снабжён оценкой достоверности и меткой «низкая»/«высокая» уверенность, что позволяет пользователю самому настроить баланс между полнотой обнаружения утечек и числом ложных срабатываний под конкретную задачу, от научного анализа до практического контроля объектов.
Можно ли доверять
Работа прошла рецензирование и опубликована в PNAS, одном из ведущих научных журналов. Модель протестирована против золотого стандарта NASA (набор данных L2B) на ~1100 реальных гранулах снимков EMIT и показала 84% полноты обнаружения экспертно размеченных шлейфов, а также успешно закартировала утечки на 24 из 25 крупнейших свалок мира, независимая проверка на реальных, а не только синтетических данных. При этом сами авторы честно указывают на слабое место модели: ложные срабатывания на сложном рельефе, из-за чего результаты выдаются с оценкой достоверности, а не как безусловный факт.
Риски и подводные камни
Главный ограничитель, ложные срабатывания на сложном ландшафте, которые авторы называют «постоянной проблемой»; для их отсева пользователю приходится вручную фильтровать шлейфы по метке уверенности. Модель обучена преимущественно на синтетических, а не реальных размеченных утечках, при всей физической реалистичности симуляции это остаётся допущением, а не прямым обучением на подтверждённых случаях. Кроме того, покрытие ограничено тем, что видит EMIT с борта МКС: прибор не даёт непрерывного глобального мониторинга, и в источнике не раскрываются ни стоимость создания системы, ни то, какая из 25 крупнейших свалок осталась вне обнаружения.