Google DeepMind и Google Research 3 сентября выпустили WeatherNext 3 — глобальную модель, которая формирует почасовые прогнозы и сразу же была встроена в Search, приложение Gemini, Maps, API погоды Maps Platform и Earth Engine. Две цифры, на которых держатся публикации — в пять раз точнее, на 60% лучше по дождю, — на странице уже звучат заметно скромнее, чем в заголовках.
«В пять раз точнее» — это утверждение о разрешении
В сообщении говорится о прогнозах, «примерно в пять раз более детализированных, чем у нашей предыдущей модели WeatherNext 2, которая формировала прогнозы на сетке 25 километров с шагом в 6 часов». Здесь «детализированность» означает шаг сетки, а не качество — само по себе разрешение ничего не говорит о том, верен прогноз или нет. Более важное с операционной точки зрения изменение — это переход к новой выдаче прогноза каждый час вместо шестичасовой задержки данных в традиционном численном прогнозировании погоды.
Показатель 5 км относится к двум переменным
Разрешение не является единым, и в сообщении это прямо сказано: температура и влажность — на 5 км, «другие поверхностные переменные — на 10 километрах, а атмосферные переменные, такие как скорость ветра, — на 25 километрах». Таким образом, ветер на высоте остаётся на той же сетке, что и WeatherNext 2. Заголовки о «почасовых прогнозах с разрешением 5 километров» описывают лучший случай так, будто он относится ко всей модели.
Три базовых сравнения, и внимание в публикации выбрано только к одному
По осадкам в сообщении приводится «улучшение Continuous Ranked Probability Score (CRPS) до 60% против IMERG, 30% против MRMS и 10% против измерений дождемеров на ранних сроках прогноза». IMERG — это спутниковая оценка осадков; дождемеры — наиболее близкий доступный аналог истины на земле, и именно по этому показателю прирост самый маленький — в шесть раз меньше, чем по спутниковому продукту. Отдельная цифра «до 50% точнее» — это потребительское утверждение о Search и Maps при планировании на день вперёд, а не бенчмарк модели.
Что не так с поданным фреймингом
Представленная как «самая точная погодная модель Google», эта версия не делает такое заявление от собственного имени. В сообщении рейтинг приписан третьей стороне — «самой продвинутой и точной глобальной погодной модели на сегодняшний день, согласно независимым live-оценкам Brightband» — и нигде не содержит сравнения с операционным прогнозом ECMWF, который обычно и был бы необходимым ориентиром для такого утверждения. Новые переменные, ориентированные на операторов ВИЭ, включая скорость ветра на высоте 100 м, высокодетализированную облачность и солнечную радиацию, — это и есть содержательное дополнение.