SlideShare una empresa de Scribd logo
1 de 111
Суперкомпьютерные технологии в задачах прогноза погоды и климата Е.Д. Астахова  Гидрометцентр России [email_address]
План   презентации ,[object Object],[object Object],[object Object],[object Object],[object Object]
Что такое прогноз погоды и климата ?
Введение. Основы численного прогноза погоды и моделирования климата ,[object Object],[object Object],[object Object],[object Object]
Модель атмосферы ,[object Object],[object Object],[object Object],[object Object]
Дискретизация Сферические координаты Широтно-долготная сетка По горизонтали По вертикали
Beljaars, 2008 Пространственные и временные масштабы некоторых процессов в атмосфере
В зависимости от разрешения модели  физические процессы описываются явно или параметрически Немецкая метеослужба  DWD   GME   COSMO_EU  COSMO-DE  spatial:  ~150 km  ~30 km   ~10 km   temporal: ~4 min ~1.5 min   ~30 sec ECMWF   T799  T1279   T2047    ~25 km   ~16 km   ~10 km     720  s  450 s   300 s
Основные физические процессы подсеточного масштаба, учитываемые в моделях атмосферы. Микрофизика   облака Сток  Мелкая конвекция ЛЕД ОКЕАН СУША солнечная радиация турбулентность конвекция крупномасштабная конденсация тепловое излучение Земли потоки у поверхности орография гидрологический цикл альбедо поверхности дождь снег снежный покров импульса  влаги  тепла
Модели атмосферы ,[object Object],[object Object],[object Object]
Часы  Дни  Недели  Месяцы  Сезоны  Годы Локальный Региональный Глобальный Сверхкраткосрочный прогноз(0-12ч) Краткосрочный прогноз (12-72ч) Среднесрочный прогноз (72-240ч) Долгосрочный прогноз (30 дней-2 года) Прогноз климата (более 2 лет) Пространственный масштаб Временной масштаб   Расширенный прогноз (10-30 дней) Численное моделирование процессов в атмосфере
Современные тенденции :  бесшовный подход   Единая система моделирования  на масштабах от дней до десятков лет Численный прогноз  погоды Численное моделирование  климата
Почему задача прогноза погоды  и моделирования климата –  задача  Grand Challenge? И что это такое ?
Численное моделирование процессов в атмосфере   –  задача « Grand Challenge » =  фундаментальная проблема, решение которой имеет большое экономическое и научное значение и требует применения высокопроизводительных вычислений ,[object Object],[object Object],ТОЧНЕЕ и БЫСТРЕЕ!
Что влияет на точность численного прогноза погоды ? ,[object Object],[object Object],[object Object],[object Object]
Роль начальных данных  о состоянии атмосферы ( влияние их малых возмущений  на 5-сут прогноз ) Факт Прогноз 1  контрольный Прогноз 2 от  возмущенных начальных данных Прогноз 3 от  возмущенных начальных данных
Роль разрешения модели   Осадки за вторые сутки прогноза, полученные по модели  ECMWF  с разным разрешением
Оправдываемость прогнозов температуры на уровне 2 м на 24 и 36 часов (% случаев с абсолютной ошибкой  < 3  град) по моделям  T85L31  и  T169L31  в Сибири  Верхоянск  Оймякон  Якутск 24 ч  36 ч  24 ч  36ч  24 ч  36 ч
Роль улучшения разрешения и параметризаций процессов подсеточного масштаба.   Осадки Радар TL319 TL959 TL959 Новая схема  конвекции Nakagawa,2005
Временные ограничения для задач прогноза погоды и климата ,[object Object],[object Object],[object Object],[object Object],[object Object]
Строгие временные рамки счета задачи численного прогноза погоды
GDAS GFS anal NAM anal CFS RTOFS SREF NAM AQ GFS HUR RDAS Data processing GENS/NAEFS Использование компьютера для решения  различных прогностических задач в  NCEP
Откуда так много вычислений ? ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]
Суперкомпьютерные системы ведущих метеорологических центров мира 26.39  3472  IBM pSeries eServer pSeries p5 575 1.9 GHz  Environment Canada 2008,  295 66.18  24.06  3520  1280  IBM pSeries Power 575, p6 4.7 GHz, Infiniband  UKMO, UK 2009,   73  и  74 352 1 1 16 1664 1416 SGI Altix 4700  Itanium 2  1.66 GHz, NUMALink   Altix ICE 8200   Xeon E5440 2.83 GHz, Infiniband 4x DDR  Росгидромет, Россия, 2008 ,  12  и 8 93.85  79.41 4992  4224 IBM pSeries Power 575, p6 4.7 GHz, Infiniband  NCEP, USA 2008,  51 200 9 ,  63 156.42  8320  IBM pSeries Power 575, p6 4.7 GHz, Infiniband  ECMWF ,  UK 2009,   25  и 26 R peak, Tflops Число ядер Компьютер Название центра, страна, год установки, место в  Top500  ( Top50 )
Salmond, 2004 Компьютеры, использовавшиеся в английской метеослужбе
Компьютеры в метеорологических центрах в 2009-2014
Улучшение качества численных прогнозов идет параллельно улучшению компьютерных ресурсов
( World Modelling Summit for Climate Prediction , 2008.  WCRP No. 131 . WMO/TD No. 1468 , Jan.2009 )
Проблема  : Программное обеспечение  моделей атмосферы не рассчитано   на десятки тысяч и миллионы процессорных элементов!!! САМ – эксперименты до 100   000 Р Es.
Масштабирование модели Европейского центра среднесрочных прогнозов   с разрешением  T1279L91
Что такое детерминированный и ансамблевый прогноз погоды и как он делается ?
 
Пример прогноза Гидрометцентра России meteoinfo.ru
Пример прогноза Гидрометцентра России meteoinfo.ru
Начальные данные – данные наблюдений
Наземные наблюдательные системы  Синоптические станции Радары Буи
Неравномерное по пространству распределение данных   Синоптические станции Росгидромета
Метеорологические радары
Спутниковые данные
Сырые данные Неравномерны Зашумлены Не пригодны для моделей «Усвоенные» данные Равномерны Гладкие Пригодны для моделей Данные должны быть подготовлены для моделей Система усвоения данных :   замешиваются наблюдения и прогноз
Задача численного детерминированного прогноза погоды ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]
Оперативные глобальные  модели прогноза погоды
Численный прогноз погоды   ,[object Object],[object Object],[object Object],[object Object],[object Object]
[object Object],[object Object],[object Object],Точный  прогноз ? НЕТ!!!
П P ОГНОЗАМ ПОГОДЫ ПРИСУЩА ПРИНЦИПИАЛЬНАЯ НЕОПРЕДЕЛЕННОСТЬ   ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]
П P ОГНОЗАМ ПОГОДЫ ПРИСУЩА ПРИНЦИПИАЛЬНАЯ НЕОПРЕДЕЛЕННОСТЬ   Эволюция ошибок в начальном состоянии атмосферы Заблаговременность  прогноза   Линейный режим Нелинейный режим Детерминированный прогноз от наиболее точно определенного начального состояния Истинная эволюция состояния атмосферы
П P ОГНОЗАМ ПОГОДЫ ПРИСУЩА ПРИНЦИПИАЛЬНАЯ НЕОПРЕДЕЛЕННОСТЬ Хорошо предсказуемая ситуация Плохо предсказуемая ситуация Buizza 2002 Качество прогноза зависит от ситуации   Режим 1: сухо и тепло Режим 2 :  холодно и сыро
Качество прогнозов  падает  с заблаговременностью прогнозов Качество прогнозов  зависит  от ситуации Пользователям нужна оценка качества прогнозов Пользователям нужна вероятность экстремальных явлений Нужен вероятностный прогноз!  Т.е. описание  эволюции функции плотности вероятности состояний атмосферы во времени. Уравнение Лиувилля – долго. АНСАМБЛИ!!!
Простейший ансамбль   –совокупность прогнозов, стартующих со слегка различающихся (возмущенных) начальных данных (ансамбля начальных данных) Ансамбль начальных данных должен : Содержать равновероятные члены Являться репрезентативной выборкой из вероятных состояний атмосферы Включать истинное состояние атмосферы (т.е разброс достаточно велик) Возмущения должны быть  в пределах ошибок анализа Реализация ансамблевого подхода
Неточность данных о состоянии  атмосферы Неточность данных о состоянии  поверхности Земли Неточность модели атмосферы Бридинг Ансамблевые трансформации Сингулярные вектора Системное моделирование Стохастическая физика Мультимодельность Вариации параметризаций Системное моделирование Варьирование характеристик поверхности
Основные ансамблевые системы среднесрочного прогноза   Учет несовершенства модели Возмущение начальных данных Размер Модель Разные параметризации Возмущение данных наблюдений  20 членов 0 . 9 ° *0 . 9 ° , 28 уровней  MSC , Канада Стохастические возмущения Ансамблевые трансформации  + масштабирование 20 членов T 126 L 28  NCEP, США Стохастические возмущения Сингулярные вектора 50  членов T 399 L 62 (1-10 сут)  T 255 L 62  ЕС MWF
[object Object],[object Object],[object Object],Выгоды использования ансамбля
Пример ансамблевого прогноза температуры воздуха в Лондоне (метеограмма)
[object Object],Фабрика погоды прошлого: Ручной анализ Суперкомпьютеры
Развитие моделей численного среднесрочного прогноза  ECMWF  и Гидрометцентра России и соответствующие характеристики компьютеров ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]
Развитие моделей численного среднесрочного прогноза  ECMWF  и Гидрометцентра России и соответствующие характеристики компьютеров ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],2009: ECMWF  2*156  Tflops  ,  2*8320  PEs Гидрометцентр России  11+16 Tflops, 1664+1416 PEs
Квази-оперативные и оперативные  прогностические  модели Гидрометцентра России ФЗИ :  Расчеты  конвективных опасных явлений, видимости, туманов, Экологические блоки, РЭП COSMO-RU7, COSMO-RU14, WRF-ARW, ETA,  MM5 ,  мезомасштабная модель Гидрометцентра России  Участки в пределах Европы и ЕТР Физико-статистическая  интерпретация (ФЗИ):  Расчеты  конвективных опасных явлений   Региональная модель Гидрометцентра России ПЛАВ-2 Ограниченные территории: «Регион» 30-70 км Боковые условия для мезомасштабных моделей Ансамблевый среднесрочный прогноз,  Долгосрочное прогнозирование T85L31, ПЛАВ-2008, T169L31 Глобус, От 60 до 150 км Сопряженные технологии в перспективе Сопряженные технологии Название Территория,  Разрешение
Преемственность систем детерминированного и вероятностного  численного прогнозирования Технология  детерминированного   Прогноза:   T85L31 (150  км ), T169L31  (70 км) , T169L63  (70 км) , T339L31  (45 км) , T679L31  (25 км) Технология  ансамблевого  Прогноза:   T85L31, T169L31 Разработка версий модели Разработка систем построения ансамблей Спектральная модель атмосферы
Метод   спектральных преобразований θ ,   λ , z m, n, z µ, m, z Сеточное   пространство (физика, динамика ) Спектральное пространство (динамика, горизонтальная диффузия ) Пространство  Фурье-образов БПФ Лежандр Пространство Фурье-образов Обратный Лежандр Обратное БПФ
Спектральная модель :   Пространственная декомпозиция области расчетов в  c еточном пространстве
Спектральная модель :   Декомпозиция области расчетов в спектральном пространстве PE1 PE2 PE3 PE4 PE5
T339L31. 24- часовой прогноз. 2х-ядерный  p575   1.5 Ггц
 
Спектральная модель :   На  1 PE  ~100  мин На 16  PEs ~18  мин  (без  SHMEM ~23  мин) На  64 PEs ~ 11  мин   Суточный прогноз должен быть готов за  ~ 20 мин
Конфигурация ансамблевой системы прогноза Началь-ные данные (НД) Возмущенные данные . . . . . . . . . . . . . . . . . . Продукция M P I M P I M P I M P I
  «Спагетти»   Н500  (516, 552 ,  576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 1 день вперед от 11 сентября 2009  12  ВСВ на 12 сентября 2009  12  ВСВ
  «Спагетти»   Н500  (516, 552 ,  576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 2 дня вперед от 11 сентября 2009  12  ВСВ на 13 сентября 2009  12  ВСВ
  «Спагетти»   Н500  (516, 552 ,  576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 3 дня вперед от 11 сентября 2009  12  ВСВ на 14 сентября 2009  12  ВСВ
  «Спагетти»   Н500  (516, 552 ,  576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 4 дня вперед от 11 сентября 2009  12  ВСВ на 15 сентября 2009  12  ВСВ
  «Спагетти»   Н500  (516, 552 ,  576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 5 дней вперед от 11 сентября 2009  12  ВСВ на 16 сентября 2009  12  ВСВ
  «Спагетти»   Н500  (516, 552 ,  576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 6 дней вперед от 11 сентября 2009  12  ВСВ на 17 сентября 2009  12  ВСВ
  «Спагетти»   Н500  (516, 552 ,  576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 7 дней вперед от 11 сентября 2009  12  ВСВ на 18 сентября 2009  12  ВСВ
  «Спагетти»   Н500  (516, 552 ,  576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 8 дней вперед от 11 сентября 2009  12  ВСВ на 19 сентября 2009  12  ВСВ
  «Спагетти»   Н500  (516, 552 ,  576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 10 дней вперед от 11 сентября 2009  12  ВСВ на 21 сентября 2009  12  ВСВ
Пример выходной продукции системы ансамблевого прогноза Прогноз эволюции метеорологической переменной в пункте   Прогноз от 15 мая 2009
«Почтовые марки».   Пример выходной продукции системы ансамблевого прогноза Н500
Среднее по ансамблю (изолинии) и разброс ансамбля (цвет) .  Высота геопотенциальной поверхность 500 гПа.   5-сут прогноз на 1 7/12/2007 12  ВСВ Пример продукции ансамблевой системы Прогноз наименее достоверен в областях с максимальным разбросом
  Вероятности выпадения количества осадков, превышающего заданное пороговое значение   Пример выходной продукции системы ансамблевого прогноза Valid: 17Jul2008/12 Prec > 2 mm/6h Valid: 16Jul2008/12 Prec > 0.1 mm/6h
Полулагранжева модель прогноза погоды ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]
testSLM: Scalability
Время расчета прогноза на 1 сут. на 36 ядрах = 22 мин.
[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],Гидрометеорологический центр Российской Федерации COSMO-RU07 :  область интегрирования и характеристики модели h =  2.8  km 4340 км
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
[object Object]
 
 
Бридинг-метод
Оценки качества среднего по ансамблю прогноза     Среднее по ансамблю лучше для заблаговременностей более 84 час!

Más contenido relacionado

Similar a суперкомпьютерные технологии в задачах прогноза погоды

Кудинов А.П.
Кудинов А.П.Кудинов А.П.
Кудинов А.П.ThinTech
 
Метод микросейсмического мониторинга MicroseismicCSP: примеры использования
Метод микросейсмического мониторинга MicroseismicCSP: примеры использованияМетод микросейсмического мониторинга MicroseismicCSP: примеры использования
Метод микросейсмического мониторинга MicroseismicCSP: примеры использованияwsspsoft
 
Презентация - Мониторинг ионосферы
Презентация - Мониторинг ионосферыПрезентация - Мониторинг ионосферы
Презентация - Мониторинг ионосферыxsat_rre
 
Hpc2009 seminar лыкосов
Hpc2009 seminar лыкосовHpc2009 seminar лыкосов
Hpc2009 seminar лыкосовMichael Karpov
 
программа синтеза и анализа интерференционных покрытий Film manager
программа синтеза и анализа интерференционных покрытий Film managerпрограмма синтеза и анализа интерференционных покрытий Film manager
программа синтеза и анализа интерференционных покрытий Film managerИван Иванов
 
the use of instruments for monitoring microclimate in labor protection
the use of instruments for monitoring microclimate in labor protectionthe use of instruments for monitoring microclimate in labor protection
the use of instruments for monitoring microclimate in labor protectionTKA SCIENTIFIC INSTRUMENTS
 
Алгоритм многокамерного сопровождения человека используя данные от видеокамер...
Алгоритм многокамерного сопровождения человека используя данные от видеокамер...Алгоритм многокамерного сопровождения человека используя данные от видеокамер...
Алгоритм многокамерного сопровождения человека используя данные от видеокамер...Nikolai Ptitsyn
 
Инженерная практика 6-7 (2013)
Инженерная практика 6-7 (2013)Инженерная практика 6-7 (2013)
Инженерная практика 6-7 (2013)ktoropetsky
 
Презентация ИМКЭС СО РАН аспиранта Бекеров А.А.
Презентация ИМКЭС СО РАН аспиранта Бекеров А.А.Презентация ИМКЭС СО РАН аспиранта Бекеров А.А.
Презентация ИМКЭС СО РАН аспиранта Бекеров А.А.Bekerov Artur
 
Final Report Serov-CIAM-2010
Final Report Serov-CIAM-2010Final Report Serov-CIAM-2010
Final Report Serov-CIAM-2010alexser16
 
Дом строится по кирпичику
Дом строится по кирпичикуДом строится по кирпичику
Дом строится по кирпичикуKirrrr123
 
Заботин В.Г. Теплотехнические izmerenija v dvigateljah letateljnih apparatov.pdf
Заботин В.Г. Теплотехнические izmerenija v dvigateljah letateljnih apparatov.pdfЗаботин В.Г. Теплотехнические izmerenija v dvigateljah letateljnih apparatov.pdf
Заботин В.Г. Теплотехнические izmerenija v dvigateljah letateljnih apparatov.pdfTahir Sadikovic
 
Anton Agafonov and Vladislav Myasnikov - An algorithm for traffic flow parame...
Anton Agafonov and Vladislav Myasnikov - An algorithm for traffic flow parame...Anton Agafonov and Vladislav Myasnikov - An algorithm for traffic flow parame...
Anton Agafonov and Vladislav Myasnikov - An algorithm for traffic flow parame...AIST
 
якобовский - введение в параллельное программирование (2)
якобовский - введение в параллельное программирование (2)якобовский - введение в параллельное программирование (2)
якобовский - введение в параллельное программирование (2)Michael Karpov
 
Донской Д. А. - Анализ безопасности реакторов малой мощности на легкой воде
Донской Д. А. - Анализ безопасности реакторов малой мощности на легкой водеДонской Д. А. - Анализ безопасности реакторов малой мощности на легкой воде
Донской Д. А. - Анализ безопасности реакторов малой мощности на легкой водеUkrainian Nuclear Society
 
МЕТОД 3D-КОМПРЕССИИ ДАННЫХ РЕНТГЕНОВСКОЙ КОМПЬЮТЕРНОЙ ТОМОГРАФИИ
МЕТОД 3D-КОМПРЕССИИ ДАННЫХ РЕНТГЕНОВСКОЙ КОМПЬЮТЕРНОЙ ТОМОГРАФИИМЕТОД 3D-КОМПРЕССИИ ДАННЫХ РЕНТГЕНОВСКОЙ КОМПЬЮТЕРНОЙ ТОМОГРАФИИ
МЕТОД 3D-КОМПРЕССИИ ДАННЫХ РЕНТГЕНОВСКОЙ КОМПЬЮТЕРНОЙ ТОМОГРАФИИITMO University
 
164.как избежать отказов в подаче технологической воды в системах энергоснабж...
164.как избежать отказов в подаче технологической воды в системах энергоснабж...164.как избежать отказов в подаче технологической воды в системах энергоснабж...
164.как избежать отказов в подаче технологической воды в системах энергоснабж...ivanov156633595
 

Similar a суперкомпьютерные технологии в задачах прогноза погоды (20)

Кудинов А.П.
Кудинов А.П.Кудинов А.П.
Кудинов А.П.
 
Метод микросейсмического мониторинга MicroseismicCSP: примеры использования
Метод микросейсмического мониторинга MicroseismicCSP: примеры использованияМетод микросейсмического мониторинга MicroseismicCSP: примеры использования
Метод микросейсмического мониторинга MicroseismicCSP: примеры использования
 
Презентация - Мониторинг ионосферы
Презентация - Мониторинг ионосферыПрезентация - Мониторинг ионосферы
Презентация - Мониторинг ионосферы
 
Hpc2009 seminar лыкосов
Hpc2009 seminar лыкосовHpc2009 seminar лыкосов
Hpc2009 seminar лыкосов
 
Presentation
PresentationPresentation
Presentation
 
программа синтеза и анализа интерференционных покрытий Film manager
программа синтеза и анализа интерференционных покрытий Film managerпрограмма синтеза и анализа интерференционных покрытий Film manager
программа синтеза и анализа интерференционных покрытий Film manager
 
LSU1
LSU1LSU1
LSU1
 
the use of instruments for monitoring microclimate in labor protection
the use of instruments for monitoring microclimate in labor protectionthe use of instruments for monitoring microclimate in labor protection
the use of instruments for monitoring microclimate in labor protection
 
Алгоритм многокамерного сопровождения человека используя данные от видеокамер...
Алгоритм многокамерного сопровождения человека используя данные от видеокамер...Алгоритм многокамерного сопровождения человека используя данные от видеокамер...
Алгоритм многокамерного сопровождения человека используя данные от видеокамер...
 
Инженерная практика 6-7 (2013)
Инженерная практика 6-7 (2013)Инженерная практика 6-7 (2013)
Инженерная практика 6-7 (2013)
 
Презентация ИМКЭС СО РАН аспиранта Бекеров А.А.
Презентация ИМКЭС СО РАН аспиранта Бекеров А.А.Презентация ИМКЭС СО РАН аспиранта Бекеров А.А.
Презентация ИМКЭС СО РАН аспиранта Бекеров А.А.
 
Prezent lab
Prezent labPrezent lab
Prezent lab
 
Final Report Serov-CIAM-2010
Final Report Serov-CIAM-2010Final Report Serov-CIAM-2010
Final Report Serov-CIAM-2010
 
Дом строится по кирпичику
Дом строится по кирпичикуДом строится по кирпичику
Дом строится по кирпичику
 
Заботин В.Г. Теплотехнические izmerenija v dvigateljah letateljnih apparatov.pdf
Заботин В.Г. Теплотехнические izmerenija v dvigateljah letateljnih apparatov.pdfЗаботин В.Г. Теплотехнические izmerenija v dvigateljah letateljnih apparatov.pdf
Заботин В.Г. Теплотехнические izmerenija v dvigateljah letateljnih apparatov.pdf
 
Anton Agafonov and Vladislav Myasnikov - An algorithm for traffic flow parame...
Anton Agafonov and Vladislav Myasnikov - An algorithm for traffic flow parame...Anton Agafonov and Vladislav Myasnikov - An algorithm for traffic flow parame...
Anton Agafonov and Vladislav Myasnikov - An algorithm for traffic flow parame...
 
якобовский - введение в параллельное программирование (2)
якобовский - введение в параллельное программирование (2)якобовский - введение в параллельное программирование (2)
якобовский - введение в параллельное программирование (2)
 
Донской Д. А. - Анализ безопасности реакторов малой мощности на легкой воде
Донской Д. А. - Анализ безопасности реакторов малой мощности на легкой водеДонской Д. А. - Анализ безопасности реакторов малой мощности на легкой воде
Донской Д. А. - Анализ безопасности реакторов малой мощности на легкой воде
 
МЕТОД 3D-КОМПРЕССИИ ДАННЫХ РЕНТГЕНОВСКОЙ КОМПЬЮТЕРНОЙ ТОМОГРАФИИ
МЕТОД 3D-КОМПРЕССИИ ДАННЫХ РЕНТГЕНОВСКОЙ КОМПЬЮТЕРНОЙ ТОМОГРАФИИМЕТОД 3D-КОМПРЕССИИ ДАННЫХ РЕНТГЕНОВСКОЙ КОМПЬЮТЕРНОЙ ТОМОГРАФИИ
МЕТОД 3D-КОМПРЕССИИ ДАННЫХ РЕНТГЕНОВСКОЙ КОМПЬЮТЕРНОЙ ТОМОГРАФИИ
 
164.как избежать отказов в подаче технологической воды в системах энергоснабж...
164.как избежать отказов в подаче технологической воды в системах энергоснабж...164.как избежать отказов в подаче технологической воды в системах энергоснабж...
164.как избежать отказов в подаче технологической воды в системах энергоснабж...
 

Más de Michael Karpov

EdCrunch 2018 - Skyeng - EdTech product scaling: How to influence key growth ...
EdCrunch 2018 - Skyeng - EdTech product scaling: How to influence key growth ...EdCrunch 2018 - Skyeng - EdTech product scaling: How to influence key growth ...
EdCrunch 2018 - Skyeng - EdTech product scaling: How to influence key growth ...Michael Karpov
 
Movement to business goals: Data, Team, Users (4C Conference)
Movement to business goals: Data, Team, Users (4C Conference)Movement to business goals: Data, Team, Users (4C Conference)
Movement to business goals: Data, Team, Users (4C Conference)Michael Karpov
 
Save Africa: NASA hackathon 2016
Save Africa: NASA hackathon 2016 Save Africa: NASA hackathon 2016
Save Africa: NASA hackathon 2016 Michael Karpov
 
Из третьего мира - в первый: ошибки в развивающихся продуктах (AgileDays 2014)
Из третьего мира - в первый: ошибки в развивающихся продуктах (AgileDays 2014) Из третьего мира - в первый: ошибки в развивающихся продуктах (AgileDays 2014)
Из третьего мира - в первый: ошибки в развивающихся продуктах (AgileDays 2014) Michael Karpov
 
Один день из жизни менеджера. Тактика: хорошие практики, скрытые опасности и ...
Один день из жизни менеджера. Тактика: хорошие практики, скрытые опасности и ...Один день из жизни менеджера. Тактика: хорошие практики, скрытые опасности и ...
Один день из жизни менеджера. Тактика: хорошие практики, скрытые опасности и ...Michael Karpov
 
Поговорим про ошибки (Sumit)
Поговорим про ошибки (Sumit)Поговорим про ошибки (Sumit)
Поговорим про ошибки (Sumit)Michael Karpov
 
(2niversity) проектная работа tips&tricks
(2niversity) проектная работа   tips&tricks(2niversity) проектная работа   tips&tricks
(2niversity) проектная работа tips&tricksMichael Karpov
 
"Пользователи: сигнал из космоса". CodeFest mini 2012
"Пользователи: сигнал из космоса". CodeFest mini 2012"Пользователи: сигнал из космоса". CodeFest mini 2012
"Пользователи: сигнал из космоса". CodeFest mini 2012Michael Karpov
 
(Analyst days2012) Как мы готовим продукты - вклад аналитиков
(Analyst days2012) Как мы готовим продукты - вклад аналитиков(Analyst days2012) Как мы готовим продукты - вклад аналитиков
(Analyst days2012) Как мы готовим продукты - вклад аналитиковMichael Karpov
 
Как сделать команде приятное - Михаил Карпов (Яндекс)
Как сделать команде приятное - Михаил Карпов (Яндекс)Как сделать команде приятное - Михаил Карпов (Яндекс)
Как сделать команде приятное - Михаил Карпов (Яндекс)Michael Karpov
 
Как мы готовим продукты
Как мы готовим продуктыКак мы готовим продукты
Как мы готовим продуктыMichael Karpov
 
Hpc Visualization with WebGL
Hpc Visualization with WebGLHpc Visualization with WebGL
Hpc Visualization with WebGLMichael Karpov
 
Hpc Visualization with X3D (Michail Karpov)
Hpc Visualization with X3D (Michail Karpov)Hpc Visualization with X3D (Michail Karpov)
Hpc Visualization with X3D (Michail Karpov)Michael Karpov
 
сбор требований с помощью Innovation games
сбор требований с помощью Innovation gamesсбор требований с помощью Innovation games
сбор требований с помощью Innovation gamesMichael Karpov
 
Зачем нам Это? или Как продать agile команде
Зачем нам Это? или Как продать agile командеЗачем нам Это? или Как продать agile команде
Зачем нам Это? или Как продать agile командеMichael Karpov
 
"Зачем нам Это?" или как продать Agile команде
"Зачем нам Это?" или как продать Agile команде"Зачем нам Это?" или как продать Agile команде
"Зачем нам Это?" или как продать Agile командеMichael Karpov
 
"Зачем нам Это?" или как продать Agile команде
"Зачем нам Это?" или как продать Agile команде"Зачем нам Это?" или как продать Agile команде
"Зачем нам Это?" или как продать Agile командеMichael Karpov
 
Высоконагруженая команда - AgileDays 2010
Высоконагруженая команда - AgileDays 2010Высоконагруженая команда - AgileDays 2010
Высоконагруженая команда - AgileDays 2010Michael Karpov
 

Más de Michael Karpov (20)

EdCrunch 2018 - Skyeng - EdTech product scaling: How to influence key growth ...
EdCrunch 2018 - Skyeng - EdTech product scaling: How to influence key growth ...EdCrunch 2018 - Skyeng - EdTech product scaling: How to influence key growth ...
EdCrunch 2018 - Skyeng - EdTech product scaling: How to influence key growth ...
 
Movement to business goals: Data, Team, Users (4C Conference)
Movement to business goals: Data, Team, Users (4C Conference)Movement to business goals: Data, Team, Users (4C Conference)
Movement to business goals: Data, Team, Users (4C Conference)
 
Save Africa: NASA hackathon 2016
Save Africa: NASA hackathon 2016 Save Africa: NASA hackathon 2016
Save Africa: NASA hackathon 2016
 
Из третьего мира - в первый: ошибки в развивающихся продуктах (AgileDays 2014)
Из третьего мира - в первый: ошибки в развивающихся продуктах (AgileDays 2014) Из третьего мира - в первый: ошибки в развивающихся продуктах (AgileDays 2014)
Из третьего мира - в первый: ошибки в развивающихся продуктах (AgileDays 2014)
 
Один день из жизни менеджера. Тактика: хорошие практики, скрытые опасности и ...
Один день из жизни менеджера. Тактика: хорошие практики, скрытые опасности и ...Один день из жизни менеджера. Тактика: хорошие практики, скрытые опасности и ...
Один день из жизни менеджера. Тактика: хорошие практики, скрытые опасности и ...
 
Поговорим про ошибки (Sumit)
Поговорим про ошибки (Sumit)Поговорим про ошибки (Sumit)
Поговорим про ошибки (Sumit)
 
(2niversity) проектная работа tips&tricks
(2niversity) проектная работа   tips&tricks(2niversity) проектная работа   tips&tricks
(2niversity) проектная работа tips&tricks
 
"Пользователи: сигнал из космоса". CodeFest mini 2012
"Пользователи: сигнал из космоса". CodeFest mini 2012"Пользователи: сигнал из космоса". CodeFest mini 2012
"Пользователи: сигнал из космоса". CodeFest mini 2012
 
(Analyst days2012) Как мы готовим продукты - вклад аналитиков
(Analyst days2012) Как мы готовим продукты - вклад аналитиков(Analyst days2012) Как мы готовим продукты - вклад аналитиков
(Analyst days2012) Как мы готовим продукты - вклад аналитиков
 
Как сделать команде приятное - Михаил Карпов (Яндекс)
Как сделать команде приятное - Михаил Карпов (Яндекс)Как сделать команде приятное - Михаил Карпов (Яндекс)
Как сделать команде приятное - Михаил Карпов (Яндекс)
 
Как мы готовим продукты
Как мы готовим продуктыКак мы готовим продукты
Как мы готовим продукты
 
Hpc Visualization with WebGL
Hpc Visualization with WebGLHpc Visualization with WebGL
Hpc Visualization with WebGL
 
Hpc Visualization with X3D (Michail Karpov)
Hpc Visualization with X3D (Michail Karpov)Hpc Visualization with X3D (Michail Karpov)
Hpc Visualization with X3D (Michail Karpov)
 
сбор требований с помощью Innovation games
сбор требований с помощью Innovation gamesсбор требований с помощью Innovation games
сбор требований с помощью Innovation games
 
Зачем нам Это? или Как продать agile команде
Зачем нам Это? или Как продать agile командеЗачем нам Это? или Как продать agile команде
Зачем нам Это? или Как продать agile команде
 
"Зачем нам Это?" или как продать Agile команде
"Зачем нам Это?" или как продать Agile команде"Зачем нам Это?" или как продать Agile команде
"Зачем нам Это?" или как продать Agile команде
 
"Зачем нам Это?" или как продать Agile команде
"Зачем нам Это?" или как продать Agile команде"Зачем нам Это?" или как продать Agile команде
"Зачем нам Это?" или как продать Agile команде
 
HPC Visualization
HPC VisualizationHPC Visualization
HPC Visualization
 
Hpc Visualization
Hpc VisualizationHpc Visualization
Hpc Visualization
 
Высоконагруженая команда - AgileDays 2010
Высоконагруженая команда - AgileDays 2010Высоконагруженая команда - AgileDays 2010
Высоконагруженая команда - AgileDays 2010
 

суперкомпьютерные технологии в задачах прогноза погоды

  • 1. Суперкомпьютерные технологии в задачах прогноза погоды и климата Е.Д. Астахова Гидрометцентр России [email_address]
  • 2.
  • 3. Что такое прогноз погоды и климата ?
  • 4.
  • 5.
  • 6. Дискретизация Сферические координаты Широтно-долготная сетка По горизонтали По вертикали
  • 7. Beljaars, 2008 Пространственные и временные масштабы некоторых процессов в атмосфере
  • 8. В зависимости от разрешения модели физические процессы описываются явно или параметрически Немецкая метеослужба DWD GME COSMO_EU COSMO-DE spatial: ~150 km ~30 km ~10 km temporal: ~4 min ~1.5 min ~30 sec ECMWF T799 T1279 T2047 ~25 km ~16 km ~10 km 720 s 450 s 300 s
  • 9. Основные физические процессы подсеточного масштаба, учитываемые в моделях атмосферы. Микрофизика облака Сток Мелкая конвекция ЛЕД ОКЕАН СУША солнечная радиация турбулентность конвекция крупномасштабная конденсация тепловое излучение Земли потоки у поверхности орография гидрологический цикл альбедо поверхности дождь снег снежный покров импульса влаги тепла
  • 10.
  • 11. Часы Дни Недели Месяцы Сезоны Годы Локальный Региональный Глобальный Сверхкраткосрочный прогноз(0-12ч) Краткосрочный прогноз (12-72ч) Среднесрочный прогноз (72-240ч) Долгосрочный прогноз (30 дней-2 года) Прогноз климата (более 2 лет) Пространственный масштаб Временной масштаб Расширенный прогноз (10-30 дней) Численное моделирование процессов в атмосфере
  • 12. Современные тенденции : бесшовный подход Единая система моделирования на масштабах от дней до десятков лет Численный прогноз погоды Численное моделирование климата
  • 13. Почему задача прогноза погоды и моделирования климата – задача Grand Challenge? И что это такое ?
  • 14.
  • 15.
  • 16. Роль начальных данных о состоянии атмосферы ( влияние их малых возмущений на 5-сут прогноз ) Факт Прогноз 1 контрольный Прогноз 2 от возмущенных начальных данных Прогноз 3 от возмущенных начальных данных
  • 17. Роль разрешения модели Осадки за вторые сутки прогноза, полученные по модели ECMWF с разным разрешением
  • 18. Оправдываемость прогнозов температуры на уровне 2 м на 24 и 36 часов (% случаев с абсолютной ошибкой < 3 град) по моделям T85L31 и T169L31 в Сибири Верхоянск Оймякон Якутск 24 ч 36 ч 24 ч 36ч 24 ч 36 ч
  • 19. Роль улучшения разрешения и параметризаций процессов подсеточного масштаба. Осадки Радар TL319 TL959 TL959 Новая схема конвекции Nakagawa,2005
  • 20.
  • 21. Строгие временные рамки счета задачи численного прогноза погоды
  • 22. GDAS GFS anal NAM anal CFS RTOFS SREF NAM AQ GFS HUR RDAS Data processing GENS/NAEFS Использование компьютера для решения различных прогностических задач в NCEP
  • 23.
  • 24. Суперкомпьютерные системы ведущих метеорологических центров мира 26.39 3472 IBM pSeries eServer pSeries p5 575 1.9 GHz Environment Canada 2008, 295 66.18 24.06 3520 1280 IBM pSeries Power 575, p6 4.7 GHz, Infiniband UKMO, UK 2009, 73 и 74 352 1 1 16 1664 1416 SGI Altix 4700 Itanium 2 1.66 GHz, NUMALink Altix ICE 8200 Xeon E5440 2.83 GHz, Infiniband 4x DDR Росгидромет, Россия, 2008 , 12 и 8 93.85 79.41 4992 4224 IBM pSeries Power 575, p6 4.7 GHz, Infiniband NCEP, USA 2008, 51 200 9 , 63 156.42 8320 IBM pSeries Power 575, p6 4.7 GHz, Infiniband ECMWF , UK 2009, 25 и 26 R peak, Tflops Число ядер Компьютер Название центра, страна, год установки, место в Top500 ( Top50 )
  • 25. Salmond, 2004 Компьютеры, использовавшиеся в английской метеослужбе
  • 27. Улучшение качества численных прогнозов идет параллельно улучшению компьютерных ресурсов
  • 28. ( World Modelling Summit for Climate Prediction , 2008. WCRP No. 131 . WMO/TD No. 1468 , Jan.2009 )
  • 29. Проблема : Программное обеспечение моделей атмосферы не рассчитано на десятки тысяч и миллионы процессорных элементов!!! САМ – эксперименты до 100 000 Р Es.
  • 30. Масштабирование модели Европейского центра среднесрочных прогнозов с разрешением T1279L91
  • 31. Что такое детерминированный и ансамблевый прогноз погоды и как он делается ?
  • 32.  
  • 35. Начальные данные – данные наблюдений
  • 36. Наземные наблюдательные системы Синоптические станции Радары Буи
  • 37. Неравномерное по пространству распределение данных Синоптические станции Росгидромета
  • 40. Сырые данные Неравномерны Зашумлены Не пригодны для моделей «Усвоенные» данные Равномерны Гладкие Пригодны для моделей Данные должны быть подготовлены для моделей Система усвоения данных : замешиваются наблюдения и прогноз
  • 41.
  • 42. Оперативные глобальные модели прогноза погоды
  • 43.
  • 44.
  • 45.
  • 46. П P ОГНОЗАМ ПОГОДЫ ПРИСУЩА ПРИНЦИПИАЛЬНАЯ НЕОПРЕДЕЛЕННОСТЬ Эволюция ошибок в начальном состоянии атмосферы Заблаговременность прогноза Линейный режим Нелинейный режим Детерминированный прогноз от наиболее точно определенного начального состояния Истинная эволюция состояния атмосферы
  • 47. П P ОГНОЗАМ ПОГОДЫ ПРИСУЩА ПРИНЦИПИАЛЬНАЯ НЕОПРЕДЕЛЕННОСТЬ Хорошо предсказуемая ситуация Плохо предсказуемая ситуация Buizza 2002 Качество прогноза зависит от ситуации Режим 1: сухо и тепло Режим 2 : холодно и сыро
  • 48. Качество прогнозов падает с заблаговременностью прогнозов Качество прогнозов зависит от ситуации Пользователям нужна оценка качества прогнозов Пользователям нужна вероятность экстремальных явлений Нужен вероятностный прогноз! Т.е. описание эволюции функции плотности вероятности состояний атмосферы во времени. Уравнение Лиувилля – долго. АНСАМБЛИ!!!
  • 49. Простейший ансамбль –совокупность прогнозов, стартующих со слегка различающихся (возмущенных) начальных данных (ансамбля начальных данных) Ансамбль начальных данных должен : Содержать равновероятные члены Являться репрезентативной выборкой из вероятных состояний атмосферы Включать истинное состояние атмосферы (т.е разброс достаточно велик) Возмущения должны быть в пределах ошибок анализа Реализация ансамблевого подхода
  • 50. Неточность данных о состоянии атмосферы Неточность данных о состоянии поверхности Земли Неточность модели атмосферы Бридинг Ансамблевые трансформации Сингулярные вектора Системное моделирование Стохастическая физика Мультимодельность Вариации параметризаций Системное моделирование Варьирование характеристик поверхности
  • 51. Основные ансамблевые системы среднесрочного прогноза Учет несовершенства модели Возмущение начальных данных Размер Модель Разные параметризации Возмущение данных наблюдений 20 членов 0 . 9 ° *0 . 9 ° , 28 уровней MSC , Канада Стохастические возмущения Ансамблевые трансформации + масштабирование 20 членов T 126 L 28 NCEP, США Стохастические возмущения Сингулярные вектора 50 членов T 399 L 62 (1-10 сут) T 255 L 62 ЕС MWF
  • 52.
  • 53. Пример ансамблевого прогноза температуры воздуха в Лондоне (метеограмма)
  • 54.
  • 55.
  • 56.
  • 57. Квази-оперативные и оперативные прогностические модели Гидрометцентра России ФЗИ : Расчеты конвективных опасных явлений, видимости, туманов, Экологические блоки, РЭП COSMO-RU7, COSMO-RU14, WRF-ARW, ETA, MM5 , мезомасштабная модель Гидрометцентра России Участки в пределах Европы и ЕТР Физико-статистическая интерпретация (ФЗИ): Расчеты конвективных опасных явлений Региональная модель Гидрометцентра России ПЛАВ-2 Ограниченные территории: «Регион» 30-70 км Боковые условия для мезомасштабных моделей Ансамблевый среднесрочный прогноз, Долгосрочное прогнозирование T85L31, ПЛАВ-2008, T169L31 Глобус, От 60 до 150 км Сопряженные технологии в перспективе Сопряженные технологии Название Территория, Разрешение
  • 58. Преемственность систем детерминированного и вероятностного численного прогнозирования Технология детерминированного Прогноза: T85L31 (150 км ), T169L31 (70 км) , T169L63 (70 км) , T339L31 (45 км) , T679L31 (25 км) Технология ансамблевого Прогноза: T85L31, T169L31 Разработка версий модели Разработка систем построения ансамблей Спектральная модель атмосферы
  • 59. Метод спектральных преобразований θ , λ , z m, n, z µ, m, z Сеточное пространство (физика, динамика ) Спектральное пространство (динамика, горизонтальная диффузия ) Пространство Фурье-образов БПФ Лежандр Пространство Фурье-образов Обратный Лежандр Обратное БПФ
  • 60. Спектральная модель : Пространственная декомпозиция области расчетов в c еточном пространстве
  • 61. Спектральная модель : Декомпозиция области расчетов в спектральном пространстве PE1 PE2 PE3 PE4 PE5
  • 62. T339L31. 24- часовой прогноз. 2х-ядерный p575 1.5 Ггц
  • 63.  
  • 64. Спектральная модель : На 1 PE ~100 мин На 16 PEs ~18 мин (без SHMEM ~23 мин) На 64 PEs ~ 11 мин Суточный прогноз должен быть готов за ~ 20 мин
  • 65. Конфигурация ансамблевой системы прогноза Началь-ные данные (НД) Возмущенные данные . . . . . . . . . . . . . . . . . . Продукция M P I M P I M P I M P I
  • 66. «Спагетти» Н500 (516, 552 , 576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 1 день вперед от 11 сентября 2009 12 ВСВ на 12 сентября 2009 12 ВСВ
  • 67. «Спагетти» Н500 (516, 552 , 576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 2 дня вперед от 11 сентября 2009 12 ВСВ на 13 сентября 2009 12 ВСВ
  • 68. «Спагетти» Н500 (516, 552 , 576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 3 дня вперед от 11 сентября 2009 12 ВСВ на 14 сентября 2009 12 ВСВ
  • 69. «Спагетти» Н500 (516, 552 , 576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 4 дня вперед от 11 сентября 2009 12 ВСВ на 15 сентября 2009 12 ВСВ
  • 70. «Спагетти» Н500 (516, 552 , 576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 5 дней вперед от 11 сентября 2009 12 ВСВ на 16 сентября 2009 12 ВСВ
  • 71. «Спагетти» Н500 (516, 552 , 576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 6 дней вперед от 11 сентября 2009 12 ВСВ на 17 сентября 2009 12 ВСВ
  • 72. «Спагетти» Н500 (516, 552 , 576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 7 дней вперед от 11 сентября 2009 12 ВСВ на 18 сентября 2009 12 ВСВ
  • 73. «Спагетти» Н500 (516, 552 , 576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 8 дней вперед от 11 сентября 2009 12 ВСВ на 19 сентября 2009 12 ВСВ
  • 74. «Спагетти» Н500 (516, 552 , 576 гпм) Пример выходной продукции системы ансамблевого прогноза Прогноз на 10 дней вперед от 11 сентября 2009 12 ВСВ на 21 сентября 2009 12 ВСВ
  • 75. Пример выходной продукции системы ансамблевого прогноза Прогноз эволюции метеорологической переменной в пункте Прогноз от 15 мая 2009
  • 76. «Почтовые марки». Пример выходной продукции системы ансамблевого прогноза Н500
  • 77. Среднее по ансамблю (изолинии) и разброс ансамбля (цвет) . Высота геопотенциальной поверхность 500 гПа. 5-сут прогноз на 1 7/12/2007 12 ВСВ Пример продукции ансамблевой системы Прогноз наименее достоверен в областях с максимальным разбросом
  • 78. Вероятности выпадения количества осадков, превышающего заданное пороговое значение Пример выходной продукции системы ансамблевого прогноза Valid: 17Jul2008/12 Prec > 2 mm/6h Valid: 16Jul2008/12 Prec > 0.1 mm/6h
  • 79.
  • 81. Время расчета прогноза на 1 сут. на 36 ядрах = 22 мин.
  • 82.
  • 83.  
  • 84.  
  • 85.  
  • 86.  
  • 87.  
  • 88.  
  • 89.  
  • 90.  
  • 91.  
  • 92.  
  • 93.  
  • 94.  
  • 95.  
  • 96.  
  • 97.  
  • 98.  
  • 99.  
  • 100.  
  • 101.  
  • 102.  
  • 103.  
  • 104.  
  • 105.  
  • 106.  
  • 107.
  • 108.  
  • 109.  
  • 111. Оценки качества среднего по ансамблю прогноза Среднее по ансамблю лучше для заблаговременностей более 84 час!