1 KLASZTER PROGRAMOZÁSI TECHNOLÓGIA ÉS ALKALMAZÁSA A METEOROLÓGIÁBAN Kacsuk Péter Horányi András

Slides:



Advertisements
Hasonló előadás
Valós idejű tesztlefedettség- monitorozás JEE környezetben Dr. Ferenc Rudolf, Szegedi Tudományegyetem Bakota Tibor, FrontEndART Szoftver Kft.
Advertisements

Az időjárás előrejelzése
A Balatoni Viharjelzés
Az időjárás megfigyelése
MEH - MAKK konferencia és fórum 1 Egy hazai fejlesztésű terhelésbecslő és szélerőmű termelésbecslő szoftver Bessenyei Tamás
Mérünk és előrejelzünk szeptember 13.
Autonóm mérésadatgyűjtő és telemetriai rendszer
Az Exchange/Outlook rendszer n Ebben a részben az olvasó megismerkedik – Az Exchange serverrel – Az Outlook 97 csoportmunka szoftverrel.
Infrastruktúra-felügyelet a privát felhőben
Alkalmazások portolása Gridre Balaskó Ákos MTA SZTAKI 2011 november 14.
HPC ’11 Kellenek-e szuperszámítógépek? Máray Tamás NIIF Intézet RICOMNET 2011 konferencia.
Hálózati architektúrák
1 / / 13 Bevezető Forgalmi dugók okozta problémák: - Feszültség - Sietség - Szabálytalan közlekedés → baleseti források Megoldás: A jó megoldások.
Adminisztratív teendők Kacsuk Péter Egyetemi tanár
Programozási alapismeretek
Intelligens szoftver megoldások acélszerkezeti tervezéshez.
Trendek a szoftveriparban: e-business és e-development Csontos Péter IQSOFT Rational e-development szakmai nap 2000 február 16.
Hordozható numerikus időjárás előrejelzési modellek összehasonlító vizsgálata TDK dolgozat Készítették: André Karolina és Salavec Péter, Fizika Bsc III.
Az operációs rendszerek
Az ACIS modellező rendszer Dr. Horváth László. Alapvető jellemzők A Spatial Technology Inc. terméke. Objektum orientált és kereskedelmi modellező alapját.
A virtuális technológia alapjai Dr. Horv á th L á szl ó Budapesti Műszaki Főiskola Neumann János Informatikai Kar, Intelligens Mérnöki Rendszerek.
Hernáth Szabolcs RMKI grid és Hungrid Hernáth Szabolcs
1 Virtuális szuperszámítógép szolgáltatás kialakítása az akadémiai hálózat felhasználásával Kacsuk Péter
A számítógép jelentősége a hétköznapokban
EU II..
Hibrid felhő Privát-, publikus és hoster felhők összekapcsolása
Takács Béla Eset: Egyenrangú (peer-to-peer) hálózat Mi kell hozzá? A számítógépekben (PC-kben) legyen hálózati kártya (Network Interface Card)
Csirmaz Kálmán Országos Meteorológiai Szolgálat
Téli rendkívüli időjárási helyzetek – az OMSZ szerepe
1 Virtuális szuperszámítógép szolgáltatás kialakítása az akadémiai hálózat felhasználásával Kacsuk Péter Szeberényi.
Méréstechnika és Információs Rendszerek Tanszék
Kormányszóvivői tájékoztató. Tájékoztató a gazdaságról Dr. Veres János pénzügyminiszter szeptember 14.
SZTAKI Desktop Grid Kacsuk Péter MTA SZTAKI
A SHIWA projekt – Munkafolyamat gráfok és különböző grid köztesrétegek együttműködésének problémái és megoldásai e-Science Café Budapest, Óbudai.
EGI-InSPIRE RI EGI-InSPIRE EGI-InSPIRE RI e-Science Café RMKI Hernáth Szabolcs 8/5/2014.
1 A bannernek is van szeme. Erre ma már megvannak az eszközök! 6.
Levegő szerepe és működése
A Magyar ClusterGRID projekt Stefán Péter tudományos munkatárs NIIF Iroda
Éghajlati folyamatok és időjárási szélsőségek vizsgálata Bozó László Elnök, az MTA levelező tagja Országos Meteorológiai Szolgálat.
Az operációs rendszerek feladata, fajtái, felépítése
Web Architecture. Development of Computing Architectures Monolithic mainframe programming Client Server Real Client Server Web Programming.
1 KLASZTER PROGRAMOZÁSI TECHNOLÓGIA ÉS ALKALMAZÁSA A METEOROLÓGIÁBAN Kacsuk Péter
A szoftver, szoftvertípusok
-1- Együttműködés, veszélyes üzemek – iparfelügyeleti tevékenység Országos Rendőr-főkapitányság, megyei (fővárosi) Rendőr-főkapitányságai és helyi Rendőr-kapitányságai.
Bevezetés az európai és magyar Grid rendszerekbe Sipos Gergely MTA SZTAKI Párhuzamos és elosztott rendszerek laboratórium
EGEE-II INFSO-RI Enabling Grids for E-sciencE A HunGrid infrastruktúra és alkalmazásfejlesztő környezete Gergely Sipos
Szélsőséges meteorológiai helyzetek Magyarországon: május-június Dr. Bozó László elnök Országos Meteorológiai Szolgálat.
Szoftverek.
Meteorológia A meteorológia. A meteorológiai jelenségek megfigyelhető időjárási események, amiket a meteorológia tudománya magyaráz meg. Ezek az események.
Miért jó nekünk kutatóknak a felhő?
EGEE-III INFSO-RI Enabling Grids for E-sciencE A Hungrid VO szolgáltatásai A Hungrid, a magyar NGI bölcsője Hernáth Szabolcs Szeberényi.
Hogyan pályázzunk ? Az EUGA program az innováció szolgálatában Vicze Gábor.
Software - Ismeretek Avagy mitől megy a Hardware.
XIII. Országos Felsőoktatási Környezettudományi Diákkonferencia
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Összefoglalás M. Kozlovszky MTA SZTAKI
Piramis klaszter rendszer
Meteorológiai adatbázis története
OMSZ infokommunikációs rendszere
Az OMSZ saját fejlesztésű időjárási megjelenítő rendszere HAWK-3.
Közösségi numerikus időjárás-előrejelző modellek összehasonlító vizsgálata Készítették: André Karolina és Salavec Péter Fizika BSc, Meteorológia szakirány.
Grafikus felhasználói felületek Linux alatt. Grafikus Interface A grafikus felhasználói felület (angolul graphical user interface, röviden GUI) olyan,
Kiss Zoltán Székelyi Szabolcs Networkshop 2016 HPC Tutoriál HPC Tutoriál - Bevezető.
Újdonságok az NIIF VoIP szolgáltatásában
Szélenergetikai számítások az ETA mezoskálájú modell alkalmazásával
Délkelet-Európai HPC Projekt
IT ALAPFOGALMAK OPERÁCIÓS RENDSZEREK.
A Linux operációs rendszer
Időjárás előrejelzés Weidinger Tamás
Avagy mitől megy a Hardware
Könyvtári rendszerek felső fokon
Előadás másolata:

1 KLASZTER PROGRAMOZÁSI TECHNOLÓGIA ÉS ALKALMAZÁSA A METEOROLÓGIÁBAN Kacsuk Péter Horányi András

2 Hol tart ma Magyarország? Partnerek: –Koord.: MTA SZTAKI –OMSZ (Országos Meterológia Szolgálat) –SGI Magyarország Kft. Célok: –A P-GRADE párhuzamos programfejlesztő rendszer alkalmazása a Nowcasting programcsomag párhuzamosítására –A P-GRADE rendszer továbbfejlesztése: checkpointing dinamikus terheléselosztás hibatűrés A projekt jellemzői

3 Nagysebességű rendszerek fejlődése 2100 Szuper- számítógép 2100 Klaszter Meta- számítógép GFlops Számítógépek Mainframe számítógép

4 Mi is az a klaszter? 1. Egy klaszter komplett számítógépeket kapcsol össze (mint a metaszámítógépek) 2. A klasztert alkotó számítógépek lazán csatoltak (mint a metaszámítógépek) 3. A klasztert mint egyetlen, egységes számítási erőforrást használjuk: Single System Image (mint a szuperszámítógépek)

5 SZTAKI dedikált klaszter struktúrája szerver Munkaállomás #1 Munkaállomás #2... … Munkaállomás #N 48 port, 24 Gbps kapcsoló 100Mbit/s gyors ethernet

6 Klaszterek programozási nehézségei High-Speed Switch Megfigyelés? Programozás?

7 Szoftver környezet a klaszteren Operációs rendszerek  RedHat Linux 6.1  Microsoft NT Kommunikációs könyvtárak párhuzamos programozáshoz  PVM (Parallel Virtual Machine)  MPI (Message Passing Interface) Párhuzamos programfejlesztő rendszer  P-GRADE (MTA SZTAKI)

8 P-GRADE programfejlesztő rendszer klaszterekhez Világszerte egyedülálló módon grafikával támogatja a párhuzamos programok fejlesztésének minden fázisát. Nagyságrenddel csökkenti a párhuzamos programok fejlesztési idejét. Prototípus nemzetközi EU projekt terméke. Kereskedelmi verzió magyar kutató és fejlesztő munka eredménye (OMFB /99 projekt)

9 P-GRADE elemei +programozási nyelv: GRAPNEL = C + grafika +grafikus programszerkesztő (GRED) +elosztott hibakereső (DIWIDE) +elosztott felügyelő rendszer (GRM) +teljesítmény elemző eszköz (PROVE) Minden eleme grafikus!

10 Programtervezés első szintje

11 Programtervezés második szintje Grafikus tamogatás  Programszerkesz- téshez Animációs tamogatás  Hibakereséshez

12 Klaszter monitorozási eszközeink PROVE High-Speed Switch GRM Monitor P-GRADE

13 DIWIDE és PROVE

14 Nemzetközi elismertség –Ausztria –Anglia –Spanyolország –Portugália –Lengyelország –Németország –Szlovákia –Görögország –Japán –USA –Mexikó P-GRADE installációk

15 Továbbfejlesztési irányok Párhuzamos programfejlesztési környezet család kialakítása P-GRADEVisualMPVisualGrid - checkpointing - dinamikus terheléselosztás - hibatűrés - grid erőforráskezelés - grid monitorozás - mobil processzek

16 TOP 500 számítógép alkalmazási területeinek megoszlása

17 Alkalmazási területek +Meterológiai előrejelzések +Univerzum vizsgálata +Atomerőmű blokkok működésének modellezése +Szemcsés anyagok keverése és szétválasztása +Kémiai technológia alkalmazások +Anyagtani vizsgálatok

18  A RENDELKEZÉSRE ÁLLÓ ÖSSZES METEOROLÓGIAI INFORMÁCIÓ ANALÍZISE (VÁLTOZÓK SZABÁLYOS RÁCSON VALÓ ELŐÁLLÍTÁSA) ÉS ULTRA- RÖVIDTÁVÚ ELŐREJELZÉSE  METEOROLÓGIAI INFORMÁCIÓK: FELSZÍNI MÉRÉSEK, MAGASLÉGKÖRI MÉRÉSEK, RADAR, MŰHOLD, VILLÁM ADATOK, KORÁBBI MODELL EREDMÉNYEK STB.  ALAPVÁLTOZÓK: NYOMÁS, HŐMÉRSÉKLET, NEDVESSÉG, SZÉL  SZÁRMAZTATOTT PARAMÉTEREK: CSAPADÉK HALMAZÁLLAPOTA,LÁTÁS-TÁVOLSÁG, BORULTSÁG, FELHŐTÍPUS, JELEN IDŐ, STB.  HASZNOSULÁS: RIASZTÁSOK VESZÉLYES IDŐJÁRÁSI JELENSÉGEK ESETÉN MEZOSKÁLÁJÚ ANALÍZIS NOWCASTING ÉS DÖNTÉSI RENDSZER MEANDER

19 A nowcasting rendszer folyamat- ábrája First guess adatok ALADIN SYNOP adatok műhold adatRadar adat CANARIDelta analízis Alapmezők: nyomás, hőmérséklet, nedvesség, szél. RADAR adatok. Műhold adatok, villámlási adatok. Származtatott mezők: Borultság, felhőtípus Halmazállapot Látástávolság jelenidő ALAPRÁ CS Radarról rácsra Mühold- rácsra Jelenidő számítás Felhőtípus számítás Borultság számolás Látástávolság számolás Csapadék halmazállapot számolás Megjelenítés HAWK meteoroló- gusoknak Külső felhasználók részére GIF Villám adatok Villám dekód

20 Köszönöm a figyelmüket ? További információ: