Bayes hálók 2008. október 20. Farkas Richárd

Slides:



Advertisements
Hasonló előadás
Készítette: Kosztyán Zsolt Tibor
Advertisements

Események formális leírása, műveletek
A Floyd-Warshall algoritmus
Adatelemzés számítógéppel
5. hét: Solow-modell Csortos Orsolya
Valószínűségszámítás
Bizonytalanság  A teljesen megbízható következtetést lehetővé tevő tudás hiánya  Egy esemény bizonytalansága  objektív  szubjektív  Módszerek  numerikus.
Kvantitatív Módszerek
BIZONYTALANSÁG (UNCERTAINTY)
Készítette: Major Máté
MI 2003/9 - 1 Alakfelismerés alapproblémája: adott objektumok egy halmaza, továbbá osztályok (kategóriák) egy halmaza. Feladatunk: az objektumokat - valamilyen.
Kötelező alapkérdések
Diszkrét idejű bemenet kimenet modellek
Illés Tibor – Hálózati folyamok
DAG topologikus rendezése
Generatív (Bayesi) modellezés ápr Slides by (credit to): David M. Blei Andrew Y. Ng, Michael I. Jordan, Ido Abramovich, L. Fei-Fei, P. Perona,
Gazdaságelemzési és Statisztikai Tanszék
Bizonytalanság A teljesen megbízható következtetést lehetővé tevő tudás hiánya Egy esemény bizonytalansága  objektív  szubjektív Módszerek  numerikus.
Bizonytalanság A teljesen megbízható következtetést lehetővé tevő tudás hiánya Egy esemény bizonytalansága  objektív  szubjektív Módszerek  numerikus.
Matematikai modellek a termelés tervezésében és irányításában
Bayes becslések Boha Roland november 21. PPKE-ITK.
Szűrés és konvolúció Vámossy Zoltán 2004
III. előadás.
Differenciál számítás
1 Györgyi Tamás – GYTNAAI.ELTE 2007 Április 03 Algoritmusok És Adatszerkezetek 2 Gráfalgoritmus Bellman-Ford Algoritmusa S a b d e
Regresszióanalízis 10. gyakorlat.
Dinamikus klaszterközelítés Átlagtér illetve párközelítés kiterjesztése N játékos egy rácson helyezkedik el (periodikus határfeltétel) szimmetriák: transzlációs,
Dr. Dinya ElekPhD kurzus január 30. DÖNTÉSI MEGOLDÁSOK ESZKÖZEI AZ ORVOSI DIAGNOSZTIKÁBAN.
A kvantummechanika alapegyenlete, a Schrödinger-féle egyenlet és a hullámfüggvény Born-féle értelmezése Előzmények Az általános hullámegyenlet Megoldás.
Valószínűségszámítás
1 TARTALOM: 0. Kombinatorika elemei (segédeszközök) 1. Eseményalgebra 2. A valószínűség: a) axiómák és következményeik b) klasszikus (=kombinatorikus)
Készítette: Kosztyán Zsolt Tibor
Készítette: Kosztyán Zsolt Tibor
2003. december 18.Gyires Béla Informatikai Nap1 Következtés tudás alapú rendszerekben Bognár Katalin Debreceni Egyetem Informatikai.
Az Alakfelismerés és gépi tanulás ELEMEI
Gráfok Készítette: Dr. Ábrahám István.
Statisztika a szociológiában
Fuzzy rendszerek dr. Szilágyi László.
1 Tudásalapú információ-kereső rendszerek elemzése és kifejlesztése Célkitűzés: Információk téma-specifikus, különböző típusú forrásokból (internet, intranet.
Minőségtechnikák I. (Megbízhatóság)
Idősor elemzés Idősor : időben ekvidisztáns elemekből álló sorozat
Problémás függvények : lokális optimalizáció nem használható Globális optimalizáció.
Következtető statisztika 9.
Alapsokaság (populáció)
Két kvantitatív változó kapcsolatának vizsgálata
A Dijkstra algoritmus.
Bizonytalanság A teljesen megbízható következtetést lehetővé tevő tudás hiánya Egy esemény bizonytalansága  objektív  szubjektív Módszerek  numerikus.
Előadó: Nagy Sára Mesterséges intelligencia Kereső rendszerek.
1 Szélességi Bejárás Györgyi Tamás – GYTNAAI.ELTE 2007 Március 22 Algoritmusok És Adatszerkezetek 2 Gráfalgoritmus S b a d e f h g c.
1 Dijkstra Algoritmusa Györgyi Tamás – GYTNAAI.ELTE 2007 Április 02 Algoritmusok És Adatszerkezetek 2 Gráfalgoritmus S a b c d e
DAG topologikus rendezése
Kruskal-algoritmus.
Szabályozási Rendszerek 2014/2015 őszi szemeszter Előadás Automatizálási tanszék.
Bevezetés a méréskiértékelésbe (BMETE80ME19) 2014/
Háló- (gráf-) algoritmusok
Valószínűségszámítás II.
Többdimenziós valószínűségi eloszlások
2005. Információelmélet Nagy Szilvia 2. A forráskódolás elmélete.
Csoportkeresési eljárások Vassy Zsolt. Tematika Girvan Newman klaszterezés Diszkrét Markov lánc: CpG szigetek Rejtett Markov lánc ADIOS.
Spike Sorting Solutions Csercsa Richárd Magony Andor.
Struktúra predikció Struktúra lehet Felügyelt tanulási probléma
Algoritmusok és adatszerkezetek
Bevezetés a méréskiértékelésbe (BMETE80ME19) 2014/
PÁRHUZAMOS ARCHITEKTÚRÁK – 13 INFORMÁCIÓFELDOLGOZÓ HÁLÓZATOK TUDÁS ALAPÚ MODELLEZÉSE Németh Gábor.
Készítette : Giligor Dávid Neptun : HSYGGS
Adatszerkezetek és algoritmusok 2008/ Algoritmus Az algoritmus szó eredete a középkori arab matematikáig nyúlik vissza, egy a i.sz. IX. században.
1 Megerősítéses tanulás 4. előadás Szita István, Lőrincz András.
Szimuláció. Mi a szimuláció? A szimuláció a legáltalánosabb értelemben a megismerés egyik fajtája A megismerés a tudás megszerzése vagy annak folyamata.
Kockázat és megbízhatóság
Valószínűségi változók együttes eloszlása
Előadás másolata:

Bayes hálók október 20. Farkas Richárd

Bizonytalan tudás-reprezentáció Bizonytalanság, valószínűség Valószínűségi modell Bayes-tétel Együttes valószínűség-eloszlás

Feltételes függetlenség Időjárás Fogfájás Lyuk Beakadás

Bayes háló Egy adott tárgytartomány változóinak oksági struktúráját leíró: irányított körmentes gráf (DAG) a gráf csúcsai valószínűségi változók (X,Y) irányított él jelentése: X közvetlenül függ Y-tól (Y szülője X) szülők hatása: P(X|Szülők(X)) számszerűen = FVT

Pearl példája

bfP(R=i|B=b,F=f) ii0,95 ih hi0,29 hh0,001 rP(M=i|R=r) i0,7 h0,01 P(B=i)=0,01P(F=i)=0,02 rP(J=i|R=r) i0,9 h0,05 Együttes valószínűsg-eloszlás: P(x 1, …, x n )= Π P(x i | Szülők(x i )) P(J|r)P(M|r)P(r| ¬ b, ¬ f)P( ¬ b)P( ¬ f)

Bayes hálók építése 1.változók meghatározása 2.sorrend kijelölése 3.amíg van kimaradt változó 1.adjuk hozza a legelső ilyet a gráfhoz 2.határozzuk meg a szüleit 3.adjuk meg a hozzá tartozó FVT-t

Változók sorrendje Megelőző változók halmaza tartalmazza a a közvetlen befolyásolókat!

Tömörség Lokálisan strukturált k szülő: O(n2 k ) értékkel megadható Teljes együttes eloszlás fgv: O(2 n ) Új változó? Új függőség? Pontosság vs. költség

Kapcsolat típusok Determinisztikus vs zajos Zajos-VAGY –összes ok ismert –gátlások függetlenek MegfázásInfluenzaMaláriaP(¬ Láz) HHH1,0 HHI0,1 HIH0,2 HII0,02 IHH0,6 IHI0,06 IIH0,12 III0,012

Folytonos változók diszkretizálás parametrizált sűrűségfgv. hibrid Bayes-háló: TámogatásTermés Ár Vásárol

P(diszkrét|folytonos)

Következtetés Bayes-hálókban célváltozók (posteriori) bizonyítékváltozók (esemény) rejtett változók P(B|J=i, M=i) =

Következtetés felsorolással Rejtett változók minden érték- kombinációját „felsoroljuk” P(b=i|j=i,m=i)= α∑ f ∑ r P(b)P(f)P(r|b,f)P(j|r)P(m|r) O(n2 n ) αP(b)∑ f P(f)∑ r P(r|b,f)P(j|r)P(m|r) O(2 n )

Polifák Polifa: két pont közt legfeljebb egy irányított út létezik Polifákban a következtetés lineáris idejű (FVT összméretében) Csoportosítás: hh, hi, ih, ii

Közelítő következtető módszerek Monte-Carlo algoritmusok Háló szerint generálunk eseményeket P(x 1, …, x n ) ~ N(x 1, …, x n )/N all bizonyítékváltozók -> elutasító mintavételezés

Valószínűségi súlyozás Bizonyítékváltozók rögzítettek Súlyok: esemény mennyire van összhangban a bizonyítékokkal Ahol a bizonyíték valószínűtlennek tűnik kisebb súlyt kap P(Eső|Locsoló=i, VizesP=i)=? w(i,i,i,i) = P(L=i|F=i)*P(V=i|L=i,E=i)=0,01

Monte Carlo Markov Chain háló állapota minden lépésben X i mintavételezése a környezet „jelenlegi értékének” feltétele mellett környezet: szülők, gyerekek, gyerekek szülei P(Felhős|Locsoló=i, Eső=i) ?

Markov láncok Folyamat, állapotok Átmeneti mátrix: P ij vagy q(x->x’) Nincs memória π t+1 (x’)=∑π t q(x->x’) Stacionárius eloszlás: π(x’)=∑π t q(x->x’) bármely x’

Egyéb módszerek Szabályalapú rendszerek –ha-akkor típusú szabályok –állításokhoz és szabályokhoz is valószínűség rendelése Dempster-Shafer elmélet –bizonytalanság vs. ismerethiány –bizonyosságfgv.vagy intervallum Fuzzy logika –Leírás bizonytalansága