Genetikus algoritmus “A genetikus algoritmusok segítségével óriási méretű paraméter teret vizsgálhatunk meg, hogy megtaláljuk különböző dolgok optimális.

Az előadások a következő témára: "Genetikus algoritmus “A genetikus algoritmusok segítségével óriási méretű paraméter teret vizsgálhatunk meg, hogy megtaláljuk különböző dolgok optimális."— Előadás másolata:

1 Genetikus algoritmus “A genetikus algoritmusok segítségével óriási méretű paraméter teret vizsgálhatunk meg, hogy megtaláljuk különböző dolgok optimális kombinációját. Olyan megoldásokat, amelyeket egyébként egy egész életen át kereshetnénk.” Salvatore Mangano Computer Design, May 1995 Biológiai gén felépítése – a kettős spirál

2 Biológiai háttér (a sejt)
Minden biológiai sejt nagy számú apró „komplex rendszer” (termelő-, fogyasztó egységek) együttes működése Melynek a sejtmag a központja. A sejtmag tartalmazza a genetikus információt.

3 Biológiai háttér (a kromoszómák)
A genetikus információt a kromoszómák tartalmazzák Minden kromoszóma DNS-ből (dezoxiribonuklein savból) épül fel. Az ember kromoszómái ún. párokból állnak. Az emberi kromoszómában 23 pár van. A kromoszómák kisebb részekből állnak, ezek a: gének. A gének kódolják a tulajdonságokat. Egy tulajdonság tárolását a génben allél-nek nevezzük. Minden génnek meghatározott pozici- ója van a kromoszómában ez a locus.

4 Biológiai háttér (a kromoszómák)
Egy sejt összes metafázisú kromoszómája méret és más jellemzők szerint rendezve metafázis: a gén sejtosztódás egyik szakasza, amelynek folyamán a kromoszómák a sejt egyenlítői sikjában helyezkednek el.

5 Biológiai háttér (reprodukció)
A genetikai információ reprodukálása Mitosis Meiosis Mitosis ugyanazon genetikai információ másolása egy új egyedbe: nincs információ változtatás A mitosis a több cellából álló rendszerek növekedésének normális útja, ilyenek például a szervek.

6 Biológiai háttér (reprodukció)
Meiosis a sexuális reprodukció alapja A meiotikus osztódás után 2 gametes jelenik meg az eljárásban A reprodukciós eljárásban a 2 gameter összekapcsolódik egy zygotává, amely egy új egyeddé válik Így a genetikus információ (adott arányaban) a két szülőtől származik és az új egyed ezekkel a genetikus információkkal rendelkezik

7 Biológiai háttér (reprodukció)
A reprodukció alatt „hibák” történnek Ezek a „hibák” genetikus variációkat hoznak létre A legjelentősebb „hibák” : Rekombináció (keresztezés) Mutáció

8 Biológiai háttér (természetes kiválasztódás)
A fajok fennmaradása: „A kecsegtető variációk megőrzése és a kevésbé értékes variációk visszautasítása” Általánosan több egyed születik, mint amennyi képes a túlélésre így folyamatos a küzdelem a túlélésért. Azok az egyedek maradnak fenn, amelyek (egyre) jobb tulajdonságokkal rendelkeznek a túléléshez: csak a legjobb egyed/struktúra éli túl a többi kevésbé sikeres egyedet/struktúrát. species = faj struggle = harc survival = túlélés

9 A genetikus algoritmus műszaki feladatoknál
Közvetlen (direkt) kereső algoritmus, amely a biológiai evolúció mechanizmusán alapul. John Holland, (University of Michigan) dolgozta ki az 1970-es években. Hogy megértse az adaptív (alkalmazkodási) folyamatokat a természetes rendszerekben. Hogy olyan mesterségesen intelligens programot hozzon létre, amely utánozza a természetes rendszerek robosztus viselkedését.

10 A genetikus algoritmus műszaki feladatoknál
Egy effektív, gyors optimalizációs technika a gépi tanulási / tanítási alkalmazásokhoz. Széles körben alkalmazzák napjainkban a gazdasági, tudományos és műszaki életben egyaránt.

11 Keresési eljárások osztályai

12 Keresési eljárások osztályai

13 A genetikus algoritmus elemei
Egy probléma amit meg kell oldani, valamint... kódolási technika (gén, kromoszóma) inicializációs eljárás (populáció létrehozása) célfüggvény meghatározás (a keresési térben) szülők kiválasztása (reprodukció) genetikus operátorok (keresztezés, mutáció) paraméter beállítások (gyakorlat és művészet)

14 Egyszerű genetikus algoritmus
{ a populáció létrehozása; a populáció célfüggvénye(i)nek kiszámítása; while megállási_feltétel_nem teljesül szülők kiválasztása az új elem(ek) létrehozásához; keresztezés és mutáció; }

15 A genetikus algoritmus keresési ciklusa
új elemek másolat készítés módosítás szülő elemek módosított elemek inicializálás populáció értékelés kiértékelt elemek törölt elemek törlés

16 Populáció populáció A kromoszómák (a populáció elemei ) lehetnek:
inicializálás populáció A kromoszómák (a populáció elemei ) lehetnek: bit stringek ( ) valós számok (43.2, -33.1, , 89.2) elemek permutációja (E11, E3, E7, ... E1, E15) szabályok listája (R1, R2, R3, ... R22, R23) program elemek (genetic, programming) ... bármilyen adat struktúra ...

17 Bitstring kromoszóma paraméterek kromoszoma (bit string) a gén = 1 bit
egész számok tartománya lineáris dekódolás x=26+13*(4/31) = 27.68 paraméter értékhatárok

18 Bitstring kromoszóma A függvény:
f(x1, x2) = 20-(x1–x10)^2 + (x2–x20)^2 ahol x10 és x20 konstans értékek

19 Valós számok kromoszóma
gén = egy valós szám x0 x1 Valós szám kromószóma = valós számok vektora

20 Elemek permutációja kromoszóma
kromoszóma (az elemek sorrendje) gén = egy sorszám adott pozición reprezentáció gráf segítségével

21 Reprodukció másolat készítés populáció
kiválsztott szülők másolat készítés lehetséges szülők populáció Véletlenszerűen kiválasztott szülők, a kiválasztás valószínűsége a kromoszómához rendelt függvényértékkel (jósági értékkel, fitness value) arányos.

22 Reprodukció: Fitness Function
Bitstring kromoszóma Fitness(x,y) bármilyen számított érték Valós számok kromoszóma

23 Reprodukció: Fitness Function
kromoszóma (elemek sorrendje) Fitness ( kromoszóma ) például a távolság az adott poziciókban lévő pontok között

24 Rulett kerék kiválasztási eljárás
A fitness értékek „tortája” a populációban probability = valószínűség terület = fitness(x7,y7)

25 Reprodukció: Sorrendi kiválasztás
Sorrendbe állítás egy szülő kiválasztási eljárás, amely az egyes kromoszómák sorrenjén alaőpul. Minden kromoszómát sorrendbe állítunk a hozzá tartozó fitness érték alapján. r1 értéket rendeljük a legrosszabb fitness értékhez; r2 értéket a második legrosszabhoz és így tovább... Magasabb fitness értéknek magasabb sorrendi értéke (is) van, ami azt jelenti, hogy nagyobb valószínűséggel lesz kiválasztva szülőként. Határozzuk meg a a sorrendek összegét: eredmény az Rsum. Szülő választás: Véletlen szám generálás 0 és Rsum között.

26 Reprodukció: Kiválasztás versenyeztetéssel
Versenyeztetéses kiválasztás a genetikus algoritmusoknál alkalmazott sok kiválasztási eljárás közül az egyik, amely néhány véletlenszerűen kiválasztott populáció elem közül a legjobb fitness értékkel rendelkezőt választja ki a keresztezéshez. Ha a versenyeztetett elemek száma nagyobb a gyengébb (fitness értékű) elemek kiválasztásának esélye kisebb lesz. Az egy elemet kiválasztó verseny megegyezik a véletlen kiválasztással.

27 Módosítás módosítás A módosításokat sztochasztikusan idézzük elő:
kiválasztott szülők módosítás gyermek(ek) A módosításokat sztochasztikusan idézzük elő: Műveletek típusai: Keresztezés ( a keresztezés valószínűségével ) Mutáció ( a mutáció valószínűségével )

28 Módosítás: Keresztezés
vágás P1 ( ) ( ) Ch1 P2 ( ) ( ) Ch2 A keresztezés a genetikus algoritmus fontos tulajdonsága: Nagymértékben gyorsítja a keresését a populáció kezdeti keresési lépéseinél A sémák nagyon hatásos kombinációját hozza létre (részmegoldásokat a különböző kromoszómákon)

29 Módosítás: Mutáció Előtte: (1 0 1 1 0 1 1 0) Utána: (0 1 1 0 0 1 1 0)
véletlen kiválasztott pozició(k) Bitstring kromoszóma Előtte: ( ) Utána: ( ) Előtte: ( ) Utána: ( ) Valós szám kromoszóma Paraméter változtatást okoz a keresési térben (lokális vagy globális változást) Helyreállítja az elvesztett információt a populációban

30 Értékelés kiértékelő gyermek(ek) értékkel rendelkező gyermekek
A kiértékelő dekódolja a kromoszóma által hordozott bemeneti paraméter értékeket és hozzárendeli a kiszámított függvény értéket (jósági értéket, fitness value). A kiértékelő csak egy kapcsolat az egyszerű klasszikus genetikus algoritmus és a megoldandó probléma között.

31 Törlés populáció törlés
törölt egyedek törlés Generációs genetikus algoritmus: az eredeti populáció minden elemét helyettesítjük minden iterációban. Állandósult állapotú genetikus algoritmus: csak adott számú elemet helyettesítünk minden generációban.

32 A folyamat animált formában

33 “A géntechnológia még ma is minden szempontból a legkifinomultabb programozási rendszer.”
“The Gene is by far the most sophisticated program around.” - Bill Gates, Business Week, June 27, 1994

34 Egy egyszerű példa Az utazó ügynök problémája (TSP):
Kersssük meg az útvonalat különböző városok között a következő feltételekkel: minden várost csak egyszer látogathatunk meg az városok között megtett teljes útvonalat minimalizálnunk kell

35 Kódolás (TSP) A problémát a városok egy sorrendi
listájával kódoljuk. A számok így egy sorrend alapú GA-t valósítanak meg. 1) London 3) Budapest ) Peking 7) Tokió 2) Velence 4) Singapur ) Phoenix 8) New York VárosLista1 ( ) VárosLista2 ( )

36 Keresztezés (TSP) A keresztezés együttesen alkalmazza az
inverziót és a rekombinációt: * * Szülő ( ) Szülő ( ) Gyermek ( ) véletlenül kiválasztott poziciók

37 Mutáció (TSP) A mutáció a lista elemeinek sorrendjét változtatja meg:
* * Előtte: ( ) Utána: ( ) véletlenül kiválasztott poziciók

38 Utazó ügynök probléma

39 Hátizsák csomagolás A probléma:
Van N darab tárgyunk, mindegyik meghatározott értékkel és tömeggel. Rendelkezünk egy hátizsákkal amelynek X kg tömeg a teherbírása. A feladat, hogy válogassunk össze úgy tárgyakat, hogy a lehető legnagyobb értéket vihessük magunkkal, de ne lépjük túl a hátizsák teherbírását. A probémát genetikus algoritmussal oldhatjuk meg. A kromoszómák az egyes esetek, a gének pedig azt jelentik, hogy az adott tárgy benne van a zsákban vagy nem (bitstring kromoszóma). A felső mátrix tartalmazza a szülő kromoszómákat, az alsó a keresztezett és mutált kromoszómákat. A mátrixok mellett lévő szám a tárgyak összértéke, azaz a jósági függvény érteke.

40 Hátizsák csomagolás

41 Függvény maximum értéke
Függvény maximum érték meghatározása (FVM): Keressük meg egy bementi paramétereivel adott függvény maximális függvényértékét (a globális maximumot): a bementi paraméterek értelmezési tartományával megadott paraméter térben

42 Kódolás (FVM) A kromoszómát a bemeneti paraméterek
valós számokból álló vektorával kódoljuk. x = { -20.0, } x1 értelmezési tartomány y = { -20.0, } x2 értelmezési tartomány k(i) = [ x(i), y(i) ] A kromoszóma alakja k(1) = [ 3.234, ] kromoszóma(1) k(2) = [ 22.12, ] kromoszóma(2)

43 Keresztezés (FVM) Szülő(1)= [x(1), y(1)]; Szülő(2) = [x(2), y(2)];
a = véletlen szám {0..1} között / típus! / Új elem(1) = [ a*x(1) + {1-a}*x(2), a*y(1) + {1-a}*y(2) ] / limitek!!! / Új elem(2) = [ {1-a}*x(1) + a*x(2), {1-a}*y(1) + a*y(2) ] / limitek!!! /

44 Mutáció (FVM) A mutáció a kiválasztott elem értékeinek
véletlenszerű megváltoztatása: a, b = véletlen számok {0..1} között / típus! / c = konstans { pl.= 0.25 } Előtte: [ x1, y1 ] Utána: [ x1 + (x1max - x1min)*a*c, / limitek!!! / y1 + (y1max - y1min)*b*c ] / limitek!!! /

45 Véletlenszám típusok:
Egyenletes eloszlású

46 Véletlenszám típusok: Exponenciális eloszlású

47 Véletlenszám típusok:
Normál eloszlású

48 Véletlenszám típusok:
Háromszög eloszlású checkpoint = ( usual -minimum ) / ( maximum - minimum ); triangledistribution = ( random <= checkpoint )? sqrt ( random * ( maximum - minimum ) * (usual - minimum) )+minimum : maximum - sqrt ((1-random)*(minimum-maximum)*(usual-maximum)) ;

49 Függvény maximum értéke
A függvény: f(x, y) = 20 - (x1 - x0)^2 + (y1 - y0)^2 ahol x0 és y0 konstans értékek A függvény minimum értékét is kereshetjük, ilyenkor a -f(x,y) függvényt maximalizáljuk.

50 Függvény maximum értéke

51 Függvény maximum értéke
. x14 = 4.4

52 Függvény alak (struktúra keresése)
Rendelkezésünkre állnak adott bemeneti paraméter értékekhez tartozó mérési adatok. Például legyenek ezek egy kör sugara (r) és a hozzá tartozó mért terület értéke (Area). Szeretnénk meghatározni azt a függvényt (függvény alakot, struktúrát), amely megadja a bemeneti és kimeneti adatok közötti kapcsolatot, az Area(r) függvényt.

53 Függvény alak (struktúra keresése)

54 Genetikus algoritmus alkalmazások felépítése
Válasszunk ki az alapvető struktúrákat és eljárásokat: a kromoszóma kódolását a populáció méretét, mutációs faktort, ... kiválasztási és törlési stratégiákat keresztezési és mutációs operátorokat Definiáljuk a megállási feltételt Ügyeljünk a megjelenítésre, skálázhatóságra A megoldásunk minősíthető költségfüggvény tudjuk létrehozni. A megoldásunk olyan pontos lesz, mint amilyen pontosnak minősíthető költségfüggvény tudjuk létrehozni.

55 A genetikus algoritmus előnyei
Könnyű megérteni a működését. Moduláris, (könnyen) elválasztható az optimalizálandó probléma programjától. Támogatja a több célfüggvénnyel rendelkező optimalizációkat (is). Alkalmas „zajos környezetben” történő optimalizálásra. Minden esetben ad legalább egy megoldást. A megoldás az idő (iterációs lépések) előrehaladtával egyre jobb (pontosabb) lesz.

56 A genetikus algoritmus előnyei
Számos eljárással felgyorsíthatjuk és autonóm módon fejleszthetjük genetikus algoritmust alkalmazó programjainkat, úgy hogy folyamatosan beépítjük az újabb ismereteket a problémáról, illetve a keresési tér határairól. Könnyű kiterjeszteni korábbi megoldásokat, illetve alternatív megoldásokat létrehozni. Könnyen építhető blokkokat tartalmaz hibrid alkalmazásokhoz. Belső működése alapvetően párhuzamos, könnyű a futtatása elosztott számítógép hálózaton.

57 Mikor alkalmazzunk genetikus algoritmust
Ha más megoldások túlságosan lassúak vagy túlságosan komplikáltak. Ha szükségünk van egy kísérleti eszközre az új elgondolás (algoritmus) kipróbálására. Ha problémához hasonló feladatot korábban már sikeresen megoldottunk GA-al. Ha egy már meglévő GA megoldás kiterjesztését valósítjuk meg.

58 Néhány genetikus algoritmus alkalmazás típus