Az előadás letöltése folymat van. Kérjük, várjon

Az előadás letöltése folymat van. Kérjük, várjon

High Speed Networks Laboratory Hálózatba kapcsolt adatbázisok – Hálózatelmélet I.

Hasonló előadás


Az előadások a következő témára: "High Speed Networks Laboratory Hálózatba kapcsolt adatbázisok – Hálózatelmélet I."— Előadás másolata:

1 High Speed Networks Laboratory Hálózatba kapcsolt adatbázisok – Hálózatelmélet I.

2 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Nagy hálózatok – Bevezetés Nagy hálózatok vesznek körül Fizikai hálók Az Internet mint sokszereplős elosztott adatbázis Számítógép hálózatok (útvonalválasztó szint, domain szint) Egyéb infrastruktúrális hálók Úthálózatok Ideghálózatok Fehérjehálózatok Logikai hálók Emberi kapcsolati hálózatok Táplálkozási láncok Metabolikus láncok Bizalmi hálózatok Szervezeti hálózatok Genetikai hálózatok WWW A holisztikus és a redukcionista megközelítés

3 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva A komplex hálózatok tudománya Önálló területté válása 2000 körülire tehető, amikor feltűnt a kutatóknak, hogy nagy valós hálózatok nem teljesen véletlenek, mint azt korábban feltételezték. A kutatás fő terülte: hálózatok struktúrájának és funkciójának megértése hogyan alakulnak ki és fejlődnek Eddigi eredmények: számos valós hálózati tulajdonságra sikerült magyarázatot találni hálózatokon működő folyamatok vizsgálata (keresés, navigálás, információ szétosztás) A komplexitás kialakulásának okai máig sem teljesen tisztázottak Számos irányított rövid kör  információfeldolgozás, kölcsönös egymásra hatás, irányítás Kevés irányítási kör  jobb stabilitás

4 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Kapcsolódó (rész)területek Hálózati folyamatok: Keresés-optimalizálás együttműködő (P2P) hálózatokon, számítógép, keresőmotorok működése és korlátaik Vírusok terjedése és túlélése Internetes közösségi hálók A web kialakulása és tulajdonságai Az Internet útvonalválasztási struktúrája Fraktálok és káosz Szinkronizáció és heterogenitás...ennél akár sokkal több is: filozófiai magasságok hálózatdimenzió, a halál utáni élet stb.

5 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Komplex hálózatok terület célja A komplex hálózatok tudománya nagy hálózatok tulajdonságaival foglalkozik Hogy néznek ki? Milyen nagyok? Milyen fő tulajdonságaik vannak? Hogyan alakulnak ki és hogyan fejlődnek később? Mire lehet ezeket használni? A terület legfontosabb sajátosságai A hálózati csomópontok lokális szabályok alapján viselkednek A hálózat folyamatosan alakul Valós hálózatokat vizsgálunk

6 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Hálózatok kialakultása, dinamikus rendszerek Csomópontok/ügynökök Interakciók hálózata Nagy hálózatok Komplex dinamika: Káosz

7 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Kapcsolódó/alkalmazott tudományterületek Műszaki tudományok Irányítás elmélet Dinamikus rendszerek elmélete Algoritmikus bonyolultságelmélet Információelmélet Statisztikus fizika Biológia, orvostudomány Evolúció Biofizika Genetika Élettan Idegrendszerek (anatómia, élettan) Szociológia Kapcsolati hálók Csoportelmélet Viselkedéselmélet Gazdaságtudomány Üzleti hálózatok Pénzügyi hálózatok

8 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Komplex hálózat: Az Internet Általános értelemben: Nagy bonyolult hálózatok Hálózat komplexitása Sok csomópont Sok kapcsolat Heterogén csomópont típusok és kapcsolattípusok Tisztán kivehető tendencia: kommunikációs hálózatok egyre bonyolultabbakká válnak Az Internet fejlődési trendek Felhasználók számának drámai növekedése Kicsi mobil eszközök Nanotech eszközök, MEMS, szenzorok, RFID Szerteágazó szabványok, sok gyártó  Heterogén eszközök Virtuális hálózatok fizikai hálózakon – VPNs, virtual ISPs Hogyan kezeljük ezt a komplexitást?

9 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Felhasználók számának növekedése Internet ma ~ 2.1 milliárd felhasználó Mobil eszközök száma 2010-re > PC-k száma

10 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Valós komplex hálózat

11 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Komplexitás és káoszelmélet Általában a káosz  Maximum komplexitás, teljes véletlenség Matematikai káosz ~ Nagy bonyolultságú rendszer Az tudományosan vizsgált káosz a véletlentől nem függ Kezdeti állapot függő dinamikus rendszer (pillangó effektus) Fázisátmenet (pl. anyagtudomány) Kvantummenchanika  kvantumkáosz Rend  Komplexitás elmélet  Rendezetlenség

12 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Fraktálok Koch görbe Mandelbrot halmaz

13 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Fraktálelmélet

14 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Hol tart a komplex hálózatok tudománya? Klasszikus véletlen gráfok Erdős Pál és Rényi Alfréd 1959 Kisvilág modell Watts and Strogatz 1998 Általánosított véletlen gráf Newman, Watts and Strogatz 2001 Modellek fejlesztése Skálafüggetlen modell Barabási and Albert Königsberg 7 hídja Leonhard Euler Milgram kísérlet Stanley Milgram 1967 Arpanet 1969 Alkalmazások fejlesztése Elektronikus adatgyűjtés USA nyugati elektromos hálózat összeomlása 1996

15 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Mi mozdította előre a nagy hálózatok vizsgálatát? Számítógépes adatgyűjtés Számítógépes gyors, automatizált feldolgozás Tudományterületeken átnyúló adatbázisokhoz való hozzáférés A tiszta redukcionista világnézet hanyatlása a tudományban A Internet maga nyújtotta a vizsgálat tárgyát, mint nagy hálózat!

16 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Pillanatfelvételek A hálózatok dinamikusak Jelenleg nincs lehetőség a dinamizmus vizsgálatára nagy léptékben Legtöbb adatbázis csak a pillanatnyi állapotot tárolja Ezért egy-egy elemzés csak egy pillanatfelvétel Előfordulnak statisztikai hibák Néha később módosított eredmények

17 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Nagyméretű hálózatok – Van-e különbség?

18 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Nagyméretű hálózatok – Van-e különbség?

19 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva 1929: Karinthy Frigyes – Láncszemek A Földön bármely két ember összekapcsolásához legfeljebb 5 láncszem kell Kapcsolat = személyesen ismerik egymást Hat lépés távolság Zelma Lagerlöf → Gusztáv svéd király → Kehrling → az elbeszélő Híres emberekhez sokkal könnyebb utat találni Egy szegecselő-munkás a Ford művekből → műhelyfőnöke → Ford → Pásztor Árpád → az elbeszélő

20 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Milgram kísérlete 1967 (a másik) Levélküldés: Omaha, Nebraska, Kansas  Massachusetts Nagy távolság (szociológiai, földrajzi) Véletlenszerűen választott emberek Információk: Kísérlet célja Célszemély neve, foglalkozása stb. (teológus felesége, meg egy tőzsdeügynök) Szelvények Személyes ismeretség esetén azonnal a célhoz Egyébként olyanhoz aki valószínűleg személyesen ismeri+levél a Harvardra Eredmények: Néha 1-2 lépés elég volt néha kilenc kellett 296 levélből 232 nem ért célba A maradékból az átlagos távolság 5.5-nek adódott (ellentmondott a tapasztalatokkal, és várakozásokkal)

21 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Karithy (1929) – Minden másképpen van: Láncszemek Milgram (1969) – Kísérlet Hat lépés távolság a társadalomban és máshol

22 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Milgram kísérlete (további részletek) Az utolsó személy igen sokszor ugyanaz Legtöbbször gyorsan földrajzi közelbe értek, ahol köröztek, amíg rést nem találtak a célszemély belső köreibe Problémák Kevés célbeérkező levél Emiatt hosszabb láncok kevésbé vannak jelen (alábecslés) Az emberek gondolkodásának hiányos ismerete Biztos, hogy közelebb kerülünk a célhoz? (túlbecslés) Többször ismételték 2002-ben verzió 2008, Microsoft.NET Messenger Service: 6.6 Hatlépésnyi távolság (John Guare Broadway) A Salah Ben Ghaln Iraki kebabosnak Kaliforniában él egy barátja. aki együtt dolgozik egy nőnek a barátjával, aki viszont tagja annak a diákklubnak, ahova a Don Juan de Marco című, Brando főszereplésével készült film producerének lánya is jár.

23 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Átmérő

24 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Kisvilág-tulajdonság

25 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Számunkra jelenleg lényeges paraméterek 1. Hálózat méret: Csomópontok száma Ezres, milliós, esetleg milliárdos méretek esetén lehet statisztikai adatokkal jól jellemezni egy hálózatot 2. Klaszterezettség: “ C soportosul ás ” mértéke A barátaim jellemzően barátok-e? Ha 1 akkor mindig, ha 0 akkor soha! 3. Átmérő: Kis átmérő, rövid utak, “kisvilág ” jelleg Egy rácsban igen nagy átmérők lehetnek, míg pl. a teljes gráf átmérője Agent Smith paraméter (γ): Mennyire hasonló a szerepük? (s kálafüggetlen szerkezet ) Ha a szám magas, akkor az egyének nagyon hasonlítanak, ha alacsony akkor (~ 2) akkor erősen eltérő szerepek vannak

26 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Melyik tűnik hihetőbbnek mint barátsági háló? Miért?

27 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Szociális hálózatok I. Csomópontok: emberek Kapcsolatok: kapcsolatok? Komoly probléma Kapcsolaterősség Ismeretségi háló (Dunbar-féle szám) Kognitív határ átlagosan 150 fő stabil szociális kapcsolat Minden egyes embert ismerek és szociológiailag viszonyítani tudom őket Ennél nagyobb csoportokhoz szabályrendszer kell, törvények, politika Kategóriák: közeli: 30-50, közepes: távoli: Reciprocitás (barátság hálózat) Módszerek: Kérdőiv Kommunikációs intenzitás ( , telefon stb.) Eléggé megbízhatatlanok Bizonyos tulajdonságokhoz nem kell ezzel törődnünk. (Focirajongók és a tea)

28 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Mark Granovetter: Álláskeresés  A társadalom szerkezete Magas klaszterezettség  Nem random Távoli kapcsolatok! Különben az átmérő nem lesz kicsi. A gyenge kapcsolatok ereje

29 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Kollaborációs hálózatok Csomópontok: személyek és az együttműködés tárgya (tudományos cikk, film, projekt stb.) Kapcsolatok: adott személy részt vett-e az adott dologban Kétrétű hálózat: Vetítés: kössük össze direktbe azokat akik együttműködnek Sok háromszög lesz Magas csoportképződési együttható

30 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Bacon játék (1994)http://oracleofbacon.org/how.php Ráérős Diákok (Albright College: Craig Fass, Brian Turtle, and Mike Ginelli ) Weboldal: Wasson és Tjaden 1997-ben a Time által kiválasztott 10 legnépszerűbb oldal közé IMDB-ről letöltött adatbázis Szolgáltatások: Kapcsolat meghatározása két színész között Színész központisága Bacon központisága 1000kozpont1000kozpont

31 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Bacon játék

32 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Klaszterezettségi együttható

33 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Globális: C=1 Lokális: a kék csúcsra vonatkozóan c kék =1c kék =1/3 c kék =0 Klaszterezettségi együttható

34 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Erdős szám

35 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Erdős szám Erdős-sz á m egy nemnegat í v eg é sz, amely azt mutatja, hogy az adott tud ó s publik á l á st tekintve milyen messze van Erdős Páltól Erdős P á l Erdős-sz á ma 0. Egy tud ó s Erdős-sz á ma n, ha az á ltala í rt cikkek t á rsszerzői k ö z ö tt a legkisebb Erdős-sz á m n-1. Vagyis Erdős P á l Erdős-sz á ma 0, valakinek az Erdős sz á ma 1, ha í rt Erdőssel k ö z ö s cikket, valakinek az Erdős-sz á ma 2, ha nem í rt Erdőssel k ö z ö s cikket, de í rt egy 1 Erdős-sz á m ú szerzővel k ö z ö sen, valakinek az Erdős sz á ma 3, ha nem í rt k ö z ö s cikket sem Erdőssel, sem 1 Erdős- sz á m ú val, de í rt k ö z ö s cikket valamely 2 Erdős- sz á m ú val … é s í gy tov á bb. M á s szavakkal: tekints ü k a vil á g ö sszes matematikai cikkeinek szerzőit egy gráf cs ú csainak, é s k é t szerzőt é llel k ö t ü nk ö ssze, ha van olyan cikk, amelynek szerzői k ö z ö tt mindketten szerepelnek. Ekkor Erdős-sz á mnak nevezz ü k az adott szem é ly é s Erdős P á l k ö z ö tti legr ö videbb ú t hossz á t ebben a gr á fban. Erdos1.mht

36 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Fokszámeloszlás

37 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva A fokszámeloszlás alacsony Agent Smith parmétert jelez: Hollywoodi színészek hálózata (Barabási 1999) Csomópontok: színészek Kapcsolatok: közös filmek Forrás: IMDB Cél: színésztársadalom összetartása  jobb filmek Csomópont szám N Átlagos fokszám ( ) Átlagos útvonal hossz Gruppen (C)

38 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Barátságok és ismeretségek hálózata (Amaral 2000) 417 diák barátkozási statisztikái a Madison Junior Gimnáziumban 43 UTAH-i Mormon ismeretségi hálója

39 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Pareto-elv Vilfredo Pareto ( ) olasz közgazdász Az olasz termőföldek 80%-a a lakosság 20%-ának birtokában van Gazdasági ökölszabály Egy cég bevételének 80%-át az alkalmazottak 20%-a termeli A döntések 80%-át a megbeszélések 20%-a alatt hozzák meg A világ GDP-jének eloszlása (1989) A szabály Népesség hányadaJövedelem Leggazdagabb 20%82,70% Második 20%11,75% Harmadik 20%2,30% Negyedik 20%1,85% Legszegényebb 20%1,40%

40 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva A Földön az összes vagyon 80%-át a népesség 20%-a birtokolja Kisebben is igaz: a világ 10 leggazdagabb embere között a vagyon 80%-a a három leggazdagabb kezében van. Microsoft: a leggyakoribb bugok első 20%-ának kijavítása megszünteti a hibák 80%-át Kevés nagy súlyú csomópont van és sok kicsi A szabály

41 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva A fokszámeloszlás hatványfüggvényt követ Skálafüggetlenség

42 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Valós hálózatok

43 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Szűkebb értelemben vett komplex hálózatok Speciális értelemben 1. Nem véletlenszerű kapcsolatok, “csoportosuló” 2. Kis átmérő, rövid utak, kisvilág 3. Skálafüggetlen szerkezet: erősen változó szerepek a hálózatban

44 Hálózatba kapcsolt adatbázisok – Hálózatelmélet Hosszu Éva Szakirodalom Evolution of Networks – Dorogovtsev-Mendes Statistical Mechanics of Complex Networks Albert-Barabasi The Structure and Function of Complex Networks Mark Newman És sok-sok cikk További ajánlott irodalom Barabási Albert László – Behálózva Csermely Péter – Rejtett hálózatok ereje Duncan J. Watts - Six degrees Egyéb kapcsolódó irodalom Mark Buchanan – Nexus, avagy kicsi a világ James Gleick – Káosz. Egy új tudomány születse Benoit Mandelbrot – A természet fraktálgeometriája


Letölteni ppt "High Speed Networks Laboratory Hálózatba kapcsolt adatbázisok – Hálózatelmélet I."

Hasonló előadás


Google Hirdetések