Oktatók Honlap (lesz!) – Irodalom, kurzus alapja: –Gonzales, Woods: Digital Image Processing –Richard Szeliski könyve és előadásai Számítógépes képfeldolgozás (Gépi látás) Vámossy Zoltán Sergyán Szabolcs

Ma –Bevezető –Képfeldolgozás, Gépi látás –Kurzus követelményei Readings for this week –Mortensen, Intelligent Scissors (online)Mortensen, Intelligent Scissors

Mi a gépi látás?

Terminator 2

Minden kép egy történet A gépi látás célja, hogy olyan programot írjunk, ami interpretálja a képet

Gépi látás eléri-e, megelőzi-e az emberi látást? Igen és nem (de általában nem!) –emberek “összetett” dolgokban jobbak –számítógép „egyszerű” dolgokban jobb

Emberi érzékelés hiányossága… Sinha and Poggio, Nature, 1996

Copyright A.Kitaoka 2003A.Kitaoka

Hol tart ma a gépi látás? A következő diák bemutatják, hogy a gépi látó rendszerek milyen problémákat képesek megoldani.

Föld megjelenítők (3D modell) Microsoft : Virtual EarthVirtual Earth (vagy: Google Earth)Google Earth

Photosynth Photo Tourism technology

Optikai karakterfelismerés (OCR) Számjegyek felismerése, AT&T labs Szkennelt dokumentumok szöveggé alakítása Minden szkenner OCR programmal jön már License plate readers

Arcdetektálás Több digitális fényképezőgép esetén –Canon, Sony, Fuji, …

Mosoly detektálás Sony Cyber-shot® T70 Digital Still Camera

Objektum felismerés (áruházban) LaneHawk by EvolutionRobotics “A smart camera is flush-mounted in the checkout lane, continuously watching for items. When an item is detected and recognized, the cashier verifies the quantity of items that were found under the basket, and continues to close the transaction. The item can remain under the basket, and with LaneHawk,you are assured to get paid for it… “

Arcfelismerés Kicsoda ő?

Biometria “How the Afghan Girl was Identified by Her Iris Patterns” storystory

Beléptetés… Ujjlenyomat szkennerek Arcfelismerő rendszerek

Objektum felismerés (mobil telefonokban) – Microsoft Research –Point & FindPoint & Find

Matrix, ESC Entertainment Speciális effektusok

Karib tenger kalózai Click here for interactive demo Speciális effektusok: motion capture

Sport

Okos autók Mobileye –Látórendszer: BMW, GM, Volvo –2010 után: gyártók 70%-a

Látás alapú interaktivitás Nintendo Wii infra-szenzor követés Lee munkája CMU Lee munkája CMU DigimaskDigimask: 3D avatar felhasználó arcával “Game turns moviegoers into Human Joysticks”, “Game turns moviegoers into Human Joysticks”, CNET

Űralkalmazás Látó rendszer feladatai (JPL) Panorámaképek összeillesztés (Panorama stitching) 3D terepmodellezés Akadály detektálás, helyzet követés “Computer Vision on Mars” - Matthies et al.Computer Vision on Mars NASA'S Mars Exploration Rover Spirit NASA'S Mars Exploration Rover Spirit 2007.

Robotika NASA’ Mars Spirit Rover

Orvosi alkalmazás Képvezérelt sebészet Grimson et al., MIT 3D imaging MRI, CT

State of the art Utóbbi 5 évben jelentős változás Gyorsan változó terület Érdemi gyűjtemény: –David Lowe gépi látással foglalkozó lapjaDavid Lowe

Kurzus követelményrendszer Órák látogatása kötelező (előadás is!), hiányzás max. 30% Szakirodalom olvasás és használat Jegy: 3 rész, mindegyik legalább elégséges kell legyen Pótlás: –Vizsgaidőszakban: hiányzó projekt + zh. Zh.

Jegyek kialakítása Projekt (40%) Ötletek – egyeztetni kell (3 oldalas leírás): –SSIP (Summer School on Image Processing) projektfeladatai –Pinhole kamera készítés és sztereó –Mozgásérzékelés webkamerával –Kinect kamerával környezetmodell alkotás és lokalizáció Képfeldolgozó program (20%) ZH (40%) – utolsó hét