Sütő János Statisztikai spamszűrők Hatékony védelem a spam ellen.

Slides:



Advertisements
Hasonló előadás
Feladat Kapcsolat a külvilággal SPAM és Vírus szűrés Biztonság Nem része a szervezetnek Nem AD tag Minimális kommunikáció a szervezettel.
Advertisements

Analitikus függvények
Analitikus, statisztikai és szélsőérték fv-k Hári Veronika
Analitikus, statisztikai és szélsőérték fv-k Rózsa Győző
Jövő hálózati megoldások – Future Internet
A szervezési munka időszükségletének és költségének megtervezése CPM – Critical Path Method.
Kvantitatív Módszerek
2012. tavaszi félév Vitéz Gergely. A diasor ismerete nem helyettesíti a tankönyvet, és a példatárat. A diasor ismerete szükséges, de nem elégséges feltétele.
1 Informatikai Szakképzési Portál Adatbázis kezelés DCL – Adatvezérlő nyelv.
Kvantitatív módszerek
3. Két független minta összehasonlítása
Online Katalógus aleph.nyf.hu.
Mellár János 5. óra Március 12. v
Edzők válaszai a kérdőíves felmérésre (325 válaszadó)
© Gács Iván (BME) 1 Szennyezőanyagok légköri terjedése A terjedés időbeli folyamatai BME Energetikai Gépek és Rendszerek Tanszék.
Bevezetés a gépi tanulásba február 16.. Mesterséges Intelligencia „A számítógépes tudományok egy ága, amely az intelligens viselkedés automatizálásával.
3(+1) osztályozó a Bayes világból
Fejlett Programozási Technológiák II. Világos Zsolt 7. gyakorlat.
1. IS2PRI2 02/96 B.Könyv SIKER A KÖNYVELÉSHEZ. 2. IS2PRI2 02/96 Mi a B.Könyv KönyvelésMérlegEredményAdóAnalitikaForintDevizaKönyvelésMérlegEredményAdóAnalitikaForintDeviza.
Nagy égboltfelmérések Dr. Szabó M. Gyula SZTE Sopron, dec. 5. (Mikulás!!)
SQL92 lehetőségek KL A tábla B tábla C view adatok VIEW működése utasítás: SELECT.. FROM A,B … SELECT.. FROM C Az adatok a hivatkozáskor állítódnak elő.
ADATBÁZISOK
{ Közösségi spammelés felismerése és eliminálása Kivonat – Pletser József.
WISC-IV gyermek intelligenciateszt
Kvantitatív módszerek
Kvantitatív módszerek 7. Becslés Dr. Kövesi János.
„EU-s tartalmak az oktatásban" Pedagógustovábbképzési program Budapest, 2008 április 1 EU-S TARTALMAK AZ OKTATÁSBAN A képzés célkitűzései.
A közép- és emelt szintű vizsga tanári értékelése
Levelezés, és a többiek Takács Béla Irodalom Bodnár –Magyari: Az Internet használata I. (Kiskapu) Bodnár –Magyari: Az Internet használata.
Magyar nyelvi szintaktikai elemzőrendszerek Vincze Veronika Szegedi Tudományegyetem Informatikai Tanszékcsoport A magyar nyelv helyzete a digitális korban.
Egy új spamszűrő módszer Sass Bálint
Statisztika, kutatásmódszertan I.
STATISZTIKA II. 3. Előadás Dr. Balogh Péter egyetemi adjunktus Gazdaságelemzési és Statisztikai Tanszék.
Logikai szita Izsó Tímea 9.B.
, levelezés … kérdések - válaszok Takács Béla 2008.
2007. május 22. Debrecen Digitalizálás és elektronikus hozzáférés 1 DEA: a Debreceni Egyetem elektronikus Archívuma Karácsony Gyöngyi DE Egyetemi és Nemzeti.
Adatbázis adminisztrátori ismeretek
$ Információ Következmény Döntés Statisztikai X.  Gyakorlati problémák megoldásának alapja  Elemzéseink célja és eredménye  Központi szerep az egyén.
1/20 Kulturális örökség a Szemantikus Weben a Museum24 projekt Szász Barnabás Finnország, 2005.
Felhasználók és jogosultságok
Mobil Internet 15. előadás: Mobilitás támogatás az IP réteg felett II./II. Nováczki Szabolcs BME Híradástechnikai Tanszék 2008/2009 II. félév.
Objektum orientált programozás a gyakorlatban
Növény monitoring Ambrus Á., Györfi L., Vásárhelyi A. Az élelmiszerekben elforduló növényvéd-szermaradékok élelmiszerbiztonsági megítélése 5/2002. (II.
Exponenciális - Logaritmus függvények, Benford fura törvénye
Belami beszámoló – Doménadaptációs alkalmazások. Problémafelvetés Felügyelt tanulás elvégzéséhez gyakran kevés jelölt adat áll rendelkezésre  doménadaptáció.
2006. Peer-to-Peer (P2P) hálózatok Távközlési és Médiainformatikai Tanszék.
Tanulói utánkövetés 2009/2010. A 2009/2010-es tanévben iskolánkban 210 tanuló végzett. 77 fő a szakközépiskola valamelyik tagozatán 133 fő szakmát szerzett.
ORACLE ORDBMS adminisztrációs feladatok 3. rész dr. Kovács László 2004.
Supervizor By Potter’s team SWENG 1Szarka Gábor & Tóth Gergely Béla.
Adatbázis-kezelés Tarcsi Ádám január. 15. MySQL és PHP.
Varga Viktor – G36ECF 1/5 Vendéglátói szoftverek sajátosságai Varga Viktor.
Rugalmas, moduláris felépítés Rugalmas telepítés Jól tervezhető szerepkörök Folyamatos rendelkezésre állás Egyszerű felügyelet Elérés bárhonnan Postafiók.
Programozási tételek.
NyEMRLSz Hittudományi Tanácskozás Tóbiás Attila A VILÁGHÁLÓ ÁLDÁSAI, KÍSÉRTÉSEI ÉS BUKTATÓI.
1. Melyik jármű haladhat tovább elsőként az ábrán látható forgalmi helyzetben? a) A "V" jelű villamos. b) Az "M" jelű munkagép. c) Az "R" jelű rendőrségi.
Automatizálási folyamatok az SQL 2012-ben
Adatbányászat Excel 2007-tel
Kvantitatív módszerek
Korszerû IT Biztonságtechnika Számonkérés Szorgalmi feladatok hétrõl-hétre  Óra kezdésig kell elküldeni nekem Félév-végi vizsga ZH  100.
Vírus - Spam. Új célpontok Hagyományos támadási célok:  Szerverek, kiszolgálók, hálózati eszközök  Ma már többnyire megfelelő védelemi rendszerek.
Gazda Gergő Flexo szeminárium - Budapest, október Gazda Gergő Flexo szeminárium - Budapest, október Hatékony rendelés-feldolgozás, adminisztráció.
Perifériás érbetegség és krónikus vesebetegség: a fokozott
> aspnet_regiis -i 8 9 TIPP: Az „Alap” telepítés gyors, nem kérdez, de később korlátozhat.
K OVÁCS ANDRÁS, Ph D. E GYETEMI ADJUNKTUS S ELYE J ÁNOS E GYETEM november 25. IX. MRTT Vándorgyűlés, Révkomárom Selye János Egyetem Gazdaságtudományi.
Bevezetés a méréskiértékelésbe (BMETE80ME19) 2014/
Gráfadatbázisok Rácz Gábor.
Alkalmazási réteg protokolljai
Alkalmazási réteg protokolljai
KÉRÉSÜNK: Az idei bevallások elkészítése- kor nagyon szívesen és öröm-mel fogadjuk a segítséget, az újabb felajánlásokat, amik hozzásegíthetnek bennünket.
Készítette: Pethő Eszter, Rácz Viktória, Tóth Anna Eszter
Előadás másolata:

Sütő János Statisztikai spamszűrők Hatékony védelem a spam ellen

Graham - Plan for spam

Dekódolás, tokenekre bontás

Valószínűség és érdekesség

Döntési mátrix felépítése

Statisztikai összegzés 100 % 0%91%

Token adatbázis

Tanítás

Tanítás mennyisége vs. idő

Pontosság vs. idő

Fehérlista 0. SQL táblában tárolt minták 1. Név, , domain, IP-cím, FQDN 2. „From:” sor alapján

Csapda cím + aknamező = intelligens feketelista

„Nehéz pontosan meghatározni a határértéket...” “...Ha túl magas, akkor kevés spamet ismer fel, ha túl alacsony, akkor sok jó levelet is elve-szítünk.”

Valószínűség eloszlás Forrás:

A szakértő megmondja „Egy embernél jól működhet, de nél már nem” „... később komoly csalódás éri a té-ves biztonságérzetű felhasználót” „A spammerek legú-jabb trükkjeit nem ismeri fel”

„A Bayes-alapú technológiák megbízhatósága kétséges, két- ségbe vonható”

Return-Path: X-Original-To: Received: from av-engine (localhost [ ])‏ by xx.xxxx.hu (Postfix) with SMTP id E04CC17013 for ; Mon, 21 Jul :38:58 Received: from 194.xx.xx.xx (unknown [ ])‏ by xx.xxxx.hu (Postfix) with SMTP id ABD for ; Mon, 21 Jul :38:57 Received: from by Sun,20 Jul :35:59 Message-ID: <C[20 Date: Mon, 21 Jul :38: (CEST)‏ From: To: undisclosed-recipients:; Mikro/piko spam

FROM*yahoo.com NO_SUBJECT* HEADER*undisclosed-recipients level84: in 68 [ms]

Received: from mx2.xxxx.hu (mx2.xxxx.hu [195.xx.xx.xx])‏ Received: from [ ( dsl.telesp.net.br [ ])‏ Received: from [ ] by mail2.newfashionproducts.com; Wed, 23 Jul Hora oficial do Brasil From: To: Subject: Vulcan! Date: Wed, 23 Jul Hora oficial do Brasil Content-Type: text/plain; format=flowed; charset="Windows-1252"; reply-type=original Content-Transfer-Encoding: 7bit For bad boys only

HEADER*windows HEADER*mx2.xxxx.hu HEADER*195.xx.xx.xx level90: in 30 [ms] ingenuitycopy.com.multi.surbl.org has address ingenuitycopy.com.multi.uribl.com has address SURBL0*ingenuitycopy.com

Received: from mx2.xxxx.hu (mx2.xxxx.hu[195.xx.xx.xx])‏ by xx.xxx.hu (Postfix) with SMTP id C3F for ; Tue, 15 Jul :57: Received: from av-engine (localhost [ ])‏ by mx2.xxxx.hu (Postfix) with SMTP id C1C3642A0C6 for ; Tue, 15 Jul :57: Received: from host1-111-dynamic r.retail.telecomitalia.it (host dynamic r.retail.telecomitalia.it [ ])‏ by mx2.xxxx.hu (Postfix) with SMTP id BC2D1429EA9 for ; Tue, 15 Jul :57: Message-ID: Date: Tue, 15 Jul :57: From: "Anne" To: "Vickie" Subject: Style casino Win, win with us - our casino

HEADER*mx2.xxxx.hu HEADER*195.xx.xx.xx FROM*acts.hu Subject*casino with+our level65: in 41 [ms]

Received: from (unknown [ ])‏ by xx.xxx.hu (Postfix) with SMTP id83F6C17018 Message-ID: From: "kalle sandgorg" To: Subject: We caught you naked in the shower xxxx MIME-Version: 1.0 Content-Type: text/plain; charset="iso " Content-Transfer-Encoding: 7bit X-Priority: 3 X-MSMail-Priority: Normal X-Mailer: Microsoft Outlook Express X-MimeOLE: Produced By Microsoft MimeOLE V WATCH:

Subject*caught Subject*you Subject*shower Subject*naked level72: in 27 [ms]

Received: from abqr197.neoplus.adsl.tpnet.pl (abqr197.neoplus.adsl.tpnet.pl [ ])‏ Received: from (HELO merlin.cssiinc.com)‏ by xx.xxxx.hu with ESMTP ({nChar[8-12]}nChar[4-6]})‏ From: "Louis Hernandez" To: "Melvin King" Subject: Get a rod of colossal measurements! =_NextPart_6255_18D9_01C8ECCA.BFE87290 Content-Type: text/plain; charset="windows-1250" Content-Transfer-Encoding: quoted-printable I thought I could not do anything with this small dimension until I tried this remedy! Make it get bigger, go for it! once, I didnt want to hit it again.would tell him, You dont look Jewish. Nothing made him feel happierones. Kreatív írás

FROM*louis FROM*hernandez HEADER*nchar windows-1250+meta Subject*get Subject*rod small+dimension made+him tried+this it!+font didnt+want until+tried you+dont mshtml name level93: in 33 [ms]

Received: from (ipbf.tokyo.ocn.ne.jp [ ])‏ From: "boote kirby" To: Subject: to sj Get the great discounts on popular software today ! Windows XP Pro With SP2 - $59.95 Adobe Acrobat Pro 8 - $69.95 Office 2003 Pro - $59.95 Adobe Photoshop CS2 - $79.95 Microsoft Office 2004 for MAC $79.95 Adobe Acrobat 7 Professional for MAC $59.95 Adobe Creative Suite 2 Premium for MAC $ Visit our site: (copy this link and then replace "[DOT]" to ".")‏ Adobe + „eltört” URL

great+discounts adobe+acrobat adobe+creative suite+premium creative+suite microsoft+office $59.95+adobe $79.95+adobe NO_SUBJECT* adobe+photoshop acrobat+professional photoshop+cs office+pro premium+for our+site com+copy copy+this replace+dot level66: in 41 [ms]

Received: from x.x.x.x.pldt.net (unknown [ ])‏ From: =?koi8-r?B?8i7nLiDz1NLVxdc=?= To: =?koi8-r?B?4c3exc7Dxdc=?= Subject: =?koi8-r?B?NyDU28suIOFxMXU08vPQ0sxc7JxSDP1CDv0sLJ?= =C6=D2=C1=CE=DB=C9=DA=CE=CF=C7=CF=20=D0=C1=CB=C5=D4=C1&nb sp; «ORBY»: C9=DE=C5=CE=CE=CF=C5 =D0=D2=C5=C4=CC=CF=D6=C5=CE=C9=C5 = Content-Type: image/jpeg; name="orbi0.jpg" Content-Transfer-Encoding: base64 Image spam

Subject*koi8-r charset+koi8-r koi8-r+content-transfer-encoding koi8-r+meta div+bgcolor bgcolor+div raquo+font jjjjj+nbsp nbsp+jjj color+jjj jjj+jjjjj generator+style raquo+nbsp color+img strong+nbsp src+cid image+jpeg jpeg+content-transfer-encoding content-transfer-encoding+base IMAGE* EMBED* level70: in 51 [ms]

Received: from mary ( charter.com [ ])‏ Received: from [ ] by f.mx.mail.yahoo.com; From: "Carey To: Subject: Great variety of little helpers for your health =_NextPart_001_000F_01C8E6D2.031FDE80 Content-Type: text/html; charset="iso " Content-Transfer-Encoding: quoted-printable CLICK HERE URL!!! =_NextPart_000_000E_01C8E6D2.031FDE80 Content-Type: image/gif; name="10.gif" Content-Transfer-Encoding: base64

HEADER*f.mx.mail.yahoo.com FROM*carey Subject*great Subject*little Subject*helpers Subject*your Subject*health Subject*for+Subject*your center+bordercolor mshtml body+body body+table here+font border+href name content-type+meta head+title div+align size+click IMAGE* level97: in 33 [ms]

„A töltelékszavak lerontják a felismerés hatékonyságát...” “...Spamre nem jellem-ző szavakat tesznek bele, így fog átjutni a spamszűrőn. Ha taní-tod, akkor mérgezi az adatbázist, sokkal rosszabbul fog működ-ni.”

Received:from dsldevice.lan (x.x.x.x.orange.es[ ])‏ Subject: Give freedom to the desires Content-Type: text/html; charset="Windows-1252" Content-Transfer-Encoding: quoted-printable A better way to give up smoking. Your new source of great health. Here! exporatory euroaquilo equilivent esthesises entogenous eurobridge ethermeter fBTERMINFO enterozoan februarius

HEADER*dsldevice.lan FROM*charles Subject*give Subject*freedom Subject*desires windows-1252+meta charset+windows windows-1252+content-transfer-encoding generator+style here!+font size+better size+your div+align quoted-printable+the bgcolor+div you+dreamt which+one health.+font URL*livefilestore.com level73: in 27 [ms]

Received: from x-x-x-x.aaa.com.br (unknown[ ])‏ From: "Mckenzie Lavinder" To: "xxx" Subject: Actually you do not try them? Content-Type: text/plain; charset="iso " But sold? Is by consequence indistinguishable. Is therefore It viewer. For counteract. At to broaden. on by supplementary seriously sentiment. avoid at twist. my what, dangerous the pipes. Which disappear. He is ignorant, repose. you timetable faculty. That easy it welch appellant. by go prescribed broken misguided. mistress the mindless. prophet social a hive. To be violate master.

Subject*actually Subject*you Subject*not Subject*try Subject*them charset+iso align+baseline border+div URL*livefilestore.com hspace=0+src div+align bgcolor+div generator+style baseline+border size+but size+which level78: in 58 [ms]

Received:from 3lyw4 (x.x.x.x.vodafone.hu[ ])‏ From: =?ISO ?Q?Anikó?= Subject: Nyerj LCD TV-t! To: Content-Type: text/plain; charset="ISO " Reply-To: Hello! Szívesen néznéd Te is a filmeket egy nagyképernyos LCD TV-n, de nincs rá pénzed? Akkor nyerj egyet! Csak egy sms-t kell elküldened, és máris jó esélyed van rá, hogy jelképes áron vásárolhasd meg álmaid nagyképernyos plazmatv-jét! Nézd meg ezt az oldalt, megéri! Magyar nyelvű spam

FROM*vipmail.hu FROM*anikó HEADER*3lyw egy+sms-t van+hogy phrase: RBL checking: zen.spamhaus.org surbl check for matutinyersz.eu (0) took 0 ms FROM*vipmail.hu FROM*anikó HEADER*3lyw egy+sms-t filmeket van+hogy van sms-t hogy mix: megéri! caught by rbl RBL0* level76: in 28 [ms]

Received: from mx2.xxxx.hu (mx2.xxxx.hu [195.xx.xx.xx])‏ Received: from (x.x.x.x.pool.tvnet.hu[ ])‏ From: "Molnár Zsolt" To: Subject: Címlista Tisztelt Hölgyem/ Uram! Megrendelhető nálam az alábbi címlista: magyarországi vállalkozás címe, tetszés szerinti csoportosításban (összesítve, illetve számos kategória külön is) magyarországi magán cím. Továbbá el tudom vállalni az kampány lebonyolítását (kiküldés), valamint tudok ajánlani címeket gyűjtő, valamint hírlevél kiküldő programot. Valamennyi címlistát idén, januárjában allítottam össze, a hibaszázalék mindössze 5-10 százalék, vagyis aktuálisabb, mint szinte valamennyi más hasonló adatbázis. Üdvözlettel, Molnár Zsolt

Subject*címlista uram!+megrendelhető megrendelhető+nálam részletes+tájékoztatót címlista valamennyi+címlistát tudok+ajánlani küldök+illetve címem vállalkozás magyarországi+magán bármilyen+felmerülő alábbi tájékoztatót+küldök illetve+válaszolok hasonló+adatbázis válaszolok+bármilyen számos+kategória címlista magyarországi+vállalkozás Üdvözlettel+molnár molnár+zsolt

Received: from mobilier1 (dslXXXX.pool.t-online.hu [ ])‏ From: Kontra =?ISO ?Q?György?= To: Subject: =?ISO ?Q?Bemutatkozás?= X-DCC--Metrics: mail02a.mail.t-online.hu 0; Body=1 Fuz1=1 Fuz2=1 Tisztelt Hölgyem Tisztelt Hölgyem/Uram! Kérem engedje meg hogy, bemutatkozzunk pár másodperc alatt. Tekintse meg szórólapunkat, és ha felkeltettük érdeklõdését tekintse meg web oldalunkat és keressen fel személyesen vagy telefonon. Tekintse meg aktuális akciónkat! Köszönjük a türelmét! Üdvözlettel: Kontra György Az Ön címe valamely nyilvános, mindenki által elérhetõ adatbázisból származik. Ez az nem minősül spamnek, hanem a évi CVIII. Törvény 14. §-ban elõírt "hozzájárulás" kérés az informáláshoz. Amennyiben a továbbiakban nem kíván ilyen üzenetet kapni, kérjük, jelezze ezt egy válasz ben. Ha levelünkkel zavartuk, elnézést kérünk.

HEADER* HEADER*mobilier FROM*Kontra =?ISO ?Q?Gy=F6rgy?= Subject*bemutatkozás microsoft+frontpage frontpage.editor.document+meta content+frontpage.editor.document content-language+content title+tisztelt keressen+fel engedje+meg hogy+bemutatkozzunk oldalunkat+href windows-1250+title URL*mobilier.hu URL*freeweb.hu kérjük+jelezze alatt.+tekintse jelezze+ezt web+oldalunkat nem spamnek+hanem hanem évi évi+cviii cviii.+törvény törvény

Bayes mérgezés Date: Tue, 15 Jul :57: From: "Anne" To: "Vickie" X-Abcde: ajaja ahah aua akakaka akaka Subject: Re: attack on spam filters I agree with you! ajaj ajaju azaha azazazz akak

Hogyan lehet legyőzni a statisztikai spamszűrőket?

Ha nem használod...