Adaptive anti-spam filtering based on Turkish morphological analysis, artificial neural networks and Bayes filtering

LEVENT ÖZGÜR

Adaptive anti-spam filtering based on Turkish morphological analysis, artificial neural networks and Bayes filtering

Tezin Türü: Yüksek Lisans

Tezin Yürütüldüğü Kurum: Boğaziçi Üniversitesi, FEN BİLİMLERİ ENSTİTÜSÜ, FEN BİLİMLERİ ENSTİTÜSÜ, Türkiye

Tezin Onay Tarihi: 2003

Tezin Dili: İngilizce

Öğrenci: LEVENT ÖZGÜR

Danışman: SADIK FİKRET GÜRGEN

Özet:

ÖZET TÜRKÇE MORFOLOJİK ÇÖZÜMLEME, YAPAY SINIR AĞLARI VE BAYES FİLTRELEME TABANLI UYARLAMALI SPAM-ÖNLER FİLTRELEMESİ Bu çalışmada, Yapay Sinir Ağları ve Bayes Filtresi uygulamalarını temel alarak Türkçe spam mesajlarını filtreleyen bir algoritma ortaya koyuyoruz. Sonuçta, Microsoft Outlook ile bağlantılı çalışabilen bir spam-önler filtresi ortaya çıktığı için, ürün son kul lanıcıya yöneliktir ve bundan dolayı kullanıcıya özeldir; program kullanıcının spam ve normal mesajlarını öğrenerek kendini her kullanıcı için uyumlu hale getirir. Algorit mamızın iki temel kısmı var: birinci kısım Türkçe kelimelerin morfolojisini incelerken ikinci kısım morfolojik incelemeden gelen kelime köklerini kullanarak spam mesajları filtreler. Öğrenme algoritmalarının girdi vektörleri iki şekilde belirlenir: ikili model ve olasılık modeli. Bu çalışmada, Yapay Sinir Ağlarının iki yapısı kullanılmıştır: tek katmanlı ve çok katmanlı algılayıcı birimleri. Bayes Filtresi de üç değişik yaklaşımla gerçekleştirilmiştir: ikili model, olasılık modeli ve ileri olasılık modeli. Bu çalışma için 750 (410 spam, 340 normal) mesaj kullanılmıştır. Filtrelemede yüzde 90'dan yüksek başarı oranı elde edilmiştir.