Yazar "Korkmaz, Mustafa" seçeneğine göre listele

Listeleniyor 1 - 1 / 1
  • Küçük Resim Yok
    Öğe
    Fizyolojik işaretler yardımıyla kalp atışı tespiti ve uygulamaları
    (Bursa Teknik Üniversitesi, 2024) Korkmaz, Mustafa; Vatansever, Saffet
    Medya ve internet ortamlarında, video ve görsel içerikli verilerin paylaşılması giderek artmakta ve bunlara kolayca erişilebilmektedir. Yapay zekâ teknolojisinin gelişmesiyle birlikte çeşitli algoritmalar kullanılarak sahte video ve görsel içerikler kolay bir şekilde üretilebilmektedir. Bu tür içerikler, şantaj, yanlış bilgi yayma, karalama ve siyasi problem oluşturma gibi ciddi güvenlik riskleri barındırmaktadır. Bu şekilde manipülasyon yapılarak bireylerin asla yapmadığı şeyleri yaptığı veya bulunmadığı bir ortamda bulunduğu algısı oluşturulabilir. Sahte içeriklerin kötü niyetle, kolayca ve programlama bilgisi gerektirmeden üretilebilmesi, bu tür içeriklerin tespitini son derece önemli kılmaktadır. Sahte videolar farklı algoritmalar kullanılarak oluşturulsa da gerçek videolardakine benzer şekilde biyolojik sinyallere sahiptirler. Ancak sahte videolarda ışık farklılıkları, görüntünün sıkıştırılması ve video oluşturma modellerinin yetersizliği gibi birçok tutarsızlık bulunmaktadır. Bu gibi sebepler oluşturulan videolardaki biyolojik sinyallerin enerjisi zayıflatmaktadır. Bu yaklaşım doğrultusunda, fizyolojik sinyallerin belirleyici özellikleri kullanılarak videolarda sahtecilik tespitine yönelik bir çalışma gerçekleştirilmiştir. PURE veri setinden hareketsiz 10 gerçek ve 10 sahte video, UBFC veri setinden de 10 gerçek ve 10 sahte video örnekleri incelenmiştir. Gerçek video örneklerinin alın altında kalan bölgeleri değiştirilerek bu videoların sahteleri oluşturulmuştur. Bu tez çalışmasında ilk olarak, yüz videolarından doğru rPPG sinyali elde edilmesine odaklanmıştır. Doğru ve düzgün sinyallerin çıkarılabilmesi için oldukça önemli olan yüksek başarımlı bir yüz bölgesi analizi yapılmıştır. Elde edilen yüzün farklı bölgelerinde, geçici olarak normalize edilmiş RGB uzayında cilde ortogonal bir düzlem tanımlanarak, rPPG sinyalleri elde edilmiştir. Bu rPPG sinyallerine kısa zamanlı fourier dönüşümü (STFT) uygulanarak kalp atış hızı tespiti yapılmıştır. PURE veri setindeki gerçek videoların ve oluşturulan sahte videoların kalp atış hızı sinyalleri ile referans kalp atış hızı sinyalleri arasındaki korelasyon değerleri hesaplanmıştır. Eğer videolarda kalp atış sinyali tespit edilebildiyse sahtecilik analizi yapılmıştır. Sahtecilik tespiti için yüzün alın bölgesi, burun, yanaklar ve alın altında kalan bölgeleri kullanılmıştır. Bu bölgelerdeki rPPG sinyallerine hızlı fourier dönüşümü (FFT) uygulanarak video örnekleri için frekans spektrumundaki en yüksek enerjiye sahip büyüklükler bulunmuştur. Alın bölgesi videolarda değiştirilmediği için referans olarak alınmıştır. Alın ve yanaklar, alın ve yanak burun, alın ve alın altında kalan bölgedeki enerji büyüklük farkları hesaplanmıştır. Bulunan farklar belirli bir eşik değerin altındaysa sahtecilik analizi gerçekleştirilmemiştir. Eğer farklar belirli bir eşik değerin üzerindeyse videolarda sahtecilik tespit yöntemi önerilmiştir.