Swin transformer based siamese network for thermal and optical image registration

Basit Öğe Kaydı
dc.authorid0000-0003-0779-9620
dc.contributor.authorElsaeidy, Mohamed
dc.contributor.authorYağmur, İsmail Can
dc.contributor.authorAteş, Hasan Fehmi
dc.contributor.authorGüntürk, Bahadır Kürşat
dc.date.accessioned2023-10-13T08:28:44Z
dc.date.available2023-10-13T08:28:44Z
dc.date.issued2023
dc.departmentİstanbul Medipol Üniversitesi, Mühendislik ve Doğa Bilimleri Fakültesi, Bilgisayar Mühendisliği Bölümü
dc.description.abstractThe process of multi-modal image registration is fundamental in remote sensing and visual navigation applications. However, existing image registration methods that are designed for single modality images do not provide satisfactory results when applied to multi-modal image registration. In this research, our objective is to achieve highly accurate alignment of both infrared and optical (visible range) images. To accomplish this goal, we explore the effectiveness of the Swin Transformer encoder and cosine loss in enhancing the keypoint-based image registration process. Simulation results show the improvement achieved in multi-modal registration by using a transformer based Siamese network.
dc.description.abstractÇok modlu görüntü çakıştırma işlemi, uzaktan algılama ve görsel navigasyon uygulamalarında temel bir aşamadır. Ancak, tek modlu görüntüler için tasarlanmış mevcut görüntü çakıştırma yöntemleri, çok modlu görüntü çakıştırmaya uygulandığında tatmin edici sonuçlar vermemektedir. Bu araştırmada, amacımız hem kızılötesi hem de optik (görünür aralık) görüntülerin yüksek doğruluklu eşleştirilmesini gerçekleştirmektir. Bu hedefe ulaşmak için, Swin dönüştürücüsünün ve kosinüs kaybının, anahtar nokta tabanlı görüntü çakıştırma sürecindeki etkinliği araştırılmıştır. Benzetim sonuçları, dönüştürücü tabanlı Siyam ağının çok modlu eşleştirme başarısında sağladığı artışı ortaya koymaktadır.
dc.identifier.citationElsaeidy, M., Yağmur, İ. C., Ateş, H. F. ve Güntürk, B. K. (2023). Swin transformer based siamese network for thermal and optical image registration. 31st IEEE Conference on Signal Processing and Communications Applications (SIU). Istanbul, Turkey, July 05-08, 2023. https://doi.org/10.1109/SIU59756.2023.10224035
dc.identifier.doi10.1109/SIU59756.2023.10224035
dc.identifier.isbn9798350343557
dc.identifier.issn2165-0608
dc.identifier.scopus2-s2.0-85173550926
dc.identifier.scopusqualityN/A
dc.identifier.urihttps://doi.org/10.1109/SIU59756.2023.10224035
dc.identifier.urihttps://hdl.handle.net/20.500.12511/11582
dc.identifier.wos001062571000241en_US
dc.identifier.wosqualityN/A
dc.indekslendigikaynakWeb of Science
dc.indekslendigikaynakScopus
dc.institutionauthorElsaeidy, Mohamed
dc.institutionauthorGüntürk, Bahadır Kürşat
dc.language.isoen
dc.publisherIEEE-Institute of Electrical and Electronics Engineers
dc.relation.ispartof31st IEEE Conference on Signal Processing and Communications Applications (SIU)en_US
dc.relation.publicationcategoryKonferans Öğesi - Uluslararası - Kurum Öğretim Elemanı
dc.rightsinfo:eu-repo/semantics/embargoedAccess
dc.subjectMulti-Modal Image Registration
dc.subjectTransformer Network
dc.subjectKeypoint
dc.subjectÇok Modlu Görüntü Eşleştirme
dc.subjectDönüştürücü Ağı
dc.subjectAnahtar Nokta
dc.titleSwin transformer based siamese network for thermal and optical image registration
dc.title.alternativeTermal ve optik görüntü çakıştırması için swin dönüştürücü tabanlı siyam ağı
dc.typeConference Object

Dosyalar

Orijinal paket
Listeleniyor 1 - 1 / 1
Küçük Resim Yok
İsim:
Elsaeidy-Mohamed-2023.pdf
Boyut:
9.88 MB
Biçim:
Adobe Portable Document Format
Açıklama:
Tam Metin / Full Text
İndir
Lisans paketi
Listeleniyor 1 - 1 / 1
Küçük Resim Yok
İsim:
license.txt
Boyut:
1.44 KB
Biçim:
Item-specific license agreed upon to submission
Açıklama:
İndir

Koleksiyon

Bildiri Koleksiyonu
Scopus İndeksli Yayınlar Koleksiyonu
WoS İndeksli Yayınlar Koleksiyonu