Bölünmüş İzge İşleme ile Video Devinim Büyütme Video Motion Magnification Using Split Spectrum Processing

Özet

Video devinim büyütme, insan gözünün algılayamadığıküçük mertebedeki devinimlerin uygun bir yöntemlebüyütülmesi ve bu devinimlerin videoda gözle görülebilir halegetirilmesi işlemidir. Bu algoritmalar, video çerçevelerini hemuzamsal hem de zamansal alanda işleme tabi tutarak minikdevinim ve titreşimlerin büyütülüp videoya geri gömülmesitemeline dayanmaktadır. Örneğin, nabız atımının bilekteoluşturduğu devinim, köprü salınımları ve bina titreşimleri gibialgılanması zor olan devinimlerin yanında ses geriçatımı veoptik gibi çeşitli alanlarda da bu yöntemler kullanılmayabaşlanmıştır. Bu çalışmada video devinim büyütmedekullanılan Euler yönteminin zamansal işleme katmanında,radar ve sesötesi (ultrasound) gibi sinyal işleme alanlarındauygulanan ve sinyal-gürültü oranını arttıran Bölünmüş İzgeİşleme yöntemi kullanılmıştır. Önerilen yöntem ve Eulerdevinim büyütme yöntemi, yapısal benzerlik indeksi üzerindenkarşılaştırılmış ve iyileştirmeler gösterilmiştir

Abstract

Video motion magnification is the process of enlarging small-scale movements that cannot be detected by the human eye. To achieve this, first, the video frames are processed in both spatially and temporally via magnifying the subtle movements and vibrations and then, these processed frames are embedded back into the video to create visibility. Various applications in different fields are studied, i.e., magnification of pulse motion on the wrist, oscillations of bridges, vibrations of buildings, and sound recovery of trembling surfaces from video. In this study, a well-known signal processing method, namely, split spectrum processing method which is used to increase the signal-to-noise ratio of returning signals in radar and ultrasound, is successfully employed on the temporal processing layer of popular Euler motion amplification technique for video magnification. Our proposed and classical Euler magnification methods are compared in terms of their structural similarity index and improvements are demonstrated.