AI Summary & Key Takeaways
AI InsightExperimental results demonstrated that the proposed approach can successfully perform real-time accessory tracking and virtual object placement under different usage conditions.
📌 3 Key Takeaways
Abstract
With the rapid development of augmented reality and computer vision technologies, virtual try-on systems have become increasingly popular in digital shopping applications. In particular, the jewelry industry has shown growing interest in interactive systems that allow users to visualize accessories virtually before purchase. In this study, a real-time virtual jewelry try-on system was developed using Unity and OpenCV technologies. The proposed system enables users to virtually experience different jewelry categories, including rings, bracelets, necklaces, and earrings, through a camera-based interactive environment. Different tracking approaches were implemented according to the structural characteristics of each accessory type. Hand landmark tracking was used for ring and bracelet positioning, shoulder-based pose estimation for necklace placement, and facial landmark detection for earring positioning. In addition, real-time smoothing and positioning adjustments were integrated to improve tracking stability and visual consistency. The developed system provides users with an interactive virtual jewelry experience without requiring physical product trials. Experimental results demonstrated that the proposed approach can successfully perform real-time accessory tracking and virtual object placement under different usage conditions. However, lighting conditions, camera angle, and the lack of depth information may affect positioning accuracy and visual realism in certain situations.
Özet
Artırılmış gerçeklik ve bilgisayarlı görü teknolojilerindeki hızlı gelişmelerle birlikte sanal deneme sistemleri dijital alışveriş uygulamalarında giderek daha yaygın hale gelmiştir. Özellikle mücevher sektörü, kullanıcıların satın alma öncesinde aksesuarları sanal olarak görüntüleyebilmesine olanak sağlayan etkileşimli sistemlere artan ilgi göstermektedir. Bu çalışmada Unity ve OpenCV teknolojileri kullanılarak gerçek zamanlı bir sanal takı deneme sistemi geliştirilmiştir. Önerilen sistem; yüzük, bileklik, kolye ve küpe olmak üzere farklı takı kategorilerinin kamera tabanlı etkileşimli bir ortamda sanal olarak deneyimlenmesini sağlamaktadır. Her aksesuar türünün yapısal özelliklerine uygun farklı takip yaklaşımları uygulanmıştır. Yüzük ve bileklik konumlandırması için el işaret noktası takibi, kolye yerleşimi için omuz tabanlı poz tahmini ve küpe konumlandırması için yüz işaret noktası tespit yöntemleri kullanılmıştır. Ayrıca takip kararlılığını ve görsel tutarlılığı artırmak amacıyla gerçek zamanlı yumuşatma ve konum düzeltme işlemleri sisteme entegre edilmiştir. Geliştirilen sistem, fiziksel ürün denemesi gerektirmeden kullanıcıya etkileşimli bir sanal takı deneyimi sunmaktadır. Deneysel sonuçlar, önerilen yaklaşımın farklı kullanım koşulları altında gerçek zamanlı aksesuar takibi ve sanal nesne yerleştirme işlemlerini başarılı şekilde gerçekleştirebildiğini göstermiştir. Bununla birlikte ışık koşulları, kamera açısı ve derinlik bilgisinin bulunmaması bazı durumlarda konum doğruluğunu ve görsel gerçekçiliği etkileyebilmektedir.