Journals / Mühendislik Bilimleri ve Tasarım Dergisi / 2019 / Cilt: 7 - Sayı: 1

ROBOTIC SURFACE MATERIAL RECOGNITION SYSTEM USING SENSOR NETWORK

SENSÖR AĞI KULLANARAK ROBOTİK YÜZEY MALZEME TANIMA SİSTEMİ

Pages
81–89
DOI
—

Abstract

Object recognition usually includes colour, shape and material types. This paper presents a methodology for surface material recognition by a tool which is tapped on an object for robotic applications. Recognition of a surface material can be explored by scratching the tip of the tool over the surface. To classify surface types, many different sensors such as acceleration, force, reflectance, image and audio were used via automated robot movements. For this purpose, 28 different surface materials including such as metals and papers were used. It should be emphasized that the properties of surface materials are also different. 22 different classifiers were trained with these surfaces using Matlab Classification Learner Application. The data which is collected ten times from sensors were examined also in different combinations. First, all data (combination of acceleration, force and reflectance) except image and audio data was observed. Then; only image, only audio and dual combinations of all data subsets were evaluated. In the end, classification accuracy of fused data including all sensors was compared to the rest of the results. The proposed fusion of all features provides a classification accuracy of 98.2% in our experiments when combined with a Bagged Trees classifier.

Özet

Nesne tanıma genellikle renk, şekil ve malzeme tiplerini içerir. Bu çalışma, robotik uygulamalarda kullanılmak amacıyla üzerinde çeşitli sensörler bulunduran kontrollü bir araçla birleştirilmiş yüzey materyali tanıma yöntemi sunmaktadır. Yüzey tiplerini sınıflandırmak için, otomatik robot hareketleri ile hızlanma, kuvvet, yansıma, görüntü ve ses gibi birçok farklı sensör kullanılmıştır. Çalışmada taş, ahşap yüzey, kumaş, plastik, metal ve kâğıt gibi farklı yapıdaki malzemeleri içeren 28 yüzey malzemesi kullanılmıştır. Matlab Sınıflandırıcı Uygulaması kullanılarak bu yüzeylerle 22 farklı sınıflandırıcı eğitilmiş ve sonuçlar analiz edilmiştir. Veriler sensörlerden farklı zamanlarda ve farklı kombinasyonlarda toplanmıştır. İlk olarak, görüntü ve ses verileri hariç tüm veriler (hızlanma, kuvvet ve yansıtma kombinasyonu) gözlemlenmiş; daha sonra sadece görüntü, sadece ses ve bu verilerin ikili kombinasyonları değerlendirilmiştir. Sonuçta, tüm sensörler dâhil olmak üzere birleştirilmiş verilerin sınıflandırma doğruluğu, sonuçların geri kalanıyla karşılaştırılmıştır. Tüm özelliklerin önerilen birleşimi ve Torbalı Ağaç sınıflandırıcısı yöntemi kullanıldığında 98.2% oranında bir sınıflandırma doğruluğu elde edilmiştir.

Keywords: Yüzey malzeme tanıma, Makine öğrenmesi, Nesne tanıma, Veri füzyonu, Çoklu sensör