Journals / Düzce Üniversitesi Bilim ve Teknoloji Dergisi / 2021 / Cilt: 9 - Sayı: 5

A Review Study on Privacy and Security in Deep Learning Models

Derin Öğrenme Modellerinde Mahremiyet ve Güvenlik Üzerine Bir Derleme Çalışması

Pages
1843–1859
Publication Date
2022-10-12
DOI
—
🏛️Bibliographic metadata and full text access for this article are provided via DergiPark.
DergiPark Record ↗
✨

AI Summary & Key Takeaways

AI Insight
⚡ TL;DR(Too Long; Didn't Read)

Reducing the complexity of cryptographic-based models and developing evaluation methods to determine the model's privacy and security stand out as future research areas.

📌 3 Key Takeaways

🎯
Objective & Hypothesis:With the advanced progress in deep learning in recent times, expectations of artificial intelligence are increasing day by day.
📊
Key Findings & Data:Deep Learning, a research area, applied effectively in many areas such as speech recognition, Natural Language Processing (NLP), and image processing, shows higher success than classical machine learning algorithms.
💡
Conclusion & Impact:Reducing the complexity of cryptographic-based models and developing evaluation methods to determine the model's privacy and security stand out as future research areas.
🔬Design:Review & Systematic Survey
📍Scope:Comprehensive Sample
⚙️Variables:Derin Öğrenme · Güvenli Çok Partili Hesaplama · Diferansiyel Mahremiyet

Abstract

With the advanced progress in deep learning in recent times, expectations of artificial intelligence are increasing day by day. Deep Learning, a research area, applied effectively in many areas such as speech recognition, Natural Language Processing (NLP), and image processing, shows higher success than classical machine learning algorithms. Large amounts of data are employed during the training and prediction stages of deep learning models, in which the data may consist of the user's sensitive data. Therefore, it mustn't contradict the principle of protecting personal data while training and predicting. Consequently, it is crucial to ensure the privacy and security of data. In this study, various deep learning architectures are described. The widely used cryptographic tools applied to preserve the privacy and security of data are summarized. These are homomorphic encryption, differential privacy, secure multi-party computation, and garbled circuits. Recent works considering the privacy and security of deep learning models are examined under two different categories: train stage and prediction stage. In addition, the attacks against deep learning models and techniques for protection against these attacks are reviewed. Finally, open research areas are determined. Reducing the complexity of cryptographic-based models and developing evaluation methods to determine the model's privacy and security stand out as future research areas.

Özet

Son dönemlerde derin öğrenmedeki devrim niteliğindeki gelişmeler ile birlikte yapay zekaya yönelik beklentiler gün geçtikçe artmaktadır. Konuşma tanıma, doğal dil işleme (NLP), görüntü işleme gibi birçok alanda etkin bir şekilde uygulanabilen bir araştırma alanı olan derin öğrenme klasik makine öğrenmesi ile karşılaştırıldığında daha yüksek başarı göstermektedir. Derin öğrenme ile geliştirilen modellerde eğitim ve tahminleme sırasında büyük miktarda veri kullanılmakta ve kullanılan veriler kişisel verilerden oluşabilmektedir. Bu verilerin işlenmesi sırasında kişisel verilerin korunması kanununa (KVKK) aykırı olmaması oldukça önemlidir. Bu nedenle verilerin gizliliği ve güvenliğinin sağlanması oldukça önemli bir husustur. Bu çalışmada, derin öğrenme modelleri geliştirilirken yaygın kullanılan mimariler verilmiştir. Verilerin gizliliği ve güvenliğini artırmak için literatürde yaygın olarak karşılaşılan güvenli çok partili hesaplama, diferansiyel mahremiyet, garbled devre protokolü ve homomorfik şifreleme araçları özetlenmiştir. Çeşitli sistem tasarımlarında kullanılan bu araçların yer aldığı güncel çalışmalar taranmıştır. Bu çalışmalar, derin öğrenme modelinin eğitim ve tahminleme aşamasında olmak üzere iki kategoride incelenmiştir. Literatürdeki çeşitli modeller üzerinde uygulanabilen güncel saldırılar ve bu saldırılardan korunmak amacıyla geliştirilen yöntemler verilmiştir. Ayrıca, güncel araştırma alanları belirlenmiştir. Buna göre, gelecekteki araştırma yönü kriptografik temelli yöntemlerin karmaşıklığının azaltılması ve geliştirilen modelin güvenilirliğini belirlemek için çeşitli ölçme ve değerlendirme yöntemlerinin geliştirilmesi yönünde olabilir.

🔖

Cite This Article

YİĞİT, G., KALE, A. (2022). A Review Study on Privacy and Security in Deep Learning Models. Düzce Üniversitesi Bilim ve Teknoloji Dergisi, Cilt: 9 - Sayı: 5, 1843–1859. https://ajindex.com/articles/493903

📄 Full Text PDF Viewer

📄

PDF görüntüleyici hazırlanıyor...

References (12)

  1. Y. Kim, “Convolutional neural networks for sentence classification,” Conference on Empirical Methods in Natural Language Processing, Proceedings of the Conference, 2014, ss.1746–1751
  2. O. Ronneberger, P. Fischer ve T. Brox, “U-net: Convolutional networks for biomedical image segmentation,” International Conference on Medical Image Computing And Computer-Assisted Intervention, 2015, ss. 234-241
  3. P. Pan, Z. Xu, Y. Yang, F. Wu ve Y. Zhuang, “Hierarchical recurrent neural encoder for video representation with application to captioning,” Proceedings of the IEEE Computer Society Conference on Computer Vision and Pattern Recognition, 2016, ss. 1029-1038
  4. G. Parascandolo, H. Huttunen, ve T. Virtanen, “Recurrent neural networks for polyphonic sound event detection in real life recordings,”, IEEE International Conference on Acoustics, Speech and Signal Processing - Proceedings, 2016, ss. 6440-6444
  5. Z. Cai, Q. Fan, R. S. Feris, ve N. Vasconcelos, “A unified multi-scale deep concutional neural network for fast object detection,” n European conference on computer vision, 2016, ss. 354-370
  6. S. E. Kahou, V. Michalski, K. Konda, R. Memisevic, ve C. Pal, “Recurrent neural networks for emotion recognition in video”, Proceedings of the 2015 ACM International Conference on Multimodal Interaction, 2015, ss. 467-474
  7. T. Hughes ve K. Mierle, “Recurrent neural networks for voice activity detection”, IEEE International Conference on Acoustics, Speech and Signal Processing, 2013, ss. 7378-7382
  8. B. Alipanahi, A. Delong, M. T. Weirauch ve B. J. Frey, “Predicting the sequence specificities of DNA- and RNA-binding proteins by deep learning,” Nature Biotechnology, c. 33, s. 8, ss. 831-838, 2015
  9. R. Xu, D. C. Wunsch ve R. L. Frank, “Inference of genetic regulatory networks with recurrent neural network models using particle swarm optimization,” IEEE/ACM Transactions on Computational Biology and Bioinformatics, c. 4, s. 4, ss. 681-692, 2007
  10. M. Auli, M. Galley, C. Quirk, ve G. Zweig, “Joint language and translation modeling with recurrent neural networks” Conference on Empirical Methods in Natural Language Processing, 2013, ss.1044-1054
  11. S. Lai, L. Xu, K. Liu ve J. Zhao, “Recurrent concutional neural networks for text classification,” Proceedings of the AAAI Conference on Artificial Intelligence, c. 29, s. 1, ss. 2267–2273, 2015
  12. S. Hochreiter ve J. Schmidhuber, “Long Short-Term Memory,” Neural Computation, c. 9, s. 8, ss. 1735-1780, 1997.