UAUmut Avci

Umut Avci

*This is an algorithmically generated author record based on publicly available information.

Current Organizations / Institutes

The organizations/institutes from the scholar's latest article


Umut Avci has a total of 7 co-authors. Here are the top co-authors by number of shared publications:


Latest Publications

  • Duygusal Konuşma Tanımada Yapay Veri Kullanımı

    by Umut Avcı

    Bu çalışma, Türkçe konuşmalarda duygu tanıma performansını geliştirmek üzere veri artırma tekniklerinin rolünü incelemekte ve BUEMODB ile ITUDB veri kümelerini temel almaktadır. Konuşmaların sessiz bölümlerin kaldırılması ve ses sinyallerinin normalizasyonu ile gerçekleştirilen ön işleme aşamasının ardından, ses verileri mel spektrogramlara dönüştürülmüş, altı öznitelik seti çıkarılmış ve yedi farklı denetimli öğrenme algoritması kullanılarak temel sınıflandırma yapılmıştır. İlk deneyler sonucunda BUEMODB veri seti için %56,3, ITUDB veri seti için %65,2 F1 skoru elde edilmiştir. Sonraki deneylerde, veri artırma teknikleri kullanılarak eğitim verisi beş kat büyütülmüştür. Bu kapsamda Gürültü Ekleme ve Ses Tonu Değiştirme gibi ses dönüşümlerinin yanı sıra Yakınlaştırma ve Yükseklik Kaydırma gibi görüntü dönüşümleri uygulanmıştır. Ses bazlı tekniklerle veri artırıldığında sınıflandırma başarısı iyileşmiş, Hava Emilimi ve Zaman Ölçekleme kombinasyonu ile F1 skorları BUEMODB için %57,6’ya, ITUDB için %71,3’e çıkmıştır. Görüntü bazlı veri artırma teknikleri daha da yüksek performans göstererek BUEMODB için %60,0’lık, ITUDB için %73,2’lik F1 skorları sağlamıştır. Son olarak, en iyi sonuç veren ses ve görüntü dönüşümlerini birleştiren hibrit bir yaklaşım denenmiştir. Bu yöntemle BUEMODB için %59,7, ITUDB için %75,1 F1 skoruna ulaşılmış ve temel performansa göre yaklaşık %10’luk bir artış kaydedilmiştir. Bulgular, özellikle görüntü ve hibrit tabanlı veri artırma tekniklerinin dikkatlice seçilmesi halinde duygu tanıma doğruluğunun önemli ölçüde yükseltilebileceğini göstermiştir.

  • Open Access

    A Comprehensive Analysis of Data Augmentation Methods for Speech Emotion Recognition

    by Umut Avci

    The limited availability of labeled emotional speech data remains a significant challenge in developing robust speech emotion recognition systems. This paper presents a comprehensive investigation into the effectiveness of diverse data augmentation strategies for enhancing emotion recognition performance. Three different data augmentation categories are examined: audio-based transformations, image-based modifications, and feature-level synthesis. Seventeen transformations are used in audio-based data augmentation to change the raw audio signal’s time and frequency content. Eight transformations, such as shifting, rotating, and zooming, are applied to the spectrogram images for image-based data augmentation. The SpecAugment method is also used to transform the spectrograms into versions with masked time and frequency axes. In feature-space-based approaches, new feature vectors are generated using five oversampling algorithms and a generative adversarial network. Experimental results from EMO-DB and IEMOCAP datasets demonstrate that the data augmentation approaches enhance emotion classification performance by up to six percent. The empirical evidence indicates that training sets augmented through combinations of audio-based transformations yield the highest performance gains. In contrast, the GAN-based approach fails to produce improvements in classification performance.


  • Flight Gate Assignment Problem with Reinforcement Learning

    by Müge Muhafız Yıldız, Umut Avcı, Mustafa Arslan Örnek, Cemalettin Öztürk

  • A Pattern Mining Approach for Improving Speech Emotion Recognition

    by Umut Avci

    Speech-driven user interfaces are becoming more common in our lives. To interact with such systems naturally and effectively, machines need to recognize the emotional states of users and respond to them accordingly. At the heart of the emotion recognition research done to this end lies the emotion representation that enables machines to learn and predict emotions. Speech emotion recognition studies use a wide range of low-to-high-level acoustic features for representation purposes such as LLDs, their functionals, and BoAW. In this paper, we present a new method for extracting a novel set of high-level features for classifying emotions. For this purpose, we (1) reduce the dimension of discrete-time speech signals, (2) perform a quantization operation on the new signals and assign a distinct symbol to each quantization level, (3) use the symbol sequences representing the signals to extract discriminative patterns that are capable of distinguishing different emotions from each other, and (4) generate a separate set of features for each emotion from the extracted patterns. Experimental results show that pattern features outperform Energy, Voicing, MFCC, Spectral, and RASTA feature sets. We also demonstrate that combining the pattern-based features and the acoustic features further improves the classification performance.