问题描述
我正在尝试使用语音数据训练 SVM,此处使用 RAVDESS 数据集,您可以在此处找到:https://www.kaggle.com/uwrfkaggler/ravdess-emotional-speech-audio
这个数据集有 24 个目录,但我只使用了前 20 个目录。
首先,我将这 20 个目录中所有文件的目录路径导航并保存到一个数组中。
然后我遍历数组,将类保存到另一个数组中并提取音频文件的特征。我将特征保存在数据框中。
我可以看到课程在某种程度上是平衡的:
>>from collections import Counter
>>print(Counter(klass).keys()) # equals to list(set(words))
>>print(Counter(klass).values()) # counts the elements' frequency
dict_keys(['neutral','calm','happy','sad','angry','fearful','disgust','surprised'])
dict_values([76,152,152])
接下来,我正在预处理和规范化数据帧:
from sklearn.preprocessing import StandardScaler
x2 = x.copy()
x2.drop(["file","start","end"],axis = 1,inplace = True)
scaler = StandardScaler()
print(scaler.fit(x2))
x2 = scaler.transform(x2)
x2 = pd.DataFrame(x2)
现在我开始用这个训练 SVM:
from sklearn.model_selection import train_test_split
X_train,X_test,Y_train,Y_test = train_test_split(x2,klass,test_size = 0.20,random_state = 1)
当然还有之前优化超参数(gamma、C 等)。
之后我正在检查最好的参数和分数,看起来不错。
Accuracy Training: 0.9857456140350878
Accuracy Test: 0.6271929824561403
到目前为止,一切都很好。我已经提取了特征并使用情感分类训练了 SVM。现在我想预测模型未知的新音频文件的情感。这里我从数据集的第 24 个目录中随机选择一个音频文件。 这就是问题所在:
import random
Xnew = pd.DataFrame()
EvalFile = glob.glob('{}\**\*24.wav'.format(PATH_RAVDESS),recursive=True)
Xnew = Xnew.append(smile.process_file(EvalFile[random.randint(0,len(EvalFile)-1)]))
Xnew = Xnew.reset_index()
Xnew.drop(["file",inplace=True)
#Standardising is skipped because it makes no sense with one file
Ynew = grid.predict(Xnew)
print("File=%s \nPredicted=%s" % (rdfile,Ynew))
选择哪个文件并不重要。该模型始终预测同一类 'angry'
。
我做错了什么?
解决方法
您在代码中注释:
#Standardising is skipped because it makes no sense with one file
标准化不仅确实有意义(即使是单个文件),而且不是可选的;由于您的模型已经使用标准化数据进行了训练,因此它期望此类标准化数据用于未来的任何预测。否则可能会导致您描述的行为。
因此,在预测您的 Xnew
之前,您应该使用您已经安装的 scaler
对其进行转换:
Xnew = scaler.transform(Xnew)
Ynew = grid.predict(Xnew)
,
问题解决了!
Xnew
必须仅使用 scaler.transform(Xnew)
再次标准化。但不得再次使用 scaler.fit
。那是我的错误。