温州网站制作设计,国家城乡和住房建设部网站,淄博网站建设推广乐达,google如何提交网站1、评估参数定义
1.1、召准率#xff08;Precision#xff09;
召准率是衡量模型预测正类标签时的准确度的指标。它计算的是模型预测的正类中真正为正类的比例。换句话说#xff0c;召准率表示在所有预测为正类的实例中#xff0c;正确识别为正类的实例所占的比例。 其中…1、评估参数定义
1.1、召准率Precision
召准率是衡量模型预测正类标签时的准确度的指标。它计算的是模型预测的正类中真正为正类的比例。换句话说召准率表示在所有预测为正类的实例中正确识别为正类的实例所占的比例。 其中TPTrue positive, FP: False positive。即TP代表正样本中预测正确的数量FP代表正样本中错误预测的数量。 1.2、召回率Recall 召回率也称为敏感度或真正类率衡量的是模型找到所有正类实例的能力。它计算的是模型预测的正类中真正为正类的实例与数据集中实际正类实例总数的比例。换句话说召回率表示模型正确识别的实际正类实例所占的比例。 其中FN为负样本中预测错误的数量。
1.3、F1-score
F1分数是召准率和召回率的调和平均数它提供了一个单一的值来评估模型的性能平衡了召准率和召回率。它计算的是召准率和召回率的加权平均数权重是各自值的倒数。F1分数的范围从0到1其中1是最好的分数表示既有高召准率又有高召回率。 1.4、灵敏度Sensitivity or True Positive RateTPR
假设有一个用于疾病检测的机器学习模型其任务是将患者分为患病正类或健康负类。灵敏度是衡量模型正确识别患病者的能力。例如如果模型在100个实际患病的人中正确识别出90个那么该模型的灵敏度为90%。
1.5、特异度Specificity or True Negative RateTNR
同样是在上述疾病检测的场景中特异度是衡量模型正确识别健康人的能力。例如如果模型在100个实际健康的人中正确识别出95个那么该模型的特异度为95%。
理想情况下一个好的分类模型应该同时具有高的灵敏度和特异度但在实际应用中这通常是一个权衡的过程。
2、算法示例基于Keras
示例是在天然地震数据信号和噪声二分类的程序中使用的因此使用前三个衡量指标及准确度来做示例 from sklearn.metrics import accuracy_score, precision_score, recall_scoretest_labels label
predicted_classes outaccuracy accuracy_score(test_labels,predicted_classes)
precision precision_score(test_labels,predicted_classes)
recall recall_score(test_labels,predicted_classes)
F1_score1 2*precision*recall/(precisionrecall)
print(fThe accuracy of the model is {accuracy}, the precision is {precision}, the recall is {recall}, and the F1 scorei is {F1_score1}.)
3、效果展示 4、Keras环境下的混淆矩阵绘制 from sklearn.metrics import confusion_matrix, ConfusionMatrixDisplay C confusion_matrix(test_labels, predicted_classes)
print(C)disp ConfusionMatrixDisplay(confusion_matrixC, display_labels[earthquake,noise])
disp.plot(cmapYlOrRd, values_format)
#plt.title(fClassification CNN Results ({self.epochs} epochs))
plt.yticks(rotation90)
plt.tight_layout()
plt.savefig(confusion_matrix_test.png, dpi600)
plt.show()
