MATLAB - 从分类器生成混淆矩阵

Question

我有一些测试数据和标签：

testZ = [0.25, 0.29, 0.62, 0.27, 0.82, 1.18, 0.93, 0.54, 0.78, 0.31, 1.11, 1.08, 1.02];

testY = [1 1 1 1 1 2 2 2 2 2 2 2 2];

然后我对它们进行排序：

[sZ, ind] = sort(testZ); %%Sorts Z, and gets indexes of Z
sY = testY(ind); %%Sorts Y by index
[N, n] = size(testZ');

这将给出排序后的 Y 数据。在排序后的 Y 数据的每个元素上，我想将左侧的每个点分类为 1 类，将右侧的所有点分类为 2 类；然后将对数据的每个点重复此操作。我怎样才能做到这一点并找出每个元素的变量：

• TP(true positive) - 正确标记为 1 的元素
• FP（误报） - 元素错误地标记为 1
• TN(真负) - 正确标记为 2 的元素
• FN（假阴性） - 元素错误地标记为 2

这样做的目的是让我可以为分类器创建 ROC 曲线，作为学校工作的一部分。

Answer 1

以下是绘制 ROC 并求 AUC 值的代码：

tot_op = testZ;
targets = testY;
th_vals= sort(tot_op);

for i = 1:length(th_vals)
  b_pred = (tot_op>=th_vals(i,1));
  TP = sum(b_pred == 1 & targets == 2);
  FP = sum(b_pred == 1 & targets == 1);
  TN = sum(b_pred == 0 & targets == 1);
  FN = sum(b_pred == 0 & targets == 2);
  sens(i) = TP/(TP+FN);
  spec(i) = TN/(TN+FP);
end


figure(2);
cspec = 1-spec;
cspec = cspec(end:-1:1);
sens = sens(end:-1:1);
plot(cspec,sens,'k');

AUC = sum(0.5*(sens(2:end)+sens(1:end-1)).*(cspec(2:end) - cspec(1:end-1)));
fprintf('\nAUC: %g \n',AUC);

以上代码是http://www.dcs.gla.ac.uk/~srogers/firstcourseml/matlab/chapter5/svmroc.html给出的修改版本

Answer 2

您可以遍历这些点，然后使用逻辑索引和逐元素布尔运算符来获得您想要的大部分内容。

 for i = 1:length(sY)
      classification = [ones(1,i-1) 2*ones(1,length(sy)-i+1)];
      isTruePositive = ( (sY == classification) & (sY == 1) );
      numberOfTruePositive = sum(isTruePositive);
      % Similar for other cases.

      % Use the result in the loop or store it somewhere - as written here
      % variables are over-written each iteration in the loop.
 end

我没有运行此程序，因此您可能需要进行一些调整，但这应该可以帮助您完成大部分工作。