【问题标题】:Python Matrix Factorization EvaluationPython 矩阵分解评估
【发布时间】:2021-04-08 08:17:10
【问题描述】:

我知道这是一个很简单的问题,但我没听懂。

我执行了代码in here,它工作正常

import numpy

def matrix_factorization(R, P, Q, K, steps=5000, alpha=0.0002, beta=0.02):
    '''
    R: rating matrix
    P: |U| * K (User features matrix)
    Q: |D| * K (Item features matrix)
    K: latent features
    steps: iterations
    alpha: learning rate
    beta: regularization parameter'''
    Q = Q.T

    for step in range(steps):
        for i in range(len(R)):
            for j in range(len(R[i])):
                if R[i][j] > 0:
                    # calculate error
                    eij = R[i][j] - numpy.dot(P[i,:],Q[:,j])

                    for k in range(K):
                        # calculate gradient with a and beta parameter
                        P[i][k] = P[i][k] + alpha * (2 * eij * Q[k][j] - beta * P[i][k])
                        Q[k][j] = Q[k][j] + alpha * (2 * eij * P[i][k] - beta * Q[k][j])

        eR = numpy.dot(P,Q)

        e = 0

        for i in range(len(R)):

            for j in range(len(R[i])):

                if R[i][j] > 0:

                    e = e + pow(R[i][j] - numpy.dot(P[i,:],Q[:,j]), 2)

                    for k in range(K):

                        e = e + (beta/2) * (pow(P[i][k],2) + pow(Q[k][j],2))
        # 0.001: local minimum
        if e < 0.001:

            break

    return P, Q.T

R = [
     [5,3,0,1],
     [4,0,0,1],
     [1,1,0,5],
     [1,0,0,4],
     [0,1,5,4],
    ]

R = numpy.array(R)

N = len(R)
M = len(R[0])
K = 2

P = numpy.random.rand(N,K)
Q = numpy.random.rand(M,K)

nP, nQ = matrix_factorization(R, P, Q, K)
nR = numpy.dot(nP, nQ.T)
print(nR)

我知道矩阵分解模型背后的数学原理。我不明白的一点是测试部分。

让我用一个例子来解释。

我给出的 R 矩阵如下:

用户 - 电影矩阵:(输入)

R = [
     [5,3,0,1],
     [4,0,0,1],
     [1,1,0,5],
     [1,0,0,4],
     [0,1,5,4],
    ]

根据矩阵分解模型,我的输出如下

矩阵分解的输出:

array([[5.05061059, 2.76932235, 6.00910081, 0.99918217],
       [3.9246345 , 2.15333139, 4.77284691, 0.9999652 ],
       [1.12424323, 0.64611747, 3.53300274, 4.96832669],
       [0.94119495, 0.53978842, 2.87426388, 3.9788853 ],
       [2.71213676, 1.50889704, 4.83895101, 4.0215367 ]])

问题

好的,很酷,用接近原始矩阵的值学习。这个矩阵对我有什么用??

矩阵分解将如何计算当前用户对新电影的评分?还是新用户对现有电影的评分?

在协同过滤中,我们计算用户对一部之前未看过的电影的评分概率,并据此做出推荐。我们如何在矩阵分解中做同样的直觉?

【问题讨论】:

    标签: python recommendation-engine matrix-factorization


    【解决方案1】:

    正如您所说,我们可以看到,对于现有评级,我们的近似值非常接近 R 矩阵的真实值,并且我们还得到了一些未知值(零值)的“预测”。

    在您发送的教程中,您可以很容易地看到 U1 和 U2 的评分相似,并且他们对 D1 和 D2 的评分都很高,而其余用户则更喜欢 D3、D4 和 D5。

    您使用的算法可以根据不同的特征 (K) 关联用户 (P) 和项目 (Q),并且预测也遵循这些关联。

    例如,我们可以看到 U4 在 D3 上的预测评分为 4.59,因为 U4 和 U5 对 D4 的评分都很高,其余的用户和项目以此类推。这就是为什么生成的矩阵值如此接近原始矩阵的原因。我希望这能解决问题!

    【讨论】:

    • 是的,当我阅读这篇文章时,我明白了作者试图解释的内容。我不明白的一点是未知值不是代码中指示的零值。从我的角度来看,0排名是最低点。如果我们真的要给 0,我们怎么表示呢?必须为 NaN 值或为空,此时 MF 不起作用。我将 R Matrix 中的 0 值更改为 0.1。猜猜发生了什么?结果矩阵中的某些值变为负数?
    猜你喜欢
    • 2016-06-28
    • 1970-01-01
    • 2019-10-19
    • 2021-08-25
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2016-03-30
    • 2017-04-07
    相关资源
    最近更新 更多