处理稀疏性

用 Python 构建推荐引擎

Rob O'Callaghan

Director of Data

稀疏矩阵

小型非稀疏矩阵

用 Python 构建推荐引擎

稀疏矩阵

小型非稀疏矩阵与大型稀疏矩阵

用 Python 构建推荐引擎

稀疏矩阵

小型非稀疏矩阵与大型稀疏矩阵

用 Python 构建推荐引擎

衡量稀疏性

print(book_rating_df)
title     The Great Gatsby    The Catcher in the Rye    Fifty Shades of Grey
User                    
User_233               3.0                       NaN                     NaN
User_651               NaN                       5.0                     4.0
User_965               4.0                       3.0                     NaN
     ...               ...                       ...                     ...
用 Python 构建推荐引擎

衡量稀疏性

number_of_empty = book_ratings_df.isnull().values.sum()

total_number = user_ratings_df.size
sparsity = number_of_empty/total_number
print(sparsity)
0.0114
用 Python 构建推荐引擎

为何稀疏性重要

大型稀疏矩阵

用 Python 构建推荐引擎

为何稀疏性重要

大型稀疏矩阵,空单元被高亮

用 Python 构建推荐引擎

为何稀疏性重要

大型稀疏矩阵,最近的非空邻居被高亮

用 Python 构建推荐引擎

为何稀疏性重要

大型稀疏矩阵,最近的非空邻居被高亮

用 Python 构建推荐引擎

按列衡量稀疏性

user_ratings_df.notnull().sum()
The Pelican Brief                           1
Snow Crash                                  1
The Great Gatsby                           12
Fifty Shades of Grey                        9
Leviathan                                   1
                                           ..
用 Python 构建推荐引擎

矩阵分解

大型稀疏矩阵

用 Python 构建推荐引擎

矩阵分解

大型稀疏矩阵及其分解因子

用 Python 构建推荐引擎

矩阵分解

大型稀疏矩阵、其分解因子与填充后的大矩阵

用 Python 构建推荐引擎

矩阵乘法

两个矩形矩阵

用 Python 构建推荐引擎

矩阵乘法

两个矩形矩阵

用 Python 构建推荐引擎

矩阵乘法

两个矩形矩阵

用 Python 构建推荐引擎

矩阵乘法

两个矩形矩阵

用 Python 构建推荐引擎

矩阵乘法

两个矩形矩阵及其乘积(较大矩阵)

用 Python 构建推荐引擎

矩阵乘法

print(matrix_x)
[[4, 1], 
 [2, 2], 
 [3, 3]]
print(matrix_b)
[[1, 0, 4], 
 [0, 1, 6]]
用 Python 构建推荐引擎

矩阵乘法

import numpy as np

dot_product = np.dot(matrix_x, matrix_b)
print(dot_product)
[[ 4  1 22]
 [ 2  2 20]
 [ 3  3 30]]
用 Python 构建推荐引擎

Passons à la pratique !

用 Python 构建推荐引擎

Preparing Video For Download...