Python推荐系统学习笔记(5)基于协同过滤的个性化推荐算法实战---UserCF算法(下)

本文主要是介绍Python推荐系统学习笔记(5)基于协同过滤的个性化推荐算法实战---UserCF算法(下),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

       本文在 Python推荐系统学习笔记(4)基于协同过滤的个性化推荐算法实战---UserCF算法(上) 一文的基础上,对其基本的UserCF算法做出改进。

一、相关概念

1、UserCF中,基于行为(喜好)的相似性度量公式原始形式:

        

       S u,v 代表用户 u 和 v 的相似度;N(u) 和 N(v) 代表用户 或 行为过的物品集合;分子表示两用户所评分物品的重合程度 ;分母是归一化,惩罚了操作过多的用户对其它用户的相似程度。

2、UserCF中,基于行为(喜好)的相似性度量公式改进形式1:

        改进意义:降低那些异常活跃物品对于用户相似度的贡献,如柴米油盐等。

        

        i 是用户 和 都行为过的物品,u(i),是物品 被行为的总次数。

3、UserCF中,基于行为(喜好)的相似性度量公式改进形式2:

       改进意义:因为人的善变性,将不同用户对同一物品行为的时间段不同应该给予时间加权惩罚。

         ,其中 

       △ t 是行为差异时间,α 是权重。

二、ItemCF推荐改进实战:

1、第一种改进形式:

      

     只需将原始的base_contribute_score()函数定义更改为以下形式:

def update_contribution_score(item_user_click_count):return 1/math.log10(1+item_user_click_count)

     调用处也改为以下形式:

#第一处
co_appear[user_i][user_j]+= update_contribution_score(len(user_list))
#第二处
co_appear[user_j][user_i] += update_contribution_score(len(user_list))

2、第二种改进形式:

   ,其中 

(1)需要更改信息读取工具模块reader.py中的get_user_click函数,增加时间戳信息的获取:

#获得用户的点击序列,改进
def get_user_click(rating_file):#如果路径不存在,返回空数据if not os.path.exists(rating_file):return {},{}#打开文件fp=open(rating_file)num=0#用于传回的数据user_click={}#*改进,加入时间戳user_click_time={}#循环数据for line in fp:#第一行是表头,需要跳过处理if num==0:num+=1continue#根据逗号提取每个项目item=line.strip().split(',')if len(item)<4:continue[userid,itemid,rating,timestamp]=item#*改进处if userid+"_"+itemid not in user_click_time:#存储用户点击的电影的时间戳user_click_time[userid+"_"+itemid]=int(timestamp)if float(rating)<3.0:  #如果评分低于3分,则视为该用户不喜欢该电影continue#将单一用户的点击序列添加至返回数据if userid not in user_click:user_click[userid]=[]user_click[userid].append(itemid)fp.close()return user_click,user_click_time

 (2)更改核心算法中的主函数main_flow():

def main_flow():#获取用户的点击序列数据及点击时间数据,改进user_click,user_click_time=reader.get_user_click("../data/ratings.csv")#将用户的点击序列转换成电影的被点击序列item_click_by_user = transfer_user_click(user_click)#获取电影信息数据item_info=reader.get_item_info("../data/movies.csv")#计算用户相似度,改进,加入时间戳因子user_sim=cal_user_sim(item_click_by_user,user_click_time)#计算推荐结果recom_result=cal_recom_result(user_click,user_sim)#输出推荐结果debug_recom_result(item_info,recom_result,"158")

(3)更改原始的base_contribute_score()函数:

def update_two_contribution_score(click_time_one,click_time_two):delta_time=abs(click_time_two-click_time_one)#将时间戳单位换算为天norm_num=60*60*24delta_time=delta_time/norm_numreturn 1/(1+delta_time)

(4)各个用户间的相似度计算函数更改,增加时间戳因子的获取与计算:

#计算用户相似度,改进
def cal_user_sim(item_click_by_user,user_click_time):co_appear={}user_click_count={}#循环电影的被点击序列for itemid,user_list in item_click_by_user.items():#循环每个电影的被点击序列的用户列表索引for index_i in range(0,len(user_list)):#统计各用户id的评分行为个数user_i=user_list[index_i]user_click_count.setdefault(user_i,0)user_click_count[user_i]+=1#改进处if user_i+"_"+itemid not in user_click_time:click_time_one=0else:click_time_one=user_click_time[user_i+"_"+itemid]#计算每个用户id和其他用户id的重合程度(共同对电影做出行为的数量)for index_j in range(index_i+1,len(user_list)):user_j=user_list[index_j]#改进处if user_j + "_" + itemid not in user_click_time:click_time_two = 0else:click_time_two = user_click_time[user_j + "_" + itemid]#计算所有用户id中,两两id的共同行为电影数量co_appear.setdefault(user_i,{})co_appear[user_i].setdefault(user_j,0)#改进处co_appear[user_i][user_j]+= update_two_contribution_score(click_time_one,click_time_two)co_appear.setdefault(user_j, {})co_appear[user_j].setdefault(user_i, 0)#改进处co_appear[user_j][user_i] += update_two_contribution_score(click_time_one,click_time_two)#用户相似度数据user_sim_info={}#排序后的用户相似度数据user_sim_info_sorted={}#计算相似度for user_i,relate_user in co_appear.items():user_sim_info.setdefault(user_i,{})for user_j,cotime in relate_user.items():user_sim_info[user_i].setdefault(user_j,0)user_sim_info[user_i][user_j]=cotime/math.sqrt(user_click_count[user_i]*user_click_count[user_j])#对用户相似度数据进行排序for user in user_sim_info:user_sim_info_sorted[user]=sorted(user_sim_info[user].items(),key=operator.itemgetter(1),reverse=True)return user_sim_info_sorted

三、参考资料:

 

1、https://www.imooc.com/learn/1029

2、https://www.imooc.com/learn/990

3、https://blog.csdn.net/yimingsilence/article/details/54934302

4、https://blog.csdn.net/xiaokang123456kao/article/details/74735992

5、项亮. 推荐系统实践[M]. 人民邮电出版社, 2012.

 

这篇关于Python推荐系统学习笔记(5)基于协同过滤的个性化推荐算法实战---UserCF算法(下)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/593593

相关文章

基于Python实现一个图片拆分工具

《基于Python实现一个图片拆分工具》这篇文章主要为大家详细介绍了如何基于Python实现一个图片拆分工具,可以根据需要的行数和列数进行拆分,感兴趣的小伙伴可以跟随小编一起学习一下... 简单介绍先自己选择输入的图片,默认是输出到项目文件夹中,可以自己选择其他的文件夹,选择需要拆分的行数和列数,可以通过

Python中反转字符串的常见方法小结

《Python中反转字符串的常见方法小结》在Python中,字符串对象没有内置的反转方法,然而,在实际开发中,我们经常会遇到需要反转字符串的场景,比如处理回文字符串、文本加密等,因此,掌握如何在Pyt... 目录python中反转字符串的方法技术背景实现步骤1. 使用切片2. 使用 reversed() 函

Python中将嵌套列表扁平化的多种实现方法

《Python中将嵌套列表扁平化的多种实现方法》在Python编程中,我们常常会遇到需要将嵌套列表(即列表中包含列表)转换为一个一维的扁平列表的需求,本文将给大家介绍了多种实现这一目标的方法,需要的朋... 目录python中将嵌套列表扁平化的方法技术背景实现步骤1. 使用嵌套列表推导式2. 使用itert

使用Docker构建Python Flask程序的详细教程

《使用Docker构建PythonFlask程序的详细教程》在当今的软件开发领域,容器化技术正变得越来越流行,而Docker无疑是其中的佼佼者,本文我们就来聊聊如何使用Docker构建一个简单的Py... 目录引言一、准备工作二、创建 Flask 应用程序三、创建 dockerfile四、构建 Docker

Python使用vllm处理多模态数据的预处理技巧

《Python使用vllm处理多模态数据的预处理技巧》本文深入探讨了在Python环境下使用vLLM处理多模态数据的预处理技巧,我们将从基础概念出发,详细讲解文本、图像、音频等多模态数据的预处理方法,... 目录1. 背景介绍1.1 目的和范围1.2 预期读者1.3 文档结构概述1.4 术语表1.4.1 核

Python使用pip工具实现包自动更新的多种方法

《Python使用pip工具实现包自动更新的多种方法》本文深入探讨了使用Python的pip工具实现包自动更新的各种方法和技术,我们将从基础概念开始,逐步介绍手动更新方法、自动化脚本编写、结合CI/C... 目录1. 背景介绍1.1 目的和范围1.2 预期读者1.3 文档结构概述1.4 术语表1.4.1 核

Conda与Python venv虚拟环境的区别与使用方法详解

《Conda与Pythonvenv虚拟环境的区别与使用方法详解》随着Python社区的成长,虚拟环境的概念和技术也在不断发展,:本文主要介绍Conda与Pythonvenv虚拟环境的区别与使用... 目录前言一、Conda 与 python venv 的核心区别1. Conda 的特点2. Python v

Knife4j+Axios+Redis前后端分离架构下的 API 管理与会话方案(最新推荐)

《Knife4j+Axios+Redis前后端分离架构下的API管理与会话方案(最新推荐)》本文主要介绍了Swagger与Knife4j的配置要点、前后端对接方法以及分布式Session实现原理,... 目录一、Swagger 与 Knife4j 的深度理解及配置要点Knife4j 配置关键要点1.Spri

Python使用python-can实现合并BLF文件

《Python使用python-can实现合并BLF文件》python-can库是Python生态中专注于CAN总线通信与数据处理的强大工具,本文将使用python-can为BLF文件合并提供高效灵活... 目录一、python-can 库:CAN 数据处理的利器二、BLF 文件合并核心代码解析1. 基础合

Python使用OpenCV实现获取视频时长的小工具

《Python使用OpenCV实现获取视频时长的小工具》在处理视频数据时,获取视频的时长是一项常见且基础的需求,本文将详细介绍如何使用Python和OpenCV获取视频时长,并对每一行代码进行深入解析... 目录一、代码实现二、代码解析1. 导入 OpenCV 库2. 定义获取视频时长的函数3. 打开视频文