大作业爬取手机数据，实现手机推荐系统以及朋友圈手机论坛

本文主要是介绍大作业爬取手机数据，实现手机推荐系统以及朋友圈手机论坛，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

1、功能简介

（1）用户注册与用户登录
（2）手机搜索、手机比拼、手机个性化推荐
（3）点击搜索的手机图片会就用户行为，轮播展示用户行为，推荐点击次数靠前的手机
（4）数据可视化，包括公司品牌的可视化和手机的可视化统计绘图
（5）用户管理，头像上传和密码修改
（6）手机论坛朋友圈，可以发布论坛探讨手机相关的东西，用户可以发表论坛、类似朋友圈，可以进行评论互相探讨，评论的消息会在消息中心进行提示
注：需要源码s我

2、技术实现

（1）后端架构设置划分层次，架构思想跟java的分层管理类似方便代码管理，划分为如下：
视图控制层，即http请求接口的入口；
业务服务层，处理请求之后的各种业务化需求；
数据链接层Dao，与数据库交互获取到具体需要的数据，进行sql的增删改查；
实体层Entity，存放与数据库对应的数据表实体类；
数据传输交换层DTO，存放需要返回给到前段使用的实体类
工具类层，存放整个后端普遍调用使用的方法操作
（2）前后端技术：后端实现使用python，所用框架有flask进行http后端服务的构建，前端使用vue框架结合vite构建项目（构建完了之后就是基础的html+css+javascript），构建完成后使用nginx进行转发启动（发展愿景，使用nginx还可以进行后端多节点部署，进行负载均衡转发）
（3）数据库：兼容mysql和单机版的sqlite两种数据库，可以按照需要进行配置化，如果嫌mysql安装麻烦就可以直接使用sqlite单机版的，直接一个数据文件，可以用mysql一样的数据库连接工具进行连接使用的。
（4）数据爬取：数据来源与中关村平台，在python使用apschuduler框架进行定时任务设置，结果xml的xpath解析爬取网页手机数据和品牌公司数据，可以配置化定时进行数据爬取，爬取可以按照具体需求和电脑cpu性能适当设置线程数量，进行多线程的数据爬取。注意：网络爬虫需要实时跟进，如果页面样式变化可能部分数据就爬取不到。