通过爬取豆瓣评分Top250电影数据浅谈对Python爬虫的认识

2024-02-23 19:30

本文主要是介绍通过爬取豆瓣评分Top250电影数据浅谈对Python爬虫的认识,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

今天在酱酱的带领下接触到了Python爬虫,有点兴趣,探索一下。

Python是如何与Excel表格搭讪哒?

python有专门的库为Excel文件的操作提供支持,这些库包括xlrd,xlwt,xlutils,openpyxl,xlsxwriter等它们可以帮助我们自动化办公。
首先是一个简单的Python与excel交互的代码。

import openpyxl #导入我们要用到的库
import datetime
#生成一个workbook的实例化对象
excel_obj = openpyxl.Workbook()
# 获取活跃的工作表格
excel_obj_active = excel_obj.active
# 我们这里介绍了两种给单元格赋值的方法
# 数据可以直接赋值给单元格
excel_obj_active['A1'] = 666
# 整行添加
excel_obj_active.append([1,2,3])
excel_obj_active['A3'] = datetime.datetime.now()
# 保存文件
excel_obj.save('test.xlsx')

我们保存的文件和代码所在的路径是一致的。
在这里插入图片描述最开始很奇怪为什么自己的A3单元格是#号而不显示时间呢?
原来自己的表格不够长。
在这里插入图片描述

Python网络爬虫豆瓣电影

然后,想要我们的测试代码使用这篇参考文章python爬取豆瓣Top250
在这里插入图片描述在这里插入图片描述果真得到了Top250的电影啊。
博主Runner Jxc写Python代码的风格比我好太多了。我还从来都没有使用过if __name__ == '__main__':,自己的风格用成语形容大概就是一马平川吧。面向过程到底吧。

if __name__ == '__main__':start = time.time()top = Top250()try: #Python 使用try exception来捕获异常top.saveToExcel('top250.xlsx')print('抓取成功,用时%4.2f'%(time.time()

这篇关于通过爬取豆瓣评分Top250电影数据浅谈对Python爬虫的认识的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/739682

相关文章

使用Python和OpenCV库实现实时颜色识别系统

《使用Python和OpenCV库实现实时颜色识别系统》:本文主要介绍使用Python和OpenCV库实现的实时颜色识别系统,这个系统能够通过摄像头捕捉视频流,并在视频中指定区域内识别主要颜色(红... 目录一、引言二、系统概述三、代码解析1. 导入库2. 颜色识别函数3. 主程序循环四、HSV色彩空间详解

一文深入详解Python的secrets模块

《一文深入详解Python的secrets模块》在构建涉及用户身份认证、权限管理、加密通信等系统时,开发者最不能忽视的一个问题就是“安全性”,Python在3.6版本中引入了专门面向安全用途的secr... 目录引言一、背景与动机:为什么需要 secrets 模块?二、secrets 模块的核心功能1. 基

python常见环境管理工具超全解析

《python常见环境管理工具超全解析》在Python开发中,管理多个项目及其依赖项通常是一个挑战,下面:本文主要介绍python常见环境管理工具的相关资料,文中通过代码介绍的非常详细,需要的朋友... 目录1. conda2. pip3. uvuv 工具自动创建和管理环境的特点4. setup.py5.

SQL Server修改数据库名及物理数据文件名操作步骤

《SQLServer修改数据库名及物理数据文件名操作步骤》在SQLServer中重命名数据库是一个常见的操作,但需要确保用户具有足够的权限来执行此操作,:本文主要介绍SQLServer修改数据... 目录一、背景介绍二、操作步骤2.1 设置为单用户模式(断开连接)2.2 修改数据库名称2.3 查找逻辑文件名

Python常用命令提示符使用方法详解

《Python常用命令提示符使用方法详解》在学习python的过程中,我们需要用到命令提示符(CMD)进行环境的配置,:本文主要介绍Python常用命令提示符使用方法的相关资料,文中通过代码介绍的... 目录一、python环境基础命令【Windows】1、检查Python是否安装2、 查看Python的安

Python UV安装、升级、卸载详细步骤记录

《PythonUV安装、升级、卸载详细步骤记录》:本文主要介绍PythonUV安装、升级、卸载的详细步骤,uv是Astral推出的下一代Python包与项目管理器,主打单一可执行文件、极致性能... 目录安装检查升级设置自动补全卸载UV 命令总结 官方文档详见:https://docs.astral.sh/

Java对异常的认识与异常的处理小结

《Java对异常的认识与异常的处理小结》Java程序在运行时可能出现的错误或非正常情况称为异常,下面给大家介绍Java对异常的认识与异常的处理,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参... 目录一、认识异常与异常类型。二、异常的处理三、总结 一、认识异常与异常类型。(1)简单定义-什么是

Python并行处理实战之如何使用ProcessPoolExecutor加速计算

《Python并行处理实战之如何使用ProcessPoolExecutor加速计算》Python提供了多种并行处理的方式,其中concurrent.futures模块的ProcessPoolExecu... 目录简介完整代码示例代码解释1. 导入必要的模块2. 定义处理函数3. 主函数4. 生成数字列表5.

Python中help()和dir()函数的使用

《Python中help()和dir()函数的使用》我们经常需要查看某个对象(如模块、类、函数等)的属性和方法,Python提供了两个内置函数help()和dir(),它们可以帮助我们快速了解代... 目录1. 引言2. help() 函数2.1 作用2.2 使用方法2.3 示例(1) 查看内置函数的帮助(

Python虚拟环境与Conda使用指南分享

《Python虚拟环境与Conda使用指南分享》:本文主要介绍Python虚拟环境与Conda使用指南,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、python 虚拟环境概述1.1 什么是虚拟环境1.2 为什么需要虚拟环境二、Python 内置的虚拟环境工具