使用Python进行数据库连接与操作SQLite和MySQL【第144篇—SQLite和MySQL】

2024-03-19 16:52
文章标签 python 进行 mysql 使用 操作 连接 数据库 sqlite database 144

本文主要是介绍使用Python进行数据库连接与操作SQLite和MySQL【第144篇—SQLite和MySQL】，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

👽发现宝藏

前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住分享一下给大家。【点击进入巨牛的人工智能学习网站】。

使用Python进行数据库连接与操作：SQLite和MySQL

在现代应用程序开发中，与数据库进行交互是至关重要的一环。Python提供了强大的库来连接和操作各种类型的数据库，其中包括SQLite和MySQL。本文将介绍如何使用Python连接这两种数据库，并进行基本的操作，包括创建表、插入数据、查询数据等。

1. 安装必要的库

首先，我们需要安装Python的数据库驱动程序，以便与SQLite和MySQL进行交互。对于SQLite，Python自带了支持；而对于MySQL，我们需要安装额外的库，如mysql-connector-python。

# 安装 MySQL 连接器
pip install mysql-connector-python

2. 连接SQLite数据库

SQLite是一种轻量级的嵌入式数据库，无需服务器即可使用。以下是如何连接并操作SQLite数据库的示例代码：

import sqlite3# 连接到 SQLite 数据库
conn = sqlite3.connect('example.db')# 创建一个游标对象
cursor = conn.cursor()# 创建表
cursor.execute('''CREATE TABLE IF NOT EXISTS users(id INTEGER PRIMARY KEY, name TEXT, age INTEGER)''')# 插入数据
cursor.execute("INSERT INTO users (name, age) VALUES (?, ?)", ('Alice', 30))
cursor.execute("INSERT INTO users (name, age) VALUES (?, ?)", ('Bob', 25))# 查询数据
cursor.execute("SELECT * FROM users")
rows = cursor.fetchall()
for row in rows:print(row)# 提交并关闭连接
conn.commit()
conn.close()

3. 连接MySQL数据库

MySQL是一种常见的关系型数据库管理系统。使用Python连接MySQL需要使用相应的库，比如mysql-connector-python。以下是连接并操作MySQL数据库的示例代码：

import mysql.connector# 连接到 MySQL 数据库
conn = mysql.connector.connect(host="localhost",user="username",password="password",database="mydatabase"
)# 创建一个游标对象
cursor = conn.cursor()# 创建表
cursor.execute('''CREATE TABLE IF NOT EXISTS users(id INT AUTO_INCREMENT PRIMARY KEY, name VARCHAR(255), age INT)''')# 插入数据
sql = "INSERT INTO users (name, age) VALUES (%s, %s)"
val = ("Alice", 30)
cursor.execute(sql, val)# 查询数据
cursor.execute("SELECT * FROM users")
rows = cursor.fetchall()
for row in rows:print(row)# 提交并关闭连接
conn.commit()
conn.close()

4. 代码解析

  • 连接数据库：使用sqlite3.connect()连接SQLite数据库，使用mysql.connector.connect()连接MySQL数据库。

  • 创建表：通过执行SQL语句创建表，使用cursor.execute()方法执行。

  • 插入数据：执行插入数据的SQL语句，使用cursor.execute()方法并传入参数。

  • 查询数据：执行查询数据的SQL语句，使用cursor.execute()方法，然后使用cursor.fetchall()获取所有查询结果。

  • 提交和关闭连接：对于SQLite，使用conn.commit()提交事务并使用conn.close()关闭连接。对于MySQL，同样使用conn.commit()提交事务，但需要使用conn.close()关闭连接。

通过这些示例代码，你可以轻松地使用Python连接和操作SQLite和MySQL数据库。务必记住在实际应用中，要处理好异常情况，并采取安全措施，如防止SQL注入等。

5. 数据库连接参数

在连接数据库时，需要提供一些参数以确保正确的连接。对于SQLite，只需提供数据库文件的路径即可。而对于MySQL，除了数据库名称外，还需要提供主机名、用户名和密码等信息。

  • 对于SQLite连接：

    • sqlite3.connect('example.db')

  • 对于MySQL连接：

    conn = mysql.connector.connect(host="localhost",user="username",password="password",database="mydatabase"
)

6. 数据库操作的异常处理

在实际应用中，数据库操作可能会出现各种异常情况，比如连接失败、SQL语法错误等。因此，在进行数据库操作时，务必添加适当的异常处理机制，以提高程序的健壮性和稳定性。

以下是一个简单的异常处理示例：

import sqlite3
import mysql.connectortry:# SQLite 连接conn_sqlite = sqlite3.connect('example.db')cursor_sqlite = conn_sqlite.cursor()# MySQL 连接conn_mysql = mysql.connector.connect(host="localhost",user="username",password="password",database="mydatabase")cursor_mysql = conn_mysql.cursor()# 进行数据库操作（省略）except sqlite3.Error as e:print("SQLite error:", e)except mysql.connector.Error as e:print("MySQL error:", e)finally:# 关闭连接if conn_sqlite:conn_sqlite.close()if conn_mysql:conn_mysql.close()

7. 参数化查询

在执行SQL语句时，尤其是涉及用户输入的情况下，应该使用参数化查询来防止SQL注入攻击。参数化查询可以确保用户输入不会被误解为SQL代码的一部分。

下面是一个使用参数化查询的示例：

import sqlite3
import mysql.connector# SQLite 连接
conn_sqlite = sqlite3.connect('example.db')
cursor_sqlite = conn_sqlite.cursor()# MySQL 连接
conn_mysql = mysql.connector.connect(host="localhost",user="username",password="password",database="mydatabase"
)
cursor_mysql = conn_mysql.cursor()# 参数化查询
name = "Alice"
age = 30# SQLite 参数化查询
cursor_sqlite.execute("INSERT INTO users (name, age) VALUES (?, ?)", (name, age))# MySQL 参数化查询
sql = "INSERT INTO users (name, age) VALUES (%s, %s)"
val = (name, age)
cursor_mysql.execute(sql, val)# 提交事务并关闭连接
conn_sqlite.commit()
conn_sqlite.close()conn_mysql.commit()
conn_mysql.close()

8. ORM框架

ORM（Object-Relational Mapping）框架可以将数据库表的行映射为Python对象，简化了数据库操作。在Python中，有许多流行的ORM框架，比如SQLAlchemy、Django的ORM等。这些框架提供了高级的抽象和功能，使得与数据库的交互更加方便和直观。

以下是一个使用SQLAlchemy进行数据库操作的示例：

from sqlalchemy import create_engine, Column, Integer, String
from sqlalchemy.ext.declarative import declarative_base
from sqlalchemy.orm import sessionmaker# 创建引擎
engine = create_engine('sqlite:///example.db', echo=True)# 声明基类
Base = declarative_base()# 定义映射类
class User(Base):__tablename__ = 'users'id = Column(Integer, primary_key=True)name = Column(String)age = Column(Integer)# 创建数据表
Base.metadata.create_all(engine)# 创建会话
Session = sessionmaker(bind=engine)
session = Session()# 插入数据
user1 = User(name='Alice', age=30)
user2 = User(name='Bob', age=25)
session.add(user1)
session.add(user2)
session.commit()# 查询数据
users = session.query(User).all()
for user in users:print(user.id, user.name, user.age)# 关闭会话
session.close()

9. 使用SQLite内存数据库

除了连接到文件中的SQLite数据库，还可以使用SQLite内存数据库。SQLite内存数据库完全存储在RAM中，对于临时性的数据处理或测试非常方便。

以下是一个使用SQLite内存数据库的示例：

import sqlite3# 连接到内存数据库
conn = sqlite3.connect(':memory:')# 创建一个游标对象
cursor = conn.cursor()# 创建表
cursor.execute('''CREATE TABLE users(id INTEGER PRIMARY KEY, name TEXT, age INTEGER)''')# 插入数据
cursor.execute("INSERT INTO users (name, age) VALUES (?, ?)", ('Alice', 30))
cursor.execute("INSERT INTO users (name, age) VALUES (?, ?)", ('Bob', 25))# 查询数据
cursor.execute("SELECT * FROM users")
rows = cursor.fetchall()
for row in rows:print(row)# 提交并关闭连接
conn.commit()
conn.close()

10. 数据库连接池

在高并发的应用中，频繁地打开和关闭数据库连接会消耗大量资源。为了提高性能，可以使用数据库连接池技术，将数据库连接预先创建好并保存在池中，需要时从池中获取连接，使用完毕后归还到池中。

以下是使用sqlitepool库实现SQLite数据库连接池的示例：

from sqlitepool import ConnectionPool# 创建数据库连接池
pool = ConnectionPool('example.db', max_connections=5)# 从连接池中获取连接
conn = pool.getconn()# 创建游标对象
cursor = conn.cursor()# 执行查询
cursor.execute("SELECT * FROM users")
rows = cursor.fetchall()
for row in rows:print(row)# 释放连接回连接池
pool.putconn(conn)

11. 性能优化

在进行大规模数据操作时，需要考虑性能优化。一些常见的性能优化策略包括：

  • 使用索引来加速查询。
  • 合理设计数据库结构，避免过度规范化或反规范化。
  • 批量操作数据，减少数据库交互次数。
  • 缓存查询结果，减少重复查询数据库的次数。

12. 使用异步数据库库

随着异步编程的流行，出现了许多支持异步操作的数据库库，如aiosqlite和aiomysql。这些库可以与异步框架（如asyncio）结合使用，提高程序的并发性能。

以下是一个使用aiosqlite库进行异步SQLite数据库操作的示例：

import asyncio
import aiosqliteasync def main():# 连接到 SQLite 数据库async with aiosqlite.connect('example.db') as db:# 创建一个游标对象cursor = await db.cursor()# 创建表await cursor.execute('''CREATE TABLE IF NOT EXISTS users(id INTEGER PRIMARY KEY, name TEXT, age INTEGER)''')# 插入数据await cursor.execute("INSERT INTO users (name, age) VALUES (?, ?)", ('Alice', 30))await cursor.execute("INSERT INTO users (name, age) VALUES (?, ?)", ('Bob', 25))# 查询数据await cursor.execute("SELECT * FROM users")rows = await cursor.fetchall()for row in rows:print(row)# 运行异步主程序
asyncio.run(main())

13. 数据库迁移

在实际项目中，随着需求的变化，可能需要对数据库结构进行修改，这时候就需要进行数据库迁移（Migration）。数据库迁移工具可以帮助我们管理数据库结构变更的过程，并确保数据的一致性。

对于SQLite，可以使用sqlite3自带的支持。对于MySQL等数据库，常用的迁移工具包括Alembic、django.db.migrations等。

以下是一个简单的数据库迁移示例（以SQLite为例）：

import sqlite3# 连接到 SQLite 数据库
conn = sqlite3.connect('example.db')
cursor = conn.cursor()# 执行迁移操作（修改表结构）
cursor.execute("ALTER TABLE users ADD COLUMN email TEXT")# 提交并关闭连接
conn.commit()
conn.close()

14. 备份与恢复

定期备份数据库是保障数据安全的重要措施之一。备份可以通过数据库管理工具或编程方式来实现，具体方法取决于数据库类型和需求。

以下是一个简单的备份数据库的示例（以SQLite为例）：

import shutil# 备份数据库文件
shutil.copyfile('example.db', 'example_backup.db')

在实际应用中，备份数据库时需要考虑数据库是否处于活动状态、备份文件存储位置、备份周期等因素。

15. 使用环境变量管理数据库连接信息

在实际项目中，将数据库连接信息硬编码在代码中可能不够安全或不够灵活。一种更好的做法是使用环境变量来管理敏感信息，比如数据库的主机名、用户名和密码等。

以下是一个使用环境变量管理数据库连接信息的示例：

import os
import sqlite3
import mysql.connector# 从环境变量中获取数据库连接信息
DB_HOST = os.getenv('DB_HOST', 'localhost')
DB_USER = os.getenv('DB_USER', 'username')
DB_PASSWORD = os.getenv('DB_PASSWORD', 'password')
DB_NAME = os.getenv('DB_NAME', 'mydatabase')# SQLite 连接
conn_sqlite = sqlite3.connect('example.db')
cursor_sqlite = conn_sqlite.cursor()# MySQL 连接
conn_mysql = mysql.connector.connect(host=DB_HOST,user=DB_USER,password=DB_PASSWORD,database=DB_NAME
)
cursor_mysql = conn_mysql.cursor()# 进行数据库操作（省略）# 关闭连接
conn_sqlite.close()
conn_mysql.close()

通过使用环境变量，我们可以轻松地在不同的环境中切换数据库连接信息，而无需修改代码。

16. 使用配置文件管理数据库连接信息

除了使用环境变量，还可以使用配置文件来管理数据库连接信息。这种方法更加灵活，可以根据需要配置不同的环境，如开发环境、测试环境和生产环境等。

以下是一个使用配置文件管理数据库连接信息的示例：

import configparser
import sqlite3
import mysql.connector# 从配置文件中读取数据库连接信息
config = configparser.ConfigParser()
config.read('config.ini')DB_HOST = config.get('Database', 'host')
DB_USER = config.get('Database', 'user')
DB_PASSWORD = config.get('Database', 'password')
DB_NAME = config.get('Database', 'database')# SQLite 连接
conn_sqlite = sqlite3.connect('example.db')
cursor_sqlite = conn_sqlite.cursor()# MySQL 连接
conn_mysql = mysql.connector.connect(host=DB_HOST,user=DB_USER,password=DB_PASSWORD,database=DB_NAME
)
cursor_mysql = conn_mysql.cursor()# 进行数据库操作（省略）# 关闭连接
conn_sqlite.close()
conn_mysql.close()

通过配置文件的方式，我们可以将数据库连接信息集中管理，便于维护和修改。

17. 数据库连接的安全性考虑

在连接数据库时，需要考虑安全性问题，特别是涉及到密码和敏感信息的处理。一些常见的安全性措施包括：

  • 不要将敏感信息硬编码在代码中，而是使用环境变量或配置文件管理。
  • 使用加密技术保护敏感信息在传输过程中的安全性。
  • 使用强密码，并定期更换密码。
  • 限制数据库用户的权限，避免赋予过高的权限。

通过采取这些安全性措施，可以有效保护数据库连接信息和数据的安全。

总结

本文介绍了使用Python进行数据库连接与操作的多种方法和技术。首先，我们学习了如何使用Python连接和操作SQLite和MySQL数据库，包括创建表、插入数据、查询数据等基本操作。然后，我们探讨了一些高级技术，如参数化查询、ORM框架、异步数据库库、数据库迁移、备份与恢复等，这些技术可以提高数据库操作的效率和安全性。此外，我们还介绍了如何使用环境变量和配置文件来管理数据库连接信息，以及一些数据库连接的安全性考虑。通过这些技术和方法，我们可以更好地管理和保护数据库，使得数据库编程更加安全、灵活和高效。

在实际项目中，我们需要根据项目需求和安全标准选择合适的技术和工具，确保数据库连接和操作的安全性和可靠性。同时，我们也要不断学习和探索新的技术，以跟上数据库领域的发展和变化。希望本文能够帮助读者更好地理解和应用Python数据库编程的相关知识，为实际项目开发提供帮助和指导。

在这里插入图片描述

这篇关于使用Python进行数据库连接与操作SQLite和MySQL【第144篇—SQLite和MySQL】的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！


http://www.chinasem.cn/article/826666。

相关文章

MySQL常用字符串函数示例和场景介绍

MySQL常用字符串函数示例和场景介绍

《MySQL常用字符串函数示例和场景介绍》MySQL提供了丰富的字符串函数帮助我们高效地对字符串进行处理、转换和分析,本文我将全面且深入地介绍MySQL常用的字符串函数,并结合具体示例和场景,帮你熟练... 目录一、字符串函数概述1.1 字符串函数的作用1.2 字符串函数分类二、字符串长度与统计函数2.1
阅读更多...
Redis客户端连接机制的实现方案

Redis客户端连接机制的实现方案

《Redis客户端连接机制的实现方案》本文主要介绍了Redis客户端连接机制的实现方案,包括事件驱动模型、非阻塞I/O处理、连接池应用及配置优化,具有一定的参考价值,感兴趣的可以了解一下... 目录1. Redis连接模型概述2. 连接建立过程详解2.1 连php接初始化流程2.2 关键配置参数3. 最大连
阅读更多...
Python实现网格交易策略的过程

Python实现网格交易策略的过程

《Python实现网格交易策略的过程》本文讲解Python网格交易策略,利用ccxt获取加密货币数据及backtrader回测,通过设定网格节点,低买高卖获利,适合震荡行情,下面跟我一起看看我们的第一... 网格交易是一种经典的量化交易策略，其核心思想是在价格上下预设多个“网格”，当价格触发特定网格时执行买
阅读更多...
Python标准库之数据压缩和存档的应用详解

Python标准库之数据压缩和存档的应用详解

《Python标准库之数据压缩和存档的应用详解》在数据处理与存储领域,压缩和存档是提升效率的关键技术,Python标准库提供了一套完整的工具链,下面小编就来和大家简单介绍一下吧... 目录一、核心模块架构与设计哲学二、关键模块深度解析1.tarfile：专业级归档工具2.zipfile：跨平台归档首选3.
阅读更多...
Oracle数据库定时备份脚本方式(Linux)

Oracle数据库定时备份脚本方式(Linux)

《Oracle数据库定时备份脚本方式(Linux)》文章介绍Oracle数据库自动备份方案,包含主机备份传输与备机解压导入流程,强调需提前全量删除原库数据避免报错,并需配置无密传输、定时任务及验证脚本... 目录说明主机脚本备机上自动导库脚本整个自动备份oracle数据库的过程（建议全程用root用户）总结
阅读更多...
使用Python构建智能BAT文件生成器的完美解决方案

使用Python构建智能BAT文件生成器的完美解决方案

《使用Python构建智能BAT文件生成器的完美解决方案》这篇文章主要为大家详细介绍了如何使用wxPython构建一个智能的BAT文件生成器,它不仅能够为Python脚本生成启动脚本,还提供了完整的文... 目录引言运行效果图项目背景与需求分析核心需求技术选型核心功能实现1. 数据库设计2. 界面布局设计3
阅读更多...
SQL Server跟踪自动统计信息更新实战指南

SQL Server跟踪自动统计信息更新实战指南

《SQLServer跟踪自动统计信息更新实战指南》本文详解SQLServer自动统计信息更新的跟踪方法,推荐使用扩展事件实时捕获更新操作及详细信息,同时结合系统视图快速检查统计信息状态,重点强调修... 目录SQL Server 如何跟踪自动统计信息更新：深入解析与实战指南 核心跟踪方法1️⃣ 利用系统目录
阅读更多...
使用IDEA部署Docker应用指南分享

使用IDEA部署Docker应用指南分享

《使用IDEA部署Docker应用指南分享》本文介绍了使用IDEA部署Docker应用的四步流程：创建Dockerfile、配置IDEADocker连接、设置运行调试环境、构建运行镜像,并强调需准备本... 目录一、创建 dockerfile 配置文件二、配置 IDEA 的 Docker 连接三、配置 Do
阅读更多...
MySQL 内存使用率常用分析语句

MySQL 内存使用率常用分析语句

《MySQL内存使用率常用分析语句》用户整理了MySQL内存占用过高的分析方法,涵盖操作系统层确认及数据库层bufferpool、内存模块差值、线程状态、performance_schema性能数据... 目录一、 OS层二、 DB层1. 全局情况2. 内存占js用详情最近连续遇到mysql内存占用过高导致
阅读更多...
Android Paging 分页加载库使用实践

Android Paging 分页加载库使用实践

《AndroidPaging分页加载库使用实践》AndroidPaging库是Jetpack组件的一部分,它提供了一套完整的解决方案来处理大型数据集的分页加载,本文将深入探讨Paging库... 目录前言一、Paging 库概述二、Paging 3 核心组件1. PagingSource2. Pager3.
阅读更多...

Copyright China编程 23002807@qq.com

沪ICP备2023033072号-2