本文最后更新于:2024年8月21日 下午
Python 标准数据库接口为 Python DB-API,Python DB-API为开发人员提供了数据库应用编程接口。
数据库连接
Python 因为可以自由选择模组,所以就算是连接 MySQL 资料库也有很多种方式,在此使用 MySQLdb
, pymysql
, mysql.connector
三种模组来比较程式以及效能的差异。
MySQLdb
安裝:
示例代码:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33
| import MySQLdb import time db = MySQLdb.connect(host="192.168.6.121", user="user", password="password", database="database", port=3306, autocommit=True) cursor = db.cursor(MySQLdb.cursors.DictCursor)
cursor.execute("SELECT VERSION()")
data = cursor.fetchone()
print "Database version : %s " % data
start_time = time.time() for i in range(0, 10000): sql = " INSERT INTO Room (Game) VALUES ('') " cursor.execute(sql) sql = " UPDATE Room SET Game=Game+1 WHERE id=%(id)s " cursor.execute(sql, { 'id': i }) print(time.time() - start_time) sql = " SELECT * FROM Room WHERE id=%(id)s " cursor.execute(sql, { 'id': 1 }) print(cursor.rowcount) a = cursor.fetchone() print(a)
|
PyMySQL
安裝
示例代码:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25
| import pymysql import time db = pymysql.connect(host="192.168.6.121", user="user", password="password", database="database", autocommit=True) cursor = db.cursor(pymysql.cursors.DictCursor) start_time = time.time() for i in range(0, 10000): sql = " INSERT INTO Room (Game) VALUES ('') " cursor.execute(sql) sql = " UPDATE Room SET Game=Game+1 WHERE id=%(id)s " cursor.execute(sql, { 'id': i }) print(time.time() - start_time) sql = " SELECT * FROM Room WHERE id=%(id)s " cursor.execute(sql, { 'id': 1 }) print(cursor.rowcount) a = cursor.fetchone() print(a)
|
MySQL Connectors
安裝:
1
| pip install mysql-connector-python
|
这个库和 mysql-connector
不同,不能弄混
示例代码:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25
| import mysql.connector import time cnx = mysql.connector.connect(user='user', password='password', host='192.168.6.121', port=3306, database='database', autocommit=True) cursor = cnx.cursor(dictionary=True, buffered=True) start_time = time.time() for i in range(0, 10000): sql = " INSERT INTO Room (Game) VALUES ('" + str(i) + "') " cursor.execute(sql) sql = " UPDATE Room SET Game=Game+1 WHERE id=%(id)s " cursor.execute(sql, { 'id': i }) print(time.time() - start_time) sql = " SELECT * FROM Room WHERE id=%(id)s " cursor.execute(sql, { 'id': 1 }) print(cursor.rowcount) a = cursor.fetchone() print(a)
|
选择喜欢的用就行。
创建数据库表
如果数据库连接存在我们可以使用execute()方法来为数据库创建表,如下所示创建表EMPLOYEE:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26
|
import MySQLdb
db = MySQLdb.connect("localhost", "testuser", "test123", "TESTDB", charset='utf8' )
cursor = db.cursor()
cursor.execute("DROP TABLE IF EXISTS EMPLOYEE")
sql = """CREATE TABLE EMPLOYEE ( FIRST_NAME CHAR(20) NOT NULL, LAST_NAME CHAR(20), AGE INT, SEX CHAR(1), INCOME FLOAT )"""
cursor.execute(sql)
db.close()
|
数据库插入操作
以下实例使用执行 SQL INSERT 语句向表 EMPLOYEE 插入记录:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26
|
import MySQLdb
db = MySQLdb.connect("localhost", "testuser", "test123", "TESTDB", charset='utf8' )
cursor = db.cursor()
sql = """INSERT INTO EMPLOYEE(FIRST_NAME, LAST_NAME, AGE, SEX, INCOME) VALUES ('Mac', 'Mohan', 20, 'M', 2000)""" try: cursor.execute(sql) db.commit() except: db.rollback()
db.close()
|
以上例子也可以写成如下形式:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27
|
import MySQLdb
db = MySQLdb.connect("localhost", "testuser", "test123", "TESTDB", charset='utf8' )
cursor = db.cursor()
sql = "INSERT INTO EMPLOYEE(FIRST_NAME, \ LAST_NAME, AGE, SEX, INCOME) \ VALUES (%s, %s, %s, %s, %s )" % \ ('Mac', 'Mohan', 20, 'M', 2000) try: cursor.execute(sql) db.commit() except: db.rollback()
db.close()
|
实例:
以下代码使用变量向SQL语句中传递参数:
1 2 3 4 5 6 7
| .................................. user_id = "test123" password = "password"
con.execute('insert into Login values(%s, %s)' % \ (user_id, password)) ..................................
|
数据库查询操作
Python查询Mysql使用 fetchone() 方法获取单条数据, 使用fetchall() 方法获取多条数据。
- fetchone(): 该方法获取下一个查询结果集。结果集是一个对象
- **fetchall()😗*接收全部的返回结果行.
- rowcount: 这是一个只读属性,并返回执行execute()方法后影响的行数。
实例:
查询EMPLOYEE表中salary(工资)字段大于1000的所有数据:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33
|
import MySQLdb
db = MySQLdb.connect("localhost", "testuser", "test123", "TESTDB", charset='utf8' )
cursor = db.cursor()
sql = "SELECT * FROM EMPLOYEE \ WHERE INCOME > %s" % (1000) try: cursor.execute(sql) results = cursor.fetchall() for row in results: fname = row[0] lname = row[1] age = row[2] sex = row[3] income = row[4] print "fname=%s,lname=%s,age=%s,sex=%s,income=%s" % \ (fname, lname, age, sex, income ) except: print "Error: unable to fetch data"
db.close()
|
以上脚本执行结果如下:
1
| fname=Mac, lname=Mohan, age=20, sex=M, income=2000
|
数据库更新操作
更新操作用于更新数据表的的数据,以下实例将 EMPLOYEE 表中的 SEX 字段为 ‘M’ 的 AGE 字段递增 1:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24
|
import MySQLdb
db = MySQLdb.connect("localhost", "testuser", "test123", "TESTDB", charset='utf8' )
cursor = db.cursor()
sql = "UPDATE EMPLOYEE SET AGE = AGE + 1 WHERE SEX = '%c'" % ('M') try: cursor.execute(sql) db.commit() except: db.rollback()
db.close()
|
删除操作
删除操作用于删除数据表中的数据,以下实例演示了删除数据表 EMPLOYEE 中 AGE 大于 20 的所有数据:#!/usr/bin/python # -*- coding: UTF-8 -*- import MySQLdb # 打开数据库连接 db = MySQLdb.connect("localhost", "testuser", "test123", "TESTDB", charset='utf8' ) # 使用cursor()方法获取操作游标 cursor = db.cursor() # SQL 删除语句 sql = "DELETE FROM EMPLOYEE WHERE AGE > %s" % (20) try: # 执行SQL语句 cursor.execute(sql) # 提交修改 db.commit() except: # 发生错误时回滚 db.rollback() # 关闭连接 db.close()
执行事务
事务机制可以确保数据一致性。
事务应该具有4个属性:原子性、一致性、隔离性、持久性。这四个属性通常称为ACID特性。
- 原子性(atomicity)。一个事务是一个不可分割的工作单位,事务中包括的诸操作要么都做,要么都不做。
- 一致性(consistency)。事务必须是使数据库从一个一致性状态变到另一个一致性状态。一致性与原子性是密切相关的。
- 隔离性(isolation)。一个事务的执行不能被其他事务干扰。即一个事务内部的操作及使用的数据对并发的其他事务是隔离的,并发执行的各个事务之间不能互相干扰。
- 持久性(durability)。持续性也称永久性(permanence),指一个事务一旦提交,它对数据库中数据的改变就应该是永久性的。接下来的其他操作或故障不应该对其有任何影响。
Python DB API 2.0 的事务提供了两个方法 commit 或 rollback。
实例:
1 2 3 4 5 6 7 8 9 10
| sql = "DELETE FROM EMPLOYEE WHERE AGE > %s" % (20) try: cursor.execute(sql) db.commit() except: db.rollback()
|
对于支持事务的数据库, 在Python数据库编程中,当游标建立之时,就自动开始了一个隐形的数据库事务。
commit() 方法游标的所有更新操作,rollback()方法回滚当前游标的所有操作。每一个方法都开始了一个新的事务。
测试
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23
|
import mysql.connector
cnn = mysql.connector.connect(user='root',passwd='root',database='testdb')
cursor = cnn.cursor()
cursor.execute("SELECT VERSION()")
data = cursor.fetchone() print "Database version : %s " % data
cnn.close() 显示的结果应该如下:
Database version : 8.0.12
|
错误处理
DB API中定义了一些数据库操作的错误及异常,下表列出了这些错误和异常:
异常 |
描述 |
Warning |
当有严重警告时触发,例如插入数据是被截断等等。必须是 StandardError 的子类。 |
Error |
警告以外所有其他错误类。必须是 StandardError 的子类。 |
InterfaceError |
当有数据库接口模块本身的错误(而不是数据库的错误)发生时触发。 必须是Error的子类。 |
DatabaseError |
和数据库有关的错误发生时触发。 必须是Error的子类。 |
DataError |
当有数据处理时的错误发生时触发,例如:除零错误,数据超范围等等。 必须是DatabaseError的子类。 |
OperationalError |
指非用户控制的,而是操作数据库时发生的错误。例如:连接意外断开、 数据库名未找到、事务处理失败、内存分配错误等等操作数据库是发生的错误。 必须是DatabaseError的子类。 |
IntegrityError |
完整性相关的错误,例如外键检查失败等。必须是DatabaseError子类。 |
InternalError |
数据库的内部错误,例如游标(cursor)失效了、事务同步失败等等。 必须是DatabaseError子类。 |
ProgrammingError |
程序错误,例如数据表(table)没找到或已存在、SQL语句语法错误、 参数数量错误等等。必须是DatabaseError的子类。 |
NotSupportedError |
不支持错误,指使用了数据库不支持的函数或API等。例如在连接对象上 使用.rollback()函数,然而数据库并不支持事务或者事务已关闭。 必须是DatabaseError的子类。 |
参考资料
文章链接:
https://www.zywvvd.com/notes/coding/dataset/mysql/python-mysql/python-mysql/