27. Python对Mysql的操作(2)

1.游标

游标是系统为用户开设的一个数据缓冲区,存放SQL语句的执行结果

用户可以用SQL语句逐一从游标中获取记录,并赋给主变量,交由python进一步处理,一组主变量一次只能存放一条记录

仅使用主变量并不能完全满足SQL语句向应用程序输出数据的要求

游标提供了一种对从表中检索出的数据进行操作的灵活手段,就本质而言,游标实际上是一种能从包括多条数据记录的结果集中每次提取一条记录的机制。游标总是与一条SQL 选择语句相关联因为游标由结果集(可以是零条、一条或由相关的选择语句检索出的多条记录)和结果集中指向特定记录的游标位置组成。当决定对结果集进行处理时,必须声明一个指向该结果集的游标。

常用方法:

cursor():    创建游标对象

close():      关闭此游标对象

fetchone(): 得到结果集的下一行

fetchmany([size = cursor.arraysize]): 得到结果集的下几行

fetchall():    得到结果集中剩下的所有行

excute(sql[, args]):执行一个数据库查询或命令

executemany (sql, args):执行多个数据库查询或命令

举例:

import MySQLdb
def connect_mysql():
    db_config = {
        ‘host‘: ‘192.168.48.128‘,
        ‘port‘: 3306,
        ‘user‘: ‘xiang‘,
        ‘passwd‘: ‘123456‘,
        ‘db‘: ‘python‘,
        ‘charset‘: ‘utf8‘
    }
    cnx = MySQLdb.connect(**db_config)
    return cnx
    
if __name__ == ‘__main__‘:
    cnx = connect_mysql()
    cus = cnx.cursor()
    sql  = ‘‘‘select * from employees;‘‘‘
    try:
        cus.execute(sql)
        result1 = cus.fetchone()
        print(‘result1:‘)
        print(result1)
        result2 = cus.fetchmany(1)
        print(‘result2:‘)
        print(result2)
        result3 = cus.fetchall()
        print(‘result3:‘)
        print(result3)
        cus.close()
        cnx.commit()
    except Exception as e:
        cnx.rollback()
        print(‘error‘)
        raise e
    finally:
        cnx.close()

结果:

result1:

(1001L, u‘li‘, u‘M‘, datetime.date(2015, 4, 1))

result2:

((1002L, u‘xian‘, u‘M‘, datetime.date(2015, 4, 1)),)

result3:

((1003L, u‘sheng‘, u‘M‘, datetime.date(2015, 4, 1)),)

解释:

1,先通过 MySQLdb.connect(**db_config) 建立mysql连接对象

2,在通过 cus = cnx.cursor() 创建游标

3,fetchone():在最终搜索的数据中去一条数据

4,fetchmany(1) 在接下来的数据中在去1行的数据,这个数字可以自定义,定义多少就是在结果集中取多少条数据。

5,fetchall()是在所有的结果中搞出来所有的数据。

执行多条语句的sql时要注意,请阅读一下代码:

from demon2 import connect_mysql
import MySQLdb
def connect_mysql():
    db_config = {
        "host": "192.168.48.128",
        "port": 3306,
        "user": "xiang",
        "passwd": "123456",
        "db": "python",
        "charset": "utf8"
    }
try:
    cnx = MySQLdb.connect(**db_config)
except Exception as e:
    raise e
    return cnx
    
if __name__ == "__main__":
    sql = "select * from tmp;"
    sql1 = "insert into tmp(id) value (%s);"
    param = []
    for i in xrange(100, 130):
        param.append([str(i)])
    print(param)
    cnx = connect_mysql()
    cus = cnx.cursor()
    print(dir(cus))
    try:
        cus.execute(sql)
        cus.executemany(sql1, param)
        # help(cus.executemany)
        result1 = cus.fetchone()
        print("result1")
        print(result1)
        result2 = cus.fetchmany(3)
        print("result2")
        print(result2)
        result3 = cus.fetchall()
        print("result3")
        print(result3)
        cus.close()
        cnx.commit()
    except Exception as e:
        cnx.rollback()
        raise e
    finally:
        cnx.close()

2.数据库连接池

python编程中可以使用MySQLdb进行数据库的连接及诸如 查询/插入/更新 等操作,但是每次连接mysql数据库请求时,都是独立的去请求访问,相当浪费资源,而且访问数量达到一定数量时,对mysql的性能会产生较大的影响。因此,实际使用中,通常会使用数据库的连接池技术,来访问数据库达到资源复用的目的。

python的数据库连接池包 DBUtils:

DBUtils是一套Python数据库连接池包,并允许对非线程安全的数据库接口进行线程安全包装。

DBUtils来自Webware for Python。

DBUtils提供两种外部接口:

* PersistentDB :提供线程专用的数据库连接,并自动管理连接。

* PooledDB :提供线程间可共享的数据库连接,并自动管理连接。

下载地址:

https://pypi.python.org/pypi/DBUtils/

下载解压后,使用命令进行安装

# python setup.py install

或者使用

# pip install DBUtils

举例:

import MySQLdb
from DBUtils.PooledDB import PooledDB
db_config = {
    "host": "192.168.48.128",
    "port": 3306,
    "user": "xiang",
    "passwd": "123456",
    "db": "python",
    "charset": "utf8"
}
pool = PooledDB(MySQLdb, 5, **db_config)  	# 5默认为连接池里的最少连接数
conn = pool.connection()  			# 以后每次需要数据库连接就是用 connection() 函数获取连接就好了
cur = conn.cursor()
SQL = "select * from tmp;"
r = cur.execute(SQL)
r = cur.fetchall()
print(r)
cur.close()
conn.close()

PooledDB的参数:

1. mincached,最少的空闲连接数,如果空闲连接数小于这个数,pool会创建一个新的连接

2. maxcached,最大的空闲连接数,如果空闲连接数大于这个数,pool会关闭空闲连接

3. maxconnections,最大的连接数,

4. blocking,当连接数达到最大的连接数时,在请求连接的时候,如果这个值是True,请求连接的程序会一直等待,直到当前连接数小于最大连接数,如果这个值是False,会报错,

5. maxshared 当连接数达到这个数,新请求的连接会分享已经分配出去的连接

总结:

在uwsgi中,每个http请求都会分发给一个进程,连接池中配置的连接数都是一个进程为单位的(即上面的最大连接数,都是在一个进程中的连接数),而如果业务中,一个http请求中需要的sql连接数不是很多的话(其实大多数都只需要创建一个连接),配置的连接数配置都不需要太大。

连接池对性能的提升表现在:

1.在程序创建连接的时候,可以从一个空闲的连接中获取,不需要重新初始化连接,提升获取连接的速度

2.关闭连接的时候,把连接放回连接池,而不是真正的关闭,所以可以减少频繁地打开和关闭连接

3.设计表结构

在操作数据库之前,先要设计数据库表结构,通过分析经典的学生、课程、成绩、老师几者之间的关系,先来分析各个主体之间都有什么属性,并确定表结构;

在实际开发过程中,根据业务需要和业务属性,设计不同的表结构;

以下是学生、课程、成绩、老师几者关系设计的表结构:

时间: 2024-10-13 07:44:30

27. Python对Mysql的操作(2)的相关文章

Python 3 mysql 库操作

Python 3 mysql 库操作 一.基础相关知识 MySQL数据库基本操作知识储备 数据库服务器:一台计算机(对内存要求比较高) 数据库管理系统:如mysql,是一个软件 数据库:oldboy_stu,相当于文件夹 表:student,scholl,class_list,相当于一个具体的文件 记录:1 刘海龙 324245234 22,相当于文件中的一行内容 二.SQL语言简介 SQL(Structured Query Language 即结构化查询语言) SQL语言主要用于存取数据.查询

python的mysql数据库操作

python操作mysql数据库 Python 标准数据库接口为 Python DB-API,Python DB-API为开发人员提供了数据库应用编程接口. Python 数据库接口支持非常多的数据库,你可以选择适合你项目的数据库: GadFly mSQL MySQL PostgreSQL Microsoft SQL Server 2000 Informix Interbase Oracle Sybase 我目前使用的是mysql数据库,所以这里只是记录了python中mysql的使用 在写my

【数据驱动】python之mysql的操作

1.准备工作 在本篇中,我们使用python版本为python3.7.在python3中,连接mysql数据库我们需要使用pymysql这个第三方库.我们可以直接使用pip命令来安装,安装的命令为: pip install PyMySQL 如果在你的环境中同时存在python2和python3两个版本,那么我们需要安装python3版本的时候就可以使用 pip3 install PyMySQL 2.连接数据库 在做好准备工作后,我们就可以开始使用pymysql这个第三方库进行连接mysql了 1

Python进行MySQL数据库操作

最近开始玩Python,慢慢开始喜欢上它了,以前都是用shell来实现一些自动化或者监控的操作,现在用Python来实现,感觉更棒,Python是一门很强大的面向对象语言,所以作为一个运维DBA或者运维来说,都应该学会用Python来提高工作效率.下面简单的介绍一下Python DB API MySQLdb 使用Python DB API访问数据库的流程图: 在Centos下安装MySQLdb模板(为了方便演显,我用yum安装,也是最快最省事的安装): yum install MySQL-pyt

26. Python 对 mysql 的操作

mysql数据库现在已经成为市场占有率最高的数据库,在开发过程中,很多情况下我们都需要操作mysql,所以对于python操作mysql的了解是必不可少的. Python标准数据库接口为Python DB-API, Python DB-API为开发人员提供了数据库应用 编程接口. 参考地址:https://wiki.python.org/moin/DatabaseInterfaces,你可以查看python支持数据库的详细列表. 不同的数据库需要下载不同的DB API模块. DB-API是一个规

python连接mysql的操作

一,安装mysql 如果是windows 用户,mysql 的安装非常简单,直接下载安装文件,双击安装文件一步一步进行操作即可. Linux 下的安装可能会更加简单,除了下载安装包进行安装外,一般的linux 仓库中都会有mysql ,我们只需要通过一个命令就可以下载安装: Ubuntu\deepin >>sudo apt-get install mysql-server >>Sudo apt-get install  mysql-client centOS/redhat >

22、Python之mysql数据库操作

一.mysql mysql服务安装及使用方法,请自行百度,我们这里重点是学习如何使用python操作mysql数据库,需要用到模块pymysql,请听我娓娓道来. python操作mysql的具体步骤如下: 1.导入pymysql模块  import pymysql 2.连接mysql数据库 conn = pymysql.Connect(host='192.168.12.1',port=3306,user = 'root',passwd='1234',db='python',charset='u

Python 对Mysql的操作

Python连接数据库的七个步骤 1.导入模块 >>> import MySQLdb #因为里面有大小写,可以使用as mysql使之简化 2.创建连接 >>> conn = MySQLdb.connect(host='59.110.12.72' , port=3306 , user='******',passwd='******',db='kk3', charset='utf8') 3.获取游标 >>> cur = conn.cursor() 4.执

python接口测试—mysql数据库操作

python操作mysql数据库 1.安装pymysql库 在python中安装pymysql第三方库,通过pip install pymysql 命令进行安装. 2.python操作mysql数据库的步骤 建立数据库连接,连接到数据库 connect 创建一个游标 cursor 执行对应的sql语句 获取查询到的数据 3.获取查询数据的两个方式 方式一:获取一条查询数据 data_one = cur.fetchone() # 游标名.fetchone() 方式二:获取所有的查询数据 data