使用SQLAlchemy操作数据库表过程解析


Posted in Python onJune 10, 2020

需求场景:

使用sqlalchmy从现有的表中获取数据(不是自己建表)。百度了一下,网上都是使用sqlalchemy自己先创建表,然后导入数据表的模型类进行增删改查;现在不是自己建表,该如何操作呢?

操作方案

通过sqlalchmey执行原生的sql语句,增删改查的原生语句携带表名,就不需要导入数据表的模型类了。

使用的包:

SQLAlchemy (1.3.10) + mysql-connector-python (8.0.19)

提供以下干货:

  • 演示了向原生sql语句传递变量的用法 即动态执行sql语句 更加灵活
  • 通过执行原生的sql语句实现操作已有的表
  • 演示了sql语句根据多字段排序的方法等

DEMO

# -*- coding:utf-8 -*-
from sqlalchemy import create_engine,MetaData,Table,exists
from sqlalchemy.orm import sessionmaker, scoped_session
from util.Log import Log
from conf.parseConfig import parseConf
# 从配置文件中获取mysql的配置信息
host = parseConf.get_conf('MySQLInfo', 'host')
port = parseConf.get_conf('MySQLInfo', 'port')
dbname = parseConf.get_conf('MySQLInfo', 'dbname')
usernm = parseConf.get_conf('MySQLInfo', 'usernm')
passwd = parseConf.get_conf('MySQLInfo', 'passwd')

engine_str = "mysql+mysqlconnector://{0}:{1}@{2}:{3}/{4}".format(usernm, passwd, host, port, dbname)


class OpsMysql(object):
  def __init__(self, log=Log(__file__).getlog()):
    self.log = log
    self.session = None
    try:
      self.engine = create_engine(
        engine_str,
        max_overflow=0, # 超过连接池大小外最多创建的连接
        pool_size=5, # 连接池大小
        pool_timeout=30, # 池中没有线程最多等待的时间,否则报错
        pool_recycle=-1, # 多久之后对线程池中的线程进行一次连接的回收(重置)
        # echo=True, # 显示相应执行的 sql 指令
        encoding='utf-8'
      )
      SessionFactory = sessionmaker(bind=self.engine)
      self.session = scoped_session(SessionFactory)
    except Exception as e:
      self.log.error(str(e))
      self.log.error("Connect {0}@{1}:{2} failed!".format(dbname, host, port))

  def get_session(self):
    return self.session

  def getEngine(self):
    return self.engine

  def init_db(self, base):
    base.metadata.create_all(self.engine)

  def drop_db(self, base):
    base.metadata.drop_all(self.engine)


if __name__ == "__main__":
  log = Log(__file__).getlog()
  tt = OpsMysql(log)
  session = tt.get_session()
  
  if session:
    # 通过执行原生的sql语句实现操作已有的表
    # 此处演示了向原生sql语句传递变量的用法 即动态执行sql语句 更加灵活
    mail_id = 1
    res = session.execute('select * from tbl_mail_addr where mail_id='" + mail_id + "' and mail_tp="c"')
    res01 = res.fetchall() # 结果是列表
    print(res01[0])
    # (1, 'c', 1, 'XX@u163.com')
    
    mail_id = '1'
    mail_type = 'c'
    # 查询id为1,类型是c的邮箱信息,并按mail_tp降序,addr_no升序排列,限制查询数量100
    sql = "select * from tbl_mail_addr where tbl_mail_addr.oper_flag='1' and tbl_mail_addr.mail_id='" + mail_id + "' and tbl_mail_addr.mail_tp='" + mail_type + "' order by tbl_mail_addr.mail_tp, tbl_mail_addr.addr_no ASC limit 100"
    result = session.execute(sql)
    value_list = result.fetchall()
    print(value_list)
    # [(1, 'c', 1, 'XX@163.com'), (1, 'c', 2, 'XX@qq.com), (1, 'c', 3, 'XX@qq.com')]

  session.close()

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python生成随机数的方法
Jan 14 Python
详解在Python和IPython中使用Docker
Apr 28 Python
Python中函数及默认参数的定义与调用操作实例分析
Jul 25 Python
详解如何使用Python编写vim插件
Nov 28 Python
python读取excel指定列数据并写入到新的excel方法
Jul 10 Python
使用Python的SymPy库解决数学运算问题的方法
Mar 27 Python
django之使用celery-把耗时程序放到celery里面执行的方法
Jul 12 Python
python 实现目录复制的三种小结
Dec 04 Python
Python 给下载文件显示进度条和下载时间的实现
Apr 02 Python
Python实现哲学家就餐问题实例代码
Nov 09 Python
python爬虫多次请求超时的几种重试方法(6种)
Dec 01 Python
Python实现DBSCAN聚类算法并样例测试
Jun 22 Python
keras 多gpu并行运行案例
Jun 10 #Python
Keras自定义IOU方式
Jun 10 #Python
Python实现在线批量美颜功能过程解析
Jun 10 #Python
浅谈keras中的目标函数和优化函数MSE用法
Jun 10 #Python
keras 解决加载lstm+crf模型出错的问题
Jun 10 #Python
使用Keras加载含有自定义层或函数的模型操作
Jun 10 #Python
keras 获取某层的输入/输出 tensor 尺寸操作
Jun 10 #Python
You might like
php&java(一)
2006/10/09 PHP
php UTF-8、Unicode和BOM问题
2010/05/18 PHP
PHP实现在windows下配置sendmail并通过mail()函数发送邮件的方法
2017/06/20 PHP
thinkphp5实现微信扫码支付
2019/12/23 PHP
一些不错的js函数ajax
2008/08/20 Javascript
JavaScript初学者需要了解10个小技巧
2010/08/25 Javascript
ff下JQuery无法监听input的keyup事件的解决方法
2013/12/12 Javascript
文本框(input)获取焦点(onfocus)时样式改变的示例代码
2014/01/10 Javascript
js图片滚动效果时间可随意设定当鼠标移上去时停止
2014/06/26 Javascript
JavaScript实现的一个倒计时的类
2015/03/12 Javascript
JavaScript里四舍五入函数round用法实例
2015/04/06 Javascript
jquery插件splitScren实现页面分屏切换模板特效
2015/06/16 Javascript
JavaScript编写推箱子游戏
2015/07/07 Javascript
AngularJS基础 ng-disabled 指令详解及简单示例
2016/08/01 Javascript
node.js基础知识小结
2018/02/26 Javascript
详解如何搭建mpvue框架搭配vant组件库的小程序项目
2019/05/16 Javascript
vue中实现点击按钮滚动到页面对应位置的方法(使用c3平滑属性实现)
2019/12/29 Javascript
JavaScript中的this原理及6种常见使用场景详解
2020/02/14 Javascript
Javascript前端下载后台传来的文件流代码实例
2020/08/18 Javascript
Python映射拆分操作符用法实例
2015/05/19 Python
PyQt5实现无边框窗口的标题拖动和窗口缩放
2018/04/19 Python
Pandas 合并多个Dataframe(merge,concat)的方法
2018/06/08 Python
python 基本数据类型占用内存空间大小的实例
2018/06/12 Python
基于pandas将类别属性转化为数值属性的方法
2018/07/25 Python
Python如何在DataFrame增加数值
2020/02/14 Python
公认8个效率最高的爬虫框架
2020/07/28 Python
轻松制作精彩视频:Animoto
2018/09/19 全球购物
日本整理专家Marie Kondo的官方在线商店:KonMari
2020/06/29 全球购物
高级销售员求职信
2013/10/25 职场文书
校园创业策划书
2014/01/14 职场文书
运动会入场式解说词
2014/02/18 职场文书
婚假请假条怎么写
2014/04/10 职场文书
《中国梦我的梦》中学生演讲稿
2014/08/20 职场文书
安全第一课观后感
2015/06/18 职场文书
详解MySQL中timestamp和datetime时区问题导致做DTS遇到的坑
2021/12/06 MySQL
SQL Server中的游标介绍
2022/05/20 SQL Server