利用python解决mysql视图导入导出依赖的问题


Posted in Python onDecember 17, 2017

视图

视图是一个虚拟表(非真实存在),其本质是根据SQL语句获取动态的数据集,并为其命名,用户使用时只需使用名称即可获取结果集,并可以将其当作表来使用。

创建视图

创建一个名称为v1的视图,其功能就是查询color表中的所有数据

CREATE VIEW v1 AS SELECT * FROM color;

查看视图

使用视图时,将其当作表进行操作即可,由于视图是虚拟表,所以无法使用其对真实表进行创建、更新和删除操作,仅能做查询用。

select * from v1; -- 等于执行SELECT * FROM color

输出结果

+-----+--------+
| nid | title |
+-----+--------+
| 1 | red |
| 2 | yellow |
+-----+--------+
2 rows in set (0.00 sec)

修改视图

ALTER VIEW v1 AS SELECT * FROM color WHERE nid = 1;

删除视图

DROP VIEW v1;

引用

navicat是mysql可视化工具中最棒的,但是,在处理视图的导入导出方面,它是按照视图名称的字母顺序来处理的,若视图存在依赖,在导入过程中就会报错。这个问题一直困绕我,一度因为我使用docker来部署mysql而绕过了这个问题。最近不得不直面这个问题,因此,写了一个小工具来解决它。

整体思路

在mysql很容易查出所有视图和其定义,因此可以写一个视图导出工具,存储时对各视图的保存位置进行调整,处理好它们之间的依赖关系,被依赖的放前面,这样就解决了导入时的依赖问题。

获取视图信息

运行以下查询语句,就能获得该数据库中所有视图的信息。

select * from information_schema.VIEWS where TABLE_SCHEMA = DatabaseName

查询结果字段说明:

  • TABLE_NAME : 数所库中视图名称
  • VIEW_DEFINITION : 视图的定义代码,只有查询语句部分
  • DEFINER : 视图定义(建立)者名称
  • SECURITY : 安全级别

总之,所有视图的信息都在这个表中保存,我要完成任务,只需要TABLE_NAME和VIEW_DEFINITION就可以了。

算法描述

  • 将查询结果放到dict中,视图名称为key;视图定义为value;
  • 编写处理依赖关系的函数process_rely,输入参数中的rely_old为保存所有视图名称的数组;返回参数为按依赖关系调整顺序后的视图名称数组。之所以这样做,是一开始考虑到,依赖关系复杂时,可能一次迭代处理不好,需要递归调用或多次调用。

process_rely函数算法描述:

    第一层循环,从rely_old中取一个视图名称

        第二层循环,从dict中取出一个键值

            若键值被第一层元素的定义所依赖

                若键值还不在结果数组中

                    若第一层元素不在结果数组中

                        追加键值到结果数组中

                    第一层元素在结果数组中

                        将键值插入到第一层元素前

                键值在结果数组中

                    第一层元素在结果数组中

                        查找各自在结果数组中的位置

                        若第一层元素在键值的后

                            将键值移动到第一层元素前

        第二层循环结束时,若第一层元素还不在结果集中

            将第一层元素追加到结果集中

    返回结果集

上面的说明,是按python代码模式给出的。很幸运,算法一次就能将复杂的依赖关系处理好了。我在编写的过程中,刚开始依赖算法不完善时,通过多次迭代也能处理好复杂的依赖关系。因此,坚定了必胜的信心,完成了这个任务。

完整代码

import pymysql
conn = pymysql.connect(host='172.17.0.1', port=3306, user='root',
      passwd='123456', db='database', charset='utf8mb4')
def process_rely(parmas={}, rely_old=[]):
 _rely = []
 _keys = list(parmas.keys())
 for k in rely_old:
  for bl in _keys:
   if str(parmas[k]).find(bl) > -1:
    if bl not in _rely:
     if k not in _rely:
      _rely.append(bl)
     else:
      i = _rely.index(k)
      _rely.insert(i, bl)
    else:
     if k in _rely:
      i = _rely.index(k)
      j = _rely.index(bl)
      if i < j:
       del _rely[j]
       _rely.insert(i, bl)
  if k not in _rely:
   _rely.append(k)
 return _rely
cur = conn.cursor()
cur.execute('select TABLE_NAME, VIEW_DEFINITION from information_schema.VIEWS where TABLE_SCHEMA = %s ', 'database')
rs = cur.fetchall()
cur.close()
conn.close()
ps = {}
for al in rs:
 ps['`' + al[0] + '`'] = al[1]
rely = process_rely(ps, list(ps.keys()))
# rely = process_rely(ps, rely1)
file_object = open('view.sql', 'w')
for al in rely:
 file_object.write('DROP VIEW IF EXISTS ' + al + ';\n')
 file_object.write('CREATE ALGORITHM=UNDEFINED DEFINER=`root`@`%` SQL SECURITY DEFINER VIEW ' + al +
      ' AS ' + ps[al] + ';\n\n')
file_object.close()

小结

思路要清晰,代码要一步步的向最终目标靠近,积跬步以至千里。在做这个工具时,一开始觉得很麻烦,依赖关系若是深层次的,可能一次处理不好,正因为采用的迭代的思想,最后才完成了一次迭代解决问题的完美结局。

好了,以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,如果有疑问大家可以留言交流,谢谢大家对三水点靠木的支持。

Python 相关文章推荐
python中实现php的var_dump函数功能
Jan 21 Python
对python 命令的-u参数详解
Dec 03 Python
Python实现的列表排序、反转操作示例
Mar 13 Python
Pandas的read_csv函数参数分析详解
Jul 02 Python
Python中的几种矩阵乘法(小结)
Jul 10 Python
Python 绘制酷炫的三维图步骤详解
Jul 12 Python
python3的url编码和解码,自定义gbk、utf-8的例子
Aug 22 Python
python之array赋值技巧分享
Nov 28 Python
解决Django no such table: django_session的问题
Apr 07 Python
python将音频进行变速的操作方法
Apr 08 Python
python IDLE添加行号显示教程
Apr 25 Python
python如何快速拼接字符串
Oct 28 Python
python 3.5实现检测路由器流量并写入txt的方法实例
Dec 17 #Python
python中闭包Closure函数作为返回值的方法示例
Dec 17 #Python
django模板语法学习之include示例详解
Dec 17 #Python
详解python string类型 bytes类型 bytearray类型
Dec 16 #Python
python使用os.listdir和os.walk获得文件的路径的方法
Dec 16 #Python
python读取与写入csv格式文件的示例代码
Dec 16 #Python
浅谈用VSCode写python的正确姿势
Dec 16 #Python
You might like
用PHP与XML联手进行网站编程代码实例
2008/07/10 PHP
php使用CURL不依赖COOKIEJAR获取COOKIE的方法
2015/06/17 PHP
php封装的连接Mysql类及用法分析
2015/12/10 PHP
Extjs NumberField后面加单位实现思路
2013/07/30 Javascript
JavaScript字符串对象substr方法入门实例(用于截取字符串)
2014/10/16 Javascript
angularjs中的e2e测试实例
2014/12/06 Javascript
jquery移动节点实例
2015/01/14 Javascript
使用控制台破解百小度一个月只准改一次名字
2015/08/13 Javascript
基于JavaScript操作DOM常用的API小结
2015/12/01 Javascript
Jquery+ajax+JAVA(servlet)实现下拉菜单异步取值
2016/03/23 Javascript
微信小程序 数据绑定详解及实例
2016/10/25 Javascript
svg动画之动态描边效果
2017/02/22 Javascript
javascript将list转换成树状结构的实例
2017/09/08 Javascript
bootstrap轮播模板使用方法详解
2017/11/17 Javascript
vue select选择框数据变化监听方法
2018/08/24 Javascript
js实现类似iphone的网页滑屏解锁功能示例【附源码下载】
2019/06/10 Javascript
VUE的history模式下除了index外其他路由404报错解决办法
2019/08/21 Javascript
解决layui批量传值到后台操作时出现传值为空的问题
2019/09/28 Javascript
微信小程序获取复选框全选反选选中的值(实例代码)
2019/12/17 Javascript
原生JS实现留言板功能
2020/02/08 Javascript
[01:06:19]DOTA2-DPC中国联赛定级赛 LBZS vs SAG BO3第二场 1月8日
2021/03/11 DOTA
[01:14:41]DOTA2-DPC中国联赛定级赛 iG vs Magma BO3第一场 1月8日
2021/03/11 DOTA
[06:45]DOTA2-DPC中国联赛 正赛 Magma vs LBZS 选手采访
2021/03/11 DOTA
浅谈python可视化包Bokeh
2018/02/07 Python
python计算阶乘和的方法(1!+2!+3!+...+n!)
2019/02/01 Python
pandas.DataFrame的pivot()和unstack()实现行转列
2019/07/06 Python
django搭建项目配置环境和创建表过程详解
2019/07/22 Python
Python 脚本的三种执行方式小结
2019/12/21 Python
华纳兄弟工作室的官方授权商店:WB Shop
2018/11/30 全球购物
大学生求职自我评价
2014/01/16 职场文书
创业者是否需要商业计划书?
2014/02/07 职场文书
幼儿园中秋节活动总结
2015/03/23 职场文书
2015年全国助残日活动方案
2015/05/04 职场文书
乡镇安全生产月活动总结
2015/05/08 职场文书
python-opencv 中值滤波{cv2.medianBlur(src, ksize)}的用法
2021/06/05 Python
JDK8中String的intern()方法实例详细解读
2022/09/23 Java/Android