命令行运行Python脚本时传入参数的三种方式详解


Posted in Python onOctober 11, 2019

如果在运行python脚本时需要传入一些参数,例如gpus与batch_size,可以使用如下三种方式。

python script.py 0,1,2 10
python script.py -gpus=0,1,2 --batch-size=10
python script.py -gpus=0,1,2 --batch_size=10

这三种格式对应不同的参数解析方式,分别为sys.argv, argparse, tf.app.run, 前两者是python自带的功能,最后一个是tensorflow提供的便捷方式(只是在命令行执行时看上去跟第二个相同,源码部分的区别见下)。

sys.argv

sys模块是很常用的模块, 它封装了与python解释器相关的数据,例如sys.modules里面有已经加载了的所有模块信息,

sys.path里面是PYTHONPATH的内容,而sys.argv则封装了传入的参数数据。

使用sys.argv接收上面第一个命令中包含的参数方式如下:

import sys
gpus = sys.argv[1]
#gpus = [int(gpus.split(','))]
batch_size = sys.argv[2]
print(gpus, type(gpus))
print(batch_size, type(batch_size))

执行结果:

D:\projects\Pycharm Projects\some-toys\something_else>python argv_test.py 1,0,2 10
1,0,2 <class 'str'>
10 <class 'str'>

argparse

import argparse
parser = argparse.ArgumentParser(description='manual to this script')
parser.add_argument('--gpus', type=str, default = None)
parser.add_argument('--batch-size', type=int, default=32)
args = parser.parse_args()
print(args.gpus, type(args.gpus))
print(args.batch_size, type(args.batch_size))

执行结果:

D:\projects\Pycharm Projects\some-toys\something_else>python argv_test.py --gpus=0,1,2 --batch-size=20
0,1,2 <class 'str'>
20 <class 'int'>

需要注意的是,脚本运行命令python script.py --gpus=0,1,2 --batch-size=10中的batch-size会被自动解析成batch_size.
parser.add_argument 方法的type参数理论上可以是任何合法的类型, 但有些参数传入格式比较麻烦,例如list,所以一般使用bool, int, str, float这些基本类型就行了,更复杂的需求可以通过str传入,然后手动解析。bool类型的解析比较特殊,传入任何值都会被解析成True,传入空值时才为False

python script.py --bool-val=0 # args.bool_val=True
python script.py --bool-val=False # args.bool_val=True
python script.py --bool-val=   # args.bool_val=什么都不写False

通过这个方法还能指定命令的帮助信息。具体请看API文档:https://docs.python.org/2/library/argparse.html

tf.app.run

tensorflow也提供了一种方便的解析方式。

脚本的执行命令为:

python script.py -gpus=0,1,2 --batch_size=10

对应的python代码为:

import tensorflow as tf
tf.app.flags.DEFINE_string('gpus', None, 'gpus to use')
tf.app.flags.DEFINE_integer('batch_size', 5, 'batch size')

FLAGS = tf.app.flags.FLAGS

def main(_):
  print FLAGS.gpus
  print FLAGS.batch_size

if __name__=="__main__":
  tf.app.run()

有几点需要注意:

tensorflow只提供以下几种方法:

  • tf.app.flags.DEFINE_string,
  • tf.app.flags.DEFINE_integer,
  • tf.app.flags.DEFINE_boolean,
  • tf.app.flags.DEFINE_float

四种方法,分别对应str, int,bool,float类型的参数。这里对bool的解析比较严格,传入1会被解析成True,其余任何值都会被解析成False。

脚本中需要定义一个接收一个参数的main方法:def main(_):,这个传入的参数是脚本名,一般用不到, 所以用下划线接收。
以batch_size参数为例,传入这个参数时使用的名称为--batch_size,也就是说,中划线不会像在argparse 中一样被解析成下划线。

tf.app.run()会寻找并执行入口脚本的main方法。也只有在执行了tf.app.run()之后才能从FLAGS中取出参数。

从它的签名来看,它也是可以自己指定需要执行的方法的,不一定非得叫main:

run(
  main=None,
  argv=None
)

tf.app.flags只是对argpars的简单封装。代码见

https://github.com/tensorflow/tensorflow/blob/r1.2/tensorflow/python/platform/flags.py

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python里将list中元素依次向前移动一位
Sep 12 Python
零基础写python爬虫之爬虫框架Scrapy安装配置
Nov 06 Python
python 禁止函数修改列表的实现方法
Aug 03 Python
python中reduce()函数的使用方法示例
Sep 29 Python
Python中出现IndentationError:unindent does not match any outer indentation level错误的解决方法
Apr 18 Python
Python实现字符型图片验证码识别完整过程详解
May 10 Python
使用OpCode绕过Python沙箱的方法详解
Sep 03 Python
python 实现生成均匀分布的点
Dec 05 Python
使用pickle存储数据dump 和 load实例讲解
Dec 30 Python
基于python 将列表作为参数传入函数时的测试与理解
Jun 05 Python
Keras模型转成tensorflow的.pb操作
Jul 06 Python
深入分析python 排序
Aug 24 Python
python中对_init_的理解及实例解析
Oct 11 #Python
pandas数据处理进阶详解
Oct 11 #Python
结合OpenCV与TensorFlow进行人脸识别的实现
Oct 10 #Python
树莓派安装OpenCV3完整过程的实现
Oct 10 #Python
树莓派极简安装OpenCv的方法步骤
Oct 10 #Python
python 利用jinja2模板生成html代码实例
Oct 10 #Python
pandas将多个dataframe以多个sheet的形式保存到一个excel文件中
Oct 10 #Python
You might like
网页游戏开发入门教程三(简单程序应用)
2009/11/02 PHP
删除无限分类并同时删除它下面的所有子分类的方法
2010/08/08 PHP
jQuery使用手册之一
2007/03/24 Javascript
JavaScript高级程序设计 阅读笔记(十四) js继承机制的实现
2012/08/14 Javascript
JQuery写动态树示例代码
2013/07/31 Javascript
js判断是否按下了Shift键的方法
2015/01/27 Javascript
js实现文字滚动效果
2016/03/03 Javascript
使用plupload自定义参数实现多文件上传
2016/07/19 Javascript
JS实现的数字格式化功能示例
2017/02/10 Javascript
详解Node.js access_token的获取、存储及更新
2017/06/20 Javascript
Cpage.js给组件绑定事件的实现代码
2017/08/31 Javascript
axios全局请求参数设置,请求及返回拦截器的方法
2018/03/05 Javascript
Vuerouter的beforeEach与afterEach钩子函数的区别
2018/12/26 Javascript
详解vue路由篇(动态路由、路由嵌套)
2019/01/27 Javascript
js实现视图和数据双向绑定的方法分析
2020/02/05 Javascript
原生javascript单例模式的应用实例分析
2020/02/23 Javascript
Vue 组件的挂载与父子组件的传值实例
2020/09/02 Javascript
[01:45]DOTA2新英雄“神谕者”全方位展示
2014/11/21 DOTA
状态机的概念和在Python下使用状态机的教程
2015/04/11 Python
Python基于hashlib模块的文件MD5一致性加密验证示例
2018/02/10 Python
Python3.x爬虫下载网页图片的实例讲解
2018/05/22 Python
pycharm 将django中多个app放到同个文件夹apps的处理方法
2018/05/30 Python
Django自定义用户登录认证示例代码
2019/06/30 Python
python的scipy实现插值的示例代码
2019/11/12 Python
Python更换pip源方法过程解析
2020/05/19 Python
python pymysql库的常用操作
2020/10/16 Python
html5 Web SQL Database 之事务处理函数transaction与executeSQL解析
2013/11/07 HTML / CSS
详解如何解决canvas图片getImageData,toDataURL跨域问题
2018/09/17 HTML / CSS
德国网上宠物店:Zoobio
2018/05/23 全球购物
大学生毕业的自我鉴定
2013/11/13 职场文书
精细化工应届生求职信
2013/11/17 职场文书
药剂专业自荐信范文
2014/04/16 职场文书
技能比武方案
2014/05/21 职场文书
旅游饭店管理专业自荐书
2014/06/28 职场文书
离婚协议书范本
2015/01/26 职场文书
.Net Core导入千万级数据至Mysql的步骤
2021/05/24 MySQL