Python 按比例获取样本数据或执行任务的实现代码


Posted in Python onDecember 03, 2020

按比例获取样本数据或执行任务

By:授客 QQ:1033553122

开发环境

win 10

python 3.6.5

需求

已知每种分类的样本占比数,及样本总数,需要按比例获取这些分类的样本。比如,我有4种任务要执行,分别为任务A,任务B,任务C,任务D, 要求执行的总任务次数为100000,且不同分类任务执行次数占比为 A:B:C:D = 3:5:7:9,且在宏观上这些任务同时进行

代码实现

#!/usr/bin/env python
# -*- coding:utf-8 -*-
 
 
__author__ = 'shouke'
 
import time
from copy import deepcopy
 
 
def main():
 
  class_propotion_map = {'A':3, 'B':5, 'C':7, 'D':7} # 分类及样本数比例映射
  class_list = [] # 分类
  class_proption_list = [] # 存放分类样本数比例
 
  for class_type, propotion in class_propotion_map.items(): # 同一个循环,可以保证比例索引和对应分类索引一一对应
    class_list.append(class_type)
    class_proption_list.append(propotion)
 
  temp_class_propotion_list = deepcopy(class_proption_list)
  result = []
 
  t1 = time.time()
  total_sample_num = 100000 #任务执行次数
  for i in range(1, total_sample_num+1):
    max_propotion = max(temp_class_propotion_list)
    if max_propotion > 0:
      index = temp_class_propotion_list.index(max_propotion)
      result.append(class_list[index])
      temp_class_propotion_list[index] -= 1
    elif max_propotion == 0 and min(temp_class_propotion_list) == 0:
      temp_class_propotion_list = deepcopy(class_proption_list)
      index = temp_class_propotion_list.index(max(temp_class_propotion_list))
      result.append(class_list[index])
      temp_class_propotion_list[index] -= 1

  t2 = time.time()
  from collections import Counter
  c = Counter(result)
  for item in c.items():
    print(item[0], item[1]/total_sample_num)
  print('耗时:%s'%(t2-t1))
 
main()

运行结果

Python 按比例获取样本数据或执行任务的实现代码

说明

以上方式大致实现思路就是,获取每种分类样本数所占比例副本数据列表,然后每次从中获取最大比例值,并查找该比例值对应的分类(获取分类后就可以根据需要构造、获取分类样本数据),找到目标分类后,把比例数据副本中该比例值减1,直到最大比例和最小比例都等于0,接着重置比例副本数据为样本数比例值,重复前面的过程,直到样本数达到目标样本总数,这种方式实现的前提是得提前知道样本总数及不同分类样本数所占比例,且比例值为整数

到此这篇关于Python 按比例获取样本数据或执行任务的文章就介绍到这了,更多相关Python获取样本数据执行任务内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

Python 相关文章推荐
详解python3中tkinter知识点
Jun 21 Python
numpy添加新的维度:newaxis的方法
Aug 02 Python
tensorflow学习教程之文本分类详析
Aug 07 Python
Python 实例方法、类方法、静态方法的区别与作用
Aug 14 Python
Python 最强编辑器详细使用指南(PyCharm )
Sep 16 Python
python range实例用法分享
Feb 06 Python
解决Opencv+Python cv2.imshow闪退问题
Apr 24 Python
Python中的xlrd模块使用原理解析
May 21 Python
Python3爬虫中关于Ajax分析方法的总结
Jul 10 Python
python em算法的实现
Oct 03 Python
BeautifulSoup中find和find_all的使用详解
Dec 07 Python
Python Numpy库的超详细教程
Apr 06 Python
用 Django 开发一个 Python Web API的方法步骤
Dec 03 #Python
分享unittest单元测试框架中几种常用的用例加载方法
Dec 02 #Python
python 使用cycle构造无限循环迭代器
Dec 02 #Python
python 使用csv模块读写csv格式文件的示例
Dec 02 #Python
python 发送邮件的四种方法汇总
Dec 02 #Python
如何用PyPy让你的Python代码运行得更快
Dec 02 #Python
python 实现波浪滤镜特效
Dec 02 #Python
You might like
PHP动态分页函数,PHP开发分页必备啦
2011/11/07 PHP
基于php-fpm的配置详解
2013/06/03 PHP
php进行ip地址掩码运算处理的方法
2016/07/11 PHP
PHP使用标准库spl实现的观察者模式示例
2018/08/04 PHP
js 判断 enter 事件
2009/02/12 Javascript
jquery tab插件制作实现代码
2010/06/22 Javascript
Script标签与访问HTML页面详解
2014/01/10 Javascript
nodejs调用cmd命令实现复制目录
2015/05/04 NodeJs
JSON与XML优缺点对比分析
2015/07/17 Javascript
JavaScript编程学习技巧汇总
2016/02/21 Javascript
JavaScript中获取纯正的undefined的方法
2016/03/06 Javascript
Bootstrap表格使用方法详解
2017/02/17 Javascript
手把手教你搭建ES6的开发运行环境
2017/07/11 Javascript
JavaScript树的深度优先遍历和广度优先遍历算法示例
2018/07/30 Javascript
解决layer.prompt无效的问题
2019/09/24 Javascript
mpvue 项目初始化及实现授权登录的实现方法
2020/07/20 Javascript
[03:17]2016完美“圣”典风云人物:冷冷专访
2016/12/08 DOTA
python实现将英文单词表示的数字转换成阿拉伯数字的方法
2015/07/02 Python
Python多线程、异步+多进程爬虫实现代码
2016/02/17 Python
Python常用的内置序列结构(列表、元组、字典)学习笔记
2016/07/08 Python
用Python进行简单图像识别(验证码)
2018/01/19 Python
python turtle库画一个方格和圆实例
2019/06/27 Python
Python 通过微信控制实现app定位发送到个人服务器再转发微信服务器接收位置信息
2019/08/05 Python
Python切片列表字符串如何实现切换
2020/08/06 Python
Python 实现微信自动回复的方法
2020/09/11 Python
CSS3教程(3):border-color网页边框色彩
2009/04/02 HTML / CSS
发现世界上最好的珠宝设计师:JewelStreet
2017/12/17 全球购物
神话般的珠宝:Ross-Simons
2020/07/13 全球购物
应届生程序员求职信
2013/11/05 职场文书
夫妻房产协议书的格式
2014/10/11 职场文书
工作失职检讨书
2015/01/26 职场文书
2015年安全生产管理工作总结
2015/05/25 职场文书
教师节班会开场白
2015/06/01 职场文书
新闻稿怎么写
2015/07/18 职场文书
Python Flask搭建yolov3目标检测系统详解流程
2021/11/07 Python
MySQL去除密码登录告警的方法
2022/04/20 MySQL