python 实现在无序数组中找到中位数方法


Posted in Python onMarch 03, 2020

一、问题描述

1求一个无序数组的中位数, (若数组是偶数,则中位数是指中间两个数字之和除以2,若数组是奇数,则中位数是指最中间位置。要求:不能使用排序,时间复杂度尽量低

2例如:

lists = [3, 2, 1, 4] , 中位数为 = (2+3)/2 = 2.5
lists = [3, 1, 2] , 中位数为 2

3、算法思想:

利用快速排序思想(但是并不是全部使用):任意挑选一个元素,以该元素为key, 划分数组为两个部分,如果左侧数组长度刚好为(n-1)/2, 那么key就为中位数, 若左侧数组长度 < (n-1)/2 , 那么中位数点在右侧,反之,中位数在左侧。然后进入相应的一侧继续寻找中位

平均时间复杂度为O(n)

二、程序

class Solution(object):
 
 def findmedian(self, lists):
  if not lists or len(lists) == 0:
   return []
 
  n = len(lists)
  if n % 2 == 0:
   a = self.partition(lists, n/2, 0, n-1)
   b = self.partition(lists, n/2-1, 0, n-1)
   mid = (lists[a]+lists[b])/ (2 * 1.0)
   return mid
  else:
   mid = self.partition(lists, n/2, 0, n-1)
   return lists[mid]
 
 def partition(self, lists, k, start, end):
 
  key = lists[start]
  left, right = start, end
 
  while left < right:
   while left < right and lists[right] > key:
    right = right - 1
   lists[left] = lists[right]
 
   while left < right and lists[left] < key:
    left = left + 1
   lists[right] = lists[left]
 
  lists[left] = key
 
  if left == k:
   return left
  elif left > k:
   return self.partition(lists, k, start, left-1)
  else:
   return self.partition(lists, k, left+1, end)
 
 
if __name__ == "__main__":
 
 sol = Solution()
 lists = [2, 5, 4, 9, 3, 6, 8, 7, 1]
 # lists = [1, 2]
 
 
 data = sol.findmedian(lists)
 print("中位数 = %s" % data)

知识补充:python streaming 实现某个字段排序

一,hadoop streaming默认情况

1,在hadoop streaming的默认情况下,是以\t作为分隔符的,标准输入时,每行的第一个\t之前的内容作为key,第一个\t之后的内容作为value。注意,如果一个\t字符都没有,那么整行作为key。

2,streaming的一些参数如下:

-D stream.map.output.field.separator :设置map输出中key和value的分隔符
-D stream.num.map.output.key.fields : 设置map程序分隔符的位置,该位置之前的部分作为key,之后的部分作为value
-D map.output.key.field.separator : 设置map输出中key内部的分割符
-D num.key.fields.for.partition : 指定分桶时,key按照分隔符切割后,其中用于分桶key所占的列数(配合-partitioner org.apache.hadoop.mapred.lib.KeyFieldBasedPartitioner 使用)
-D stream.reduce.output.field.separator:设置reduce输出中key和value的分隔符
-D stream.num.reduce.output.key.fields:设置reduce程序分隔符的位置

二,python streaming 实现某个字段的排序

1, 输入数据: cat data.txt (中间是tab键)

11 2
11 3
11 4 1
11 1

11 12 22

2,streaming程序如下:

vim sorted.sh

#!/bin/bash

export CURRENT=/home/chunhe.liao/hadoop_streaming/sort

/usr/local/hadoop-2.6.3/bin/hadoop jar /usr/local/hadoop-2.6.3/share/hadoop/tools/lib/hadoop-streaming-2.6.3.jar \
-D stream.map.output.field.separator='\t' \
-D stream.num.map.output.key.fields=3 \
-D mapreduce.job.output.key.comparator.class=org.apache.hadoop.mapreduce.lib.partition.KeyFieldBasedComparator \
-D mapreduce.partition.keycomparator.options=-k3,3nr \  # 按照第三列逆序排列,可以根据想要的第几段来选择。
-input "/user/test/inputdata/datas3/data.txt" \
-output "/user/test/streaming/sorted_20180711" \
-mapper "python mapper.py" \
-reducer "python reducer.py" \
-file "$CURRENT/mapper.py" \
-file "$CURRENT/reducer.py"

(2) mapper.py

# -*- coding: utf-8 -*-
import sys
 
for line in sys.stdin:
 line = line.strip()
 print('{0}'.format(line))

(3) reducer.py

# -*- coding: utf-8 -*-
import sys
 
for line in sys.stdin:
 line = line.strip()
 print("{0}".format(line))

运行命令:

bash sorted.sh

运行结果:

hdfs dfs -cat /user/test/streaming/sorted_20180711/part-00000

11 12 22
11 3
11 2
11 4 1
11 1

以上这篇python 实现在无序数组中找到中位数方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python去掉字符串中空格的方法
Mar 11 Python
Python读写文件方法总结
Jun 09 Python
Python遍历文件夹和读写文件的实现代码
Aug 28 Python
基于python中的TCP及UDP(详解)
Nov 06 Python
Python3中内置类型bytes和str用法及byte和string之间各种编码转换 问题
Sep 27 Python
Python进阶之@property动态属性的实现
Apr 01 Python
在Qt中正确的设置窗体的背景图片的几种方法总结
Jun 19 Python
python 定义类时,实现内部方法的互相调用
Dec 25 Python
PyTorch中model.zero_grad()和optimizer.zero_grad()用法
Jun 24 Python
python使用yaml 管理selenium元素的示例
Dec 01 Python
python 利用openpyxl读取Excel表格中指定的行或列教程
Feb 06 Python
python解包概念及实例
Feb 17 Python
python的列表List求均值和中位数实例
Mar 03 #Python
基于Python数据分析之pandas统计分析
Mar 03 #Python
python 的numpy库中的mean()函数用法介绍
Mar 03 #Python
Python统计学一数据的概括性度量详解
Mar 03 #Python
python多维数组分位数的求取方式
Mar 03 #Python
浅谈pandas.cut与pandas.qcut的使用方法及区别
Mar 03 #Python
python Plotly绘图工具的简单使用
Mar 03 #Python
You might like
数据库相关问题
2006/10/09 PHP
php数组添加元素方法小结
2014/12/20 PHP
php文件缓存类用法实例分析
2015/04/22 PHP
php 批量查询搜狗sogou代码分享
2015/05/17 PHP
CI框架常用函数封装实例
2016/11/21 PHP
PHP判断函数是否被定义的方法
2019/06/21 PHP
PHP大文件切割上传并带进度条功能示例
2019/07/01 PHP
jquery配合css简单实现返回顶部效果
2013/09/30 Javascript
jQuery的css() 方法使用指南
2015/05/03 Javascript
JS给Textarea文本框添加行号的方法
2015/08/20 Javascript
javascript实现平滑无缝滚动
2020/08/09 Javascript
JavaScript计算器网页版实现代码分享
2016/07/15 Javascript
通过jquery toggleClass()属性制作文章段落更改背景颜色
2018/05/21 jQuery
使用proxy实现一个更优雅的vue【推荐】
2018/06/19 Javascript
微信小程序实现批量倒计时功能
2020/11/01 Javascript
js实现无缝轮播图
2020/03/09 Javascript
[40:56]2018DOTA2亚洲邀请赛 3.31 小组赛 A组 Liquid vs TNC
2018/04/01 DOTA
在Python中使用__slots__方法的详细教程
2015/04/28 Python
python数据分析:关键字提取方式
2020/02/24 Python
Python生成器next方法和send方法区别详解
2020/05/30 Python
利用SVG和CSS3来实现一个炫酷的边框动画
2015/07/22 HTML / CSS
购买美国制造的相框和画框架:Picture Frames
2018/08/14 全球购物
俄罗斯韩国化妆品网上商店:Cosmasi.ru
2019/10/31 全球购物
丝芙兰墨西哥官网:Sephora墨西哥
2020/05/30 全球购物
幼儿园教学管理制度
2014/02/04 职场文书
入党自荐书范文
2014/03/09 职场文书
幼儿园毕业典礼主持词
2014/03/21 职场文书
合作意向书格式及范文
2014/03/31 职场文书
大学专科求职信
2014/07/02 职场文书
物业管理委托协议(2篇)
2014/09/23 职场文书
党支部党的群众路线对照检查材料
2014/09/24 职场文书
师德标兵先进事迹材料
2014/12/19 职场文书
爱心捐款感谢信
2015/01/20 职场文书
幼儿园教师个人总结
2015/02/05 职场文书
综合素质自我评价评语
2015/03/06 职场文书
大学开学感言
2015/08/01 职场文书