Python实现微信好友的数据分析


Posted in Python onDecember 16, 2019

基于微信开放的个人号接口python库itchat,实现对微信好友的获取,并对省份、性别、微信签名做数据分析。

效果:

Python实现微信好友的数据分析

Python实现微信好友的数据分析

Python实现微信好友的数据分析

直接上代码,建三个空文本文件stopwords.txt,newdit.txt、unionWords.txt,下载字体simhei.ttf或删除字体要求的代码,就可以直接运行。

#wxfriends.py 2018-07-09
import itchat
import sys
import pandas as pd
import matplotlib.pyplot as plt
plt.rcParams['font.sans-serif']=['SimHei']#绘图时可以显示中文
plt.rcParams['axes.unicode_minus']=False#绘图时可以显示中文
import jieba
import jieba.posseg as pseg
from scipy.misc import imread
from wordcloud import WordCloud
from os import path
#解决编码问题
non_bmp_map = dict.fromkeys(range(0x10000, sys.maxunicode + 1), 0xfffd)
 
 
#获取好友信息
def getFriends():
  friends = itchat.get_friends(update=True)[0:]
  flists = []
  for i in friends:
    fdict={}
    fdict['NickName']=i['NickName'].translate(non_bmp_map)
    if i['Sex'] == 1:
      fdict['Sex']='男'
    elif i['Sex'] == 2:
      fdict['Sex']='女'
    else:
      fdict['Sex']='雌雄同体'
    if i['Province'] == '':
      fdict['Province'] ='未知'
    else:
      fdict['Province']=i['Province']
    fdict['City']=i['City']
    fdict['Signature']=i['Signature']
    flists.append(fdict)
  return flists
 
 
#将好友信息保存成CSV
def saveCSV(lists):
  df = pd.DataFrame(lists)
  try:
    df.to_csv("wxfriends.csv",index = True,encoding='gb18030')
  except Exception as ret:
    print(ret)
  return df
 
 
#统计性别、省份字段  
def anysys(df):
  df_sex = pd.DataFrame(df['Sex'].value_counts())
  df_province = pd.DataFrame(df['Province'].value_counts()[:15])
  df_signature = pd.DataFrame(df['Signature'])
  return df_sex,df_province,df_signature
 
 
#绘制柱状图,并保存  
def draw_chart(df_list,x_feature):
  try:
    x = list(df_list.index)
    ylist = df_list.values
    y = []
    for i in ylist :
      for j in i:
        y.append(j)
    plt.bar(x,y,label=x_feature)
    plt.legend()
    plt.savefig(x_feature)
    plt.close()
  except:
    print("绘图失败")
 
 
#解析取个性签名构成列表   
def getSignList(signature):
  sig_list = []
  for i in signature.values:
    for j in i:
      sig_list.append(j.translate(non_bmp_map))
  return sig_list
 
 
#分词处理,并根据需要填写停用词、自定义词、合并词替换
def segmentWords(txtlist):
  stop_words = set(line.strip() for line in open('stopwords.txt', encoding='utf-8'))
  newslist = []
  #新增自定义词
  jieba.load_userdict("newdit.txt")
  for subject in txtlist:
    if subject.isspace():
      continue
    word_list = pseg.cut(subject)
    
    for word, flag in word_list:
      if not word in stop_words and flag == 'n' or flag == 'eng' and word !='span' and word !='class':
        newslist.append(word)
   #合并指定的相似词
  for line in open('unionWords.txt', encoding='utf-8'):
    newline = line.encode('utf-8').decode('utf-8-sig')  #解决\ufeff问题
    unionlist = newline.split("*")
    for j in range(1,len(unionlist)):
      #wordDict[unionlist[0]] += wordDict.pop(unionlist[j],0)
      for index,value in enumerate(newslist):
        if value == unionlist[j]:
          newslist[index] = unionlist[0] 
  return newslist
 
 
#高频词统计
def countWords(newslist):
  wordDict = {}
  for item in newslist:
    wordDict[item] = wordDict.get(item,0) + 1
  itemList = list(wordDict.items())
  itemList.sort(key=lambda x:x[1],reverse=True)    
  for i in range(100):
    word, count = itemList[i]
    print("{}:{}".format(word,count))
 
 
#绘制词云
def drawPlant(newslist):
  d = path.dirname(__file__)
  mask_image = imread(path.join(d, "timg.png"))
  content = ' '.join(newslist)
  wordcloud = WordCloud(font_path='simhei.ttf', background_color="white",width=1300,height=620, max_words=200).generate(content)  #mask=mask_image,
  # Display the generated image:
  plt.imshow(wordcloud)
  plt.axis("off")
  wordcloud.to_file('wordcloud.jpg')
  plt.show()
 
 
def main():
  #登陆微信
  itchat.auto_login()  # 登陆后不需要扫码  hotReload=True
  flists = getFriends()
  fdf = saveCSV(flists)
  df_sex,df_province,df_signature = anysys(fdf)
  draw_chart(df_sex,"性别")
  draw_chart(df_province,"省份")
  wordList = segmentWords(getSignList(df_signature))
  countWords(wordList)
  drawPlant(wordList)
  
main()

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
简单介绍Python的Django框架加载模版的方式
Jul 20 Python
python制作小说爬虫实录
Aug 14 Python
浅谈Python peewee 使用经验
Oct 20 Python
浅析Python3爬虫登录模拟
Feb 07 Python
Python lambda函数基本用法实例分析
Mar 16 Python
解决pandas .to_excel不覆盖已有sheet的问题
Dec 10 Python
pandas的to_datetime时间转换使用及学习心得
Aug 11 Python
Python字符串处理的8招秘籍(小结)
Aug 13 Python
Python SSL证书验证问题解决方案
Jan 13 Python
python如何判断IP地址合法性
Apr 05 Python
基于python实现操作redis及消息队列
Aug 27 Python
python 自动识别并连接串口的实现
Jan 19 Python
Python字典中的值为列表或字典的构造实例
Dec 16 #Python
python groupby 函数 as_index详解
Dec 16 #Python
Python基本类型的连接组合和互相转换方式(13种)
Dec 16 #Python
Python实现word2Vec model过程解析
Dec 16 #Python
Python爬虫爬取煎蛋网图片代码实例
Dec 16 #Python
python实现监控阿里云账户余额功能
Dec 16 #Python
Python实现密码薄文件读写操作
Dec 16 #Python
You might like
php下关于中英数字混排的字符串分割问题
2010/04/06 PHP
简单的方法让你的后台登录更加安全(php中加session验证)
2012/08/22 PHP
PHP计算加权平均数的方法
2015/07/16 PHP
PHP+Ajax 检测网络是否正常实例详解
2016/12/16 PHP
JavaScript 常见对象类创建代码与优缺点分析
2009/12/07 Javascript
js一般方法改写成面向对象方法的无限级折叠菜单示例代码
2013/07/04 Javascript
JS+CSS实现电子商务网站导航模板效果代码
2015/09/10 Javascript
原生JS实现匀速图片轮播动画
2016/10/18 Javascript
headjs实现网站并行加载但顺序执行JS
2016/11/29 Javascript
vue router仿天猫底部导航栏功能
2017/10/18 Javascript
js正则相关知识点专题
2018/05/10 Javascript
浅谈node.js 命令行工具(cli)
2018/05/10 Javascript
详解从Vue-router到html5的pushState
2018/07/21 Javascript
微信小程序实现侧边分类栏
2019/10/21 Javascript
vue 微信扫码登录(自定义样式)
2020/01/06 Javascript
python批量修改文件名的实现代码
2014/09/01 Python
Python os模块介绍
2014/11/30 Python
Python实现的knn算法示例
2018/06/14 Python
python3+opencv3识别图片中的物体并截取的方法
2018/12/05 Python
对Python中一维向量和一维向量转置相乘的方法详解
2019/08/26 Python
Python3实现二叉树的最大深度
2019/09/30 Python
python实现批量文件重命名
2019/10/31 Python
Python matplotlib以日期为x轴作图代码实例
2019/11/22 Python
window环境pip切换国内源(pip安装异常缓慢的问题)
2019/12/31 Python
Python list和str互转的实现示例
2020/11/16 Python
韩国美国时尚服装和美容在线全球市场:KOODING
2018/11/07 全球购物
德国家具、照明、家居用品网上商店:Wayfair.de
2020/02/13 全球购物
.NET现在共支持多少种语言
2014/02/26 面试题
装饰资料员岗位职责
2013/12/30 职场文书
职业生涯规划书基本格式
2014/01/06 职场文书
2014年计算机专业个人自我评价
2014/01/19 职场文书
辞旧迎新演讲稿
2014/09/15 职场文书
大学生党员个人对照检查材料范文
2014/09/25 职场文书
企业务虚会发言材料
2014/10/20 职场文书
初中生入团申请书范文(五篇)
2019/10/16 职场文书
mapstruct的用法之qualifiedByName示例详解
2022/04/06 Java/Android