python pyhs2 的安装操作


Posted in Python onApril 07, 2021

我就废话不多说了,大家还是直接看代码吧~

# 两个依赖包: sasl&thrift
The easier way I find to install sasl on windows 7 is to use the pre-compiled version from here : http://www.lfd.uci.edu/~gohlke/pythonlibs/
There is a direct link to the sasl librairies here : http://www.lfd.uci.edu/~gohlke/pythonlibs/#sasl just pick the one you need.
Then you install it using pip :
pip install sasl-0.1.3-cp27-none-win_amd64.whl
 
from setuptools import setup
setup(
  name='pyhs2',
  version='0.6.0',
  author='Brad Ruderman',
  author_email='bradruderman@gmail.com',
  packages=['pyhs2', 'pyhs2/cloudera', 'pyhs2/TCLIService'],
  url='https://github.com/BradRuderman/pyhs2',
  license='LICENSE.txt',
  description='Python Hive Server 2 Client Driver',
  long_description=open('README.md').read(),
  install_requires=[
    "sasl",
    "thrift",
  ],
  test_suite='pyhs2.test',
  tests_require=["mock"]
)

补充:windows7下给python3安装impyla的艰辛历程

安装环境标题已经给出了,linux下和python2下都很容易安装,我也不知道为什么python3反而这么蛋疼。就直接上干货吧,希望其他人少走弯路。

安装所需依赖

pip install ipython six bit_array thriftpy thrift_sasl==0.2.1 sasl impyla(admin下)

常见报错

error: command ‘C:\Program Files (x86)\Microsoft Visual Studio 14.0\VC\BIN\x86_amd64\link.exe' failed with exit status 1158

FileExistsError: [WinError 183] 当文件已存在时,无法创建该文件。

LINK : fatal error LNK1158: cannot run ‘rc.exe'

大致错误分析

一般上面的报错会出现在安装sasl ,thrift_sasl,和Bitarray时,推测是源码安装时pip与windows的兼容性问题,这时可以用二进制文件安装,参考https://stackoverflow.com/questions/44315943/error-installing-scrapy-error-command-c-program-files-x86-microsoft-visu中第一个回答下的第二条回复

解决办法

https://www.lfd.uci.edu/~gohlke/pythonlibs/找到依赖的包的二进制whl文件进行安装,区分cp36和cp37的,然后一个个安装,遇到哪个依赖库报错就在这个网站中找,用它们的包进行安装即可

3/20更新

这几天又发现了新问题:

1. 在重新安装开发环境时出现了

thriftpy.parser.exc.ThriftParserError: ThriftPy does not support generating module with path in protocol 'c'

2. 在linux上安装sasl这个库时,会出现依赖报错:error: command 'gcc' failed with exit status 1

感觉着实蛋疼,最后才找到了一劳永逸的解决办法,即使用anaconda安装impyla即可自动解决依赖问题:

conda install -c anaconda impyla

有时安装完impyla后还是会报thrift_sasl不存在的错误,可以用conda install -c anaconda thrift_sasl==0.2.1即可

参考:https://stackoverflow.com/questions/39220102/error-import-impyla-library-on-windows

以上为个人经验,希望能给大家一个参考,也希望大家多多支持三水点靠木。如有错误或未考虑完全的地方,望不吝赐教。

Python 相关文章推荐
python 文件转成16进制数组的实例
Jul 09 Python
Django框架模板介绍
Jan 15 Python
详解Python网络框架Django和Scrapy安装指南
Apr 01 Python
Django 通过JS实现ajax过程详解
Jul 30 Python
Python3直接爬取图片URL并保存示例
Dec 18 Python
使用python检查yaml配置文件是否符合要求
Apr 09 Python
详解pandas绘制矩阵散点图(scatter_matrix)的方法
Apr 23 Python
Python基础之数据类型知识汇总
May 18 Python
如何理解及使用Python闭包
Jun 01 Python
Python可视化学习之matplotlib内置单颜色
Feb 24 Python
python井字棋游戏实现人机对战
Apr 28 Python
python数字图像处理之对比度与亮度调整示例
Jun 28 Python
python3 sqlite3限制条件查询的操作
Apr 07 #Python
python实现高效的遗传算法
解决hive中导入text文件遇到的坑
Apr 07 #Python
python - asyncio异步编程
Apr 06 #Python
python - timeit 时间模块
Apr 06 #Python
python制作图形界面的2048游戏, 基于tkinter
python第三方网页解析器 lxml 扩展库与 xpath 的使用方法
Apr 06 #Python
You might like
php下MYSQL limit的优化
2008/01/10 PHP
php 计算两个时间戳相隔的时间的函数(小时)
2009/12/18 PHP
Zend Framework页面缓存实例
2014/06/25 PHP
Symfony2开发之控制器用法实例分析
2016/02/05 PHP
JavaScript 学习笔记一些小技巧
2010/03/28 Javascript
IE、FF、Chrome浏览器中的JS差异介绍
2013/08/13 Javascript
js获取html文件的思路及示例
2013/09/17 Javascript
jquery实现动态菜单的实例代码
2013/11/28 Javascript
JS实现跟随鼠标立体翻转图片的方法
2015/05/04 Javascript
2016年最热门的15 款代码语法高亮工具,美化你的代码
2016/01/06 Javascript
动态加载JavaScript文件的两种方法
2016/04/22 Javascript
前端学习笔记style,currentStyle,getComputedStyle的用法与区别
2016/05/28 Javascript
JavaScript Ajax编程 应用篇
2016/07/02 Javascript
chrome浏览器如何断点调试异步加载的JS
2016/09/05 Javascript
javascript中Number的方法小结
2016/11/21 Javascript
JavaScript结合HTML DOM实现联动菜单
2017/04/05 Javascript
AngularJS 霸道的过滤器小结
2017/04/26 Javascript
浅谈Vue.js 关于页面加载完成后执行一个方法的问题
2019/04/01 Javascript
vue中axios防止多次触发终止多次请求的示例代码(防抖)
2020/02/16 Javascript
js获取url页面id,也就是最后的数字文件名
2020/09/25 Javascript
[00:20]DOTA2荣耀之路7:-ah fu-抢盾
2018/05/31 DOTA
Python中类的定义、继承及使用对象实例详解
2015/04/30 Python
Python实现批量下载文件
2015/05/17 Python
python使用电子邮件模块smtplib的方法
2016/08/28 Python
安装Python和pygame及相应的环境变量配置(图文教程)
2017/06/04 Python
详解Python文本操作相关模块
2017/06/22 Python
用python统计代码行的示例(包括空行和注释)
2018/07/24 Python
python使用requests.session模拟登录
2019/08/09 Python
wxPython多个窗口的基本结构
2019/11/19 Python
Python内置函数及功能简介汇总
2020/10/13 Python
Python函数调用追踪实现代码
2020/11/27 Python
大型车展策划方案
2014/02/01 职场文书
商业计算机应用专业自荐书
2014/06/09 职场文书
班风口号
2014/06/18 职场文书
五月的鲜花活动方案
2014/08/21 职场文书
2014国庆节主题活动方案:快乐的国庆节
2014/09/16 职场文书