python pyhs2 的安装操作


Posted in Python onApril 07, 2021

我就废话不多说了,大家还是直接看代码吧~

# 两个依赖包: sasl&thrift
The easier way I find to install sasl on windows 7 is to use the pre-compiled version from here : http://www.lfd.uci.edu/~gohlke/pythonlibs/
There is a direct link to the sasl librairies here : http://www.lfd.uci.edu/~gohlke/pythonlibs/#sasl just pick the one you need.
Then you install it using pip :
pip install sasl-0.1.3-cp27-none-win_amd64.whl
 
from setuptools import setup
setup(
  name='pyhs2',
  version='0.6.0',
  author='Brad Ruderman',
  author_email='bradruderman@gmail.com',
  packages=['pyhs2', 'pyhs2/cloudera', 'pyhs2/TCLIService'],
  url='https://github.com/BradRuderman/pyhs2',
  license='LICENSE.txt',
  description='Python Hive Server 2 Client Driver',
  long_description=open('README.md').read(),
  install_requires=[
    "sasl",
    "thrift",
  ],
  test_suite='pyhs2.test',
  tests_require=["mock"]
)

补充:windows7下给python3安装impyla的艰辛历程

安装环境标题已经给出了,linux下和python2下都很容易安装,我也不知道为什么python3反而这么蛋疼。就直接上干货吧,希望其他人少走弯路。

安装所需依赖

pip install ipython six bit_array thriftpy thrift_sasl==0.2.1 sasl impyla(admin下)

常见报错

error: command ‘C:\Program Files (x86)\Microsoft Visual Studio 14.0\VC\BIN\x86_amd64\link.exe' failed with exit status 1158

FileExistsError: [WinError 183] 当文件已存在时,无法创建该文件。

LINK : fatal error LNK1158: cannot run ‘rc.exe'

大致错误分析

一般上面的报错会出现在安装sasl ,thrift_sasl,和Bitarray时,推测是源码安装时pip与windows的兼容性问题,这时可以用二进制文件安装,参考https://stackoverflow.com/questions/44315943/error-installing-scrapy-error-command-c-program-files-x86-microsoft-visu中第一个回答下的第二条回复

解决办法

https://www.lfd.uci.edu/~gohlke/pythonlibs/找到依赖的包的二进制whl文件进行安装,区分cp36和cp37的,然后一个个安装,遇到哪个依赖库报错就在这个网站中找,用它们的包进行安装即可

3/20更新

这几天又发现了新问题:

1. 在重新安装开发环境时出现了

thriftpy.parser.exc.ThriftParserError: ThriftPy does not support generating module with path in protocol 'c'

2. 在linux上安装sasl这个库时,会出现依赖报错:error: command 'gcc' failed with exit status 1

感觉着实蛋疼,最后才找到了一劳永逸的解决办法,即使用anaconda安装impyla即可自动解决依赖问题:

conda install -c anaconda impyla

有时安装完impyla后还是会报thrift_sasl不存在的错误,可以用conda install -c anaconda thrift_sasl==0.2.1即可

参考:https://stackoverflow.com/questions/39220102/error-import-impyla-library-on-windows

以上为个人经验,希望能给大家一个参考,也希望大家多多支持三水点靠木。如有错误或未考虑完全的地方,望不吝赐教。

Python 相关文章推荐
Python中optionParser模块的使用方法实例教程
Aug 29 Python
Python远程桌面协议RDPY安装使用介绍
Apr 15 Python
Python实现JSON反序列化类对象的示例
Jan 31 Python
Python使用Selenium+BeautifulSoup爬取淘宝搜索页
Feb 24 Python
详解Appium+Python之生成html测试报告
Jan 04 Python
利用pyinstaller打包exe文件的基本教程
May 02 Python
python打印异常信息的两种实现方式
Dec 24 Python
pytorch-神经网络拟合曲线实例
Jan 15 Python
Python Handler处理器和自定义Opener原理详解
Mar 05 Python
python3.6使用SMTP协议发送邮件
May 20 Python
如何基于Python代码实现高精度免费OCR工具
Jun 18 Python
详解pycharm配置python解释器的问题
Oct 15 Python
python3 sqlite3限制条件查询的操作
Apr 07 #Python
python实现高效的遗传算法
解决hive中导入text文件遇到的坑
Apr 07 #Python
python - asyncio异步编程
Apr 06 #Python
python - timeit 时间模块
Apr 06 #Python
python制作图形界面的2048游戏, 基于tkinter
python第三方网页解析器 lxml 扩展库与 xpath 的使用方法
Apr 06 #Python
You might like
解析PHP 5.5 新特性
2013/07/02 PHP
php新浪微博登录接口用法实例
2014/12/23 PHP
值得分享的php+ajax实时聊天室
2016/07/20 PHP
php事务回滚简单实现方法示例
2017/03/28 PHP
作为PHP程序员你要知道的另外一种日志
2018/07/30 PHP
js小技巧--自动隐藏红叉叉
2007/08/13 Javascript
xml和web特殊字符
2009/04/28 Javascript
js tab效果的实现代码
2009/12/26 Javascript
Egret引擎开发指南之发布项目
2014/09/03 Javascript
JQuery报错Uncaught TypeError: Illegal invocation的处理方法
2015/03/13 Javascript
浅谈Javascript线程及定时机制
2015/07/02 Javascript
利用jQuery实现WordPress中@的ID悬浮显示评论内容
2015/12/11 Javascript
让图片跳跃起来  javascript图片轮播特效
2016/02/16 Javascript
Vue.js仿Metronic高级表格(二)数据渲染
2017/04/19 Javascript
javascript checkbox/radio onchange不能兼容ie8处理办法
2017/06/13 Javascript
详谈DOM简介及节点、属性、查找节点的方法
2017/11/16 Javascript
Vue.js 2.0和Cordova开发webApp环境搭建方法
2018/02/26 Javascript
vue3.0 CLI - 2.6 - 组件的复用入门教程
2018/09/14 Javascript
微信小程序如何实现点击图片放大功能
2020/01/21 Javascript
详解使用Python处理文件目录的相关方法
2015/10/16 Python
python 切换root 执行命令的方法
2019/01/19 Python
Python爬虫 批量爬取下载抖音视频代码实例
2019/08/16 Python
在python中利用try..except来代替if..else的用法
2019/12/19 Python
python中线程和进程有何区别
2020/06/17 Python
解决TensorFlow调用Keras库函数存在的问题
2020/07/06 Python
python用Configobj模块读取配置文件
2020/09/26 Python
美国一家全面的在线零售鞋类公司:SHOEBACCA
2017/01/06 全球购物
Java基础知识面试要点
2016/07/29 面试题
护理学应聘自荐书范文
2014/02/05 职场文书
奥巴马连任演讲稿
2014/05/15 职场文书
医学求职信
2014/05/28 职场文书
单方投资意向书
2015/05/11 职场文书
和领导吃饭祝酒词
2015/08/11 职场文书
golang import自定义包方式
2021/04/29 Golang
Python编解码问题及文本文件处理方法详解
2021/06/20 Python
spring boot中nativeQuery的用法
2021/07/26 Java/Android