CentOS 7 安装 Scrapy 记录

13 sec read

如何在Windows上安装Scrapy 之前的文章中已经讲过,这次的主题改为如何在Linux上安装Scrapy。这次安装选择的是CentOS 7 而没有采用Cent OS 6.7 主要原因是:CentOS 6.7 系统自带的Python是2.6版本,不能满足Scrapy的需求,如果升级成为Python 2.7可能会带来很多意想不到的灾难(先前已经踩过坑,T_T)。具体流程如下:

1、安装开发包组

2、安装Scarpy 所需要的开发包

3、安装Python包管理工具pip

如果直接使用yum install python-pip进行安装会发生如下错误:

解决方案是先安装epel(EPEL是由 Fedora 社区打造,为 RHEL 及衍生发行版如 CentOS、Scientific Linux 等提供高质量软件包的项目):

安装完epel后再执行安装pip 即可,注意到系统自带的Pip不是最新版本的,还可以再升级下:

4、使用Pip安装Scrapy

至此,Scrapy在CentOS的安装就全部完成了,enjoy!

打赏作者
微信支付标点符 wechat qrcode
支付宝标点符 alipay qrcode

使用Docker安装多用户版的JupyterHub

宿主服务器使用的是Ubuntu 18.04,需要注意的是Docker目前不支持Ubuntu 19.10。如要在
标点符
3 min read

使用tqdm显示Python代码执行进度

在使用Python执行一些比较耗时的操作时,为了方便观察进度,通常使用进度条的方式来可视化呈现。Python中
标点符
34 sec read

利用SWIG实现Python调用C/C++

SWIG简介 SWIG是Simplified Wrapper and Interface Generator的
标点符
1 min read

发表评论

电子邮件地址不会被公开。 必填项已用*标注