centos7.4最小版安装python3和scrapy

centos7.4中python3.6更新pip卡了蛮久,试了半天才解决.记录下过程.

一 安装python3.6.5

安装依赖包

yum -y groupinstall "Development tools"

yum -y install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gdbm-devel db4-devel libpcap-devel xz-devel

最小版默认没有安装wget,用yum安装

yum -y install wget

新建一个文件夹存放python3

mkdir /usr/local/python3

切换到python3 目录下载

wget https://www.python.org/ftp/python/3.6.5/Python-3.6.5.tgz

解压

tar -xvf  Python-3.6.5.tgz

切换目录

cd Python-3.6.5

配置

./configure --prefix=/usr/local/python3

编译和安装

make 

make install

创建软连接

ln -s /usr/local/python3/bin/python3 /usr/bin/python3

命令行输入python3,终于出现python3的版本号了,安装成功

ctr然后按Z退出


测试python3                     

二.安装pip ,并更新python3的pip

1、安装pip前需要前置安装setuptools

切换目录

cd python3

wget --no-check-certificate https://pypi.python.org/packages/source/s/setuptools/setuptools-19.6.tar.gz#md5=c607dd118eae682c44ed146367a17e26

tar -zxvf setuptools-19.6.tar.gz                              

cd setuptools-19.6

python3 setup.py build

python3 setup.py install

报错:RuntimeError: Compression requires the (missing) zlib module

我们需要在linux中安装zlib-devel包,进行支持。

yum install zlib-devel

需要对python3.6.5进行重新编译安装。(make & make install)

cd python3.6.5

make & make install

又是漫长的编译安装过程。

重新安装setuptools

python3 setup.py build

python3 setup.py install

2 安装pip

切换目录,这里是下载安装python3中的目录

cd python3

wget --no-check-certificate https://pypi.python.org/packages/source/p/pip/pip-8.0.2.tar.gz#md5=3a73c4188f8dbad6a1e6f6d44d117eeb

tar -zxvf pip-8.0.2.tar.gz

cd pip-8.0.2

python3 setup.py build

python3 setup.py install

测试

shell#python3 -m pip install paramiko

ImportError: cannot import name 'HTTPSHandler'

缺少openssl的开发环境,我们继续安装

shell#yum install openssl-devel

完了提示需要更新

pip install --upgrade pip //无效的命令

  centos7.4中python2的pip更新,(看情况,没有python2开发的需要pip升级的可以不更新)

这是是重点,试了好多办法多不行,最后灵机一动,临时换源,才更新好

pip install  --upgrade pip  //官方给的命令不好使,网上有人说链接失效了

临时换到清华的源才更新好

pip install -i https://pypi.tuna.tsinghua.edu.cn/simple --upgrade pip

结果这样更新的pip是系统自带的pip ,是基于python2的

shell#pip list


系统自带的pip列表



3 .python3中pip更新到pip19.03,重中之重,试了蛮久

为了跟系统自带python2的pip区分

设置python3中pip的软链

ln -s /usr/local/python3/bin/pip3 /usr/bin/pip3

python3中pip更新到pip19.03 ,试了蛮多办法都不行

python3 -m pip install -U --force-reinstall pip3

pip3 install -i https://pypi.tuna.tsinghua.edu.cn/simple --upgrade pip3

pip install  --upgrade pip  //无效的命令

最后用官网的办法:

切换好本地python目录python3中,使用命令

curl https://bootstrap.pypa.io/get-pip.py -o get-pip.py

进入python目录中,然后使用命令

python3 get-pip.py

就安装好了!


官方文档截图

#pip3 list


pip3列表

三安装scrapy

pip3都装好了,更新好了,再装包就容易了

1 安装依赖包Twisted,否则会不支持报如下错误

ModuleNotFoundError: No module named 'twisted.persisted'

pip3 install Twisted

我在这里找不到这个版本,切换到存放下载包的目录python3,下载Twisted

wget https://twistedmatrix.com/Releases/Twisted/17.9/Twisted-17.9.0.tar.bz2

解压下载下来的Twisted-17.9.0.tar.bz2

tar -xvf Twisted-17.9.0.tar.bz2

进入解压后的目录,执行:

python3 setup.py install


2 安装scrapy

下面这个命令看运气,国外源,不行多试几遍 

  pip3 install scrapy

 用下面的命令换下载源速度会快点,能成功.

 pip3  install -i https://pypi.tuna.tsinghua.edu.cn/simple scrapy

3 安装完创建软链接 (重要,不然会提示-bash: scrapy: 未找到命令)

ln -s /usr/local/python3/bin/scrapy /usr/bin/scrapy

执行

scrapy -V

没报错就安装成功了

******不创建的话会提示-bash: scrapy: 未找到命令


4添加环境变量(可选)

vim  .bashrc 


vim  .bashrc

source.bashrc

scrapy
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 158,425评论 4 361
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,058评论 1 291
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 108,186评论 0 243
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,848评论 0 204
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,249评论 3 286
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,554评论 1 216
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,830评论 2 312
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,536评论 0 197
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,239评论 1 241
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,505评论 2 244
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,004评论 1 258
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,346评论 2 253
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 32,999评论 3 235
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,060评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,821评论 0 194
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,574评论 2 271
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,480评论 2 267

推荐阅读更多精彩内容