加入收藏 | 设为首页 | 会员中心 | 我要投稿 北几岛 (https://www.beijidao.com.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 大数据 > 正文

Python3 安装 pip3 以及 scrapy、numpy、itchat

发布时间:2021-05-21 04:54:25 所属栏目:大数据 来源: https://blog.csdn.net/yilovex
导读:安装支持pip3 首先需要安装支持Python3的pip管理工具,如果是Python2.x可以直接使用如下命令: sudoapt-getinstallpip 这样安装的是pip2不支持Python3.x,可以使用如下命令安装pip3 sudoapt-getinstallpython3-pip 可以使用如下命令查看pip3是否安装成功 pip
  1. 安装支持pip3

  2. 首先需要安装支持Python3的pip管理工具,如果是Python2.x可以直接使用如下命令:

sudo apt-get install pip

这样安装的是pip2不支持Python3.x,可以使用如下命令安装pip3

sudo apt-get install python3-pip

可以使用如下命令查看pip3是否安装成功

pip3 --version

安装scrapy

scrapy是一个快速高层次的屏幕抓取和web抓取框架,用于抓取web站点并从页面中提取结构化的数据,可以用于数据挖掘、检测和自动化测试。 
该扩展库具有如下优点:整个爬取过程简单。创建一个类,并定义要删除的项目类型,编写一些从网页中提取数据的规则,结果将以JSON、XML、CSV或其他的格式导出,搜集的数据可以保存在raw,也可以在导入时进行清理。此外scrapy可以扩展允许其他行为例如网站登录处理、会话cookie处理。图像也可被scrapy自动提取并与被抓取的内容进行关联。 
总是scrapy是一个很强大的爬虫爬取框架。

可以使用如下命令安装,首先需要安装scrapy依赖项,否则scrapy安装失败,执行如下命令:

sudo apt-get install builld-essential libssl-dev libffi-dev python3-dev

之后取得系统root权限安装scrapy

su
pip3 install scrapy

此时出现如下错误信息 

这里写图片描述

要求升级pip3,针对pip2的升级命令如下:

install numpy
  1. 安装itchat

itchat是一个封装了微信API的Python扩展库,支持Python3.x

list | grep Scrapy

结果如下 

这里写图片描述

注意区分库名称的大小写。

(编辑:北几岛)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    推荐文章
      热点阅读