技术文章 > Python技术 > Python爬虫 > 正文

python3中如何安装scrapy

流芳

python3安装scrapy的方法:1、使用“conda install scrapy”命令进行安装;2、先安装Twisted再利用“pip install scrapy”命令进行安装。

Scrapy框架是目前Python中最受欢迎的爬虫框架之一,那么我们今天就来具体了解一下Scrapy框架

什么是Scrapy框架?

Scrapy是一个快速、高层次、轻量级的屏幕抓取和web抓取的python爬虫框架

Scrapy的用途:

Scrapy用途非常广泛,主要用于抓取特定web站点的信息并从中提取特定结构的数据,除此之外,还可用于数据挖掘、监测、自动化测试、信息处理和历史片段(历史记录)打包等

了解完Scrapy框架后,我们就来看看怎么安装和使用吧

安装Scrapy

安装方法有两种:

1.  如果你电脑上有Anaconda的话,可以使用这种方法
windows+r  >>> cmd >>> conda install scrapy >>> 回车

001.jpg

2.第二种方法使用pip安装,不过你需要先下载Twisted插件

下载地址:https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted

(1)点击下载地址,进入后按  ctrl+f ,搜索twisted,然后下载对应版本

    cp27:表示python2.7版本    cp36:表示python3.6版本

    win32:表示Windows32位操作系统

002.jpg

(2)下载完成后进入终端,输入pip install Twisted-18.7.0-cp36-cp36m-win32.whl

Twisted-18.7.0-cp36-cp36m-win32.whl:文件名(你下载哪个文件就输入哪个文件的文件名,要输入全部路径)

安装完成后再输入pip install scrapy,回车

检测scrapy安装是否成功:在终端输入scrapy,出现以下内容就代表安装成功

003.jpg

推荐课程:Python核心基础(尚硅谷)

免费视频教程
本文转载于:csdn,如有侵犯,请联系a@php.cn删除
相关文章
 python代码怎么用cmd打开
 python中怎么取绝对值
 python怎么转成exe文件
 python可以安装多个版本吗
 python真那么流行吗
相关视频章节
 面向程序员的python教程
 线上学习python
 什么是python,为什么必须学习python
 如何在Python中循环遍历列表
 在python如何使用字符串
视频教程分类