技术文章 > Python技术 > Python基础 > 正文

scrapy如何在python爬虫中建立目录?

小妮浅浅

在看一本新书的时候,有些人会习惯的去看一下书本的目录,这样对全书的大概框架也会有一个了解,可见目录的作用是不可小觑的。那么,我们在scrapy框架中有可以建立目录的方法吗?小编在尝试进行python爬虫运行的时候偶尔发现了它的使用,借着这个机会分享给各位小伙伴。


scrapy代码目录

运行:

scrapy startproject tutorial


即可自动创建官方标准的代码目录。

tutorial/
    scrapy.cfg
    tutorial/
        __init__.py
        items.py
        pipelines.py
        settings.py
        spiders/
            __init__.py
            ...


其中:

tutorial/: 该项目的python总模块。

tutorial/items.py: 项目中的item文件,编写爬取的字段名称等;

tutorial/pipelines.py: 项目中的pipelines文件;

tutorial/settings.py: 项目的设置文件,较为重要;

tutorial/spiders/: 放置spider代码的主目录;

想要给自己的文件做目录的小伙伴可以动手尝试一下这种方法,毕竟操作不是很繁琐,python小白也可以放心尝试。更多Python学习推荐:PyThon学习网教学中心

免费视频教程
本文原创发布python学习网,转载请注明出处,感谢您的尊重!
相关文章
 python爬虫中scrapy组件有哪些?作用是什么?
 python3爬虫中如何搭建scrapy框架?需要注意什么?
 python爬虫scrapy框架可以在IDE中调试吗?
 如何用python爬虫scrapy框架中获取内容?
 如何用scrapy框架构建python爬虫?
 scrapy框架如何运行python爬虫并下载数据?
 scrapy框架如何python爬虫中找寻下一页?
相关视频章节
 Scrapy爬虫的基本使用
 股票数据Scrapy爬虫实例编写
 股票数据Scrapy爬虫实例介绍
 股票数据定向Scrapy爬虫实例优化
推荐视频
视频教程分类