分享

Scrapy创建爬虫项目

 昵称54185769 2018-05-08

1.打开cmd命令行工具,输入scrapy startproject 项目名称


2.使用pycharm打开项目,查看项目目录


3.创建爬虫,打开CMDcd命令进入到爬虫项目文件夹,输入scrapy genspider 爬虫文件名 爬虫基础域名


4.打开pycharm,发现spider目录下多出一个bole.py文件


5.运行爬虫


6.将爬虫拿到的数据保存为json格式数据

Scrapy crawl bole -o XXX.json

    本站是提供个人知识管理的网络存储空间,所有内容均由用户发布,不代表本站观点。请注意甄别内容中的联系方式、诱导购买等信息,谨防诈骗。如发现有害或侵权内容,请点击一键举报。
    转藏 分享 献花(0

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多