cmd命令创建python scrapy 项目
cmd命令创建python scrapy 项目
老王哥哥 发表于3个月前
cmd命令创建python scrapy 项目
  • 发表于 3个月前
  • 阅读 7
  • 收藏 0
  • 点赞 0
  • 评论 0

腾讯云 技术升级10大核心产品年终让利>>>   

scrapy startproject xxx  在当前目录创建以xxx名字的工程

目录结构如下,解释:

scrapy.cfg: 项目配置文件
xxx/: 项目python模块, 呆会代码将从这里导入
xxx/items.py: 项目items文件
xxx/pipelines.py: 项目管道文件
xxx/settings.py: 项目配置文件
xxx/spiders: 放置spider的目录

scrapy genspider name domain        创建一个spider
#如:
#scrapy genspider sohu sohu.org

scrapy list  查看当前项目有多少个爬虫

scrapy view url  使用浏览器打开网页

scrapy shell url shell命令 进入scrapy 交互环境

scrapy runspider 爬虫名  直接运行创建的爬虫,不会运行整个项目


 

标签: python scrapy
共有 人打赏支持
粉丝 0
博文 16
码字总数 9532
×
老王哥哥
如果觉得我的文章对您有用,请随意打赏。您的支持将鼓励我继续创作!
* 金额(元)
¥1 ¥5 ¥10 ¥20 其他金额
打赏人
留言
* 支付类型
微信扫码支付
打赏金额:
已支付成功
打赏金额: