网页学习体会

  • 首页
  • 个人博客
您的位置: 首页  >  IT文章  >  Scrapy创建爬虫项目

Scrapy创建爬虫项目

分类: IT文章 • 2025-01-30 13:23:01

1.打开cmd命令行工具,输入scrapy startproject 项目名称

Scrapy创建爬虫项目

2.使用pycharm打开项目,查看项目目录

Scrapy创建爬虫项目

3.创建爬虫,打开CMD,cd命令进入到爬虫项目文件夹,输入scrapy genspider 爬虫文件名 爬虫基础域名

Scrapy创建爬虫项目

 

4.打开pycharm,发现spider目录下多出一个bole.py文件

Scrapy创建爬虫项目

 

5.运行爬虫

Scrapy创建爬虫项目

6.将爬虫拿到的数据保存为json格式数据

Scrapy crawl bole -o XXX.json

相关推荐

  • SpringBoot+Mybatis-Plus+lombok整合 1.介绍篇 2.创建项目 3.pom文件中引入相关的依赖 4.基础代码准备 5.准备就绪,开始真正体验Mybatis-Plus
  • 爬虫24-scrapy框架部署
  • SpringBoot快速上手 一、微服务架构 二、SpringBoot 三、IDEA创建一个SpringBoot项目
  • Intellij Idea创建SpringBoot项目使用内置Tomcat能成功访问,将项目war包部署至第三方Tomcat访问出现404问题及解决方案
  • cbuild-一个创建和管理C++项目的工具 cbuild-一个创建和管理C++项目的工具
  • VUE如何创建一个项目
  • 【idea中创建springMVC项目的2个坑】不识别@Autowired 以及 Mapper.xml的配置
  • 【eclipse和idea】创建spring项目时的一处不同
  • 爬虫框架scrapy安装
  • python学习大全 干货!python爬虫100个入门项目
  • 冲刺第二阶段(第五天)
  • 51nod 1116 K进制下的大数
    网站免责声明 网站地图 最新文章 用户隐私 版权申明
本站所有数据收集于网络,如果侵犯到您的权益,请联系网站进行下架处理。   

Copyright © 2018-2021   Powered By 网页学习体会    备案号:   粤ICP备20002247号