0、前言:
- 一般我们自己创建的一些python项目,我们都需要创建虚拟环境,其中会下载很多包,也叫做依赖。但是我们在给他人分享我们的项目时,不能把虚拟环境打包发送给别人,因为每个人电脑系统不同,我们可以把依赖导出为依赖清单,然后别人有了我们的依赖清单,就可以用一条指令把我们的依赖下载到它的项目环境中,这样就能快速运行和部署python项目了
- 在终端中生成依赖清单的指令:pip freeze > requirements.txt
- 有了别人的依赖清单,导入别人依赖清单的指令:pip install -r requirements.txt (注意:执行这条指令时,要把别人的依赖清单放到你的项目路径中才行。)
- 本项目的代码和依赖清单,都会打包一并上传
1、项目概览:
2、创建项目:
- 前提项目环境中已经下载了scrapy
- 在终端执行创建指令:scrapy startproject get_news (注释:get_news是项目名称)
- 在终端执行切换到项目目录指令:cd get_news
- 在终端执行在项目中创建爬虫python文件的指令:scrapy genspider 爬虫名称 爬取页面网址
3、代码:
- 爬