10 Star 21 Fork 2

小luo爱学习 / yellow-movie-spider

forked from MrJ / yellow-movie-spider 
加入 Gitee
与超过 1200万 开发者一起发现、参与优秀开源项目,私有仓库也完全免费 :)
免费加入
该仓库未声明开源许可证文件(LICENSE),使用请关注具体项目描述及其代码上游依赖。
克隆/下载
README.md 571 Bytes
一键复制 编辑 原始数据 按行查看 历史

yellow-movie-spider

项目介绍

  • 依赖:
^python3.5
scrapy 最新版.  pip install scrapy (如果pip版本低升级一下pip,自行百度升级命令)
requests 库  pip install requests 就ok 
  • 设置

yellow/settings.py  FILES_STORE=xxxx 小电影存储目录,这个目录要自己创一下,程序里不清楚没建会不会自动创建,win平台目录例如C:/Users/XXXX/Downloads/yellowhaha
  • 主要代码

yellow/spiders/video.py 爬虫 和 yellow/pipelines.py 下载器
  • 运行
scrapy crawl videos
1
https://gitee.com/sjzjams/yellow-movie-spider.git
git@gitee.com:sjzjams/yellow-movie-spider.git
sjzjams
yellow-movie-spider
yellow-movie-spider
master

搜索帮助

53164aa7 5694891 3bd8fe86 5694891