1 Star 0 Fork 4

wuyiyi1234 / jsl

forked from Sunny / jsl 
加入 Gitee
与超过 1200万 开发者一起发现、参与优秀开源项目,私有仓库也完全免费 :)
免费加入
该仓库未声明开源许可证文件(LICENSE),使用请关注具体项目描述及其代码上游依赖。
克隆/下载
贡献代码
同步代码
取消
提示: 由于 Git 不支持空文件夾,创建文件夹后会生成空的 .keep 文件
Loading...
README

jsl

抓取集思录指定的用户的帖子,存档到mongo

使用方法: 安装scrapy + pymongo, 安装mongo服务器

安装完成后运行 python run.py 需要抓取指定的用户名:比如 毛之川 等待程序返回用户的id,然后把id 复制到spider/jisilu.py 文件中的 self.uid = '8132', 替换这个值 修改pipeline.py文件中这一行 self.user = u'毛之川' # 修改为指定的用户名 如 毛之川

新增爬取全站数据

guess_first_day_price_syncup.py 估算可转债上市价格

空文件

简介

集思录爬虫 展开 收起
取消

发行版

暂无发行版

贡献者

全部

近期动态

加载更多
不能加载更多了
1
https://gitee.com/wuyiyi1234/jsl.git
git@gitee.com:wuyiyi1234/jsl.git
wuyiyi1234
jsl
jsl
master

搜索帮助