1 Star 0 Fork 25

wyx / lsp爬虫

forked from 牧头 / lsp爬虫 
加入 Gitee
与超过 600 万 开发者一起发现、参与优秀开源项目,私有仓库也完全免费 :)
免费加入
该仓库未指定开源许可证,未经作者的许可,此代码仅用于学习,不能用于其他用途。
克隆/下载
取消
提示: 由于 Git 不支持空文件夾,创建文件夹后会生成空的 .keep 文件
Loading...
README.md

lsp爬虫

介绍

由“阿里渣渣java研发组”、“阿里渣渣java开发组”全体群友投票决定要做的开源项目

基于各位lsp的投票,从以下19个开源项目投票选项中经过3轮投票得出,本群需要开源开发一个java爬虫项目

  1. 造个IDE
  2. lsp网站收集
  3. 一键搭建微服务的项目
  4. 一套弱代码继承开发系统,支持界面自定义搭配,数据库自由配置
  5. 后台管理的手脚架
  6. 一个反大数据推荐的程序
  7. 知识管理+项目管理
  8. 做个“你懂的”网站的种子爬虫程序
  9. wiki
  10. 博彩网站
  11. 开源一个程序员导航项目
  12. 云存储管理系统
  13. 文档生成,类似swgger2的
  14. 深度学习的项目
  15. 小学生编程学习网站
  16. 远程办公软件
  17. 投屏系统
  18. 一套bladex项目
  19. 低代码模板可配置手脚架

以下开源项目名称暂定“lsp爬虫”

请在下方写上“lsp爬虫”具有的功能

  1. 输入网址,选择爬取内容
  2. 获取视频、图片、标题(同步爬取视频&图片的标签,按照标签分类,可以按照标签爬取)
  3. 支持proXXXnXXXhub、xXXXvideoXXXs、91XXXporXXXn等网站的爬虫
  4. 网站内容,视频获取
  5. 开发网站显示爬取的无害内容
  6. 分享微信,朋友圈、QQ、QQ空间、同学群
  7. 可以根据番号、人名、标签、关键词等获取内容
  8. 采集微信公众号文章
  9. 墙内访问外网lsp网站爬取指定链接视频
  10. 自动生成精彩片段
  11. 短视频去水印
  12. (电影直播个毛)最新电影,拉取在线直播
  13. 可以对人物进行换脸,对语言进行自动翻译成中文
  14. (非项目功能)投屏到电视机
  15. 网络传输加密,参考tor
  16. 对人物打分,只保留高分内容,
  17. 可以对抓取的内容进行转码m3u8转mp4等
  18. 弹幕功能
  19. (非项目功能)看视频的时候,网不卡就行。
  20. (图种可以,升级分辨率不存在)以图搜种,爬取时超分辨率处理,1080P升级成4K(这个牛逼 得加上)
  21. 搭建一个lsp社区!
  22. 女主角AI换脸
  23. 服务器用美国的,受美利坚合众国法律保护
  24. 爬虫排行榜实时更新 周榜 日榜 月榜
  25. 支持下载,压缩,解码,MD5修改(云盘上传不和谐)功能,让群友离线观看
  26. 对有马赛克的视频,将马塞克去除掉并高清展示原内容
  27. 图种(将种子隐藏在图片中) 并且支持解析图种和生成
  28. 视频支持4K,老视频自动修复并去掉马赛克
  29. 上传功能,可以上传自己的视频造福其他人,评论功能,上传者视频做的好,评论好,排名靠前
  30. 类似与facebook的视频聊天室,独乐乐不如众乐乐
  31. (谁不想呢,做不到)可以联系到男一号以及女一号
  32. 支持订阅

对以上lsp们提的功能进行提炼

  1. 爬虫功能,爬取文字信息、图片信息、视频信息
  2. 视频转码功能
  3. 爬取的信息进行打标签、分类、打分
  4. 支持代理功能
  5. 爬虫网站使用非对称加密访问,参考tor
  6. 爬取的内容可以分享到微信、朋友圈、QQ、QQ空间,对用户爬虫信息进行订阅
  7. 爬取同一块内容时,可以聊天、弹幕
  8. 爬虫信息排行榜,周榜、日榜、月榜
  9. 爬虫结果进行做种,种子可以生成图种
  10. 上传文字、图片、视频信息
  11. 视频处理功能:修复老视频、去马赛克、AI换脸、升级分辨率、去水印、标记精彩片段、编辑视频、视频解码、自动中文字幕翻译

总结:除视频处理之外,我们要做一个爬虫平台,可以私有、公共爬取信息并分享信息

20201年4月27日输入以上信息

可行性分析:未开始

软件架构:未定

功能分析:未开始

QQ群:

微信群: 群员已超过200人,需要加好友拉微信群

欢迎加入我们进行探讨或在下方留言说出你的想法

赞助

”lsp爬虫“是一款开源项目,其持续稳定的开发离不开这些优秀的支持者。 如果您想加入他们,请考虑:

  • 成为阿里渣渣赞助商
  • 成为阿里渣渣创始合伙人
  • 通过微信、支付宝一次性捐赠

赞助者列表

(按时间顺序排列)

  • 不愿当弱者 ¥ 10
  • Amanda ¥ 10
  • 潇潇北风 ¥ 1
  • 心静如水 ¥ 2000
  • 小丑鸭 ¥ 2000
  • 人在江湖飘 ¥ 10

捐赠者福利

  • 10元以上捐赠者请加群主好友,拉阿里渣渣javaVIP组,享受群主手把手教学服务,附赠2T学习资料
  • 2000元以上捐赠者请加群主好友,拉阿里渣渣java前途组,享受群主一对一的一年授课服务

仓库评论 ( 0 )

你可以在登录后,发表评论

简介

由“阿里渣渣java研发组”、“阿里渣渣java开发组”全体群友投票决定要做的开源项目 展开 收起
Java
取消

发行版

暂无发行版

贡献者

全部

近期动态

加载更多
不能加载更多了
Java
1
https://gitee.com/wangyuexing/lsp-crawler.git
git@gitee.com:wangyuexing/lsp-crawler.git
wangyuexing
lsp-crawler
lsp爬虫
master

搜索帮助