lsp爬虫
介绍
由“阿里渣渣java研发组”、“阿里渣渣java开发组”全体群友投票决定要做的开源项目
基于各位lsp的投票，从以下19个开源项目投票选项中经过3轮投票得出，本群需要开源开发一个java爬虫项目
- 造个IDE
- lsp网站收集
- 一键搭建微服务的项目
- 一套弱代码继承开发系统，支持界面自定义搭配，数据库自由配置
- 后台管理的手脚架
- 一个反大数据推荐的程序
- 知识管理+项目管理
- 做个“你懂的”网站的种子爬虫程序
- wiki
- 博彩网站
- 开源一个程序员导航项目
- 云存储管理系统
- 文档生成，类似swgger2的
- 深度学习的项目
- 小学生编程学习网站
- 远程办公软件
- 投屏系统
- 一套bladex项目
- 低代码模板可配置手脚架
以下开源项目名称暂定“lsp爬虫”
请在下方写上“lsp爬虫”具有的功能
- 输入网址，选择爬取内容
- 获取视频、图片、标题（同步爬取视频&图片的标签，按照标签分类，可以按照标签爬取）
- 支持proXXXnXXXhub、xXXXvideoXXXs、91XXXporXXXn等网站的爬虫
- 网站内容，视频获取
- 开发网站显示爬取的无害内容
- 分享微信，朋友圈、QQ、QQ空间、同学群
- 可以根据番号、人名、标签、关键词等获取内容
- 采集微信公众号文章
- 墙内访问外网lsp网站爬取指定链接视频
- 自动生成精彩片段
- 短视频去水印
- （电影直播个毛）最新电影，拉取在线直播
- 可以对人物进行换脸，对语言进行自动翻译成中文
- （非项目功能）投屏到电视机
- 网络传输加密，参考tor
- 对人物打分，只保留高分内容，
- 可以对抓取的内容进行转码m3u8转mp4等
- 弹幕功能
- （非项目功能）看视频的时候，网不卡就行。
- （图种可以，升级分辨率不存在）以图搜种，爬取时超分辨率处理，1080P升级成4K（这个牛逼 得加上）
- 搭建一个lsp社区！
- 女主角AI换脸
- 服务器用美国的，受美利坚合众国法律保护
- 爬虫排行榜实时更新 周榜 日榜 月榜
- 支持下载,压缩,解码,MD5修改（云盘上传不和谐）功能,让群友离线观看
- 对有马赛克的视频，将马塞克去除掉并高清展示原内容
- 图种(将种子隐藏在图片中) 并且支持解析图种和生成
- 视频支持4K,老视频自动修复并去掉马赛克
- 上传功能，可以上传自己的视频造福其他人，评论功能，上传者视频做的好，评论好，排名靠前
- 类似与facebook的视频聊天室，独乐乐不如众乐乐
- （谁不想呢，做不到）可以联系到男一号以及女一号
- 支持订阅
对以上lsp们提的功能进行提炼
- 爬虫功能，爬取文字信息、图片信息、视频信息
- 视频转码功能
- 爬取的信息进行打标签、分类、打分
- 支持代理功能
- 爬虫网站使用非对称加密访问，参考tor
- 爬取的内容可以分享到微信、朋友圈、QQ、QQ空间，对用户爬虫信息进行订阅
- 爬取同一块内容时，可以聊天、弹幕
- 爬虫信息排行榜，周榜、日榜、月榜
- 爬虫结果进行做种，种子可以生成图种
- 上传文字、图片、视频信息
- 视频处理功能：修复老视频、去马赛克、AI换脸、升级分辨率、去水印、标记精彩片段、编辑视频、视频解码、自动中文字幕翻译
总结：除视频处理之外，我们要做一个爬虫平台，可以私有、公共爬取信息并分享信息
20201年4月27日输入以上信息
可行性分析：未开始
软件架构：未定
功能分析：未开始
QQ群：
微信群：
群员已超过200人，需要加好友拉微信群
欢迎加入我们进行探讨或在下方留言说出你的想法
赞助
”lsp爬虫“是一款开源项目，其持续稳定的开发离不开这些优秀的支持者。 如果您想加入他们，请考虑：
- 成为阿里渣渣赞助商
- 成为阿里渣渣创始合伙人
- 通过微信、支付宝一次性捐赠
赞助者列表
（按时间顺序排列）
- 不愿当弱者 ￥ 10
- Amanda ￥ 10
- 潇潇北风 ￥ 1
- 心静如水 ￥ 2000
- 小丑鸭 ￥ 2000
- 人在江湖飘 ￥ 10
捐赠者福利
- 10元以上捐赠者请加群主好友，拉阿里渣渣javaVIP组，享受群主手把手教学服务，附赠2T学习资料
- 2000元以上捐赠者请加群主好友，拉阿里渣渣java前途组，享受群主一对一的一年授课服务
