Giter Club home page Giter Club logo

fioralove / net-spider Goto Github PK

View Code? Open in Web Editor NEW
779.0 17.0 200.0 3.06 MB

新手小白~~持续更新中〜随意Fork,Star,大佬萌多多issue哦 (目前更新: 1.短视频视频无水印解析(支持超过30多个平台 e.g., 抖音,快手,微博...) 2.bilibili音视频解析🐱‍👓 3.知音漫客图片加密 🔥 4. 世纪佳缘信息👨‍👩‍👧‍👦 5.小鸡词典🐥🐥。。。。。。

Python 49.70% JavaScript 48.70% HTML 1.60%
spiders pornhub pixiv python3 python-script

net-spider's Introduction

Net-Spider

不积跬步,无以至千里;不积小流,无以成江海

新手小白~~持续更新中〜随意Fork,Star,若某些接口解析失效,请大佬萌多多issue哦。目前更新:

项目 状态 项目 状态 项目 状态
抖音无水印解析 🛠 短视频无水印解析 持续更新 咪咕登录
知音漫客 扑飞漫画 漫画台
小鸡词典 拉钩网职位信息 今日头条 🛠
斗鱼主播列表 openlaw裁决网 代理池
CSDN文章 轻小说爬取 陌陌登录
马蜂窝 Pixiv YouTube
奇漫屋 Pornhub QQ音乐
网易云音乐 图集

短视频解析接口已支持:

  • 抖音、快手、小红书、微博、西瓜视频、今日头条、美拍、微视、火山小视频、皮皮虾、好看视频、before避风、酷秀短视频...
  • VUE Vlog、秒拍、梨视频、全民小视频、陌陌视频、Youtube、轻视频、Bilibili、茄子短视频、开眼、UC浏览器,Pornhub ...
  • 全民K歌、最右、小咖秀、皮皮搞笑、AcFun、新片场、场库、绿洲、虎牙、比心陪练、逗拍等超过30个平台的短视频去水印解析

近期任务安排:

  • 整理Markdown手册
  • 改善项目
    • 持续更新增加短视频无水印解析接口

开发日志

  • 初始化提交
  • 2020-09-11 新增视频解析模块,并初始化提交
  • 2020-09-28 持续更新短视频无水印解析入口
  • 2020-11-10 更新修复失效解析接口
  • 2020-11-28 新增【Pornhub/Pixiv】视频下载解析接口
  • 2021-01-23 【Ravizhan】更新【QQ音乐/网易云音乐】解析原理

合作开发者

谨献给那些即使饱受创伤,仍坚守奋斗的每一位贡献者

严正声明

警告⚠️ 此项目仅供学习,所有文章旨在技术传播和交流学习,切记请勿用于商业用途,只用于开发者学习!!

最近方向

正在做一个前后分离的小网站,前端Vue,后端Django的rest-framework库提供api,

代码地址:

实现功能:

  • 个人主页
  • 实时热榜
  • Pixiv插画
  • 漫画展示
  • 短视频无水印解析下载
  • 音乐聆听
  • 抽象圣经(嘴臭圣经)
  • 留言面板
  • 在线工具
  • Pornbar 不对外公布的隐私数据

成果展示:

net-spider's People

Contributors

fioralove avatar katarinalove avatar ravizhan avatar

Stargazers

 avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar

Watchers

 avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar

net-spider's Issues

ixigua 不能用

看了大多数貌似都不能用啊 直接代码执行 是我执行的姿势不对么

关于【哔哩哔哩】视频下载三种方式

【哔哩哔哩】视频下载三种方式:

  • 模拟手机端请求,视频链接就添加在源码中。(最简单、但清晰度不好
  • 通过调用别人的接口来下载视频。(根据接口的破解难度而定,可选择清晰度,不过最高的清晰度仅为未登录时能观看的最大清晰度)
  • 直接通过B站的网页版来抓取。(难度稍大,不过清晰度很好,有大会员的话,能下载4K视频

没有找到无水印的的视频接口,或许B站不对外提供无水印的视频地址

小鸡词典爬取

小鸡词典爬虫现在可以用吗,会不会被网站限制访问

【快手】api优化

之前的api可能是因为 快手 更新的缘故,解析出来的短视频有水印了,故今天重构api

【皮皮虾】短视频去水印优化

  • 事情描述:当在QQ上看到 @ravizhan 发给我的【小红书】无水印解析失效 时,我使用的是自己的手机IOS14+Fiddler Everywhere,发现差不多有十几个参数,而且都是缺一不可,心烦意乱。强扭的瓜不甜,我就准备回顾一下之前的皮皮虾解析,偶然中发现了皮皮虾的无水印

  • 皮皮虾:皮皮虾的短视频【推荐】板块是每次post请求,返回6条数据,滑动6个视频后会重新请求,根据这个api好像不能查询某个具体的视频,于是我就点击详细页,发现了评论的api中找到了这个无水印的短视频URL。美中不足的是:假如某个视频是没有评论的,返回的就是一个空数组

可以将所有的接口抽象为同一个接口嘛?

将所有的接口抽象为同一个接口,提供统一的调用。

通过不同的参数调用不同平台的接口,比如 参数设置为 抖音,则调用抖音可用的接口(将接口按照可信度排序,根据可信度优先调用)。

Recommend Projects

  • React photo React

    A declarative, efficient, and flexible JavaScript library for building user interfaces.

  • Vue.js photo Vue.js

    🖖 Vue.js is a progressive, incrementally-adoptable JavaScript framework for building UI on the web.

  • Typescript photo Typescript

    TypeScript is a superset of JavaScript that compiles to clean JavaScript output.

  • TensorFlow photo TensorFlow

    An Open Source Machine Learning Framework for Everyone

  • Django photo Django

    The Web framework for perfectionists with deadlines.

  • D3 photo D3

    Bring data to life with SVG, Canvas and HTML. 📊📈🎉

Recommend Topics

  • javascript

    JavaScript (JS) is a lightweight interpreted programming language with first-class functions.

  • web

    Some thing interesting about web. New door for the world.

  • server

    A server is a program made to process requests and deliver data to clients.

  • Machine learning

    Machine learning is a way of modeling and interpreting data that allows a piece of software to respond intelligently.

  • Game

    Some thing interesting about game, make everyone happy.

Recommend Org

  • Facebook photo Facebook

    We are working to build community through open source technology. NB: members must have two-factor auth.

  • Microsoft photo Microsoft

    Open source projects and samples from Microsoft.

  • Google photo Google

    Google ❤️ Open Source for everyone.

  • D3 photo D3

    Data-Driven Documents codes.