V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
cesign
V2EX  ›  NAS

你期待的 NAS 下载场景

  •  5
     
  •   cesign · 2023-07-04 09:53:57 +08:00 · 7300 次点击
    这是一个创建于 381 天前的主题,其中的信息可能已经有所发展或是发生改变。

    和许多小伙伴一起写的资源下载项目 https://github.com/opennaslab/kubespider ,目前支持:

    资源提供器 是否支持 用途
    mikanani 资源提供器 全自动动漫追番
    btbtt12 资源提供器 实现链接触发下载,简化下载流程
    meijutt 资源提供器 自动追美剧
    YouTube 资源提供器 触发下载 YouTube 视频
    Bilibili 资源提供器 触发下载 Bilibili 视频
    通用 rss 资源提供器 自动下载 rss 订阅资源
    魔法资源提供器 触发下载通过 xpath 配置的内容资源
    抖音资源提供器 触发下载带水印的抖音视频

    最近灵感枯竭,还有什么有意思的下载场景吗? 当然,也欢迎各位 V 友加入,一起完善。

    84 条回复    2024-06-28 17:03:52 +08:00
    LokiSharp
        1
    LokiSharp  
       2023-07-04 10:07:03 +08:00
    加个火狐插件?
    Sanchia
        2
    Sanchia  
       2023-07-04 10:27:44 +08:00
    难道就没有一个场景是,我把内容链接直接扔进去,后台自动给我去解析并下载(离线下载)

    一般而言,在能接触 nas 的时候,我是不会下载任何东西的,因为我要用,他会抢我网速。所以基本上我都是在外面通过各种方式连回家里的离线下载管理,然后添加下载任务。
    cesign
        3
    cesign  
    OP
       2023-07-04 10:27:50 +08:00
    @LokiSharp 可以,我排到计划里面去
    MuSeCanYang
        4
    MuSeCanYang  
       2023-07-04 10:28:14 +08:00
    微博和 twitter 的下载场景也挺常见的。其他的好像就没啥了,我看你还支持百度。 国内的下载场景应该是全覆盖了。
    cesign
        5
    cesign  
    OP
       2023-07-04 10:28:50 +08:00   ❤️ 1
    @Sanchia 现在支持 部分网站的 “我把内容链接直接扔进去,后台自动给我去解析并下载(离线下载)”
    cesign
        6
    cesign  
    OP
       2023-07-04 10:29:55 +08:00
    @MuSeCanYang 微博是下载什么,图片?视频?
    Sanchia
        7
    Sanchia  
       2023-07-04 10:33:21 +08:00
    哦哦,因为我看 github 并没有提及这块内容,所以就提出来了。
    MKCHJN
        8
    MKCHJN  
       2023-07-04 10:41:50 +08:00
    +个 bilibili/acfun/tiktok
    最好能自动刮削生成对应视频的 nfo 信息文件及对应图片,方便视频管理器调用
    cesign
        9
    cesign  
    OP
       2023-07-04 10:46:12 +08:00
    @MKCHJN bilibili 和 tiktok 以支持,acfunc 我记录一下
    这个自动刮削没看过,不知道难度咋样,我看看
    xblvesting
        10
    xblvesting  
       2023-07-04 11:17:53 +08:00   ❤️ 1
    能支持对 B 站和 youtube 的订阅下载么?当 up 主更新后自动下载
    cesign
        11
    cesign  
    OP
       2023-07-04 11:20:59 +08:00
    @xblvesting hello ,这个正在做
    mozhizhu
        12
    mozhizhu  
       2023-07-04 11:21:23 +08:00
    98t 要不要搞一个……
    cesign
        13
    cesign  
    OP
       2023-07-04 11:21:24 +08:00
    @xblvesting 大佬有兴趣来一起实现一下吗
    cesign
        14
    cesign  
    OP
       2023-07-04 11:22:01 +08:00
    @mozhizhu 98t 是什么
    zhoujian1
        15
    zhoujian1  
       2023-07-04 11:28:56 +08:00
    @cesign #14 容量 有 98T😂
    Sanchia
        16
    Sanchia  
       2023-07-04 11:31:12 +08:00
    请问,怎么写自己的插件呢。我在文档内并未发现这块的说明,或者是说需要自己实现搜刮功能,然后调用 Kubespider 的下载触发?
    mozhizhu
        17
    mozhizhu  
       2023-07-04 11:32:21 +08:00
    @cesign
    搞中文字幕很在行的一个车牌论坛,后缀 点 la 😂
    cesign
        18
    cesign  
    OP
       2023-07-04 11:47:51 +08:00
    @Sanchia 如果想实现自己的插件,可以看 API 文档: https://github.com/opennaslab/kubespider/blob/main/docs/zh/user_guide/api_docs/README.md

    刮削(特指海报墙什么的)这个得自己实现,如果你指解析网站内容,触发下载,这个实现一个 kubespider 里面得一个组件即可
    zhady009
        19
    zhady009  
       2023-07-04 13:29:35 +08:00
    之前看了一下和我的项目不太好配合起来,这周我也打算做一个浏览器的扩展发送给处理器处理

    https://github.com/shoaky009/source-downloader

    不过目前上手难度大没 ui 文档也需要补充,最终形态应该就是有类似 helm 的东西根据场景出模版配置几个参数就行
    Juszoe
        20
    Juszoe  
       2023-07-04 13:31:09 +08:00   ❤️ 1
    点进去发现已经 star 了。另外,有通知系统吗(邮件、微信、飞书之类)?更新了推送通知
    scal
        21
    scal  
       2023-07-04 13:42:12 +08:00
    能不能下付费后的资源,比如网飞~~~哈哈
    neotaburiss
        22
    neotaburiss  
       2023-07-04 14:03:33 +08:00
    其实我想问下,..这个能不能下载 bilibili 大会员专属的内容 还有 弹幕
    x86
        23
    x86  
       2023-07-04 14:04:20 +08:00   ❤️ 1
    javbus 资源提供器
    darksword21
        24
    darksword21  
       2023-07-04 14:10:51 +08:00   ❤️ 1
    能类似 ptplus 那样添加 pt 站然后搜索下载吗

    star 很久了一直没有折腾哈哈哈哈
    cesign
        25
    cesign  
    OP
       2023-07-04 14:16:47 +08:00
    @scal 这想支持也不行,会被查水表
    cesign
        26
    cesign  
    OP
       2023-07-04 14:17:05 +08:00
    @neotaburiss 不支持,会被律师函
    cesign
        27
    cesign  
    OP
       2023-07-04 14:17:40 +08:00
    @darksword21 这个正在做
    cesign
        28
    cesign  
    OP
       2023-07-04 14:19:18 +08:00
    @Juszoe 可以,收到需求
    MuSeCanYang
        29
    MuSeCanYang  
       2023-07-04 14:38:43 +08:00
    @cesign #6
    就和抖音一样,很多第一线的新闻啥的都会发微博,但是经常会被封,所以就想下载下来。 一般都是视频。图片可以自己用手机保存。
    xinmans
        30
    xinmans  
       2023-07-04 14:39:44 +08:00
    已经基于迅雷的 api 做了集成,很棒
    cesign
        31
    cesign  
    OP
       2023-07-04 14:51:56 +08:00
    @xinmans 大佬基于那个开发了什么新东西吗?能把相关代码合入到社区吗?
    xiamy1314
        32
    xiamy1314  
       2023-07-04 14:52:55 +08:00
    目前用 PT ,一键也挺好。
    tediorelee
        33
    tediorelee  
       2023-07-04 15:03:57 +08:00 via iPhone
    unraid 怎么安装捏
    cesign
        34
    cesign  
    OP
       2023-07-04 15:07:23 +08:00   ❤️ 1
    @tediorelee 可以社区提个 issue ,有个小伙伴是用的 unraid
    JoeoooLAI
        35
    JoeoooLAI  
       2023-07-04 15:15:33 +08:00   ❤️ 1
    牛,全自动追番追美剧
    efsg
        36
    efsg  
       2023-07-04 15:16:07 +08:00
    我有个大胆的想法,NAS 自动 Pixiv 和 Twitter 抓取器
    zenxds
        37
    zenxds  
       2023-07-04 15:17:32 +08:00
    cesign
        38
    cesign  
    OP
       2023-07-04 15:19:10 +08:00
    @efsg 这个框架可以实现,前面小伙伴也提到了 twitter
    jier17cm
        39
    jier17cm  
       2023-07-04 15:21:58 +08:00
    nas 难道不是配合 pt 耍的吗..
    superchijinpeng
        40
    superchijinpeng  
       2023-07-04 15:22:47 +08:00   ❤️ 1
    Site URL 🎬 Videos 🌁 Images 🔊 Audio 📚 Playlist 🍪 VIP adaptation Build Status
    抖音 https://www.douyin.com ✓ ✓ douyin
    哔哩哔哩 https://www.bilibili.com ✓ ✓ ✓ bilibili
    半次元 https://bcy.net ✓ bcy
    pixivision https://www.pixivision.net ✓ pixivision
    优酷 https://www.youku.com ✓ ✓ youku
    YouTube https://www.youtube.com ✓ ✓ youtube
    西瓜视频(头条) https://m.toutiao.com, https://v.ixigua.com, https://www.ixigua.com ✓ ixigua
    爱奇艺 https://www.iqiyi.com ✓ iqiyi
    新片场 https://www.xinpianchang.com ✓ xinpianchang
    芒果 TV https://www.mgtv.com ✓ mgtv
    糖豆广场舞 https://www.tangdou.com ✓ tangdou
    Tumblr https://www.tumblr.com ✓ ✓ tumblr
    Vimeo https://vimeo.com ✓ vimeo
    Facebook https://facebook.com ✓ facebook
    斗鱼视频 https://v.douyu.com ✓ douyu
    秒拍 https://www.miaopai.com ✓ miaopai
    微博 https://weibo.com ✓ weibo
    Instagram https://www.instagram.com ✓ ✓ instagram
    Twitter https://twitter.com ✓ twitter
    腾讯视频 https://v.qq.com ✓ qq
    网易云音乐 https://music.163.com ✓ netease
    音悦台 https://yinyuetai.com ✓ yinyuetai
    极客时间 https://time.geekbang.org ✓ geekbang
    Pornhub https://pornhub.com ✓ pornhub
    XVIDEOS https://xvideos.com ✓ xvideos
    聯合新聞網 https://udn.com ✓ udn
    TikTok https://www.tiktok.com ✓ tiktok
    好看视频 https://haokan.baidu.com ✓ haokan
    AcFun https://www.acfun.cn ✓ ✓ acfun
    Eporner https://eporner.com ✓ eporner
    StreamTape https://streamtape.com ✓ streamtape
    虎扑 https://hupu.com ✓ hupu
    虎牙视频 https://v.huya.com ✓ huya
    喜马拉雅 https://www.ximalaya.com ✓ ximalaya
    快手 https://www.kuaishou.com ✓ kuaishou
    Reddit https://www.reddit.com ✓ ✓ reddit
    VKontakte https://vk.com ✓ vk
    知乎 https://zhihu.com ✓ zhihu
    Rumble https://rumble.com ✓ rumble
    cesign
        41
    cesign  
    OP
       2023-07-04 15:23:16 +08:00
    @jier17cm 支持 PT 刷流,其他目前支持得还不好,PT 应该只是种子检索用?
    lujiaosama
        42
    lujiaosama  
       2023-07-04 15:23:32 +08:00
    有啥音乐下载的项目集成么.
    zephyru
        44
    zephyru  
       2023-07-04 15:46:07 +08:00
    看起来挺有意思的,先装起来试试。
    看了下,解析和下载应该是分开的吧?
    能否支持类似,先把解析的东西存起来,等下载的电脑开起来了,再推送下载类似这样的功能?
    就是,解析,下载,以及 Jellyfin 之类的,不在同一台电脑下这样的场景?能否通过某种方式组织起来?
    cesign
        45
    cesign  
    OP
       2023-07-04 15:56:47 +08:00
    @zephyru
    "看了下,解析和下载应该是分开的吧?” 分开的
    “能否支持类似,先把解析的东西存起来,等下载的电脑开起来了,再推送下载类似这样的功能?” 这个有意思,可以来社区讨论下
    willie1991
        46
    willie1991  
       2023-07-04 16:38:25 +08:00
    比较需要是全自动,看了下 b 站是要手动发送到下载器吧?
    cesign
        47
    cesign  
    OP
       2023-07-04 16:45:30 +08:00
    @willie1991 后续支持自动下载收藏视频,或者 up 主更新视频
    M5tuA
        48
    M5tuA  
       2023-07-04 16:56:23 +08:00
    保存网页算吗?有些网页内容要不违规要不就 404 ,
    willie1991
        49
    willie1991  
       2023-07-04 17:02:41 +08:00
    @cesign #47 先关注了,后续更新再用
    hs444
        50
    hs444  
       2023-07-04 17:23:47 +08:00   ❤️ 1
    好东西,回去试试,之前为了自动追番自己撸了一个简易的工具,现在看来可以被替换掉了
    cesign
        51
    cesign  
    OP
       2023-07-04 18:42:29 +08:00
    @M5tuA 也算
    sickoo
        52
    sickoo  
       2023-07-04 19:06:39 +08:00
    hanime1.com 这个可以吗?简单的动漫,偶尔的需求
    zhonj
        53
    zhonj  
       2023-07-04 20:34:34 +08:00
    极空间能用吗?
    cesign
        54
    cesign  
    OP
       2023-07-04 20:36:08 +08:00
    @zhonj 不清楚,群晖可以,可以试试
    cesign
        55
    cesign  
    OP
       2023-07-04 20:36:23 +08:00
    @sickoo 是不是可以用 mikan 替代?
    cue
        56
    cue  
       2023-07-05 00:01:45 +08:00 via iPhone
    每天晚上自动录新闻联播。
    e1d4py0KiD6KgqkQ
        57
    e1d4py0KiD6KgqkQ  
       2023-07-05 08:15:42 +08:00 via Android
    Windows 可以吗,我就普普通通的用户,会一点点爬梯子
    tomwu3
        58
    tomwu3  
       2023-07-05 09:44:51 +08:00
    @cesign 填自己 bilibili 大會員的 cookies 的可以了。ytp-dl 有教程。
    hafung
        59
    hafung  
       2023-07-05 10:21:04 +08:00
    群晖套件中心 有上架吗 可以直接装吗? 或者打包好的 docker 镜像
    colinyn428
        60
    colinyn428  
       2023-07-05 10:35:02 +08:00
    请问支持威联通( QNAP )吗?我看容器里能搜到,但是不知道怎么配置
    zephyru
        61
    zephyru  
       2023-07-05 10:40:48 +08:00
    @cesign
    昨天装了个试了下,今天简单的看了下结构,的确是挺有意思的,我简单提提我的想法,你可以感受下有没有必要。
    感觉上 kubespider 做了链接解析和调度。
    下载部分虽是单独的模块,但为了便于使用和简单部署,实际最好是部署在同一台机子上。

    有兴趣其实可以拆成两部分,解析的部分,也就是现在的“本体”,解析的结果不是直接去调下载模块,而是搞个消息队列(比如用 sqlite 模拟一个),下载模块通过消息队列与“本体”通信,根据类型去消费。
    在这个模式下,下载模块可以不需要对外暴露端口( pt 下载的另算)

    单机模式下,这样的好处是便于控制,有的时候希望把下载的内容先加进去,晚些时候再下,也能比较容易的做下载记录的展示,可以减少暴露的端口(收缩关注的点)。

    同时提供了多机的可能,本体可以做为注册中心,下载可以分在别的机子上,有需要的话也能做同步功能,增加应用场景。

    坏处则是会增加不少复杂度,最后还是看有没有必要吧,这种架构层面的变更往往吃力不讨好。
    cesign
        63
    cesign  
    OP
       2023-07-05 10:58:49 +08:00
    @zephyru “解析的结果不是直接去调下载模块,而是搞个消息队列(比如用 sqlite 模拟一个),下载模块通过消息队列与“本体”通信,根据类型去消费。
    在这个模式下,下载模块可以不需要对外暴露端口” 这个比较有意思,可以做相关下载监控,大佬有兴趣一起来搞搞吗?
    zephyru
        64
    zephyru  
       2023-07-05 14:30:52 +08:00
    @Cesign
    有时间我会关注一下..不过我对 Python 不是很熟悉,准备先进行研究。
    话说,我刚看了一眼开发文档..
    为什么不考虑在开发模式的镜像中直接挂载代码?
    就是做镜像的时候不复制代码,做完时候把路径挂进去..
    这样容器内代码是实时的,再配合 watchdog 就可以方便热更新了。
    嘛,也是提升开发体验的小点,这块我可能可以先弄弄
    sickoo
        65
    sickoo  
       2023-07-05 14:32:52 +08:00
    @cesign 好像不太行
    cesign
        66
    cesign  
    OP
       2023-07-05 14:36:30 +08:00
    @zephyru “就是做镜像的时候不复制代码,做完时候把路径挂进去.” 这个可以,大佬可以来写写
    cesign
        67
    cesign  
    OP
       2023-07-05 14:36:47 +08:00
    @sickoo 那我看看那个网站
    lidalu
        68
    lidalu  
       2023-07-06 00:29:50 +08:00 via Android
    Instagram 支持吗?
    kyoma
        69
    kyoma  
       2023-07-06 10:07:47 +08:00
    下载其实还好,主要是搜刮真的好麻烦,我刚入门不久,现在用 tmm 搜刮的,整理起来真的费心费力,有无大佬指教下正确的 nas 搜刮姿势,注:我是用的 emby 开心版
    maijh
        70
    maijh  
       2023-07-06 14:41:36 +08:00
    @cesign 希望 chrome 插件可以+猫抓这种嗅探工具,支持右键选中目标探出的 m3u8 文件,自动解析下载,这样就完美了
    k0njaccc3
        71
    k0njaccc3  
       2023-07-06 14:49:19 +08:00
    能否添加一个 github 的自动同步功能,把 github 的一些优秀项目自动 clone 到本地。期望是我输入链接,自动下载和自动更新
    LipGallagher
        72
    LipGallagher  
       2023-07-06 16:35:33 +08:00
    已经跑起来了,下载 bilibili 收藏很好用,就是大佬能加下 telegram bot 支持吗,包括消息的通知和丢链接进去启用下载
    cesign
        73
    cesign  
    OP
       2023-07-06 16:50:23 +08:00
    @LipGallagher 等我有时间,加一下。当然也欢迎大佬一起来构建
    cesign
        74
    cesign  
    OP
       2023-07-06 16:50:53 +08:00
    @lidalu 目前不支持,比较小众,可能比较晚做
    cesign
        75
    cesign  
    OP
       2023-07-06 16:51:12 +08:00
    @maijh 收到需求
    cesign
        76
    cesign  
    OP
       2023-07-06 16:51:48 +08:00
    @k0njaccc3 这个,直接 fork ,然后搞个机器人定期同步不行吗?
    kungsun
        77
    kungsun  
       2023-07-07 21:55:30 +08:00   ❤️ 1
    @cesign op 能不能把 kubespider-Chrome 插件弄成压缩包,直接以链接形式放在说明文档里,我翻了 10 几遍才在 kubespider 文件夹里找到。
    itsjoke
        78
    itsjoke  
       2023-07-14 17:18:49 +08:00
    @cesign 有一点儿不明白,望指教。为何要自己单独弄一个 Docker 镜像,而不直接用原镜像呢?比如 aria2 不是直接用 p3terx/aria2-pro 更容易让人理解吗?为了国内大陆这个参数?
    cesign
        79
    cesign  
    OP
       2023-07-14 19:56:41 +08:00
    @itsjoke 是的
    hafung
        80
    hafung  
       2023-07-18 14:20:15 +08:00
    可以替代 nastool 吗 或者说 这算是类 nastool 的应用了吧?
    cesign
        81
    cesign  
    OP
       2023-07-18 16:41:58 +08:00
    @hafung 关注点不一样,无法替代,但是功能有重叠
    zhouhaolong2
        82
    zhouhaolong2  
       363 天前
    B 站 UP 更新自动下载很需要
    Rookie01
        83
    Rookie01  
       343 天前
    马克,有空研究一下
    hsczy
        84
    hsczy  
       20 天前
    一个问题,我全部配置完成之后,在 b 站试用了一下发现只能下载网页没有办法解析出视频。是哪一步没有配置成功么?
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5093 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 32ms · UTC 08:59 · PVG 16:59 · LAX 01:59 · JFK 04:59
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.