V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
tausi0661
V2EX  ›  程序员

有爬斗鱼网页的兄弟么? 主播的关注数是怎么来的?

  •  
  •   tausi0661 · 2017-06-14 17:17:16 +08:00 · 4930 次点击
    这是一个创建于 2717 天前的主题,其中的信息可能已经有所发展或是发生改变。

    刚入坑, 尝试爬斗鱼练手. 卡在主播的关注数上了. 肯定是后期加载的, 但是翻遍了所有的 html/css/js/json...也没找到这个关注数是从哪来的.

    比如下面这个主播(为了避免广告嫌疑, 就找个暴雪官方频道吧~~): http://www.douyu.com/t/blizzardtv

    目前它的关注数是 640932, 但是我把所有文本类的请求结果都找了, 也没有找到 640932 这个值...

    只发现了一点: 如果浏览器禁用 flash 的话, 这个关注数是出不来的. 难道和 flash 有关??

    第 1 条附言  ·  2017-06-23 09:38:56 +08:00
    虽然斗鱼的 api 做的看上去略感寒酸, 文档也是各种错误了, 但目前貌似是国内直播平台里唯一公开 api 的(再看看 twitch, 哎)

    http://dev-bbs.douyutv.com/forum.php?mod=forumdisplay&fid=37
    11 条回复    2017-06-14 23:22:13 +08:00
    shiniv
        1
    shiniv  
       2017-06-14 17:23:18 +08:00
    这个数值是从弹幕服务器返回来的
    Merlini
        2
    Merlini  
       2017-06-14 17:24:34 +08:00 via Android
    建议看看 github 上有没有人整理 api
    whahuzhihao
        3
    whahuzhihao  
       2017-06-14 17:24:58 +08:00   ❤️ 1
    斗鱼有公开的 json 接口啊,可以不从网页上抓数据。当然如果你是要练爬虫就没办法了。
    Penton
        4
    Penton  
       2017-06-14 17:27:09 +08:00   ❤️ 1
    《斗鱼第三方开放平台 API 文档 v2.1 》 http://dev-bbs.douyutv.com/forum.php?mod=viewthread&tid=113
    tausi0661
        5
    tausi0661  
    OP
       2017-06-14 17:33:10 +08:00
    @shiniv 哪个服务器我都找了, 也没找到...
    tausi0661
        6
    tausi0661  
    OP
       2017-06-14 17:34:33 +08:00
    @Penton @whahuzhihao 感谢了, 原来还有此等东西...
    shiniv
        7
    shiniv  
       2017-06-14 17:39:00 +08:00   ❤️ 1
    @tausi0661 #5 发送登录请求之后,会发回来大概 6-7 个包 解出来就有了
    annielong
        8
    annielong  
       2017-06-14 18:08:07 +08:00
    或者包没有抓全吧,有些数据是在不同 js 里面合成的
    awolfly9
        9
    awolfly9  
       2017-06-14 20:07:11 +08:00 via Android
    标记
    Layoute
        10
    Layoute  
       2017-06-14 23:12:49 +08:00 via iPhone
    flash 不是没有可能,可以反编下 flash 看看
    mingyun
        11
    mingyun  
       2017-06-14 23:22:13 +08:00
    调接口方便多了
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1232 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 23:21 · PVG 07:21 · LAX 15:21 · JFK 18:21
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.