V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
wukongkong
V2EX  ›  问与答

很简单的问题=-=,可是我不会=-=

  •  
  •   wukongkong · 2015-01-23 13:06:01 +08:00 · 3095 次点击
    这是一个创建于 3600 天前的主题,其中的信息可能已经有所发展或是发生改变。

    http://cdn.twitrcovers.com/wp-content/uploads/
    这个网站这个目录下面都是图片,怎么样批量把这些图片爬下来=-=
    看了半天scrapy还是不会用=-=
    求教=-=

    11 条回复    2015-01-24 10:46:22 +08:00
    WenJimmy
        1
    WenJimmy  
       2015-01-23 13:51:14 +08:00
    爬下来了~求打包 我也要 (^ _ ^)/~~
    FSFA
        2
    FSFA  
       2015-01-23 13:58:08 +08:00   ❤️ 1
    windows下有neodownloader
    janstk
        3
    janstk  
       2015-01-23 14:02:35 +08:00
    你需要网站整站下载器
    hcymk2
        4
    hcymk2  
       2015-01-23 14:11:06 +08:00
    直接用wget吧 这个没必要要scrapy
    sun019
        5
    sun019  
       2015-01-23 14:12:33 +08:00
    简单点用火车头吧
    chen7897499
        6
    chen7897499  
       2015-01-23 14:20:39 +08:00   ❤️ 2
    wget --mirror -p --html-extension --convert-links -e robots=off -P . http://cdn.twitrcovers.com/wp-content/uploads/
    wukongkong
        7
    wukongkong  
    OP
       2015-01-23 14:21:09 +08:00
    @FSFA 谢谢 很好用
    @janstk 谢谢~
    @hcymk2 恩恩~谢啦
    @sun019 火车头是啥:)
    loading
        8
    loading  
       2015-01-23 14:22:10 +08:00
    webzip
    没有更简单
    sun019
        9
    sun019  
       2015-01-23 14:40:04 +08:00
    火车头采集 多线程 下载起来也快 配置也简单
    davidjqq19
        10
    davidjqq19  
       2015-01-23 14:58:13 +08:00
    @chen7897499 哇,这个NB。
    aoom
        11
    aoom  
       2015-01-24 10:46:22 +08:00
    好站,已收,感谢! :)
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   893 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 21ms · UTC 20:55 · PVG 04:55 · LAX 12:55 · JFK 15:55
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.