首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
Node.js
Express
PPA for Ubuntu
ppa:chris-lea/node.js
V2EX  ›  Node.js

写了一个中国大陆高校列表爬虫,有需要的可以试下

  •  
  •   codeduan · 55 天前 · 3335 次点击
    这是一个创建于 55 天前的主题,其中的信息可能已经有所发展或是发生改变。

    这几天恰好有个需求用到,就写了个。目前已经包含一份完整 json 了。

    https://github.com/codeudan/crawler-china-mainland-universities

    数据按省份分类,支持本科,专科,民办,独立院校分类。

    18 回复  |  直到 2019-04-01 10:08:28 +08:00
        1
    kukumao   55 天前
    爬到的数据 发个看看
        2
    xiangyuecn   55 天前
    打破 0 star
        3
    MiRECoFu   55 天前 via Android
    有各专业高考录取分的爬虫吗
        4
    gary36   55 天前 via Android
    有重复数据
        5
    Vegetable   54 天前
        6
    codeduan   54 天前
    仓库的 china_mainland_universities.json 就是刚刚爬的。
        7
    xfspace   54 天前 via Android
    CHSI 官方权威
    还能抓 211 985 标签
        8
    codeduan   54 天前
    @gary36 修正这个 bug 了。
        9
    codeduan   54 天前
    @xfspace 多谢提醒。
        10
    codeduan   54 天前
    @kukumao china_mainland_universities.json 就是。
        11
    zouyu1412   54 天前
    问个小白问题:是我的 node 版本不对吗 这行 async function main(){ 报错:SyntaxError:Unexpected token function
        12
    codeduan   54 天前
    @zouyu1412 你的 node 版本低于 8 吗?
        13
    xzc19970719   54 天前
    为啥网页进你这个帖子 背景就会变黑???
        14
    zgcwkj   54 天前
    @xzc19970719 V2EX 上的模块,有的主题是不一样的
        15
    zouyu1412   54 天前
    @codeduan 嗯 有点低 6.2 应该是版本的原因
        16
    PHPJit   54 天前
    参照 5L 的地址,写了一个 php 版本
    https://github.com/teg1c/crawler-china-mainland-universities-by-php
        17
    lizliz   54 天前
    有没有办法找到学校里的组织架构,求!
        18
    codeduan   50 天前
    数据源改成学信网的了。
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   3468 人在线   最高记录 5043   ·  
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.3 · 22ms · UTC 05:24 · PVG 13:24 · LAX 22:24 · JFK 01:24
    ♥ Do have faith in what you're doing.
    沪ICP备16043287号-1