首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  前端开发

前后端分离的项目做 SEO

  •  
  •   ty4z2008 · 65 天前 · 906 次点击
    这是一个创建于 65 天前的主题,其中的信息可能已经有所发展或是发生改变。
    • 1.通过 User-agent 判断是否为爬虫访问。如果是则通过反向代理或者其他程序代理到一个专门为爬虫准备的服务
    • 2.自己通过 nodeJs+puppeteer 或则模拟浏览器访问我们的项目然后返回渲染完成好的 HTML。

    下面列出了一些常见的爬虫 agent

    User-agent: Googlebot
    User-agent: Googlebot-Image
    User-agent: Baiduspider-news
    User-agent: Baiduspider
    User-agent: Baiduspider-image
    User-agent: Sosospider
    User-agent: bingbot
    User-agent: 360Spider
    User-agent: HaosouSpider 
    User-agent: yisouspider
    User-agent: YoudaoBot
    User-agent: Sogou Orion spider
    User-agent: Sogou News Spider
    User-agent: Sogou blog
    User-agent: Sogou spider2
    User-agent: Sogou inst spider
    User-agent: Sogou web spider
    User-agent: EasouSpider
    User-agent: MSNBot
    

    User-agent: ChinasoSpider

    7 回复  |  直到 2019-04-19 23:50:18 +08:00
        1
    creedowl   65 天前 via Android
    很多爬虫都会伪装成搜索引擎吧,而且像 vue 这些前端框架都有 ssr 组件
        2
    fuxinya   65 天前 via Android
    像是谷歌搜索,会不定时伪装成正常的访问,如果爬取二者页面相差很大,会认定你作弊
        3
    whypool   65 天前
    目前打算上 ssr 了
        4
    nobb519   65 天前
    现在已经不存在 SEO 了。外语站就有,但需要 PWA,百度的话,散了吧
        5
    alexmy   64 天前
    如果是 react, vue,ssr 的解决方案也挺多的了。
        6
    LongLights   64 天前 via Android
    4 楼说的对 中文网站已经没有 SEO 了
        7
    abcbuzhiming   61 天前
    目前前后端分离项目如果一定要做 SEO,最理想的方案就是退回到后端渲染,针对爬虫返回不同内容很容易被判作弊的
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   1617 人在线   最高记录 5043   ·  
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.3 · 18ms · UTC 16:47 · PVG 00:47 · LAX 09:47 · JFK 12:47
    ♥ Do have faith in what you're doing.
    沪ICP备16043287号-1