V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  392039757  ›  全部回复第 3 页 / 共 5 页
回复总数  85
1  2  3  4  5  
2020-05-12 08:46:12 +08:00
回复了 crella 创建的主题 Python 为什么爬虫大佬多用 re 而少用 soup、xml 来提取元素?
java,python 爬虫都写过,xpath,css 在提取方式上更接近 html 的结构,只有在 xpath,css 不好处理的时候才会选择使用正则提取,一般情况下是使用 xpath,css 提取到 Element 之后再使用正则
2020-04-29 16:49:13 +08:00
回复了 xiaobo944 创建的主题 问与答 初中毕业 26 了,醒悟了,准备考个学历选择什么路线?
高中毕业后端路过,先整个函授吧,起码也能用
中文的垃圾多了,吃的人也多了,就变成这个样子
2020-04-26 15:45:26 +08:00
回复了 choudidi 创建的主题 上海 大数据开发岗位,各位同行,现在行情怎么样?
刚收到的短信,你懂我的意思吧 https://i.loli.net/2020/04/26/RbaeyujipoDFmvn.png
2020-04-26 13:24:15 +08:00
回复了 f056917 创建的主题 郑州 吐槽一波郑州 4 月 28 号即将发布的新一轮消费券
武汉抢了半天也没抢到 60-20 也没谁了
2019-12-23 09:18:22 +08:00
回复了 iovekkk 创建的主题 iPhone 美版有锁机可以以旧换新吗
@iovekkk 不同的直营店策略不一样,有锁 xs 想洗白的路过,无奈本城市没有直营店
@chenyu8674 他弟弟这一波把家底榨干了老哥以后就只能靠自己了,说句不好听的,父母年纪大佬真的保不齐有个三病两痛的,还真的有些遭不住
@murmur 太真实了,后端的我就是这样学习的
2019-12-17 16:41:59 +08:00
回复了 qqqccc 创建的主题 职场话题 二本应届生在武汉 5-6k 该不该待下去
同武汉,给楼主建议是打好基础,想办法进大厂,如果只是在小厂跳来跳去还不如不动,武汉的小公司普遍不行
2019-12-17 16:37:32 +08:00
回复了 tikazyq 创建的主题 推广 爬虫管理平台 Crawlab v0.4.1 发布(可配置爬虫)
以前 clone 大佬代码的路过,看了下文档,对 scrapy 的支持还不是很好,目前还是使用 shell 的方式对 scrapy 进行启动和监控,如果只是小批量的爬虫可能也不需要用到分布式的架构,如果需要分布式的话 scrapy-redis 还是最简的解决方案,下午大佬以后能在这方面多做改进。( ps:很多 web 爬虫框架都烂尾了,坚持下来还是不容易,给大佬点赞)
@xtpitt 免费代理现在都玩不进了,免费代理的网站总是失效,我们直接撸收费代理扔到代理池,设定失效时间
高中毕业的路过,一味抱怨也没什么用,走好自己的路,做自己能做的事情就行了
java 各种轮子都很多,很多项目里面都有代码生成的插件,开发效率很高
2019-12-06 09:30:18 +08:00
回复了 zhxjdwh 创建的主题 酷工作 [广州][数据开发]公司成立了数据部,让我来做技术负责人
1.没有银弹,很多坑都是埋在业务里面的,别人的最佳实践也不一定适合你
2.大宽表维护起来会爆炸的,因为业务状态总是在不停的变更,有时候业务表的表结构也是在不停变更,最好是事实表+维度表的方式进行,先要确定主题再确定数据口径,以事实表为主维度表为辅
3.数据同步还是合适的来,我们就是 oozie + sqoop 每天跑批+logstash 实时同步
2019-12-05 09:46:14 +08:00
回复了 hahahenimei 创建的主题 职场话题 19 届应届,年底被公司裁员。。。
@GodWZL 大数据和 AI 比普通后台前端更难找的吧*-*
2019-12-03 09:17:42 +08:00
回复了 clecho 创建的主题 随想 发现自己渐渐丧失了主动社交的能力了
推荐楼主看下蓝图解码,虽然是之前我把妹的时候看的书籍,但是里面的一些观点还是对现在的你有帮助的
2019-12-03 09:14:34 +08:00
回复了 clecho 创建的主题 随想 发现自己渐渐丧失了主动社交的能力了
@GeruzoniAnsasu 以最舒服的方式做自己,大赞,不用人设与期待去约束,即使失败也不会太痛苦,就算自己是个废物好像也没什么大不了的*-*
2019-11-28 17:13:55 +08:00
回复了 whitewolf 创建的主题 程序员 还在干爬虫的熊迪们,现在怎么样了~~
一个人既搞后台又搞爬虫,准备跑路中+_+
1  2  3  4  5  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2929 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 39ms · UTC 13:38 · PVG 21:38 · LAX 05:38 · JFK 08:38
Developed with CodeLauncher
♥ Do have faith in what you're doing.