V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  firefox12  ›  全部回复第 66 页 / 共 69 页
回复总数  1373
1 ... 58  59  60  61  62  63  64  65  66  67 ... 69  
2016 年 3 月 10 日
回复了 CrazySpiderMan 创建的主题 程序员 我闲得蛋疼无聊, 你有什么产品, 我来给你实现.
如果有好的 idea 我也来做做看

大概除了犯法的 比如草榴。其他的需求都有官方应用了
2016 年 3 月 10 日
回复了 lixiaohan 创建的主题 程序员 memcache 如何处理大并发的写操作
为什么总是上来就是上亿呢?
没有请求大小 请求频率 数据冷热 就来问这种问题就是耍流氓

孩子 你也不会问了就掌握亿级用户的支持能力的。最好从实践 1 万开始
2016 年 3 月 10 日
回复了 CrazySpiderMan 创建的主题 程序员 我闲得蛋疼无聊, 你有什么产品, 我来给你实现.
@ruijanlee

这个主题贴 总是打不开, 系统问题?
2016 年 3 月 5 日
回复了 onion83 创建的主题 宽带症候群 8.8.8.8 背后的 61 个节点
这个技术是怎么查到的? 一个 IP 还能映射到其他 IP ?
这东西怎么查询法?那个国家有多少出口?
2016 年 3 月 4 日
回复了 iyaozhen 创建的主题 程序员 高并发( 6M/s)日志数据如何准实时入库( MySQL)
如果数据库本身不是问题的话, 插入是美问题的。
但是你 6M/s 按照你的量

6*3600*24 /1024 每天 500G, 数据库会迅速垮掉 ,完全是个错误的设计。

如果是在线查 log 的话, es 会好一点。 这种应用用 mysql 去做 并不好,统计应该靠应用去做。
感觉都疯了, 人人都在谈房子。 不是崩溃就是 继续高涨
2016 年 2 月 26 日
回复了 aljun 创建的主题 Python 提高爬虫性能,都有什么奇技淫巧呢( python 方面)
也不能修改,
以上经验适用于 2010 年 15 分钟抓取京东全商品数据。

linode 512M vps 4cpu 满核, c++ ,200-500 connection.

6 年前的经验了,也不知道行不行了。看着用吧
2016 年 2 月 26 日
回复了 aljun 创建的主题 Python 提高爬虫性能,都有什么奇技淫巧呢( python 方面)
下载 分析 主控 要分开。
2016 年 2 月 26 日
回复了 aljun 创建的主题 Python 提高爬虫性能,都有什么奇技淫巧呢( python 方面)
cache 啊 根据 http 的 cache head 决定是否要继续获取
pipeline 获取, 不要重建链接
本地 tcp 栈优化,加快端口释放
代理服务器
dns 本地服务器,预热你要用的 dns 地址
利用 17ce 这样的网站查询 服务器的所有 ip,提高使用效率
分析和下载处理分开处理,不要让字符解析占有太多 cpu.
加强 recv timeout 的智能判断,在服务器响应不佳的情况下,减少链接数目,让服务器退回服务质量。
用 c++
提高算法,链接命中算法

.... 至于 内存控制这种,估计你也不会去做。
ttl 设置为 10 这完全是太低了,不是个合适的数值。
2016 年 2 月 21 日
回复了 eas 创建的主题 Linux Linux 下 tcp 通讯程序的阻塞问题
之前有简单 tcpdump 过,好像是收发包都速度快的,好像是网络传输的问题。

..... 这是什么情况,看服务器的 tcpdump 数据 看 recv 和 send 的时间差是多少 如果是 1 秒多 那么就是服务器的问题,如果是 0.001 秒 那么服务器就没问题,要么就是客户端和网络。

然后看客户端的 send 和 recv 时间查,情况同上。

如果 2 个都是 0.001 秒 那么就是网络问题。 还有可能就是 客户端的 send 时间戳 你算得不对。
2016 年 2 月 20 日
回复了 eas 创建的主题 Linux Linux 下 tcp 通讯程序的阻塞问题
tcpdump 先在 2 边抓包 确定, 是服务器发包慢, 客户端收包慢 还是网络传输问题。

200 客户端都出现这个问题 C1000k 怎么办
2016 年 2 月 19 日
回复了 ifconfig 创建的主题 程序员 网站被恶意调用发送验证码接口,已经要疯了!!!
图形校验码啊
猜也就是这样
oceanbase 的开源版吗
融 3 轮才 a 轮你们的 pre a 真多啊
2016 年 2 月 5 日
回复了 WIwindson 创建的主题 职场话题 怎样的公司细节会让你面试的时候转头就想走
问上家工资多少钱很正常。你现在多少钱和老板会给你多少钱也没关系,他就看你诚信吗?

大多数问题都很正常。比如学到什么?这个可以看你的沟通和概括能力 比如技术方面 哪些技术点 流程方面 原来不知道的 线上故障处理 有哪些 项目方面 学到哪些 根据你的水平年限 你会总结出那种对你最重要。工作不是浑浑噩噩的说我干了 2 年,每天做了老板给的代码要求 没了。

很多面试官很不职业 你的表现更不职业只能显得你 low 。再有一点 网络很发达,去之前网上搜索一下对它们的评价。这才是高效的做法。
pb 生成的 java cpp 文件不要提交。
在构建的时候,自动导出,

第一可以防止 pb 文件和 cpp 文件不统一
第二 可以测试不同 protoc 环境下的兼容问题
第三 就是解决你的问题
知道流氓你还用,那也就没办法了
1 ... 58  59  60  61  62  63  64  65  66  67 ... 69  
关于   ·   帮助文档   ·   自助推广系统   ·   博客   ·   API   ·   FAQ   ·   Solana   ·   5733 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 100ms · UTC 06:07 · PVG 14:07 · LAX 23:07 · JFK 02:07
♥ Do have faith in what you're doing.