邵珠庆の博客 生命只有一次,你可以用它来做些更多伟大的事情–Make the world a little better and easier

2812月/120

业界开源日志系统比较

发布在 邵珠庆

 

1. 背景介绍

许多公司的平台每天会产生大量的日志(一般为流式数据,如,搜索引擎的pv,查询等),处理这些日志需要特定的日志系统,一般而言,这些系统需要具有以下特征:

(1) 构建应用系统和分析系统的桥梁,并将它们之间的关联解耦;

(2) 支持近实时的在线分析系统和类似于Hadoop之类的离线分析系统;

(3) 具有高可扩展性。即:当数据量增加时,可以通过增加节点进行水平扩展。

本文从设计架构,负载均衡,可扩展性和容错性等方面对比了当今开源日志系统,包括faceboo

[......]阅读全文

85月/120

Facebook的十大经验分享

发布在 邵珠庆

 

1 、坚持你的远景,但要对细节灵活
2 、只和最好的人合作
3 、树立高期望并且衡量之
4、重视数据而不盲从数据
5、避免无谓的时间浪费
6、增进亲密感是减少紧张关系的有效方式
7 、习惯委托, 但不要盲目, 请谨慎
8、 意见反馈应该一个持续性的, 而不是一年一次或两次的活动
9 、你可以比你想象的做得刚好
10 、不要过多设计或者过早优化

1、坚持你的远景,但要对细节灵活

作 为一个领导者,

[......]阅读全文