现在的位置: 首页 > 综合 > 正文

淘宝数据魔方读后感

2012年06月20日 ⁄ 综合 ⁄ 共 318字 ⁄ 字号 评论关闭

原文见:http://www.tbdata.org/archives/1789

1. 1500台机器,40000个job,每日1.5P数据量;

2. 处理后的结果非压缩数据大概80T,压缩后20T(?)

3. 冷、热数据分离

4. 15000r/m的SAS盘,成本45,000/T;7500r/m的SAS盘,成本16,000/T

5. 处理有大量空洞的表或者表的很多字段都是枚举属性的话,关系型数据库开销太大,考虑NOSQL数据库。

6. 对前段提供统一的查询接口才能增加可用性。

7. 长链接有助于提供更高qps的请求服务。

8. 对于KV缓存系统要考虑防止穿透与失效时的雪崩效应。BLOCK缓存则不再此列。

9. 每天支持4000万的查询请求,平均响应时间在28毫秒。

抱歉!评论已关闭.