Content Entry

2010系统架构师大会 - 小结

Published: 2010-08-29 Categories: Tech Tags: 云计算 系统架构 存储

主题: 阿里巴巴 - 淘宝网图片的存储与CDN系统

章文嵩 - LVS创始人

  • TFS - Taobao File System, 分布式存储系统,大规模图片存储,9月份开源(code.taobao.org);
  • 生产环境 1PB 运行记录, 存储原始图片;
  • 单节点配置 1000M x4 网卡;
  • CDN 节点 SSD + SAS + SATA 混合存储结构,热点迁移;
  • 低功耗图片服务器,高密度机架部署
主题:百度 - 系统部分布式计算平台介绍

马如悦 - “说得不好的,都是我的错;说得好的,都是百度的栽培”

这位很风趣,也敢说,抱怨上一位 FastDFS 创始人,“这么多DFS,还闲不乱,又出一个...”

  • HPC, DC 两种计算模式
  • DC: Map-Reduce,DAG 两种调度方式
  • HCE: 基于 Hadoop 的 C++ 扩展, 没错,JAVA写的东西,就是效率底下,使用 Hadoop 的调度,计算任务由C++扩展接口实现
  • Ceph: 新一代的 PB 级存储系统,在 Linux 2.6.34 中加入内核
主题:百度 - 分布式数据库应用实践

  • 基于 SSD 的 MySQL 性能优化,计划开源
  • 基于 MySQL 分布式数据库平台
主题:阿里巴巴 - 大规模集群运维架构设计

  • 成立命名委员会
主题:阿里巴巴 - 大规模集群下的自动化部署平台

  • 配置继承,配置服务
  • 安装任务队列
  • PXE Pre  脚本定制
... ...

总的来说,阿里巴巴、百度的主题很不错,数量也最多,有实际的经验分享,这是听众想要的; 新浪比较奇怪,听了三个主题,两个嘴巴笨的,一个又巨能侃的,忽悠来的; 腾讯只有一个关于运维的,讲得很浅;搜狐的因为场次冲突,错过了,不知咋样;传统企业、广告商的主题,一个字“烂”

---个人感受---

很沉重! 我每天都在做些什么屁事~

之前每年一个总结,一个计划,周期太长,变化常有,计划也得常改:

  1. “放弃”
  2. 不做“大”,先从“小”开始
  3. 少干活,多动脑子

comments loading