【游戏神通：云存储带动了存储领域的热潮】
如果说2000~2005年是网络设备技术的浪潮，一大批硅谷和全世界Startup公司都借网络技术之名得以成功IPO，那么继网络概念之后，存储可能是下一个 very promising 的方向，又造就了一批借存储概念得以/即将上市或者成功卖出的公司 (DataDomain, MAID, Falconstor, Panasas, 北京龙存科技，深圳创新科存储，还有少不了的华三、华赛)；对各位广大技术工作者而言，这就意味着这个方向已经成为了热点职业，对于即将转战存储领域或者已经身在存储行业的同学位而言，就不得不紧密跟踪了解存储技术的最新前沿发展方向，而追踪最新技术的最好方法就是查看近期相关 行业会议 成果，下载和阅读学习 slides 和 papers：
(更好的是亲身参与其中一两个，但你的公司可能不够 sponsor 你或自己资金不够付”门票+机票+酒店”旅行费用或者时间精力上也不够时，你至少可以下载这些 slides 和 papers 来学习、研究)
工业界
SNIA, 全称存储网络工业协会 (Storage Netwokring Industry Association)，是总部在硅谷，最初由几家存储行业(EMC,NetApp,…)巨头联合成立的工业协会，其组织的一年一度的 Storage Developer Conference 可能是这个领域最大规模的行业会议了，差不多固定每年九月份在硅谷小城 Santa Clara 召开，虽然门票不菲 USD$1,400, 可每年仍然吸引了 world wide 数千人参与，最近三年的成果在
http://www.snia.org/events/storage-developer2009/presentations
http://www.snia.org/events/storage-developer2008/presentations
http://www.snia.org/events/storage-developer2007/presentations
每年都有 EMC,NetApp,SUN,IBM,HP,Dell,LSI, … 话题按照 CIFS/NFS/iSCSI/本地文件系统/备份技术 等分别组织，近年来又加入了热点话题 Cloud 和 固态存储 (Solid State Storage), Data Deduplication 技术，
值得关注的是 09 年 “CIFS Acceleration Techniques”, 08 年 “Accelerating iSCSI Proxy I/O” 等话题对 WAN Optimizer 网络设备公司 (深圳市深信服、新加坡 Jitcomm) 同样有启示意义，而 2007年的其中一位 Keynote Speaker 是 GNU 的 Richard Stallman, 讲述 Free Software in Ethics, Practice, and Licensing, 这在一个侧面暗中显示了在自由/开源软件领域，存储方向的软件也在成熟：在史前时代，由于自由/开源的软件不丰富让相关领域只能由大公司才有成本掌控研发，初创公司无从进入；2000年后，Linux-2.4网络netfilter/iptables技术的成熟和Freeswan/OpenVPN软件的成熟开始降低了网络技术的入行门槛，也让Netscreen/Fortinet成为了可能，能够敢于挑战Cisco去一较高下，同时伴随的是GPL侵权事件也在同步增加，如Netscreen德国GPL侵权案，美国 Tivolization 侵权案。同样，大概05年后 Linux上 Software RAID/LVM 虚拟卷管理/XFS 的成熟，配合 Samba/iSCSI Target/open-iscsi 系列软件的成熟也让存储行业的入行门槛大为降低，初创公司的成长也往往伴随着GPL侵权事件，因此 GNU, FSF, Richard Stallman 有必要在各界呼吁大家采用自由软件的所需要注意的法律问题，当然最好的实践就是把软件全部都GPL了，源码之前了无秘密～
有意今年前往的同学不妨关注 SDC2010 网站，争取个 Early Bird 价，
http://www.snia.org/events/storage-developer2010
September 18 – 23, 2010, Hyatt Regency Hotel Santa Clara, CA
Storage-Academy 是SNIA的下属机构，和分散在世界各地的驻点，包括中国区、南亚(新加坡)、EMEA区(欧洲、中东、非洲)，选择东南亚的中心当然就是新加坡了，前不久二月份活动才过，本人申请了免费参加(有免费领取纪念品和750GB移动硬盘的抽奖机会谁想错过呢？)，会场无非也就是 EMC,NetApp,Dell,HP 存储大厂各自表述一番， Data Dedeuplication/Solid State Storage/Amazon Cloud S3 最新技术前景，值得注意的是会场还包括 Cisco, 不知何时加入存储战团的，其FCoE技术看起来不错的说，其意图在局域网领域取代iSCSI，不过 iSCSI vs. FCoE vs. ATAoE 谁最终胜出还很难说；另一个值得关注的是 新加坡国家数据存储实验室 DSI, 属于 ASTAR (新加坡科技局)下属机构，这个小国家的科技发展势头不错，待后续篇幅再说。
http://www.storage-academy.com/singapore/
http://www.storage-academy.com/south_asia/
接下来 Storage-Academy 在三、四、五、六月份还会在 Dubai UAE(阿联酋)、德国、英国、意大利有后续活动，有兴趣的同学不妨关注是否经过所在城市，也可以申请免费参会；
http://www.storage-academy.com/
这次 Storage Academy Singapore 的会议资料是保密下载，不过我在此把它公开了，密码是 sgdel10 地址在
http://www.storage-academy.com/presentations/sg/
Linux Storage & Filesystem workshop, 这个LSF在08年以前一直是在 usenix 举办的，自 09 年转移到 Linux Foundation 举办，以前是偏学术方式研究 Linux 的 Storage & Filesystem 技术，现在是直接由工业界的 LF 直接承办了，内容也是 Filesystem (local filesystem, networking filesystem), iSCSI/NFS/CIFS, Data Deduplication/SSD 等话题，但偏重只在 Linux 上的代码实现，相对于 SNIA 会综合讨论 Linux/BSD/Solaris/Windows 或平台无关的存储技术而言；
http://www.usenix.org/event/lsf08/tech/
http://www.usenix.org/event/lsf07/tech/
自2010年起的 LSF Workshop 改成了LSF Summit, 邀请制
August 8 – 9, 2010 · Renaissance Boston Waterfront, Boston, MA
http://events.linuxfoundation.org/events/lsf-summit
学术界
Usenix FAST, 全称为文件与存储技术会议 (Conference on File and Storage Technologies), 自03年开始，到今年的 FAST’10 已是第8届，也是刚刚二月份才在硅谷 San Jose 才开过，入场费每年约USD$900,如果非usenix会员另+$125;
http://www.usenix.org/events/fast10/tech/
下载到 FAST’10 Proceedings 从目录上看起来尝试解决 SSD Lifetime /Data Deduplication 问题的 idea 很多，但能付诸工业实践的恐怕不多，学术界就是这样，有些人甚至只发 paper 而什么代码都不给，去信问到能不能给一份 Evaluation 数据的代码，回复是不能、或者根本没有回复；就是没有 GNU 的境界；
“DFS: A File System for Virtualized Flash Storage” 来自 Princeton University 的 William K. Josephson，指导教授中包含有 原 DataDomain 李凯 Li Kai <li@cs.princeton.edu>, 其针对 Flash 存储(也就是SSD) 发明了一种 Direct File System, 与 现有 yaffs, jffs2, ext3 的不同在于引入了一种新式的Flash存储抽象层，比现有 Flash Translation Layer 更简单和高效，称为 VFSL (Virtualized Flash Storage Layer), 在这个抽象层的基础之上再实现一个遵照传统的POSIX文件系统；整个 paper 说的看起来很完美，还作了 Benchmark 数据显示其与 ext3 比较的 性能提升，不爽的是没有找到其DFS源代码，似乎是不公布的。而且其 References 引用多是80,90年代的资料，殊不知 Linux 的发展日新月异, yaffs,jffs2,ext3 早过时了， 在 Raw Flash (NOR/NAND) 方面，有 2.6.27 内核引入的 由 Nokia 贡献的 Ubi/UbiFS, 其 Ubi 就是超越 FTL 的新的Flash抽象层，在 SSD 方面有 2.6.30 引入的 NilFS2, 最新的 btrfs 也包含针对 SSD 的支持。通用文件系统方面 Ext4 已经远胜 ext3 了。
“Extending SSD Lifetimes with Disk-Based Write Caches” 这篇来自 Toronto 大学的 Gokul Soundararajan 介绍了其延长 SSD 寿命的技术，基本思想是使用 硬盘 HDD 作为缓冲，再基于策略(定时、定量)作数据迁移。看起来技术很具有颠覆性，颠覆了我们日常对SSD技术应用的看法，现代 Segate 等大厂已经在改进 温彻斯特硬盘 技术，利用内置少量 SSD 的高性能随机访问来改进硬盘整体随机访问性能；没想到这位高人能够想到反其道而用之，利用硬盘来延长 SSD 寿命。
IEEE Storage Conference IEEE 组织的存储技术会议，尚了解不多，待后续报道。
http://storageconference.org/
总体上还是很赞 usenix 的说，不管什么会议，会后总能找到 papers/slides 资料免费下载，而且有永久存档站，错过了时间点还是能下载到；不像其它有些会议，资料不给下载或是要收费下载，很颓废地说。(相比 SNIA 的会议资料是三个月后才免费开放。)
另类存储：
二月份在 SMU 有一个学术研讨会， 来自 NTU (南洋理工大学) 的 Anwitaman DATTA 教授讲解 p2p storage 方面研究的最新进展， 什么 p2p+storage ? 当时我看到这个标题时也是被当场雷到了， p2p 用来做下载还可以，用来上传备份有用的数据？ p2p 用户中谁会愿意贡献自己的存储空间来保存别人的冗余的数据？ Storage 需要的是高性能和高可靠的存取数据，很多公司、普通用户甚至使用专用的机器来备份数据还不够，怎么能够信任 Internet 上的陌生人的 存储空间？ 这位印度裔教授讲解其基本原理和整个系统能够 run 起来的先决条件，就是冗余度，有足够的 user base, 足够的冗余，整个存储系统 的利用效率是 (1/冗余度R), 通常 p2p 用户是不确定的，随时可能上线和离线，假设上线用户平均是全部用户的 1/N, 整个用户基数 (user base) 必须 >= … 我当时 challenge 了一个问题： “but who has the incentive to be willing to use such a p2p storage system?” 回复 “we don’t care, we just do the research model, but if user base requirements satisfied, people would like to, maybe…”
“P2P Storage Systems – Algorithms, Analysis and Applications”
http://www.sis.smu.edu.sg/research/diagram/anwitaman_datta.htm
from 弯曲评论