青云对象存储系统架构


QingCloud Storage System Osier Yang ► The Background ► QingCloud Block Storage ► QingCloud Object Storage ► The Summary Agenda The Background ► 分散 -> 集中 ► DAS/SAN/NAS ► 优点 高可用 备份/恢复 ► 缺点 容量的水平扩展性差 网络带宽瓶颈 I/O Latency Changes && Challenges ► 非结构化数据日益增长 ► 集中 -> 分布 ► Hardware, OS, Filesystem ► 能够索引的存储空间小;Inode占用空间大;目录树大/深 ► 目录项缓存失效频率高 ► 海量小文件存取性能差 ► 海量小文件 List 效率极差 The Open Source Distributed Block Storage ► Glusterfs, CEPH, Sheepdog ► 计算与存储依然分离 ► “解决”了容量的水平扩展问题 ► 网络带宽瓶颈依然存在 ► I/O Latency 依然存在 ► Yet Another Distributed SAN QingCloud Storage – The Goal ► Software Defined ► 性能,容量 ► 兼容传统企业应用方案 ► 高可靠,备案/恢复 QingCloud Storage – The Solution ► 计算与存储融合 ► SATA,SAS,SSD ► QingCloud Distributed Storage (距离优先,连续优先,类别分组) ► Block Storage,Shared Storage,Object Storage QingCloud Storage – The Arch QingCloud Block Storage ► 高性能 (RDB, Cache, ZK, Queue, Mongodb, Hadoop, etc…) ► 128MB/s ► 85000 (4K随机读), 6900 (4K随机写) ► 大容量 ► 38MB/s ► 5T ► 超高性能 (Soon…) ► >= 3 replicas QingCloud Shared Storage ► Virtual SAN ► QingCloud Block Storage -> iSCSI -> LUN ► For legacy enterprise application solutions (e.g. Oracle RAC) ► NAS ► QingCloud Block Storage -> NFS/SAMBA/CIFS ► 兼容传统企业存储 QingCloud Block Storage - Snapshot ► 全量/增量 ► Online/Offline ► 回滚/导出 ► Scheduler The Open Source Distributed fs or Object Storage ► Difference with distributed block storage: Index/Metadata ► 无中心: CEPH (Radosgw), Glusterfs, Sheepdog ► 有中心: HDFS, Swift, Haystack, TFS, Lustre, Moosefs, etc… ► There’s always PAIN behind “It’s OK” QingCloud Object Storage ► Multiple zones, two namespaces (global, bucket) ► 类型不限,容量不限 ► Bucket数目不限 (有Quota),Object数目不限,单Object容量最大5T ► RESTful API, SDK, Clients ► Filesystem Layout QingCloud Object Storage – The Big Arch QingCloud Object Storage – The Zone Arch The Roadmap ► CDN ► 图形图像处理,音视频处理 ► QingCloud各类存储服务的融合 ► 与QingCloud其他服务的集成 ► 与客户存储环境的结合 ► 客户端 ► 更廉价的存储硬件 ► 与开源项目的集成 The Summary ► The user view ► 块,iSCSI LUN,Filesystem,Object ► The technical view ► Open the eyes (Open source is nice; There is always pain behind “it’s OK”) ► 统一硬件架构 ; 折衷的分布式存储系统;多维产品设计 QingCloud-IaaS 青云QingCloud www.qingcloud.com osier@yunify.com Thank you.
还剩19页未读

继续阅读

下载pdf到电脑,查找使用更方便

pdf的实际排版效果,会与网站的显示效果略有不同!!

需要 5 金币 [ 分享pdf获得金币 ] 0 人已下载

下载pdf

pdf贡献者

cd7b

贡献于2015-07-24

下载需要 5 金币 [金币充值 ]
亲,您也可以通过 分享原创pdf 来获得金币奖励!
下载pdf