BC-oNest对象存储（BC-oNest）入门中移（苏州）软件技术有限公司云计算产品部2017.091课程体系集群测试集群运维集群部署架构与运行机制背景与概念2课程内容–基础篇章节内容1对象存储技术介绍对象存储基本概念，BC-oNest产品介绍2Ceph简介Ceph项目介绍，总体架构，网络架构3Ceph运行机制–RADOS基本概念，副本/纠删码，PG4Ceph运行机制–CRUSH算法，bucket，权重，规则编写，Map设计5初级部署-方案设计与部署操作简单部署规划，基本环境配置，ceph-deploy部署常见测试工具及基础性能与功能测8测试用例设计，测试工具使用，数据监控分析试获取宏观集群信息，启停服务，查询服务状态，基本运维操作10获取基本的日志信息12多数据中心架构与原理，简单操作13BC-oNestBlueprint未来BC-oNest的发展规划与发展方向301对象存储技术介绍存储现状与存储体系对象的概念对象存储与文件存储对比对象存储定位4存储体系结构层次•高性能，大多数数据库使用块存储设备块存储•应用于关键业务和数据极度敏感业务，常见于高端存储•丰富的共享接口，存储非结构化数据文件存储•应用于多种场景，尤其是依赖NFS/CIFS/POSIX接口的系统•水平高扩展性，存储非结构化数据，操作及管理简单对象存储•应用于多种场景，比如网盘云存储，备份，归档等块接口块存储应用程序文件系统接口文件系统层内部网磁盘驱动块设备文件接口文件存储应用程序文件系统接口局域网文件系统层磁盘驱动服务器对象接口对象存储应用程序万维网文件系统接口文件系统层磁盘驱动x86/ARM5什么是对象定制元数据定制元数据•分类：宠物•分享策略：不分享•存储时间：1年系统元数据系统元数据文件名：dog.jpg创建时间：文件文件2016.10.10文件+元数据=对象6系统架构S3接口Swift接口文件接口原生接口接口层存储管理管理接口资源监控数据平衡硬件加速存储池隔离自动化部署服务层数据迁移自适应配置硬件感知在线升级监控告警数据哈希分布数据强一致性智能恢复引擎层日志管理集群故障自愈并行一致性检查集群状态管理告警管理磁盘点灯x86通用服务器磁盘错误检测/管理硬件层RAID/HBA卡管理SAS/SATA/SSD兼容用户管理业务网(10GE/IB)存储网(10GE/IB)信息统计7管理系统集群概况存储池数量节点/磁盘数量风险/告警监控8产品应用场景BC-oNest拥有水平扩展、高可靠、高性能等特点：•应用于视频、图片的存储，结合CDN加速，提升用户体验；•在备份、文件存储和归档等领域应用前景广阔；•逐渐替代传统网络存储系统(NAS)；资源托管视频/图片转码静态网站托管在线视音频及图片极速转码图片、视频存储视频点直播、存储与下载内容分发归档存储CDN后台存储系统替代传统NAS作为备份系统为虚机及卷提供备份存储902Ceph简介Ceph缘起Ceph总体架构集群组件集群网络构成10Ceph缘起Ceph是加州大学SantaCruz分校的SageA.Weil专为博士论文设计的新一代自由软件分布式文件系统。自2007年毕业之后，Sage开始全职投入到Ceph开发之中。Luminous11版本更迭12总体架构13集群组件OSDMONObjectStorageDeviceOSDMONMonitorRADOSGatewayMGR提供S3、Swift接口RGWMGRManagerCEPH-REST-APIMDS提供HTTPRestfulAPI接口RESTMDS提供POSIX文件接口14集群组网一个集群通常有三套网络：-前端业务网-后端存储网-管理网15生产环境组网1603Ceph对象存储运行机制RADOSCRUSH1703-1RADOS基本概念副本与纠删码PlacementGroupClusterMapScrubbing18RADOSaReliable,AutonomicDistributedObjectStorePartofCephPetabyteScaleFailureDetectionReplicationRecoveryStrongConsistencyOSD+MON几个词需要理解：RADOS，O