对象存储
● 一种保存海量文件对象的高可靠性、高性价比的非结构化数据存储仓库
● 没有对象存储数量限制
● 可靠性高,99.999999%
● 文件流转简单
应用场景
用于企业各类文件归档和数据备份
● 直接上传日志文件进行保存,后期加工通过Spark/ES来实现
● 数据库日志文件,如MySQL 日志,Binary Log的备份数据保存
场所
● 视频、图像文件的保存和处理
● 作为CommVault等备份软件的虚拟存储
用于企业网盘和文档管理的后端存储
和第三方文档管理系统集成提供企业文档管理
- NextCloud
- 易美云
静态网站托管
青云对象存储可以提供面向静态网页内容(包含音频和视频等文件)提供的托管服务。
● 降低 Web 服务器负载,静态文件访问负载全部通过 CDN
● Web 服务可直接将海量非结构化数据存储至对象存储,降低存储成本
● 配合 CDN 使用,降低流量成本,提高静态内容响应速度
QingStor对象存储和QingCloud大数据平台无缝集成
● Qingstor和HDFS之间数据文件相互传递和复制。
● 将 QingStor 对象存储中的文件作为MapReduce 的输入,计算结果输出到 HDFS 文件系统或者依然输出到QingStor 对象存储的存储空间中。
● ElasticSearch服务可以通过AWS Cloud Plugin与QingStor对象存储集成以便生成快照将数据存储到到QingStor中,并可以在必要时从中恢复。
产品架构
QingStor对象存储的全局架构
• 全局管理
• 多个 Zone
• 存储容器(Bucket)数量没有限制
• 总的对象数量没有限制
• 一个存储容器下的对象数量没有限制
QingStor部署架构
QingStor对象存储– 高度可扩展的架构
网关节点:3台及以上,运行QingStor对象存储的各种服务,如接入服务、索引服务等,建议采用SSD。其性能和容量需求是由QPS、吞吐量和存储的文件数量来决定。
存储节点:至少3台,多采用SATA盘作为存储介质,存储容量根据SATA单盘的容量。
● 如每台存储节点12块6T的SATA盘,则最小3节点物理存储容量为216T,有效存储容量为72T(三副本)。
● 存储节点可以采用高密节点,如4U60盘位,每盘8T、则物理容量单节点为480T,有效容量为160T(三副本)。
主要特性
数据可靠性
● 对象存储的数据采用三副本的方式进行存储
● 对象数据上传时基于MD5进行一致性校验
● 通过调度子系统定时对数据进行自检,提前发现硬盘问题及存储隐患
监控服务
性能设计
● QingStor对象存储任何类型的节点都可以进行平滑扩容,性能随集群规模线性增长。
● 对海量小文件进行存储优化,实际物理存储时合并对象以大于64M的值进行存储。
自动化部署
1. Bucket ACL:
 ● 私有:该 bucket 及其文件只能在控制台或者通过 API 或 SDK经用户的密钥签名才能访问。
 ● 公开只读:所有人都可以访问 bucket 及其文件相关的 GET/HEAD 等类型 API 接口。
 ● 公开读写:所有人都可以访问 bucket 及其文件相关的所有 API 接口。
2. Bucket Policy:
 允许用户更细粒度的控制存储空间的访问。 其语义主要由用户、 资源、动作及条件运算符组合定义;可限制特定用户、特定IP地址对指定资源的访问操作
3. 传输安全:
 ● 下载支持断点续传,以允许用户在网络质量较差的环境中仍能够下载资源传输加密:
 ● 基于对称加密的请求认证方式;
4. 数据安全:
 ● 支持对象加密存储,采用AES256加密算法
产品推荐 查看更多>>
    阿里云 对象存储OSS

    阿里云对象存储OSS(Object Storage Service)是一款海量、安全、低成本、高可靠的云存储服务,提供99.9999999999%(12个9)的数据持久性,99.995%的数据可用性。多种存储类型供选择,全面优化存储成本。

    方便、快捷的使用方式

    强大、灵活的安全机制

    数据冗余机制

    丰富、强大的增值服务

    ZStack企业级分布式存储

    ZStack企业级分布式存储是一款分布式软件定义存储产品,具备业界领先的性能、可靠性和可管理性,能够支持大型企业及运营商实现数十PB级以上容量的存储资源池。

    性能升级

    功能完备

    腾讯云归档存储

    是腾讯云对象存储 COS 低成本、持久可靠的存储类型,为企业和个人开发者提供海量、非结构化数据的长时间备份能力。

    提供海量、非结构化数据的长时间备份能力

    服务可用性在99.9%以上

    数据存储持久性高达99.999999999%