大数据分析

场景描述

OBS提供的大数据解决方案主要面向海量数据存储分析、历史数据明细查询、海量行为日志分析和公共事务分析统计等场景,向用户提供低成本、高性能、不断业务、无须扩容的解决方案。

  • 海量数据存储分析的典型场景:PB级的数据存储,批量数据分析,毫秒级的数据详单查询等

  • 历史数据明细查询的典型场景:流水审计,设备历史能耗分析,轨迹回放,车辆驾驶行为分析,精细化监控等

  • 海量行为日志分析的典型场景:学习习惯分析,运营日志分析,系统操作日志分析查询等

  • 公共事务分析统计的典型场景:犯罪追踪,关联案件查询,交通拥堵分析,景点热度统计等

用户通过DES等迁移服务将海量数据迁移至OBS,再基于华为云提供的MapReduce等大数据服务或开源的Hadoop、Spark等运算框架,对存储在OBS上的海量数据进行大数据分析,最终将分析的结果呈现在ECS中的各类程序或应用上。

建议搭配服务

MapReduce服务 MRS,弹性云服务器 ECS,数据快递服务 DES

图1 大数据分析

静态网站托管

场景描述

OBS提供低成本、高可用、可根据流量需求自动扩展的网站托管解决方案,结合内容分发网络CDN和弹性云服务器ECS快速构建动静态分离的网站/应用系统。

终端用户浏览器和APP上的动态数据直接与搭建在华为云上的业务系统进行交互,动态数据请求发往业务系统处理后直接返回给用户。静态数据保存在OBS中,业务系统通过内网对静态数据进行处理,终端用户通过就近的高速节点,直接向OBS请求和读取静态数据。

建议搭配服务

内容分发网络 CDN,弹性云服务器 ECS

图2 静态网站托管

在线视频点播

场景描述

OBS提供高并发、高可靠、低时延、低成本的海量存储系统,结合媒体处理MPC、内容审核Moderation和内容分发网络CDN可快速搭建极速、安全、高可用的视频在线点播平台。

OBS作为视频点播的源站,一般的互联网用户或专业的创作主体将各类视频文件上传至OBS后,通过Moderation对视频内容进行审核,并通过MPC对视频源文件进行转码,最终通过CDN回源加速之后便可以在各类终端上进行点播。

建议搭配服务

内容分发网络 CDN,媒体处理 MPC,内容审核 Moderation

图3 视频点播

基因测序

场景描述

OBS提供高并发、高可靠、低时延、低成本的海量存储系统,结合华为云计算服务可快速搭建高扩展性、低成本、高可用的基因测序平台。

客户数据中心测序仪上的数据通过云专线自动快速上传到华为云,通过由ECS、CCE、MRS等服务搭建的计算集群进行分析计算,分析计算产生的数据和计算结果存储到OBS中,其中上传到华为云的基因数据自动转为低成本的归档对象保存在OBS提供的归档存储中,计算得出的测序结果通过公网在线分发到医院和科研机构。

建议搭配服务

弹性云服务器 ECS,裸金属服务器 BMS,MapReduce服务 MRS,云容器引擎 CCE,云专线 DC

图4 基因测序

智能视频监控

场景描述

OBS为视频监控解决方案提供高性能、高可靠、低时延、低成本的海量存储空间,满足个人/企业等各类视频监控场景需求,提供设备管理、视频监控以及视频处理等多种能力的端到端解决方案。

摄像头拍摄的监控视频通过公网或专线传输至华为云,在弹性云服务器ECS和弹性负载均衡ELB组成的视频监控处理平台将视频流切片后存入OBS,后续再从OBS下载历史视频对象传输到观看视频的终端设备。存放在OBS中的视频文件还可以利用跨区域复制等功能进行备份,提升数据存储的安全性和可靠性。

建议搭配服务

弹性负载均衡 ELB,弹性云服务器 ECS

图5 视频监控

备份归档

场景描述

OBS提供高并发、高可靠、低时延、低成本的海量存储系统,满足各种企业应用、数据库和非结构化数据的备份归档需求。

企业数据中心的各类数据通过使用同步客户端(如OBS Browser+、obsutil)、主流备份软件、云存储网关或数据快递服务DES,备份至华为云对象存储服务OBS。OBS提供生命周期功能实现对象存储类别自动转换,以降低存储成本。在需要时,可将OBS中的数据恢复到云上的灾备主机或测试主机。

  • 同步客户端:适用于单数据库/程序场景,手工备份,成本最低

  • 备份软件:适用于多应用、多主机场景,自动备份,兼容性强

  • 云存储网关:可无缝嵌入本地已有的备份系统

  • 数据快递:适用于海量数据归档场景,离线邮寄上云

建议搭配服务

数据快递服务 DES,弹性云服务器 ECS

图6 备份归档

HPC

场景描述

OBS配合弹性云服务器(ECS)、弹性伸缩(AS)、云硬盘(EVS)、镜像服务(IMS)、统一身份认证服务(IAM)和云监控服务(CES),为HPC提供大容量、大单流带宽、安全可靠的解决方案。

在HPC场景下,企业用户的数据可以通过直接上传或数据快递的方式上传到OBS。同时OBS提供的文件语义和HDFS语义支持将OBS直接挂载到HPC flavors的节点以及大数据&AI分析的应用下,为高性能计算各个环节提供便捷高效的数据读写和存储能力。

建议搭配服务

数据快递服务 DES,弹性云服务器 ECS,弹性伸缩 AS,镜像服务 IMS,云监控服务 CES,统一身份认证服务 IAM

图7 HPC

企业云盘(网盘)

场景描述

OBS配合弹性云服务器ECS、弹性负载均衡ELB、关系型数据库RDS和云硬盘备份VBS为企业云盘提供高并发、高可靠、低时延、低成本的存储系统,存储容量可随用户数据量的提高而自动扩容。

用户手机、电脑、PAD等终端设备上的动态数据与搭建在华为云上的企业云盘业务系统进行交互,动态数据请求发送到企业云盘业务系统处理后直接返回给终端设备。静态数据保存在OBS中,业务系统通过内网对静态数据进行处理,用户终端直接向OBS请求和恢复静态数据。同时,OBS提供生命周期功能,实现不同对象存储类别之间的自动转换,以节省存储成本。

建议搭配服务

弹性云服务器 ECS,弹性负载均衡 ELB,关系型数据库 RDS,云硬盘备份VBS

图8 企业云盘(网盘)