首页 阿里云动态正文

阿里云之数据中台架构

云返利网 阿里云动态 2020-09-03 06:09:32 8 0

阿里云“数字工厂”入选工信部榜单

  亿欧获悉,9月1日,阿里云入选国家工信部支撑疫情防控和复工复产的工业互联网平台解决方案名单。阿里云联合钉钉推出的设备点巡检移动化管理方案,将工厂的复工管理效率提高了50%以上。阿里云supET工业互联网平台负责人韦伟说,“在后

1. 场景描述

客户打包买了很多阿里云的产品,但是阿里云不负责实施,基于阿里云产品与客户需求,拟采用的数据中台架构,有类似需求的,可以参考下,拿走不谢!

2. 解决方案

阿里产品大数据架构图:

从下到上,简要介绍下各个阿里产品作用及承担的任务:

2.1 云数据库 RDS

阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。

2.2 数据传输DTS

数据传输服务(Data Transmission Service) DTS支持关系型数据库、NoSQL、大数据(OLAP)等数据源间的数据传输。 它是一种集数据迁移、数据订阅及数据实时同步于一体的数据传输服务。数据传输致力于在公共云、混合云场景下,解决远距离、毫秒级异步数据传输难题。 它底层的数据流基础设施为阿里双11异地多活基础架构, 为数千下游应用提供实时数据流,已在线上稳定运行6年之久。 您可以使用数据传输轻松构建安全、可扩展、高可用的数据架构。官方文档

2.3 离线数据同步工具DataX

DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、DRDS 等各种异构数据源之间高效的数据同步功能。

开源地址

2.4 DataHub

阿里云流数据处理平台DataHub是流式数据(Streaming Data)的处理平台,提供对流式数据的发布 (Publish),订阅 (Subscribe)和分发功能,让您可以轻松构建基于流式数据的分析和应用。DataHub服务可以对各种移动设备,应用软件,网站服务,传感器等产生的大量流式数据进行持续不断的采集,存储和处理。用户可以编写应用程序或者使用流计算引擎来处理写入到DataHub的流式数据比如实时web访问日志、应用日志、各种事件等,并产出各种实时的数据处理结果比如实时图表、报警信息、实时统计等。

DataHub服务基于阿里云自研的飞天平台,具有高可用,低延迟,高可扩展,高吞吐的特点。

阿里云“数字工厂”入选工信部榜单

亿欧获悉,9月1日,阿里云入选国家工信部支撑疫情防控和复工复产的工业互联网平台解决方案名单。阿里云联合钉钉推出的设备点巡检移动化管理方案,将工厂的复工管理效率提高了50%以上。阿里云supET工业互联网平台负责人韦伟说,“在后疫情

2.5 ADB或ADS

云原生数据仓库AnalyticDB MySQL版(简称ADB,原分析型数据库MySQL版),是阿里巴巴自主研发的海量数据实时高并发在线分析云计算服务,使得您可以在毫秒级针对千亿级数据进行即时的多维分析透视和业务探索。

2.6 什么是MaxCompute

大数据计算服务(MaxCompute,原名ODPS)是一种快速、完全托管的EB级数据仓库解决方案。

随着数据收集手段不断丰富,行业数据大量积累,数据规模已增长到了传统软件行业无法承载的海量数据(百TB、PB、EB)级别。MaxCompute致力于批量结构化数据的存储和计算,提供海量数据仓库的解决方案及分析建模服务。

2.7 智能数据构建与管理 Dataphin

面向各行各业大数据建设、管理及应用诉求,一站式提供从数据接入到数据消费全链路的智能数据构建与管理的大数据能力,包括产品、技术和方法论等,助力打造标准统一、融会贯通、资产化、服务化、闭环自优化的智能数据体系,以驱动创新。

域的服务器组成的分布式网络。将源站资源缓存到全国各地的边缘服务器,供用户就近获取,降低源站压力。

2.8 服务器ECS

云服务器ECS(Elastic Compute Service)是一种简单高效、处理能力可弹性伸缩的计算服务。帮助您构建更稳定、安全的应用,提升运维效率,降低IT成本,使您更专注于核心业务创新。

2.9 实时流处理Blink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

阿里云正式于2019年1月,宣布将实时计算平台Blink开源,Blink传承自Flink开源框架,后者最早适用于小流量互联网场景的数据处理。此前阿里对Flink进行改造,并推出内部版Blink,将计算延迟降低到毫秒级。

I’m 「软件老王」,喜欢我的文章欢迎转发及关注,人人为我,我为人人,IT相关经验及人生分享与交流!


本文为一点号作者原创,未经授权不得转载

阿里云服务器一年价格多少钱?阿里云服务器报价

现在企业以及民众都强烈认识到,数字化已然成为社会发展的迫切需求之一!“现在每天都有很多企业和站长用户,咨询怎么优惠购买阿里云服务器等相关事宜。”阿里云优惠网负责人表示。 事实上,在阿里云张建锋总裁的观点中:原本需要三至五年

【关于云返利网】

云返利网是阿里云、腾讯云、华为云产品推广返利平台,在各个品牌云产品官网优惠活动之外,云返利网还提供返利。您可以无门槛获得阿里云、华为云、腾讯云所有产品返利,在官网下单后就可以领取,无论是自己用、公司用还是帮客户采购,您个人都可以获得返利。云返利网的目标是让返利更多、更快、更简单!详情咨询13121395187(微信同号)