阿里云
专有云大数据版
产品简介
产品版本:V2.3.0
文档版本:20190122
法律声明
产品简介 / 法律声明
阿里云提醒您在阅读或使用本文档之前仔细阅读、充分理解本法律声明各条款的内容。如果您阅读
或使用本文档,您的阅读或使用行为将被视为对本声明全部内容的认可。
1. 您应当通过阿里云网站或阿里云提供的其他授权通道下载、获取本文档,且仅能用于自身的合法
合规的业务活动。本文档的内容视为阿里云的保密信息,您应当严格遵守保密义务;未经阿里云
事先书面同意,您不得向任何第三方披露本手册内容或提供给任何第三方使用。
2. 未经阿里云事先书面许可,任何单位、公司或个人不得擅自摘抄、翻译、复制本文档内容的部分
或全部,不得以任何方式或途径进行传播和宣传。
3. 由于产品版本升级、调整或其他原因,本文档内容有可能变更。阿里云保留在没有任何通知或者
提示下对本文档的内容进行修改的权利,并在阿里云授权通道中不时发布更新后的用户文档。您
应当实时关注用户文档的版本变更并通过阿里云授权渠道下载、获取最新版的用户文档。
4. 本文档仅作为用户使用阿里云产品及服务的参考性指引,阿里云以产品及服务的”现状“、“有缺
陷”和“当前功能”的状态提供本文档。阿里云在现有技术的基础上尽最大努力提供相应的介绍及
操作指引,但阿里云在此明确声明对本文档内容的准确性、完整性、适用性、可靠性等不作任何
明示或暗示的保证。任何单位、公司或个人因为下载、使用或信赖本文档而发生任何差错或经济
损失的,阿里云不承担任何法律责任。在任何情况下,阿里云均不对任何间接性、后果性、惩戒
性、偶然性、特殊性或刑罚性的损害,包括用户使用或信赖本文档而遭受的利润损失,承担责
任(即使阿里云已被告知该等损失的可能性)。
5. 阿里云网站上所有内容,包括但不限于著作、产品、图片、档案、资讯、资料、网站架构、网站
画面的安排、网页设计,均由阿里云和/或其关联公司依法拥有其知识产权,包括但不限于商标
权、专利权、著作权、商业秘密等。非经阿里云和/或其关联公司书面同意,任何人不得擅自使
用、修改、复制、公开传播、改变、散布、发行或公开发表阿里云网站、产品程序或内容。此
外,未经阿里云事先书面同意,任何人不得为了任何营销、广告、促销或其他目的使用、公布或
复制阿里云的名称(包括但不限于单独为或以组合形式包含”阿里云”、Aliyun”、“万网”等阿里云
和/或其关联公司品牌,上述品牌的附属标志及图案或任何类似公司名称、商号、商标、产品或
服务名称、域名、图案标示、标志、标识或通过特定描述使第三方能够识别阿里云和/或其关联
公司)。
6. 如若发现本文档存在任何错误,请与阿里云取得直接联系。
文档版本:20190122
I
通用约定
格式
说明
样例
产品简介 / 通用约定
该类警示信息将导致系统重大变更甚至
故障,或者导致人身伤害等结果。
该类警示信息可能导致系统重大变更甚
至故障,或者导致人身伤害等结果。
用于补充说明、最佳实践、窍门等,不
是用户必须了解的内容。
禁止:
重置操作将丢失用户配置数据。
警告:
重启操作将导致业务中断,恢复业务所需
时间约10分钟。
注意:
您也可以通过按Ctrl + A选中全部文件。
设置 > 网络 > 设置网络类型
执行 cd /d C:/windows 命令,进
入Windows系统文件夹。
bae log list --instanceid
Instance_ID
>
粗体
courier
字体
斜体
多级菜单递进。
表示按键、菜单、页面名称等UI元素。 单击 确定。
命令。
表示参数、变量。
[]或者[a|b] 表示可选项,至多选择一个。
{}或者{a|b} 表示必选项,至多选择一个。
ipconfig [-all|-t]
swich {stand | slave}
文档版本:20190122
I
产品简介 / 目录
目录
法律声明......................................................................................................I
通用约定......................................................................................................I
1 专有云大数据版简介............................................................................... 1
1.1 什么是专有云大数据版......................................................................................................1
1.2 产品优势........................................................................................................................... 1
1.3 系统容量........................................................................................................................... 2
1.4 应用场景........................................................................................................................... 2
2 对象存储OSS..........................................................................................3
2.1 什么是对象存储OSS........................................................................................................3
2.2 产品优势........................................................................................................................... 3
2.3 产品架构........................................................................................................................... 5
2.4 功能特性..........................................................................................................................6
2.5 应用场景........................................................................................................................... 6
2.6 使用限制........................................................................................................................... 8
2.7 基本概念........................................................................................................................... 9
3 表格存储Table Store............................................................................12
3.1 什么是表格存储............................................................................................................. 12
3.2 产品优势........................................................................................................................12
3.3 产品架构......................................................................................................................... 13
3.4 功能特性......................................................................................................................... 15
3.5 应用场景......................................................................................................................... 15
3.6 使用限制......................................................................................................................... 21
3.7 基本概念......................................................................................................................... 22
4 云盾.......................................................................................................25
4.1 什么是云盾......................................................................................................................25
4.2 产品优势......................................................................................................................... 25
4.3 产品架构......................................................................................................................... 27
4.4 功能特性......................................................................................................................... 29
4.5 使用限制......................................................................................................................... 30
5 MaxCompute....................................................................................... 31
5.1 什么是MaxCompute........................................................................................................31
5.2 产品优势......................................................................................................................... 31
5.3 产品架构......................................................................................................................... 33
5.4 功能特性......................................................................................................................... 34
5.4.1 Tunnel................................................................................................................34
5.4.1.1 基本概念......................................................................................................... 34
文档版本:20190122
II
产品简介 / 目录
5.4.1.2 Tunnel特点..................................................................................................... 35
5.4.1.3 Tunnel数据上传下载....................................................................................... 35
5.4.2 SQL................................................................................................................... 36
5.4.2.1 基本概念......................................................................................................... 36
5.4.2.2 SQL特点......................................................................................................... 36
5.4.2.3 与开源对比..................................................................................................... 37
5.4.3 MapReduce....................................................................................................... 38
5.4.3.1 基本概念......................................................................................................... 38
5.4.3.2 MapReduce特点.............................................................................................38
5.4.3.3 MaxCompute MR过程....................................................................................39
5.4.3.4 Hadoop MR VS MaxCompute MR............................................................... 39
5.4.4 Graph................................................................................................................ 40
5.4.4.1 基本概念......................................................................................................... 40
5.4.4.2 Graph特点...................................................................................................... 40
5.4.4.3 Graph关系网络模型........................................................................................41
5.4.5 云产品联通........................................................................................................ 41
5.4.5.1 非结构化数据的访问与处理............................................................................ 41
5.4.6 增强特性............................................................................................................ 42
5.4.6.1 Spark on MaxCompute.................................................................................. 42
5.4.6.1.1 基本概念...................................................................................................... 42
5.4.6.1.2 Spark特点....................................................................................................42
5.4.6.1.3 Spark功能....................................................................................................43
5.4.6.1.4 Spark架构....................................................................................................43
5.4.6.1.5 Spark优势....................................................................................................44
5.5 应用场景......................................................................................................................... 44
5.5.1 场景一:使用成本低,数据上云周期短............................................................. 44
5.5.2 场景二:提升开发效率,降低存储和计算成本...................................................45
5.5.3 场景三:盘活海量数据,实现百万用户精细化运营........................................... 46
5.5.4 场景四:大数据精准营销...................................................................................47
5.6 使用限制......................................................................................................................... 48
5.7 基本概念......................................................................................................................... 48
6 DataWorks........................................................................................... 51
6.1 什么是DataWorks........................................................................................................... 51
6.2 产品优势......................................................................................................................... 52
6.2.1 超大规模计算处理能力...................................................................................... 52
6.2.2 一站式的数据工场..............................................................................................52
6.2.3 海量异构数据源快速集成能力............................................................................52
6.2.4 Web化的软件服务..............................................................................................52
6.2.5 多租户权限模型................................................................................................. 52
6.2.6 更智能的监控报警..............................................................................................52
6.2.7 更易用的智能SQL编辑器...................................................................................52
文档版本:20190122
III
产品简介 / 目录
6.2.8 完备的数据质量监控体系...................................................................................53
6.2.9 便捷的数据服务开发接口...................................................................................53
6.2.10 安全的数据共享机制........................................................................................ 53
6.3 产品架构......................................................................................................................... 53
6.3.1 功能架构............................................................................................................ 54
6.3.2 系统架构............................................................................................................ 54
6.3.3 安全架构............................................................................................................ 55
6.3.4 多租户模型........................................................................................................ 55
6.4 功能特性......................................................................................................................... 56
6.4.1 数据集成............................................................................................................ 56
6.4.1.1 数据集成概述..................................................................................................56
6.4.1.2 支持多种数据通道...........................................................................................57
6.4.1.2.1 元数据信息同步........................................................................................... 57
6.4.1.2.2 关系型数据库同步服务.................................................................................57
6.4.1.2.3 NoSQL数据库同步服务................................................................................57
6.4.1.2.4 MPP数据库同步服务....................................................................................57
6.4.1.2.5 大数据数据库同步服务.................................................................................57
6.4.1.2.6 非结构化存储同步服务.................................................................................57
6.4.1.3 传输速度......................................................................................................... 57
6.4.1.4 数据流入管控..................................................................................................57
6.4.1.5 控制友好......................................................................................................... 58
6.4.1.6 同步插件......................................................................................................... 58
6.4.1.7 跨网络传输..................................................................................................... 58
6.4.2 数据开发............................................................................................................ 58
6.4.2.1 数据开发概述..................................................................................................58
6.4.2.2 业务流程设计器.............................................................................................. 58
6.4.2.2.1 业务流程设计器介绍.................................................................................... 58
6.4.2.2.2 节点任务...................................................................................................... 59
6.4.2.2.3 节点属性配置...............................................................................................59
6.4.2.2.4 历史版本...................................................................................................... 59
6.4.2.2.5 任务发布...................................................................................................... 60
6.4.2.3 解决方案设计器.............................................................................................. 60
6.4.2.4 代码开发编辑器.............................................................................................. 60
6.4.2.4.1 SQL编程...................................................................................................... 60
6.4.2.4.2 MR编程........................................................................................................60
6.4.2.4.3 Resource资源文件.......................................................................................61
6.4.2.4.4 UDF函数注册...............................................................................................61
6.4.2.4.5 Shell脚本编程.............................................................................................. 61
6.4.2.5 代码管理与团队协作....................................................................................... 61
6.4.3 监控运维............................................................................................................ 61
6.4.3.1 监控运维概述..................................................................................................61
IV
文档版本:20190122
产品简介 / 目录
6.4.3.2 运维概览......................................................................................................... 62
6.4.3.3 任务运维......................................................................................................... 62
6.4.3.4 智能监控......................................................................................................... 62
6.4.4 平台管理............................................................................................................ 62
6.4.4.1 平台管理概述..................................................................................................62
6.4.4.2 组织管理......................................................................................................... 63
6.4.4.3 项目管理......................................................................................................... 63
6.4.4.4 项目成员管理..................................................................................................63
6.4.4.5 权限管理......................................................................................................... 63
6.4.5 实时分析............................................................................................................ 64
6.4.6 数据服务............................................................................................................ 64
6.4.7 数据资产管理.....................................................................................................65
6.4.8 数据保护伞........................................................................................................ 66
6.4.8.1 数据保护伞概述.............................................................................................. 66
6.4.8.2 基本术语......................................................................................................... 67
6.4.8.2.1 组织(Organization)..................................................................................67
6.4.8.2.2 项目空间(Project) ................................................................................ 67
6.4.8.2.3 正则表达式(Regular Expression)............................................................67
6.4.8.2.4 数据分级分类(Data Classification)..........................................................67
6.4.8.2.5 数据扫描(Data Scansion)....................................................................... 67
6.4.8.2.6 数据脱敏(Data Desensitization)..............................................................67
6.4.8.2.7 MaxCompute(原ODPS).......................................................................... 67
6.5 应用场景......................................................................................................................... 68
6.5.1 云上数仓............................................................................................................ 68
6.5.2 BI应用................................................................................................................69
6.5.3 数据化运营........................................................................................................ 71
6.6 使用限制......................................................................................................................... 71
6.7 基本概念......................................................................................................................... 71
7 大数据应用加速器DTBoost.................................................................. 73
7.1 什么是DTBoost............................................................................................................... 73
7.2 产品优势......................................................................................................................... 74
7.3 产品架构......................................................................................................................... 74
7.4 功能特性......................................................................................................................... 76
7.4.1 标签中心............................................................................................................ 76
7.4.2 整合分析............................................................................................................ 78
7.4.3 规则引擎............................................................................................................ 80
7.4.4 标签工厂............................................................................................................ 83
7.5 应用场景......................................................................................................................... 83
7.5.1 应用场景概述.....................................................................................................83
7.5.2 画像分析............................................................................................................ 84
7.5.3 设备履历............................................................................................................ 85
文档版本:20190122
V
产品简介 / 目录
7.5.4 地理分析............................................................................................................ 85
7.6 使用限制......................................................................................................................... 86
7.7 基本概念......................................................................................................................... 86
8 大数据管家BCC.................................................................................... 87
8.1 什么是大数据管家........................................................................................................... 87
8.2 产品优势......................................................................................................................... 88
8.3 产品架构......................................................................................................................... 88
8.3.1 概述................................................................................................................... 88
8.3.2 基础依赖............................................................................................................ 89
8.3.3 数采平台............................................................................................................ 89
8.3.4 应用平台............................................................................................................ 90
8.3.5 产品运维能力.....................................................................................................90
8.4 功能特性......................................................................................................................... 91
8.4.1 产品监控............................................................................................................ 91
8.4.2 产品运维............................................................................................................ 92
8.4.3 产品管理............................................................................................................ 95
8.4.4 云管控................................................................................................................96
8.5 应用场景......................................................................................................................... 96
8.6 使用限制......................................................................................................................... 97
8.7 基本概念......................................................................................................................... 97
9 关系网络分析I+..................................................................................... 98
9.1 什么是关系网络分析....................................................................................................... 98
9.2 产品优势......................................................................................................................... 98
9.3 产品架构......................................................................................................................... 99
9.3.1 系统架构............................................................................................................ 99
9.3.2 OLEP模型........................................................................................................101
9.4 功能特性....................................................................................................................... 102
9.4.1 概述................................................................................................................. 102
9.4.2 搜索................................................................................................................. 103
9.4.3 关系网络.......................................................................................................... 103
9.4.4 关系引擎.......................................................................................................... 107
9.5 应用场景....................................................................................................................... 108
9.5.1 概述................................................................................................................. 108
9.5.2 智能关系网络...................................................................................................108
9.5.3 行业风控.......................................................................................................... 110
9.5.4 公安安防.......................................................................................................... 111
9.6 使用限制....................................................................................................................... 111
9.7 基本概念....................................................................................................................... 111
10 Quick BI...........................................................................................114
10.1 什么是Quick BI........................................................................................................... 114
VI
文档版本:20190122