ACP复习——错题知识点

最新推荐文章于 2022-11-25 18:15:47 发布
最新推荐文章于 2022-11-25 18:15:47 发布
阅读量2.4k 收藏 5
点赞数 2
分类专栏： ACP 文章标签： 数据库 sqlserver java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zyy_lyd/article/details/122246263
版权
本文详细介绍了大数据计算服务MaxCompute、分析型数据库ADS、数据仓库ODPS以及RDS等数据库的特性和使用，涵盖了数据同步、SQL操作、分布式计算优化、数据安全、权限管理等多个方面，强调了各服务在数据处理、查询性能、扩展性和安全控制上的关键点，并讨论了与传统数据库的区别和应用场景。
摘要由CSDN通过智能技术生成
  1. MaxCompute支持外部表，外部表可以存储在OSS或者TS中

2. ADS无法通过客户端的命令从MaxCompute导入到ADS中

  1. 不打开GPU无法运行有关图计算算法的组件（如：深度学习组件、网络分析组件）

  2. **归并函数（Combiner）将Shuffle阶段相邻的Record进行归并。**用户可以根据不同的业务逻辑选择是否使用归并函数。归并函数是MapReduce计算框架的一种优化。Combiner和Reduce的逻辑一样。当Map输出数据之后，框架会在map端对相同的key值的数据进行本地的归并操作

  3. ADS要求一个表组下所有表的一组分区数目相同，一个表组所有表副本数一致

  4. DRDS做平滑扩容时，现有的数据库需要满足：拆分表需要有主键、单表需要有主键、单表需要做小表广播

7. Blink是以无界流为数据源进行计算的，具有吞吐量高、延时低、时效性强等特点。数据更新是实时的，按照数据的顺序来处理，而不是按照优先级分配

  1. Tunnel命令在上传数据时时自动机密传输

  2. MaxCompute SQL不支持事务、索引，也不支持Update或Delete操作，视图和子查询肯定支持，所以不支持事务和主键约束

  3. 计算型任务会被实例化，非计算型如DDL语句不会被实例化

  4. 流计算无法从功能上完全替换Oracle存储过程，两者面向问题领域不一样

  5. 每一个项目空间在创建时，会自动创建一个admin的角色，并且为该角色授予了确定的权限：能访问项目空间中的所有对象，能进行用户与角色管理，能对用户或角色进行授权。与项目空间Owner相比，admin角色不可以将admin权限指派给其他人，不能设定项目空间的安全配置，不能修改项目空间的鉴权模型。Admin角色对应的权限也不能被修改

  6. MySql使用的是Binlog日志，SQL server为事务日志

  7. OTS的单表可以存储规模较大的数据。目前OTS单表存储的限制是没有上限的，OTS单个分片下所有行的大小总和不能超过1G

  8. MinRedundancy表示表组的副本数，默认为2。表组的副本数越多，可以一定程度的增加ADS的最大承受的QPS

  9. Substr()函数会将除了boolean类型以外的其他类型隐式转换成string

17. 安骑士具备安全预防、精准防御、资产指纹、日志检索、防网页篡改等功能，网络安全专家是基于阿里云安骑士基础功能推出的带托管服务

  1. 数据工场Data Works的数据同步支持实时的数据传输

19. MaxCompute没有索引概念，也不支持主键等

  1. MaxCompute的add jar命令会永久的在project中创建一个资源

21. ADS中如果表的updateType为realtime时，那么只能使用insert和delete，必须指定合法的主键并不能有二级分区

22. 用户购买RDS实例时所选择的内存大小决定了该实例的最大连接数

  1. 所有的加密服务实例都需要使用用户手里的身份识别卡（USB KEY）进行管理

  2. ODPS中，允许的SQL的最大长度为2M

  3. Dataworks中的发布管理中，只有任务、资源、函数3类对象可以从开发项目被发布到生产项目

  4. DataIDE中可以通过运维中心的任务管理列表进行批量操作的功能：添加报警、修改资源组、修改负责人

  5. 维度表可以和任意表组的任意表进行关联，并且创建时不需要配置分区信息，但是对单表数据的数据量大小有所限制，并且需要消耗更多的存储资源

  6. 保存数据为一式三份

  7. 云盾安全网络具备的功能：DDoS防护功能、WAF应用防火墙、CC防护、网站内容检查

30. 在ADS中，两个事实表进行Join的充要条件是：1）这两个表在一个表组；2）这两个表的Join Key是Hash分区列；3）两张表的Hash分区数必须一致，否则Join结果不准确；4）两张表的Join Key至少有一列建立了HashMap索引，建立在数据量较小的那张表

  1. 增量同步应设置数据过滤条件，以时间字段未过滤条件实现增量同步。容错记录条数是排除脏数据用的。设置切分键是提升同步速度。作业上限速度是为了设置同步速率，减低源端压力

  2. 单表的有效最大表尺寸通常受限于操作系统的文件尺寸限制，而不是受MySql内部机制的限制。由于RDS MySql实例的最大尺寸为2TB，因此单表的最大尺寸应略小于2TB。若是RDS MySql有多张表，多张表的总和也不能超过2TB

  3. 为了保证应用获得可预期的性能，需要设置OTS表的预留读吞吐量和预留写吞吐量

34. BGP机房的优点：

a) 服务器只需要设置一个IP地址，最佳访问路由是由网络上的骨干路由器根据路由跳数与其他技术指标来确定的，不会占用服务器的任何系统资源。服务器的上行路由与下行路由都能选择最优的路径，所以能真正实现高速的单IP告诉访问

b) 由于BGP协议本身具有冗余备份、消除环路的特点，所以当IDC服务商有多条BGP互联网线路时，可以实现路由的相互备份，在一条现路出现故障时，路由会自动切换到其他线路

c) 使用BGP协议还可以使网络具有很强的扩展性可以将IDC网络与其他运营商互联，轻松实现单IP多线路，做到所有互联运营商的用户访问都很快

  1. 当用户发起一个explain查询到分析型数据库系统后，分析型数据库会抽样一个数据分区来执行计划，并以图形的方式来展现给用户。Explain的resultSet记录中，第一行为逻辑计划，第二行为物理计划

  2. RDS实例在只读模式下只能使用drop table、select、show view的命令

  3. 授权的三要素：主体、客体和操作

  4. 当RDS只读实例在变更配置时，该只读实例的实例状态为“升降级中”，只读实例在控制台无法进行内外网切换和参数设置两种操作

  5. Map Reduce的分片，将输入数据切分为大小相等的数据块

  6. RDS的扩展功能有：易用性、高性能、高可用和容灾，实现备份与恢复、高安全性

  7. Tunnel SDK中可以同时启动多个request对同一个block进行上传，在保证数据正确上传的基础上，实现并行

  8. DMS支持MySql、PostGressQL、ADS、Sql Server

  9. 数据集成支持源端内置函数转换，同时脚本模式还支持SQL以及多表关联操作

  10. 大数据计算服务图计算的一次迭代称为一个超步，当迭代终止会满足条件是：

a) 所有点处于结束状态且没有新消息产生

b) 达到最大迭代次数

c) Aggregator的terminate方法返回@true

  1. DataHub产品相当于开源Kafka、project项目，项目中由多个topic主题组成，每个topic可以由1个或多个shard分片，数据平衡的存储在shard中

  2. ODPS针对字段名、表名均大小写不敏感

  3. 使用DataX将存储在对象存储OSS中的数据同步至阿里云端大数据计算服务，以OSS的object为粒度进行切分实现并发处理

  4. OTS API单行操作：GetRow/PutRow/UpdateRow/DeleteRow；多行数据操作包括：GetRange/BatchGetRow/BatchWriteRow

  5. QuickBI支持直接关联

  6. 调用CreateDBInstance接口创建RDS实例，创建的实例就是主实例；如果通过CreateReadOnlyDBInstance的接口来创建则为只读实例

51. 不同RDS实例中不能资源共享

  1. 由于沙箱机制的影响，大数据计算服务是无法直接访问本地数据的，可以作为资源上传到大数据计算服务上，通过程序读取资源的方式实现

  2. 云盾的加密服务，用户可以对密钥进行安全可靠的管理

  3. Reduce是接收Map的输出结果进行后续的化简，所以Reduce可以没有

  4. 实例默认为主动切换，当主实例出现故障无法访问时，则会自动切换到备实例

  5. 项目管理员不等于项目所有者

  6. Hive中用show function来显示所有自定义函数，MaxCompute中用list function来显示所有自定义函数 【show table；list function】

  7. 绿网内容安全技术是基于阿里云视觉分析技术和深度识别技术，并经过在阿里云经济体内和云上客户多场景的广泛应用和不断优化，可提供风险和治理领域的图像识别、定位、检索等全面服务能力

  8. 一个reduce的输入数据可能来自于多个map的输出；一个map的输出结果也可能分配到多个reduce中

  9. 当select中没有limit，最多只能显示5000条数据

  10. 数据门户也叫数据产品，可以通过菜单形式将仪表板组织成复杂的带导航菜单，常用于专题类分析

  11. OTS的主键为string或Binary类型，长度限制为1k

64. 维度和度量可以根据需求相互转换

  1. 维度表是一种数据量较小但是需要和任何表进行关联的表

  2. Java的反射限制：suppressAccessChecks权限被限制，无法setAccessible某个private的属性和方法，以达到读取private属性或调用private方法的目的

  3. MySql客户端连接ADS时，端口、服务器地址和AccountID是必要信息

  4. 创建OTSClient对象，在构造函数中指定endpoint，accessKeyID，accessKeySecret，实例名称

  5. DRDS事务支持强一致性

  6. Base产品由三大部分组成：

a) 计算平台，提供海量数据的离线计算、实时OLAP、流式计算能力，满足各种场景下的数据计算需求

b) 开发平台，提供一站式的数据集成、数据开发、BI分析、应用开发、数据挖掘和机器学习等工作环境，通过数据中心对数据资产进行集中式管理。加工好的数据，最终以服务接口的形式对接到应用系统

c) 交换平台，提供数据交易市场

  1. ODPS MapReduce以及UDF程序在分布式环境中运行时受到Java沙箱的限制，但是在本地运行时&#x

最低0.47元/天 解锁文章
职业转发抽奖选手
关注
专栏目录
阿里云工业视觉智能工程师ACP认证——培训课程笔记
07-23
（再次提醒，这个的内容都是官网提供的《阿里云工业视觉智能认证ACP培训课程》里面能找到的，只是为了方便复习才整理出来的，介意的小伙伴慎重食用哦！另外，思维导图使用的是XMind这个软件制作的。）
阿里云大数据组件零碎点总结（不定时更新）
Song_MJ的博客
07-07 5486
1 ADS 1.1 简介 云原生数据仓库AnalyticDB MySQL版（简称ADB，原分析型数据库MySQL版），是阿里巴巴自主研发的海量数据实时高并发在线分析云计算服务，使得您可以在毫秒级针对千亿级数据进行即时的多维分析透视和业务探索。 云原生数据仓库AnalyticDB又称ADB又被称为ADS，以下仅用ADS。 1.2 UPDATE_TYPE相关 UPDATE_TYPE可设置数据的更新方式，可设置为batch（批量更新数据）和realtime（实时更新数据），默认值是batch，当设.
ACP复习——考试提纲（仅记录遗漏点）
职业转发抽奖选手的博客
12-30 1059
一、大数据计算服务考试内容 熟悉大数据计算服务基本概念，包括项目空间、表、分区、资源、任务、生命周期、实例、函数、ACID特性 MaxCompute的输入和输出都是表 生命周期只能指定到表级别，而不是在分区级设定生命周期 在MaxCompute中，并不是所有的请求都会被转换成任务，如：项目空间、资源、实例、自定义函数的操作 了解大数据计算服务的组成架构和各组成部分功能 客户端有：RESTful API、Java、R、Web、Command 接入层：返回Account ID给HTTP Serve
AnalyticDB分析型数据库
qq_33439938的博客
09-13 4401
AnalyticDB分析型数据库 本文初衷是为了学习归纳，若有错误，请指出。 修改记录 时间 内容 2020年9月13日 第一次发布 一、概述 1.1 定义 ​ 分析型数据库AnalyticDB（原名 ADS）是阿里巴巴针对海量数据分析自主研发的实时高并发在线分析系统，可以针对万亿级别的数据进行多维度分析透视和业务探索。采用分布式计算，具有强大的实时计算能力。 1.2 特点 ​ 主要特点就是实时和高并发，可以针对万亿级别的数据进行多纬度分析透视和业务探索。 兼容MySQL、B
Java日期时间使用总结
Cike___的博客
09-07 1752
在Java中日期和时间之间转换、加减运算、展示格式等都是非常复杂的问题。
ACP大数据
SeeYouAgain的博客
12-15 3590
本文总结阿里云大数据ACP考试相关试题，仅供参考！如有纰漏，还望指出！ 1.在阿里云流计算中,一个用户作业在运行期间随着数据量的突增提升了其作业CPU使用率,这将会影响到其他用户作业的CPU 使用情况( ) B A.正确 B.错误 2。DataIDE中,调度系统提供一些常用的时间参数,使周期任务自动调度运行时参数会自动替换具体的时间值。其中${bdp.system.cyctime}参数值是取任务运行时的定时时间(年月日时分秒),若按天调度的周期任务配置定时时间为20:00,则2016-01-01...
阿里云云计算ACP复习资料PPT
07-13
阿里云云计算ACP复习资料，知识点
PMI-ACP知识点串讲
02-13
ACP知识点串讲，涵盖了ACP所有内容，Scrum 3355，考试要点。
ACP备考必备知识点.pdf
02-28
ACP备考必备知识点 包含敏捷项目管理的概念、原则、框架等，对通过ACP考试有很大帮助，严格意义上属于总纲。 通过阅读本文档，可以对ACP有一个整体的认知，是不可多得的考试法宝。
云计算ACP知识点汇总
07-18
云计算ACP知识点汇总云服务器ECS 在上述这些产品中，云服务器ECS在试题中所占的比例最大，达到了30%。 想要拿到这30%，需要掌握ECS的相关概念、适用对象、基本的使用操作、要求能够排除一般问题、能够根据客户需求...
【MaxCompute】学习笔记操作表sql
Wan_Yuan的博客
12-23 1810
创建表 命令格式： # 建表 CREATE TABLE [IF NOT EXISTS] table_name [(col_name data_type [COMMENT col_comment], ...)] [COMMENT table_comment] [PARTITIONED BY (col_name data_type [COMMENT col_comment], ...)] [AS select_statement] # 复制表 CREATE TABLE [IF NOT EXIS
SQL必知必会-视图
魂小猫的博客
09-13 3371
视图 视图是虚拟的表，与包含数据的表不同。视图只包含使用时动态检索数据的查询。 SELECT cust_name,cust_contact FROM Customers,Orders,OrderItems WHERE Customers.cust_id=Orders.cust_id AND OrderItem.order_num=Orders.order_num AND prod_id='RGAN01'; 此查询用来检索订购了某种产品的顾客，任何需要这个数据的人都必须理解相关表的结构，知道如何创建查询和对
odps 中的抽样
yichudu
08-03 6660
分组抽样 希望按照性别年龄分组, 去抽样查看他们的身高体重, 那么mysql可以这么写: select height, weight from student_table group by gender, age 可odps 不支持这样的语法, 于是找到了cluster_sample() 这个函数. boolean cluster_sample(bigint x[, bigint ...
数据集成产品分析
最新发布
爱是与世界平行
11-25 1350
数据同步致力于保证数据在不同数据源之间被高效准确地迁移。1）离线同步主要用于大批量数据的周期性迁移，对时效性要求不高，一般采用分布式批量数据同步方式，通过连接读取数据，读取数据过程中可以有全量、增量方式，经过统一处理后写入目标存储。成熟的产品有：Sqoop、DataX、kettle等。2）实时同步针对数据时效性要求高的场景，其将源端数据的变化实时同步到目标端数据源中，保证源端数据与目标端数据实时保持一致，就可满足业务实时查询分析使用数据或实时计算等需求。成熟的产品有：Canal、otter等。
阿里大数据平台MaxCompute初窥
热门推荐
micklf的博客
06-27 1万+
如下内容大多来自官方手册、论坛等。 这个产品解决了什么问题 概况 MaxCompute，旧名ODPS，是阿里的一款离线计算引擎。 底层基于阿里飞天、伏羲等阿里云基础套件，MaxCompute专注于离线计算部分。 对标产品：hadoop、spark等。 目前看，发展方向应该和很多公司用spark一致，主推以丰富的SQL来解决问题。毕竟sql相比MR等有较多的用户需求。以前的No SQ...
MaxCompute的动态分区
真新镇的涅法雷姆
05-31 4782
前言 有使用过Hive的人都知道，有一个叫做分区的东西。Hive表实际上是数据存储在HDFS上的抽象表，一个分区名对应逻辑存储时的一个子目录名，从形式上看可以理解为一个文件夹，一个表文件夹下的子文件夹。 有一点点绕，不知道你们听懂了没。 当然，分区并不是一个必要的概念，你可以建一张不带分区的表。大多数时候我们都建议建立分区表，用法为在建表语句后带关键字partitioned by (type...
数据库之where子句以及函数
sss2113923的博客
10-24 2202
where子句 例： -- 查询销售人员或办事人员并且工资大于 800 select * from emp WHERE (job='CLERK' OR job='SALESMAN') and sal >800 -- 查询奖金介于1500-3000 select * from emp where sal between 1500 and 3000 select * from
阿里云大数据利器Maxcompute学习之--分区表的使用
weixin_34358365的博客
05-15 1514
初学大数据Maxcompute时部分用户不是很熟悉Maxcompute分区表的概念和使用，那这篇文章来简单介绍下分区表的概念及使用场景。 实际上，分区在很多框架中都有这个概念，比如开源框架中的hive等。打个比喻，某城市粮仓里存放麦子，粮仓里按照县城分为很多区域，每个县城都有自己的一块地方，每个县城的麦子放在自己对应的区域上。如果上级领导来检查，想看某...
大数据-玩转数据-Maxcompute DML
s_unbo的博客
04-27 3705
一、插入或覆写数据（INSERT INTO | INSERT OVERWRITE） 1、数据插入使用说明 MaxCompute支持通过insert into或insert overwrite操作向目标表或静态分区中插入、更新数据。 本文中的命令您可以在如下工具平台执行： MaxCompute客户端 MaxCompute控制台（查询编辑器） DataWorks控制台 MaxCompute Studio 前提条件 执行insert into和insert overwrite操作前需要具备目标表的修改权限（A
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值