- 博客(7)
- 收藏
- 关注
RSS订阅原创 MapTask工作机制
（1）Read阶段：MapTask通过InputFormat获得的RecordReader，从输入InputSplit中解析出一个个key/value。（2）Map阶段：该节点主要是将解析出的key/value交给用户编写map()函数处理，并产生一系列新的key/value。（3）Collect收集阶段：在用户编写map()函数中，当数据处理完成后，一般会调用OutputCollector.collect()输出结果。在该函数内部，它会将生成的key/value分区（调用Partitioner），
2021-11-07 17:56:42
90
原创 触发器的概念
触发器的概念触发器（trigger）是个特殊的存储过程，它的执行不是由程序调用，也不是手工启动，而是由个事件来触发， 比如当对一个表进行操作（insert，delete，update）时就会激活它执行。 在动作执行之前或者之后，触发业务处理逻辑。 触发器的作用1. 数据确认 2. 实施复杂的安全性检查 3. 做审计，跟踪表上所作的数据操作等 4. 数据的备份和同步 触发器的语法 create or replace trigger 触发器名称 before|aft.
2021-10-29 18:50:31
468
原创 数据库存储过程的作用
1.简化复杂操作 存储过程可以把需要执行的多条SQL语句封装到一个独立单元中，用户只需调用这个单元就能达到目的。这样就能实现一人编写多人调用，同时缩短了平均开发周期，为公司节省了成本。 2.增加数据独立性 在这一点上与视图的效果类似。利用存储过程可以把数据库基础数据和程序（或用户）隔离开来， 当基础数据的结构发生变化时，可以修改存储过程，这样对程序（或用户）来说，基础数据的变化是不可见的，那 也就不需要修改程序代码了。 ...
2021-10-19 16:36:11
2232
1
原创 开启本地模式
大多数的Hadoop Job是需要Hadoop提供的完整的可扩展性来处理大数据集的。不过，有时Hive的输入数据量是非常小的。在这种情况下，为查询触发执行任务消耗的时间可能会比实际job的执行时间要多的多。对于大多数这种情况，Hive可以通过本地模式在单台机器上处理所有的任务。对于小数据集，执行时间可以明显被缩短。用户可以通过设置hive.exec.mode.local.auto的值为true，来让Hive在适当的时候自动启动这个优化。//开启本地mrset hive.exec.mode.loc
2021-10-15 13:56:44
253
原创 事务的概念和运行原理
是数据库的最小执行单元。通常有一条或者多条sql语句组成的一个整体，事务中的所有sql语句必须都执行成功，事务成功(commit)；只要有一个sql语句执行失败，则事务回滚(roll back)。当client与DBServer建立连接后，在DB中针对该client会分配一块内存空间(回滚段不同db称呼不同）用于临时存储当前client的SQL语句的临时结果，当所有的SQL执行成功,则提交事务(commit) ，会把自身回滚段中所有临时结果真正影响到DBserver的表中；如果有一个SQL执行失败,则事
2021-09-24 08:25:11
251
原创 隐式游标的属性
隐式游标的属性和显式游标的属性具体表示的含义有所不同，但属性种类没有变。 下面列出隐式游标的属性： 1）%ISOPEN属性：该属性永远返回FALSE，它由Oracle自己控制。 2）%FOUND属性：此属性可以反映DML操作是否影响到了数据，当DML操作对数据有影响时该属性为TRUE，否则 为FALSE。也可以反映出SELECT INTO语句是否返回了数据，当有数据返回时该属性为TRUE。 3）%NOTFOUND属性：与%FOUND属性相反。 4）%ROWCOUNT属性：该属性可以反
2021-09-16 10:18:06
521
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人