- 博客(6)
- 收藏
- 关注
RSS订阅原创 集合元素操作
集合元素操作col :+ ele 将元素添加到集合尾部 Seqele +: col 将元素添加到集合头部 Seqcol + ele 在集合尾部添加元素 Set、Mapcol + (ele1, ele2) 将其他集合添加到集合的尾部 Set、Mapcol - ele 将元素从集合中删除 Set、Map、ArrayBuffercol - (ele1, ele2) 将子集合从...
2018-02-11 07:51:05
319
转载 启动YARN时，ResourceManager 和 NodeManager报错 Error found before invoking supervisord dictionary update s
在通过CM启动Yarn服务时候，不同的版本可能都会遇到同样的一个问题，如下图所示： Error found before invoking supervisord: dictionary update sequence element #89 has length 1; 2 is required之前在cm5.5、cm5.7以及现在的cm5.11都出现过这样的问题。在cm5.5中，修改文件 /op...
2018-02-08 16:46:52
433
转载 python脚本用sqoop把mysql数据导入hive数据仓库中
#! /usr/bin/env python # coding:utf-8 # -------------------------------- # Created by coco on 16/2/23 # --------------------------------- # Comment: 主要功能说明 :初始化业务数据库 import os
2018-02-07 16:50:55
959
转载 sqoop mysql数据导入Hive中
//sqoop导入数据测试## by coco## 2014-11-211. 下载sqoop，本测试安装的hadoop-2.2.0。所以下载的sqoop为：sqoop-1.4.5.bin__hadoop-2.0.4-alpha.tar.gz下载地址为：http://mirrors.cnnic.cn/apache/sqoop/1
2018-02-07 15:31:36
363
转载 Hadoop_FileInputFormat分片
Hadoop_FileInputFormat分片Hadoop学习笔记总结01. InputFormat和OutFormat1. 整个MapReduce组件InputFormat类和OutFormat类都是抽象类。可以实现文件系统的读写，数据库的读写，服务器端的读写。这样的设计，具有高内聚、低耦合的特点。2. 提交任务时，获取s
2018-02-02 14:15:07
210
转载 hive udf
set hive.exec.dynamic.partition=true; set hive.exec.dynamic.partition.mode=nonstrict; set hive.exec.max.dynamic.partitions.pernode=1000;创建真实表：create external table bi_rg.fact_call_lo
2018-02-01 11:35:53
163
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人