- 博客(12)
- 资源 (28)
- 收藏
- 关注
原创 3 Hive的数据类型和文件格式、数据单元、基本数据类型、复合类型、JDBC数据类型、内置运算符和函数、HIVE命令和CLI(命令设置,Resource、命令行操作、批处理模式)、HIVE文件格式
3Hive的数据类型和文件格式等3.1数据单元Databases:命名空间的功能,用于避免表,视图,分区,列的命名冲突,Databases也可以用于增强一个用户或用户组的的安全性。Tables: 具有相同schema数据存储的位置。Partitions:每个表可以拥有一个或多个partitions keys,这些key用于决定数据是如何存储的。Buckets (or Clusters):...
2020-01-19 08:43:59 1502
原创 2.4-2.5、Hive整合(整合Spark、整合Hbase)、连接方式Cli、HiveServer和hivemetastore、Squirrel SQL Client等
2.4其它整合2.4.1Hive整合Spark Spark整合hive,需要将hive_home下的conf下的hive_site.xml放到spark_home下的conf目录下。(3台服务器都做相同的配置)[root@bigdata2 spark-2.3.0-bin-hadoop2.7]# cd $HIVE_HOME/conf[root@bigdata2 conf]# cp hive...
2020-01-15 01:18:46 1098
转载 31-32 python mysql-connector创建数据、crud,where,排序,删除等。PyMSQL驱动,插入操作、查询操作、更新操作、删除操作、执行
31Python MysSQL - mysql-connector驱动使用pip命令安装mysql-connector:python -m pip install mysql-connector效果图如下(如果使用的是Anaconda,需要进入它的命令行窗口,执行如下操作):使用以下代码测试mysql-connector是否安装成功:# -*- coding: UTF-8 -*-...
2020-01-15 00:08:25 1063
转载 29-30Python多线程、多线程、使用threading模块创建线程;JSON数据解析、编码为JSON类型转换对应表、Python类型转换对应表、json.dumps与json.loads
29Python3多线程多线程类似于同时执行多个不同程序,多线程运行有如下优点:使用线程可以把占据长时间的程序中的任务放到后台去处理。用户界面可以更加吸引人,比如用户点击了一个按钮去触发某些事件的处理,可以弹出一个进度条来显示处理的进度。程序的运行速度可能加快。在一些等待的任务实现上如用户输入、文件读写和网络收发数据等,线程就比较有用了。在这种情况下我们可以释放一些珍贵的资源如内...
2020-01-14 23:10:15 979
转载 28Python正则表达式、正则表达式对象、正则表达式修饰符、表达式模板、表达式实例、match函数、search方法、检索和替换、repl、compile、findall等
28Python正则表达式正则表达式是一个特殊的字符序列,它能帮助你方便的检查一个字符串是否与某种模式匹配。Python 自1.5版本起增加了re 模块,它提供 Perl 风格的正则表达式模式。re 模块使 Python 语言拥有全部的正则表达式功能。compile 函数根据一个模式字符串和可选的标志参数生成一个正则表达式对象。该对象拥有一系列方法用于正则表达式匹配和替换。re 模块也提...
2020-01-14 11:24:25 613
转载 27、Python 面向对象(创建类、创建实例对象、访问属性、内置类属性、对象销毁、类的继承、方法重写、基础重载方法、运算符重载、类属性与方法、下划线双下划线)
27Python面向对象(Python2)Python从设计之初就已经是一门面向对象的语言,正因为如此,在Python中创建一个类和对象是很容易的。本章节我们将详细介绍Python的面向对象编程。如果你以前没有接触过面向对象的编程语言,那你可能需要先了解一些面向对象语言的一些基本特征,在头脑里头形成一个基本的面向对象的概念,这样有助于你更容易的学习Python的面向对象编程。接下来我们先来简...
2020-01-13 01:32:16 1282
转载 23-26 Python File方法、OS文件/目录方法、异常处理、内置函数
23Python File方法23.1open()方法Python open()方法用于打开一个文件,并返回文件对象,在对文件进行处理过程都需要使用到这个函数。如果该文件无法被打开,会抛出OSError。注意:使用 open() 方法一定要保证关闭文件对象,即调用 close() 方法。open()函数常用形式是接收两个参数:文件名(file)和模式(mode)open(file,mod...
2020-01-13 01:01:59 527
转载 22 Python IO、打印到屏幕、读取键盘输入、打开和关闭文件、文件定位、重命名和删除文件、Python里的目录、文件,目录相关的方法
22Python文件I/O22.1打印到屏幕最简单的输出方法是用print语句,你可以给它传递零个或多个用逗号隔开的表达式。此函数把你传递的表达式转换成一个字符串表达式,并将结果写到标准输出如下:# -*- coding: UTF-8 -*- print ("Python 是一个非常棒的语言,不是吗?")22.2读取键盘输入Python提供了内置函数从标准输入读入一行文本,默认的标...
2020-01-13 00:10:24 700
转载 21 Python模块、import语句、搜索路径、变量、命名空间和作用域、dir函数、globals()和locals()函数、reload()函数、Python中的包
21Python模块Python 模块(Module),是一个 Python 文件,以 .py 结尾,包含了 Python 对象定义和Python语句。模块让你能够有逻辑地组织你的 Python 代码段。把相关的代码分配到一个模块里能让你的代码更好用,更易懂。模块能定义函数,类和变量,模块里也能包含可执行的代码。例子:下例是个简单的模块 support.py:def print_fu...
2020-01-12 23:33:58 1078
转载 20 Python函数、定义一个函数、参数传递、匿名函数、return语句、变量作用域、
20Python函数函数是组织好的,可重复使用的,用来实现单一,或相关联功能的代码段。函数能提高应用的模块性,和代码的重复利用率。你已经知道Python提供了许多内建函数,比如print()。但你也可以自己创建函数,这被叫做用户自定义函数。20.1定义一个函数你可以定义一个由自己想要功能的函数,以下是简单的规则:函数代码块以 def 关键词开头,后接函数标识符名称和圆括号()。任...
2020-01-12 22:02:25 699
转载 13-19 Python Number、Python字符串、Python列表(List)、集合的基本操作、元组、字典Dicttionnary、日期和时间
13 Python NumberPython Number数据类型用于存储数值。数据类型是不允许改变的,这就是意味着如果改变Number数据类型的值,将重新分配内存空间。以下实例在变量赋值时Number对象将被创建:var1 = 1var2 = 10您也可以使用del语句删除一些Number对象引用。del语句的语法是:del var1[,var2[,var3[....,varN...
2020-01-07 11:46:17 834
转载 5-12 Python条件语句、循环语句、While循环语句、break语句、continue语句、pass语句
5Python条件语句Python条件语句是通过一条或多条语句的执行结果(True或者False)来决定执行的代码块。可以通过下图来简单了解条件语句的执行过程:Python程序语言指定任何非0和非空(null)值为true,0或者null为false。Python编程中if语句用于控制程序的执行,基本形式为:If 判断条件: 执行语句…else: 执行语句….其中...
2020-01-06 16:50:30 983
easyui资料
2014-02-22
17个在线编辑器,包括kindeditor,STEditor,HTMLArea3.0last20071025等
2012-07-22
二手购物网源码
2012-05-31
强大的购物网代码(java)
2012-05-30
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人