- 博客(11)
- 资源 (4)
- 收藏
- 关注
原创 hive数据仓库笔记
将csv导入hive中1、首先在hive中创建自己的table, 并且设置分隔,如'\t'。create table IP(ip varchar(30), country varchar(30), province varchar(30), city varchar(30), district varchar(30), linetype varchar(30)) row form
2017-07-27 11:46:07 408
原创 Ubuntu下安装mdbtools并访问mdb文件
Ubuntu下安装mdbtools并mdb文件访问:1、安装mdb工具sudo apt install mdbtools mdbtools-gmdb2、安装完后可以使用相应命令来查看mdb文件,常用命令有(1)将表结构导入到mysql中现在mysql中建立数据库,如create database test;mdb-schema test.mdb mysq
2017-07-20 16:21:35 3472 1
原创 Spark笔记
spark 是使用scala语言实现的spark生态圈也称作BDAS(伯克利数分析栈),是伯克利APM实验室开发的,力图在算法、机器、人之间通过大规模集成来展现大数据应用的一个平台。伯克利AMPLab运用大数据、云计算、通信等各种资源以及各种灵活的技术方案,对海量不透明的数据进行甄别并转化为有用的信息,以供人们更好的理解世界。该生态圈已经涉及到机器学习、数据挖掘、数据库、信息检索、自然
2017-07-19 18:13:34 516
原创 ssh远程访问虚拟机中Ubuntu系统
使用xshell远程访问虚拟机中Ubuntu系统1、设置虚拟机网络连接方式:选择对应虚拟机,右击选择“设置”->网络适配器->网络连接,选择:桥接模式(B):直接连接物理网络2、进入虚拟机系统,重启网络sudo /etc/init.d/networking restart3、查看虚拟机中系统网络ipifconfig4、与实体机进行ping,看是否可以相互
2017-07-18 15:18:53 3653
原创 Ubuntu16.04.2中安装sql server数据库
是在ubuntu-16.04.2-desktop-amd64.iso系统下进行安装测试,(在Ubuntu-16.04-server-amd64版本中安装会提示很多无法获取权限的错误,错误还没有仔细看,有待解决)1、安装Ubuntu16.04 desktop版本 ubuntu-16.04.2-desktop-amd64.iso一下操作须在root用户下才能有权限执行2、安
2017-07-18 11:15:35 1112
原创 http协议详解
目前网络中实际使用的传输协议为tcp/ip网络协议,它分为四层:应用层、传输层、网络层和网络接口层;应用层主要包括:http、ftp、SMTP等应用协议;传输层主要有tcp和udp协议,网络层主要有ip协议,icmp协议; 网络协议的传输过程中,数据包的封装过程为: http数据包进入传输层,传输层会添加tcp包头,tcp包头包含了:源端口、目的端口、包序、
2017-07-10 14:40:43 1448
原创 Linux守护进程
Linux下守护进程:建立守护进程:#include#include#include#include#include#includevoid daemonInit(){int pid;int i;if(pid = fork())exit(0);//结束父进程else if(p
2017-07-10 14:37:06 293
转载 Linux下计算程序运行效率
linux下计算程序的运行时间效率,一般有两种方式:1、使用gettimeofday函数,它主要用来存放当前时间它的结构为:int gettimeofday(struct timeval *tv,struct timezone *tz);结构体timeval包含两个参数:第一个参数结构为:struct timeval{long tv_sec;//秒
2017-07-10 14:34:44 1619
原创 编码格式说明及Unicode与utf-8互转
1、GB2312:又称国标码,规定:对任意一个图形字符都采用两个字节表示,每个字节均采用七位编码表示,习惯上称第一个字节为“高字节”,第二个字节为“低字节”GB2312中汉字编码范围: 第一个字节: 0xB0--0xF7 对应十进制为:176-247;第二个字节: 0xA0--0xFE 对应十进制为:160-254;GB2312将代码表分为94个区,对应第一个
2017-07-10 14:29:27 1520
原创 oracle导入dmp文件
安装好oracle后,打开对应的SQL plus,然后使用系统用户登录,如:用户名:system 密码:(实例:用户名:system;密码:Aa123456)安装过程中设置的密码,接着按照下面步骤进行导入1、创建表空间命令:create tablespace 表空间名 datafile '要创建的文件名' size 空间大小 autoextend on next 每次扩展大小 ma
2017-07-10 14:24:18 895
原创 vs2008中编译安装curl库
vs2008中添加curl库一、首先到官网下载libcurl源代码,地址:http://curl.haxx.se/download.html,自己下载的是7.32.0版本(http://curl.haxx.se/download/curl-7.32.0.zip)。 二、解压缩压缩包,进入目录 curl-7.32.0\vs,下面有三个目录,进入vc8目录找到 vc8libcurl
2017-07-10 10:03:46 1250
python Excel文件转化为csv文件
2017-07-20
linux下字符串去重,英文句子倒序功能实现
2016-05-20
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人