流风雨情的博客

你就是个渣渣

git init 和 git init –bare 的区别和解决www下没有源文件无法看的的问题

git init 和 git init –bare 的区别使用命令”git init –bare”(bare汉语意思是:裸,裸的)初始化的版本库(暂且称为bare repository)只会生成一类文件:用于记录版本库历史记录的.git目录下面的文件;而不会包含实际项目源文件的拷贝;所以该版本库...

2017-03-09 21:34:40

阅读数:2368

评论数:0

Ubuntu和centos下搭建自己的git服务器

远程仓库使用了 Github,Github 公开的项目是免费的,但是如果你不想让其他人看到你的项目就需要收费。不想缴费,这时我们就需要自己搭建一台Git服务器作为私有仓库使用。 Ubuntu下搭建git服务器查看git版本,一般Ubuntu和centos安装系统的时候会自动安装 $ git --...

2017-02-24 11:31:22

阅读数:1286

评论数:0

java中类型转换(String float int)

这几种类型装换,一般都会用到parseInt()、parseFloat() 、valueof()方法,但是这是有区别的。看看他们的返回类型不同 static int parseInt(String s) 将字符串参数作为有符号的十进制整数进行分析。 static Integ...

2016-10-13 23:07:59

阅读数:9906

评论数:0

Java集合框架中Set、List、Map的遍历方法

集合框架 所有集合类都位于java.util包下。集合中只能保存对象(保存对象的引用变量)。(数组既可以保存基本类型的数据也可以保存对象)。 当我们把一个对象放入集合中后,系统会把所有集合元素都当成Object类的实例进行处理。从JDK1.5以后,这种状态得到了改进:可以使用泛型来限制集合里元素的...

2016-10-11 21:35:57

阅读数:458

评论数:0

GitHub Pages 绑定来自阿里云的域名

简介 域名解析 腾讯云的域名解析设置 阿里云的域名解析设置 记录类型 A记录: 将域名指向一个IPv4地址(例如:8.8.8.8) CNAME:将域名指向另一个域名(例如www.qcloud.com) MX: 将域名指向邮件服务器地址 TXT: 可任意填写,长度限制255,通...

2016-10-11 11:40:14

阅读数:6421

评论数:7

排序算法--总结

冒泡排序核心思想假如n个数按照由小到大的顺序排列,从后往前升序相邻两两比较大小,(我觉得比较好理解),如果前一位比后一位大就立刻把它俩换位,直接交换位置,第一遍下来,最大的在最后一位,之后不用在比较最后一位了,第二遍,次大的在第二位。。。。。。第一遍比较了n-1次,交换了不确定次,第二遍比较了n-...

2016-10-10 23:05:58

阅读数:271

评论数:0

mysql5.6免安装版安装配置详细说明教程

首先,今天写了个很简单的j2ee程序,所有的业务逻辑都没问题,我反复检查,出现中文乱码问题,搞得我头大,最后我把mysql卸载安装了下,重新配置了,好了。。。。。这个时候我想愤怒。不过还是问题解决了,得到了巨人的帮助,实在感谢。明天写个博客,今天先把在这里说下。你要是首次安装忽略下面的话 对于重装...

2016-10-08 13:48:06

阅读数:3311

评论数:1

多线程和多进程的区别

1.定义 程序: 只是一组指令的有序集合,是计算机硬盘上的一些文件,是“死的” 进程:具有一定独立功能的程序关于某个数据集合上的一次运行活动,进程是系统进行资源分配和调度的一个独立单位,是“活的” 线程:是进程的一个实体,是CPU调度和分派的基本单位,它是比进程更小的能独立运行的基本单位....

2018-05-03 16:28:26

阅读数:453

评论数:0

virtualbox下ubuntu16.04虚拟机网卡配置桥接方式上网

首先,本人被这个坑了好久,浪费了好多时间在网卡配置,不太懂他的原理,然后走了好多弯路。所以在这里记录下: 我之所以选择好virtualbox,是因为它的安装包小,免费,启动快,vmvare workstation是收费的,当然可以破解,vmvare player是免费的,但是还不如virtual...

2018-04-19 17:45:21

阅读数:2608

评论数:0

Ubuntu设置防火墙

安装方法 sudo apt-get install ufw 这是有图形界面的(比较简陋),在新立得里搜索gufw试试…… 使用方法 启用 sudo ufw enable sudo ufw default deny 作用:开启了防火墙并随系统启动同时关闭所有外部对本机的访问(本机访问外...

2018-04-15 11:09:01

阅读数:816

评论数:0

Ubuntu 16.04下开启Mysql 3306端口远程访问and如何在本地远程连接linux虚拟机上面的mysql

检查远程的虚拟机是否可以ping通过(网卡设置桥接模式,这样可以相互ping通,nat模式只能虚拟机ping通本机,反过来不行) 检查虚拟机mysql的端口号是否对外开通 mysql -u root -p mysql>show variables like '%port...

2018-04-15 11:03:32

阅读数:606

评论数:0

virtualbox视图快捷键说明

用virtualbox有很长时间了,一直没捉摸透它的视图都有哪几种,今天用到了无缝显示,觉得很好用,顺便做个笔记吧。 首先说明一下,virtualbox中默认的host键是右ctrl,调出快捷菜单的组合键是host+home,这个请记住,因为在有的显示模式下是不显示菜单的。 ‘视图’菜单下共有...

2018-04-10 19:38:59

阅读数:225

评论数:0

安装hive的坑

Hive原则上可以安装在集群上的任何一台机器上面,但是考虑到 master节点的负荷比较大(安装在Master节点。Hive的HQL最终的执行总是会转换为M/D任务的,那么自然要在JobTracker上执行,通过JobTracker交给TaskTracker执行。)我们选择一台机器性能较好的dat...

2018-04-10 11:48:30

阅读数:92

评论数:0

漫谈千亿级数据优化实践:数据倾斜

0x00 前言 数据倾斜是大数据领域绕不开的拦路虎,当你所需处理的数据量到达了上亿甚至是千亿条的时候,数据倾斜将是横在你面前一道巨大的坎。 迈的过去,将会海阔天空!迈不过去,就要做好准备:很可能有几周甚至几月都要头疼于数据倾斜导致的各类诡异的问题。 郑重声明: 话题比较大,技术...

2018-03-21 23:09:21

阅读数:37

评论数:0

控制Hive中Map和reduce的数量

一、控制Hive中Map和reduce的数量 Hive中的sql查询会生成执行计划,执行计划以MapReduce的方式执行,那么结合数据和集群的大小,map和reduce的数量就会影响到sql执行的效率。 除了要控制Hive生成的Job的数量,也要控制map和reduce的数量。 1、map...

2018-03-21 23:04:41

阅读数:189

评论数:0

hive子查询sql效率优化

今天写了个sql跑了好久,老大过来一看指点下,多用子查询,多用where,然后在join, 提高十多倍,神奇了。想了想,还是老大经验丰富。 如果先join,就全表扫描,然后最后where最后筛选,比较耗时。 如果用子查询,就可以利用where过滤不相关的字段,不但增加了map 数量,还减少了...

2018-03-21 19:27:12

阅读数:933

评论数:0

hive数据倾斜问题

关于数据倾斜问题的思考 (本人小白,不是什么大牛,有什么不对的地方欢迎指正) 背景: 数据倾斜是大数据领域绕经常遇到的问题,当你所需处理的数据量到达了上亿甚至是千亿条的时候,数据倾斜将是横在你面前一道巨大的坎,这也是大数据处理的一个隐形的bug。最近在用Hadoop跑批的时候经常遇...

2018-03-20 16:58:45

阅读数:181

评论数:0

hive sql

(SELECT u.id AS collector_id, u.name AS collector_name, t.name AS area_name FROM ods_collection.fdm_col_admin_user AS u LE...

2018-03-19 15:52:09

阅读数:56

评论数:0

idea开发工具(PyCharm IntelliJ Clion等)全家桶注册码(有效到2019)

IDEA可以通过edu邮箱申请使用全家桶一年,我这里分享给大家。有效时间到2019-3-10 ,仅限个人使用哦。 如果你也有edu邮箱也可以申请的,欢迎分享申请地址 RBOTDLQC2M-eyJsaWNlbnNlSWQiOiJSQk9URExRQzJNIiwibGljZW5zZWVOYW1...

2018-03-11 15:01:39

阅读数:4097

评论数:5

使用hive过程中遇到的小问题

类型转换 cast(t.delay_days_v2 AS int) SELECT cast(t.delay_days_v2 AS int) AS delay_days_v2, t.product_type, count(DISTINCT t.order_id)...

2018-03-08 22:07:54

阅读数:89

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭