- 博客(44)
- 资源 (42)
- 收藏
- 关注
转载 每天一个linux命令(37):date命令
http://www.cnblogs.com/peida/archive/2012/12/13/2815687.html在linux环境中,不管是编程还是其他维护,时间是必不可少的,也经常会用到时间的运算,熟练运用date命令来表示自己想要表示的时间,肯定可以给自己的工作带来诸多方便。1.命令格式: date [参数]... [+格式]2.命令功能:
2017-08-31 15:39:55 156
转载 Guava学习笔记:Range
http://www.cnblogs.com/peida/p/Guava_Range.html 在Guava中新增了一个新的类型Range,从名字就可以了解到,这个是和区间有关的数据结构。从Google官方文档可以得到定义:Range定义了连续跨度的范围边界,这个连续跨度是一个可以比较的类型(Comparable type)。比如1到100之间的整型数据。
2017-08-31 15:36:09 188
转载 Hadoop集群(第6期)_WordCount运行详解
http://www.cnblogs.com/xia520pi/archive/2012/05/16/2504205.html1、MapReduce理论简介 1.1 MapReduce编程模型 MapReduce采用"分而治之"的思想,把对大规模数据集的操作,分发给一个主节点管理下的各个分节点共同完成,然后通过整合各个节点的中间结果,得到最终结果。简单地说
2017-08-22 08:36:22 346
转载 Shell实用技巧:快速去除字符串中的空格
这篇文章主要介绍了Shell实用技巧:快速去除字符串中的空格,本文给出了3种方法,分别讲解了删除行首空格、删除行末空格、删除所有空格等内容,需要的朋友可以参考下在整理词库的过程中遇到 一个问题,有些其实是同一个关键词之关有空格的话,无法正常被去重,那么有没有办法能快快速去除这些字符中间的空格呢?经过百度一番,找到一个解决办法,记录一下。效果如下图所示,图上半部分是示例文本,下半部分
2017-08-21 11:01:05 862
转载 Shell 编程:Bash空格的那点事
http://www.jb51.net/article/60328.htm先了解下bash中什么时候该用空格,什么时候不该用。1. 等号赋值两边不能有空格2. 命令与选项之间需要空格3. 管道两边空格可有可无我们来看看常见的问题1. 赋值时等号两边或者只有左边多了空格?123456789
2017-08-21 10:57:15 1746
转载 Hadoop学习笔记——源码初窥
http://www.cnblogs.com/zjfstudio/p/3918669.htmlHadoop学习笔记——源码初窥之前我们把Hadoop算是入了门,下载的源码,写了HelloWorld,简要分析了其编程要点,然后也编了个较复杂的示例。接下来其实就有两条路可走了,一条是继续深入研究其编程及部署等,让其功能使用的淋漓尽致。二是停下来,先看看其源码,研究下如何实现的。在这里我
2017-08-15 10:46:53 231
转载 史上最全面的Java高级学习体系(没有之一)
前言:前几天,有一位同学问我说:“George老师,我现在出来工作4年左右了,可现在我总觉得我在工作中有好多的技术需要学习,不然跟不上公司发展的脚步,自己也想着能够提升些薪资,所以就在网上也找了相关的视屏与资料,也买了很多的书籍来自学,可总是学不会,也不能够快速理解里面的很多内容,现在也白白浪费了好几个月的时间。实在是没办法了,所以现在才找到您,想请你帮帮我”。根据这位同学的言辞,我也只能是表
2017-08-15 10:45:27 2450
转载 Hadoop学习笔记-搭建源码学习环境
http://www.cnblogs.com/zjfstudio/p/3919331.htmlHadoop学习笔记——搭建源码学习环境上一章中,我们对整个hadoop的目录及源码目录有了一个初步的了解,接下来计划深入学习一下这头神象作品了。但是看代码用什么,难不成gedit?,单步调试呢? 看程序不能调那多痛苦啊,想看跟踪一下变量,想看一下执行路径都难。所以这里,我们得
2017-08-15 10:43:25 212
转载 跟我一起hadoop(1)-hadoop2.6安装与使用
http://www.cnblogs.com/skyme/p/4606138.html伪分布式hadoop的三种安装方式:Local (Standalone) ModePseudo-Distributed ModeFully-Distributed Mode安装之前需要$ sudo apt-get install ssh $ sudo apt-get in
2017-08-12 16:24:09 204
转载 IntelliJ IDEA 15 创建maven项目
转:http://www.cnblogs.com/wql025/p/5215570.html说明创建Maven项目的方式:手工创建好处:参考IntelliJ IDEA 14 创建maven项目二(此文章描述了用此方式创建Maven项目的好处)及idea14使用maven创建web工程(此文章描述了用模板创建Maven的弊端。)创建一个新Maven项目new 一个proj
2017-08-12 16:21:02 224
转载 UML类图与类的关系详解
在画类图的时候,理清类和类之间的关系是重点。类的关系有泛化(Generalization)、实现(Realization)、依赖(Dependency)和关联(Association)。其中关联又分为一般关联关系和聚合关系(Aggregation),合成关系(Composition)。下面我们结合实例理解这些关系。基本概念类图(Class Diagram): 类图是面向对象系统建模中最
2017-08-11 16:42:26 228
转载 Hadoop新版本中map任务待处理split大小的计算方法
1. split大小的计算公式 minSize=max{minSplitSize,mapred.min.split.size} (minSplitSize大小默认为1B) maxSize=mapred.max.split.size(不在配置文件中指定时大小为Long.MAX_VALUE) splitSize=max{minSize,min{maxSize,blockSize
2017-08-11 15:52:48 1244
原创 文章网址记载
http://www.yiibai.com/r/r_environment_setup.htmlhttp://www.dataguru.cn/article-1602-1.htmlhttp://www.runoob.com/scala/scala-basic-syntax.htmlR - Data Typeshttp://www.tutorialspoint.com/r
2017-08-10 19:39:20 783
转载 Chapter 4 | Trees and Graphs--有序数组构建最小高度的二叉树
http://blog.csdn.net/wenqian1991/article/details/383896214.3 Given a sorted (increasing order) array, write an algorithm to createa binary tree with minimal height.译文:给定一个有序数组(递增),写出一个算法来构建
2017-08-10 13:40:10 207
转载 了解正则表达式语法
http://liujie198578.blog.163.com/blog/static/349894282013102710047646. 表示任意的一个字符* 表示任意个(0个或多个)前字符.* 表示任意个字符(0个或多个)比较shell中,*就表示表示任意个字符,和正则表达式的.*是一个意思。\ 反斜杠,表示转义,用于将元字符转义成普通的字符。
2017-08-10 13:36:46 270
转载 hadoop 分片与分块,map task和reduce task的理解
http://www.cnblogs.com/qinwangchen/p/5837940.htmlhadoop 分片与分块,map task和reduce task的理解分块:Block HDFS存储系统中,引入了文件系统的分块概念(block),块是存储的最小单位,HDFS定义其大小为64MB。与单磁盘文件系统相似,存储在 HDFS上的文件均存储为多个块,不
2017-08-10 01:38:10 374
转载 《Linux内核设计与实现》读书笔记(六)- 内核数据结构
http://www.cnblogs.com/wang_yb/archive/2013/04/16/3023892.html《Linux内核设计与实现》读书笔记(六)- 内核数据结构内核数据结构贯穿于整个内核代码中,这里介绍4个基本的内核数据结构。利用这4个基本的数据结构,可以在编写内核代码时节约大量时间。主要内容:链表队列映射红黑树 1. 链表链表是l
2017-08-09 14:08:17 224
转载 windows和linux换行规则的区别
http://www.cnblogs.com/linuxnote/p/3753153.html#2949183在计算机还没有出现之前,有一种叫做电传打字机(Teletype Model 33)的玩意,每秒钟可以打10个字符。但是它有一个问题,就是打完一行换行的时候,要用去0.2秒,正好可以打两个字符。要是在这0.2秒里面,又有新的字符传过来,那么这个字符将丢失。于是,研制人员想
2017-08-09 14:05:45 379
转载 sed & awk常用正则表达式
转:http://www.cnblogs.com/linuxnote/archive/2014/04/05/3646867.htmlsed & awk常用正则表达式正则表达式元字符正则表达式中有两种基本元素:以字面值或变量表示的值(如.代表任意单个字符)。操作符(如*代表将前面的字符重复任意次)。元字符汇总特殊字符
2017-08-09 12:16:35 274
转载 彻底搞清计算结构体大小和数据对齐原则
数据对齐: 许多计算机系统对基本数据类型合法地址做出了一些限制,要求某种类型对象的地址必须是 某个值K(通常是2,4或8)的倍数。这种对齐限制简化了形成处理器和存储器系统之间的接口的硬件 设计。例如,假设一个处理器总是从存储器中取出8个字节,则地址必须为8的倍数。如果我们能保 证将所有的d
2017-08-08 11:25:06 202
转载 MapReduce:详解Shuffle过程
http://langyu.iteye.com/blog/992916MapReduce:详解Shuffle过程 Shuffle过程是MapReduce的核心,也被称为奇迹发生的地方。要想理解MapReduce, Shuffle是必须要了解的。我看过很多相关的资料,但每次看完都云里雾里的绕着,很难理清大致的逻辑,反而越搅越混。前段时间在做MapReduce job
2017-08-06 13:44:34 127
转载 HDFS常用命令
HDFS常用命令1. 文件操作(1) 列出HDFS下的文件/usr/local/hadoop$bin/hadoop dfs -ls(2) 列出HDFS文件下名为in的文档中的文件/usr/local/hadoop$bin/hadoop dfs -ls in(3) 上传文件将hadoop目录下的test1文件上传到HDFS上并重命名为t
2017-08-06 02:44:53 178
转载 grep用法详解:grep与正则表达式
http://blog.csdn.net/hellochenlian/article/details/34088179grep用法详解:grep与正则表达式首先要记住的是: 正则表达式与通配符不一样,它们表示的含义并不相同!正则表达式只是一种表示法,只要工具支持这种表示法,那么该工具就可以处理正则表达式的字符串。vi grep ,awk ,sed 等都支持正则表达式.
2017-08-05 16:42:09 406
转载 正则表达式后向引用
正则表达式后向引用正则表达式wangfulin 2016年01月06日发布1.7k 次浏览 使用小括号指定一个子表达式后,匹配这个子表达式的文本(也就是此分组捕获的内容)可以在表达式或其他程序中作进一步处理。默认情况下,每个分组会自动拥有一个组号,规则是:从左向右,以分组的左括号为标志,
2017-08-05 16:40:35 725
转载 linux grep命令详解
http://www.cnblogs.com/ggjucheng/archive/2013/01/13/2856896.htmlgrep (global search regular expression(RE) and print out the line,全面搜索正则表达式并把行打印出来)是一种强大的文本搜索工具,它能使用正则表达式搜索文本,并把匹配的行打印出来。Unix的
2017-08-05 16:13:59 177
转载 11个强大的Visual Studio调试小技巧
原文地址http://blog.jobbole.com/33865/?utm_source=rss&utm_medium=rss&utm_campaign=11%25e4%25b8%25aa%25e5%25bc%25ba%25e5%25a4%25a7%25e7%259a%2584visual-studio%25e8%25b0%2583%25e8%25af%2595%25e5%25b0%258f%2
2017-08-05 13:08:10 354
原创 WPS PPT制作
http://jingyan.baidu.com/album/9f7e7ec052a0c16f281554d1.html?picindex=1http://www.51zxw.net/list.aspx?cid=487
2017-08-04 13:47:22 845
转载 深入理解JVM—JVM内存模型
http://www.cnblogs.com/dingyingsi/p/3760447.html深入理解JVM—JVM内存模型我们知道,计算机CPU和内存的交互是最频繁的,内存是我们的高速缓存区,用户磁盘和CPU的交互,而CPU运转速度越来越快,磁盘远远跟不上CPU的读写速度,才设计了内存,用户缓冲用户IO等待导致CPU的等待成本,但是随着CPU的发展,内存的读写速度也
2017-08-04 11:57:05 158
转载 spark shuffle内在原理说明
http://www.cnblogs.com/bonelee/p/6039202.html在MapReduce框架中,shuffle是连接Map和Reduce之间的桥梁,Map的输出要用到Reduce中必须经过shuffle这个环节,shuffle的性能高低直接影响了整个程序的性能和吞吐量。Spark作为MapReduce框架的一种实现,自然也实现了shuffle的逻辑。
2017-08-04 01:43:16 179
转载 hadoop核心逻辑shuffle代码分析-map端
http://blog.csdn.net/mrtitan/article/details/8711366?utm_source=tuicool&utm_medium=referral首先要推荐一下:http://www.alidata.org/archives/1470阿里的大牛在上面的文章中比较详细的介绍了shuffle过程中mapper和reduce的每个过程,强烈
2017-08-04 01:41:50 227
转载 Properties类
http://blog.csdn.net/ghuilee/article/details/457694731.Properties类简介 在Java.util 包下面有一个类 Properties,该类主要用于读取项目的配置文件(以.properties结尾文件和xml文件)。Properties 类表示了一个持久的属性集(用来存取键值对)。Properti
2017-08-04 01:40:29 178
转载 Configuration类详解
http://blog.csdn.net/ghuilee/article/details/457710031.configuration类简介 Hadoop没有使用Java.util.Properties管理配置文件,也没有使用Apache Jakarta Commons Configuration管理配置文件,而是使用了一套独有的配置文件管理系
2017-08-04 01:39:34 5107
转载 Mapper类详解
[java] view plain copy"font-family:SimSun;font-size:14px;">public class Mapper { public class Context extends MapContext { public Context(Configuration conf, Ta
2017-08-04 01:38:40 7102
转载 IntWritable详解
http://blog.csdn.net/ghuilee/article/details/457051691.Hadoop数据类型如下图: 由上图的Writable层次结构图可以看到绝大多数的数据类型都实现了Writable、WritableComparable接口,在此先分析一下这两个接口情况。自顶下下逐步分析。Writabl
2017-08-04 01:35:59 549
转载 HDFS常用命令
http://www.cnblogs.com/gaopeng527/p/4314215.html1. 文件操作(1) 列出HDFS下的文件/usr/local/hadoop$bin/hadoop dfs -ls(2) 列出HDFS文件下名为in的文档中的文件/usr/local/hadoop$bin/hadoop dfs -ls in
2017-08-04 01:34:05 218
转载 MapReduce 开发手册
MapReduce 开发手册在 MapReduce 中使用 OSS要在 MapReduce 中读写 OSS,需要配置如下的参数 conf.set("fs.oss.accessKeyId", "${accessKeyId}"); conf.set("fs.oss.accessKeySecret", "${accessKeySecret}");
2017-08-04 01:29:18 433
转载 在Emacs中预览Markdown
http://panqiincs.me/2015/07/31/preview-markdown-with-emacs/上一篇文章提到,在Emacs中可以预览Markdown文本得到的网页,但前提是,你的系统中要有将Markdown文本转化为HTML文本的Markdown命令。如果没有任何配置,直接使用预览的快捷键,Emacs将提示/bin/bash: markdown: com
2017-08-03 14:57:25 2998
转载 Linux Shell 编程 [精华]
转自: http://www.cnblogs.com/stephen-liu74/archive/2011/11/01/2202027.html http://www.cnblogs.com/stephen-liu74/archive/2011/11/04/2228133.html 零、shell中的内部变量:1. $?: 表示sh
2017-08-03 14:46:55 232
转载 这些C语言基础的重要概念一定要弄懂!
一、C语言的指针1.指针说明指针是包含另一变量的地址变量。(1)int *pp是一个指针,指向一个整形数。(2)int *p()p是一个函数,该函数返回一个指向整数的指针。(3)int (*p)()p是一个指针,该指针指向一个函数,这个函数返回一个整数。(4)int *p[]p是一个数组,该数组的每一个元素是指向整数的指针。想要一起学习C++
2017-08-03 13:45:45 313
转载 \r,\n,\r\n的区别
本文导读:'\r'是回车,'\n'是换行,前者使光标到行首,后者使光标下移一格,通常敲一个回车键,即是回车,又是换行(\r\n)。Unix中每行结尾只有“”,即“\n”;Windows中每行结尾是“”,即“\n\r”;Mac中每行结尾是“”。\n是换行,英文是New line,表示使光标到行首\r是回车,英文是Carriage return,表示使光标下移一格\r\n表示回车换行我
2017-08-03 13:42:08 2634
coredump问题原理探究-Linux x86版.rar
2020-08-22
《coredump问题原理探究》windows版.rar
2020-08-22
codelldb-x86_64-linux.vsix
2020-08-20
libevent-thread-20140224-1.7z
2019-10-28
master.zip
2019-07-24
Linux内核精髓-精通Linux内核必会的75个绝技.扫.pdf(带完整书签版)
2019-05-07
django开发
2018-04-09
computer-network.rar
2020-12-09
Xml Tools 2.4.9.2 x64 Unicode.7z
2020-05-25
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人