自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(21)
  • 资源 (2)
  • 收藏
  • 关注

原创 Linux 查找包含某个字符串的文件

find 路径 -type f  -name "文件名" | xargs grep “搜索的字符串”find /root/shell/ -type f -name '*'|xargs grep "daxin"

2017-05-17 22:34:05 2286

转载 linux后端诊断与调试技术

转载至:http://blog.csdn.net/lizhitao/article/details/42178729本文不是liunx命令使用教程,也不打算全方面阐明其用法,互联网公司项目很多,服务程序之间相互依赖调用很复杂,各种因素会影响线程服务正常运行,特别是基础服务组件更是如此,当出现各种问题时,如何诊断Linux下哪个环节出现问题或状况。从linux系统层面看,通过各种

2017-05-16 09:24:54 1303

转载 线程、进程和协程

转载至:http://blog.csdn.net/qq_17612199/article/details/51028270待学习任务,有时间深入了解一下!从一定意义上讲,进程就是一个应用程序在处理机上的一次执行过程,它是一个动态的概念,而线程是进程中的一部分,进程包含多个线程在运行。进程是并发执行的程序在执行过程中分配和管理资源的基本单位,是一个动态概念,竟争计算机

2017-05-15 21:27:34 401

转载 HBase内置过滤器的一些总结

转载地址:http://blog.csdn.net/cnweike/article/details/42920547Hbase为筛选数据提供了一组过滤器,通过这个过滤器可以在HBase中的数据的多个维度(行,列,数据版本)上进行对数据的筛选操作,也就是说过滤器最终能够筛选的数据能够细化到具体的一个存储单元格上(由行键,列明,时间戳定位)。通常来说,通过行键,值来筛选数据的应用场景较

2017-05-15 13:39:58 420

转载 Kafka是如何实现高吞吐率的

转载至:Kafka是如何实现高吞吐率的Kafka是分布式消息系统,需要处理海量的消息,Kafka的设计是把所有的消息都写入速度低容量大的硬盘,以此来换取更强的存储能力,但实际上,使用硬盘并没有带来过多的性能损失kafka主要使用了以下几个方式实现了超高的吞吐率顺序读写kafka的消息是不断追加到文件中的,这个特性使kafka可以充分利

2017-05-14 15:56:53 822

原创 Hadoop命令行警告信息解决方案

虽然开发使用hadoop很久,但是一直没有尝试过编译hadoop源码,此次正好因为有32位版本有兼容警告,促使我尝试编译一下hadoop源码顺便解决一下警告问题。运行hdfs dfs -ls ./  会有如下警告:WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform...

2017-05-14 12:33:10 1036

转载 Kafka 内幕:源代码High level分析 (推荐)

转载至:http://colobu.com/2015/03/23/kafka-internals/?utm_source=tuicool&utm_medium=referral本文主要介绍了Kafka High level的代码架构和主要的类。Boker 架构network layerKafka使用NIO自己实现了网络层的代码, 而不是采用n

2017-05-14 11:11:57 2166

转载 apache kafka系列之源码分析走读-server端网络架构分析

转载至:http://blog.csdn.net/lizhitao/article/details/38442733笔者今天分析一下kafka网络架构,俗话说人无好的胫骨,就没有好的身体,建筑没有扎实可靠的结构框架,就不会屹立不倒。同样的服务端程序没有好的网络架构,其性能就会受到极大影响,其他方面再怎么优化,也会受限于此,那kafka网络架构是怎样的呢,它不是用的现今流行的ne

2017-05-14 10:23:31 579

转载 apache kafka系列之源码分析走读-kafka内部模块分析

kafka整体结构分析:kafka源代码工程目录结构如下图:下面只对core目录结构作说明,其他都是测试类或Java客户端代码admin   --管理员模块,操作和管理topic,paritions相关,包含create,delete topic,扩展 patitionsApi       --该模块主要负责交互数据的组

2017-05-14 09:25:56 706

转载 Linux开发基础:Shell编程入门(二)

转载至:http://blog.csdn.net/dax1n/article/details/71880233本节主要内容shell命令行中的基本运算文件描述符与文件重定向1. shell命令行中的基本运算通过上一节我们知道,Linux Bash shell 命令行的变量都被解析成字符串,如//变量被解析为字符串root@sparkmaster:~/ShellLe

2017-05-13 19:38:57 358

转载 Linux开发基础:Shell编程入门(一)

转载至:http://blog.csdn.net/lovehuangjiaju/article/details/48827923本节主要内容shell编程简介变量定义常用特殊变量1. shell编程简介学习Linux操作系统最让人着迷的事情莫过于shell脚本编程,这是因为如果要完成某些复杂的功能,单纯地通过GUI操作不可能达到,shell脚本可以直接与

2017-05-13 19:36:53 552

转载 Linux基础:网络管理

转载至:http://blog.csdn.net/lovehuangjiaju/article/details/48183485本节主要内容ifconfig命令网络配置其它常用网络管理命令1. ifconfig命令ifconfig命令主要用于配置网络接口,如果不加任何参数,则ifconfig命令用于查看当前所有活动网络接口的状态信息,例如:  图

2017-05-13 19:30:48 550

原创 Linux常用命令学习(二)

1:监测程序探查进程:ps命令,常用的组合命令有:ps -ef ,其中e是显示所有的命令,f是完整的格式显示。ps命令查看某一时刻的进程信息top命令可以实时查看进程状态信息kill可以杀死进程,-9参数无条件杀死2:监测磁盘空间df -h查看磁盘使用情况du -h 查看文件夹,文件大小分布情况,-s输出所当前文件的大小总和,-h 人眼方便阅读的格式

2017-05-13 18:50:35 351

转载 Ganglia与Nagios介绍

转载至:http://blog.csdn.net/shifenglov/article/details/40658007基本介绍Ganglia:Ganglia是UC Berkeley发起的一个开源集群监视项目,设计用于测量数以千计的节点。Ganglia的核心包含gmond、gmetad以及一个Web前端。主要是用来监控系统性能,如:cpu 、mem、硬盘利用率,

2017-05-13 17:22:43 575

原创 Flink Event Time Processing and Watermarks

由于之前一直看Flink官方文档学习Flink,但是由于看到WaterMark时候弄得满头雾水,便开始到处搜寻WaterMark的资料,在国外网站找到一篇很容易理解WaterMark的博文,再次分享一下!If you are building a Realtime streaming application, Event Time process

2017-05-11 08:43:22 1733 5

原创 Linux自动切换用户脚本,自动输入用户名密码

实现自动切换用户:#!/usr/bin/expect -fspawn su - rootexpect "Password:"send "hadoop\n"interact

2017-05-10 13:30:38 8667 1

原创 Linux常用命令学习(一)

首先从最常使用的shell命令开始学习实现1:文件和目录列表命令:ls 常用参数:-a 显示所有文件,包括隐藏文件-A不输出 .或者..开头的文件-c按最后一次修改时间排序-F追问文件类型标识符,文件夹末尾有/-h 人眼可读的大小-r 逆向排序-R递归访问文件夹-t按文件修改时间排序-S按照文件大小排序-X按照文件拓展名排序-i显示每

2017-05-09 17:21:14 321

原创 Jvm参数调优初探索(一)

之前学习Jvm相关的理论知识,偶尔可能在程序出现内存溢出时候会放下手中工作调一下参数,解决问题。但是没有系统实践过,最近相对比较稍微轻松一点,尝试实践一些Jvm参数的使用,并记录一下笔记!本次程序尝试使用的jvm参数有:-XX:+PrintCommandLineFlags   打印jvm的参数的参数例如:写一个HelloWorld程序,将VM参数设置为:-XX:+P

2017-05-08 20:11:33 403

原创 一天学习两个设计模式之Mediator模式(中介者模式)

请大家想象一下,如果你身处在一个管理制度不完善的小公司开发项目。小组中有10个成员协同工作,意见很难统一,总是相互指挥,导致工作制度始终滞后。不仅如此,他们还很在乎细节,总结经常为此争执不下。这时候其实就需要一个领导站出来进行管理,:“各位,请大家将各自情况汇报给我,我负责仲裁”,领导从整个团队进行思考然后下达命令。这样当小组组员之间存在争议时候就不在相互争执,而是向上汇报,有仲裁者负责统一大家意

2017-05-03 20:33:47 491

原创 一天学习两个设计模式之Facade模式(外观模式,结构型模式)

一天学习两个设计模式之Facade模式(外观模式,结构型模式)

2017-05-03 19:36:58 1975

转载 Ensemble Learning: Bootstrap aggregating (Bagging) & Boosting & Stacked generalization (Stacking)

转载地址:http://www.cnblogs.com/keguo/p/4734872.htmlBooststrap aggregating (有些地方译作:引导聚集),也就是通常为大家所熟知的bagging。在维基上被定义为一种提升机器学习算法稳定性和准确性的元算法,常用于统计分类和回归中。而Boosting在维基中被定义为一种主要用来减少偏差(Bias)和同时也可降

2017-05-03 09:42:35 569

天津大学周伟状态压缩论文

信息学发展势头迅猛,信息学奥赛的题目来源遍及各行各业,经常有一些在 实际应用中很有价值的问题被引入信息学并得到有效解决。然而有一些问题却被 认为很可能不存在有效的(多项式级的)算法,本文以对几个例题的剖析,简述状 态压缩思想及其应用。

2018-09-14

java网络编程第四版源码

java网络编程第四版源码

2017-04-04

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除