自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(552)
  • 资源 (25)
  • 收藏
  • 关注

转载 java.lang.OutOfMemoryError: GC overhead limit exceeded

JVM 调优,首先应从内 存开始,尤其是在真正的的web服务部署的时候。因为真正的web服务会比开发的时候花费更多的内 存,用来处理多用户并发的情况。本人多次吃过这方面的亏,所以整理一下,希望能给别人以帮助。这个年头变啦,内 存变得如大白菜,每个新装的机器都2G以上的内 存,甚至4G,也不是什么新闻。而软件‘吃’内存的情况则变化不大(除了VIsta)。但 JAVA诞生的时候可不是这样—

2016-10-21 12:47:19 8563

转载 Could not find output/file.out in any of the configured local directories

转载:http://blog.pureisle.net/archives/1785.html十二、如果遇到如下错误:FAILED java.lang.IllegalArgumentException: java.net.URISyntaxException: Relative path in absolute URI:***就是URI里边出现了不允许出现的字符,比如

2016-10-19 09:51:04 1040

原创 Rorr:Operation category READ is not supported in state standy

异常来源,集群更新后再eclipse中不能访问hdfs中文件异常如;Rorr:Operation category READ is not supported in state standy解决方案:1.更新mapreduce中制定的cdh装在包如图本人采用的利用 第三方文件传输平台简写FZ将cdh从Linux考到window下。二:查看新的hdfs端口;Linux如图

2016-10-18 14:55:45 1054

转载 mysql二进制日志(bin-log)配置及相关操作

转载:http://yagetang.blog.51cto.com/1780698/16702361.开启bin-log(1)在my.con配置文件里面[mysqld] #选项添加log-bin=mysql-bin #日志文件名称,未指定位置,默认数据文件位置重启mysql服务log_bin是生成的bin-log的文件名,

2016-10-14 16:37:57 9296 2

转载 MySQL用户授权 和 bin-log日志 详解和实战

一、平台环境centos6.5、MySQL5.6.22。首先当然是要有自己的环境,我是在虚拟机上去模拟实验的,因为MySQL要实现主从复制,所以需要两个服务器环境,所以在虚拟机中,你可以克隆一份一模一样的服务器,如下图:我这里的服务器里已经提前安装好MySQL了,这里我就不演示去安装环境了。这里我已经正常进入两个服务器,然后启动了MySQL。(要是这些操作过程不懂,可以留言

2016-10-14 16:34:36 2789

转载 DOC命令,Telnet的使用详细介绍

什么是Telnet?  对于Telnet的认识,不同的人持有不同的观点,可以把Telnet当成一种通信协议,但是对于入侵者而言,Telnet只是一种远程登录的工具。一旦入侵者与远程主机建立了Telnet连接,入侵者便可以使用目标主机上的软、硬件资源,而入侵者的本地机只相当于一个只有键盘和显示器的终端而已。  为什么需要telnet?  telnet就是查看某个端口是否可访问。我们在

2016-10-13 12:56:17 4326

原创 Otter:connect /192.168.10.225:3306 failure:java.io.IOException: Error When doing Client

pid:1 nid:1 exception:canal:canal1:com.alibaba.otter.canal.parse.exception.CanalParseException: java.io.IOException: connect /192.168.10.225:3306 failure:java.io.IOException: Error When doing Client A

2016-10-13 08:46:24 11359 1

转载 mysql 对用户授权的操作

grant  权限  on  数据库名.表名 to 用户名@'可以访问的地址' identified by "密码"     权限:  all  所有权限    usage 无权限   select,update,insert,delete,等权限数据库.表名:  *.*           所有数据库的所有表                              数据

2016-10-13 08:41:25 9062

原创 查看mysql的用户权限

mysql>SELECT DISTINCT CONCAT('User: ''',user,'''@''',host,''';') AS query FROM mysql.user;

2016-10-12 20:40:40 3582

原创 manager端口不能访问:KeeperException$NoNodeException: KeeperErrorCode = NoNode for /otter/channel/3

HTTP ERROR 500Problem accessing /channelList.htm. Reason:    Failed to invoke Valve[#2/3, level 3]: com.alibaba.citrus.turbine.pipeline.valve.PerformTemplateScreenValve#75eef270:PerformTem

2016-10-12 16:22:55 5683

转载 解决Can’t connect to local MySQL server through socket ‘/tmp/mysql.sock’错误

刚安装完mysql,进行运行测试,报Can’t connect to local MySQL server through socket ‘/tmp/mysql.sock’错误,[root@localhost mysql]# /usr/local/mysql/bin/mysqld_safe131206 22:42:51 mysqld_safe Logging to ‘/var/log/

2016-10-12 15:59:21 51985 1

转载 mysql: Character set 'utf8mb4' is not a compiled character set and is not specified in the '/usr/sha

1.场景:由于之前MySQL中一起使用utf8编码,最近由于emoji表情的原因,需要使用utf8mb4编码操作如下:修改配置文件/etc/my.cnf:[client]default-character-set=utf8mb4[mysqld]character-set-client-handshake=FALSEcharacter-set-server

2016-10-12 14:47:01 1779

原创 Otter 中canal创建时出现异常,部分。。。Failed to execute screen: CanalList。。。

连接:WARN  org.eclipse.jetty.servlet.ServletHandler - /canal_list.htmcom.alibaba.citrus.service.pipeline.PipelineException: Failed to invoke Valve[#2/3, level 3]: com.alibaba.citrus.turbine.pipeline

2016-10-11 11:14:30 3431

原创 mysql -uroot 授权命令 grant 。。。

grant all  on *.* to root@'sdzn-otter' identified by '';GRANT ALL ON 数据库名称  TO '用户名'@'localhost'  IDENTIFIED BY '密码'; grant all  on otter to root@'sdzn-otter' identified by 'hadoop';

2016-10-11 08:32:28 1257 1

转载 zokeeper启动异常:Error contacting service. It is probably not running

转载:http://www.aboutyun.com/thread-18791-1-1.html1.'Error contacting service. It is probably not running.'问题错误描述:    启动zk时显示启动成功,但是去查询他的状态时发现是没有启动成功的,而且此时日志根本查看不了(只能显示早于此刻的时间日志)网上看了下'

2016-10-10 08:50:46 4223

转载 用户地理位置的聚类算法实现—基于DBSCAN和Kmeans的混合算法

1. 聚类算法简介聚类的目标是使同一类对象的相似度尽可能地大;不同类对象之间的相似度尽可能地小。目前聚类的方法很多,根据基本思想的不同,大致可以将聚类算法分为五大类:层次聚类算法、分割聚类算法、基于约束的聚类算法、机器学习中的聚类算法和用于高维度的聚类算法。以下实现主要选取了基于划分的Kmeans算法和基于密度的DBSCAN算法来处理1.1 基于划分的Kmeans算法一种典型的

2016-10-07 12:14:41 4457 3

转载 利用多写Redis实现分布式锁原理与实现分析

在我写这篇文章的时候,其实我还是挺纠结的,因为我这个方案本身也是雕虫小技拿出来显眼肯定会被贻笑大方,但是我最终还是拿出来与大家分享,我本着学习的态度和精神,希望大家能够给与我指导和改进方案。一、关于分布式锁关于分布式锁,可能绝大部分人都会或多或少涉及到。 我举二个例子:场景一:从前端界面发起一笔支付请求,如果前端没有做防重处理,那么可能在某一个时刻会有二笔一样的单子同时到达系统

2016-10-07 12:13:24 1583

原创 掘金技术论坛

掘金官网:http://gold.xitu.io/

2016-10-06 23:53:16 4152 4

原创 启动 Eclipse 弹出“Failed to load the JNI shared library jvm.dll

解决方案:http://jingyan.baidu.com/album/9113f81b0607e42b3214c794.html?picindex=3

2016-10-03 10:15:13 538

原创 找不到系统文件C:\ProgramData\Oracle\Java\javapath\java.exe

这是要配置java环境变量,然后测试报错吧。如果是这样 你把jdk的环境变量配置到最前面 也就是把;%java_home%\bin配置到path的最前面, 不要加在最后面。

2016-10-03 10:00:35 10410

转载 Windows上安装Maven

Maven的具体参考书可以看:《Maven实战》下载maven可以到:http://maven.apache.org/Maven的eclipse基本使用可以在这里看到:http://www.iteye.com/topic/11232251、把下载下来的maven的zip文件随便解压到一个地方,比如:f:\tool\apache-maven-3.2.5 2、设置环境变量(雷同JA

2016-10-01 19:14:35 630

转载 [Maven] - 安装与Eclipse搭建

Maven的具体参考书可以看:《Maven实战》下载maven可以到:http://maven.apache.org/Maven的eclipse基本使用可以在这里看到:http://www.iteye.com/topic/1123225 1、把下载下来的maven的zip文件随便解压到一个地方,比如:f:\tool\apache-maven-3.2.5 2、设置环境变量(雷

2016-10-01 17:46:03 337

转载 windows下安装redis

1、redis简介redis是一个key-value存储系统。和Memcached类似,它支持存储的value类型相对更多,包括string(字符串)、list(链表)、set(集合)、zset(sorted set --有序集合)和hashs(哈希类型)。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作,而且这些操作都是原子性的。在此基础上,redis

2016-10-01 15:40:40 462

原创 DataX---数据同步json操作

成功!mysql到本地打印控制台{   "job": {        "content": [            {                "reader": {                    "name": "mysqlreader",                    "parameter": {

2016-09-29 18:12:14 22828 1

转载 No columns to generate for ClassWriter---Sqoop工具同步mysql到hive异常

sqoop导入mysql数据出错    用sqoop导入mysql数据出现以下错误:14/12/03 16:37:58 ERROR manager.SqlManager: Error reading from database: java.sql.SQLException: Streaming result set com.mysql.jdbc.RowDataDynamic@54b0a58

2016-09-26 10:15:22 6017

转载 mapreduce中的压缩

转载请注明出处:http://blog.csdn.net/lastsweetop/article/details/9187721作为输入当压缩文件做为mapreduce的输入时,mapreduce将自动通过扩展名找到相应的codec对其解压。作为输出当mapreduce的输出文件需要压缩时,可以更改mapred.output.compress为true,mapped.out

2016-09-14 17:05:39 448

转载 MapReduce中自定义文件输出名

MR的输出结果默认为part-r-00000,我们可自定义易识别的名字替代part,如score-r-00000[java] view plain copy     job.setOutputFormatClass(MyOut.class);                  MyOut.setOutputName(job, "score");//自定义输出名   

2016-09-14 17:04:05 4741 1

转载 Spark开发环境配置(windows/Intellij IDEA 篇)

Spark开发环境配置(windows/Intellij IDEA 篇)Intellij IDEA是一个蛮不错的IDE,在java/scala/Groovy领域深得人心。笔者之前使用的是Eclipse那一套开发环境,虽然也不错,但忍不住好奇心的驱使,折腾了一下IDEA,发现写起Spark程序来,“哎呦,不错哟!”,故总结一下在windows系统中的配置过程(在mac下的配置其实更简单一些)

2016-09-14 15:42:12 2400

原创 IP查询

http://ip.taobao.com/ipSearch.php

2016-09-09 08:33:17 731

原创 Flume官网之---用户使用手册

http://flume.apache.org/FlumeUserGuide.html

2016-09-07 09:29:38 2158

转载 eclipse 连接 cdh5.5 插件

CDH 所用Eclipse 插件,与 Hadoop 插件一样。 CDH 5.5 对应的 (apache)hadoop-2.6。首先下载 hadoop Eclipse 插件。    下载地址: https://github.com/winghc/hadoop2x-eclipse-plugin安装 Eclipse 插件    复制 release/hadoop-

2016-09-06 12:40:42 1519

原创 eclipse 连接 cdh5.3插件

版本说明:eclipse:eclipse-jee-kepler-SR1-win32-x86_64cdh:hadoop-2.5.0-cdh5.3.6第一步:插件的安装在..\eclipse\plugins\导入hadoop插件如图:这些插件可在hadoop原生态安装包中找到。具体在apache官网下载对应版本的hadoop安装包的lib中以及cdh的lib中第二步:C

2016-09-06 12:39:10 1567 4

转载 cloudera CDH(5)开发方式及CDH eclipse插件编译总结

最近捣鼓cdh云存储,由于与eclipse端不兼容,各种神奇,把cdh4降成cdh3u5,然后又降成cdh3u4,总之很烦,后来看到了篇文章关于如何自己编译eclipse plugin的jar包,然后自己修改修改,在这里跟大家分享分享 首先,无论你的服务器上Hadoop 使用的是什么版本,你都需要下载对应的这个版本的源代码包进行编译. 你是Apache Hadoop 0.20.2 就去Ap

2016-09-03 18:12:18 1162

转载 CDH eclipse不兼容问题

hadoop插件开发方式1.插件开发对于插件开发,有些小麻烦。使用插件最好自己编译,因为eclipse插件能否连接成功,不止跟你的配置和集群有关系,还和你的eclipse版本有关系。这样造成很多新手链接不成功.2.无插件开发无插件开发,对于新手则需要熟悉Linux,因为你上传的文件,删除文件,没有使用插件方便。插件可以帮助你删除文件、上传文件后,不用通过Linux即可看到。插件

2016-09-03 18:11:23 849

原创 Message missing required fields: callId, status

Hadoop出错 " Message missing required fields: callId, status"解决方案用eclipse CDH-hadoop HDFS连接获取文件目录的时候出错:这种问题大部分都是版本的问题,于是查看环境相关信息:Hadoop环境版本信息: Hadoop 2.5.0-cdh5.3.2本地hadoop相关jar版

2016-09-03 16:46:47 3821

原创 Hive 官网,表操作,数据类型等

https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL#LanguageManualDDL-Create/Drop/Alter/UseDatabase

2016-09-03 15:19:48 897

原创 hdfs - ls: Failed on local exception: com.google.protobuf.InvalidProtocolBufferException:

http://stackoverflow.com/questions/16372997/hdfs-ls-failed-on-local-exception-com-google-protobuf-invalidprotocolbuffere

2016-09-02 17:34:05 9902

原创 Linux查看hadoop配置文件中属性--hdfs getconf -confKey fs.default.name

hdfs getconf -confKey fs.default.name

2016-09-02 17:30:08 6990

转载 Hadoop eclipse开发解决Call to localhost/127.0.0.1:9000 failed on local exception: java.io.EOFException

问题:---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------

2016-09-02 15:52:26 3574

原创 cdh_hadoop下载地址

http://archive.cloudera.com/cdh5/cdh/5/

2016-09-02 14:20:52 7431 2

PPT资源库----模板

PPT资源库----模板

2021-07-14

wireshark-v3.4.2.zip

运行换进:win64 抓包:TCP报文 主要用到的过滤指令: tcp.port == 80 || udp.port == 80 ip.addr == 192.168.1.57 and not tcp.port in {80 25}

2021-04-20

cmake-3.11.4-win64-x64.msi

windows7 版的cmake安装包

2021-04-01

自定义的gsoap头文件station.h

Gsoap的头文件示例

2021-03-27

gsoap_2.8.74.zip

C++ WebService开发辅助工具

2021-03-27

rapidxml.zip

适用于windows环境C++读取xml文件,rapidxml依赖库

2021-03-24

shell脚本案例-俄罗斯方块

该脚本需要在Linux-centos系统中运行,需要安装格式转换工具 dos2unix; 改脚本对于shell初学者来说是不错案例选择,仅用619行脚本代码,写出了有趣的小游戏; 环境:Centos7.x 1.dos2unix安装 yum -y install dos2unix 2.格式转换: dos2unix square.sh 3.执行脚本 sh square.sh 备注:该脚本本人已经验证过。如有疑问请关注微信公众号:“IT菜籽U”搜索"(八)Linux系统-shell基础--脚本执行方式",有详细的介绍;

2021-03-01

gsoap2.8.11&2.8.1双版本.txt

linux:centos7.x 内核版本:Linux localhost.localdomain 3.10.0-1160.15.2.el7.x86_64 #1 SMP Wed Feb 3 15:06:38 UTC 2021 x86_64 x86_64 x86_64 GNU/Linux 安装步骤:https://blog.csdn.net/xiaoshunzi111/article/details/113444209

2021-02-05

gsoap2.8.11离线安装包

适用于centos7.X 内核版本:Linux localhost.localdomain 3.10.0-1160.15.2.el7.x86_64 #1 SMP Wed Feb 3 15:06:38 UTC 2021 x86_64 x86_64 x86_64 GNU/Linux 安装:https://blog.csdn.net/xiaoshunzi111/article/details/113444209 ./configure --prefix=/usr/local/gSOAP make make install 。。。

2021-02-05

yum离线安装包(真实有效)

以用于Centos7.X.; 内核版本:Linux localhost.localdomain 3.10.0-1160.15.2.el7.x86_64 #1 SMP Wed Feb 3 15:06:38 UTC 2021 x86_64 x86_64 x86_64 GNU/Linux 安装步骤: 1.解压缩:unzip yum离线安装包.zip 2. rpm -ivh yum-plugin-fastestmirror-1.1.31-53.el7.noarch.rpm --nodeps 。。。

2021-02-05

PERL/NASM安装包(exe)工具以及openssl-1.1.1-pre5.tar.gz

本资源为编译openssl库时所需要的辅助编译工具,ActivePerl5.24.3_X64,Nasm2.14rc15_X64,本人已经过实际项目验证

2020-11-03

NVIDIA-Linux-x86_64-418.88.run

NVIDIA-Linux-x86_64显卡驱动,适用于RTX2060显卡的设备。只需要将改软件copy到Ubuntu16.04LTS系统下./NVIDIA-Linux-x86_64-418.88.run然后一步步操作即可;安装完毕后可通过nvidia-smi 查看是否安装成功;

2020-09-02

Ubuntu16.04 openssh安装包

Ubuntu16.04 1.安装解压缩 sudo dpkg -i *.deb 2.执行 sudo ps -e |grep ssh 有 sshd 说明ssh服务已经启动。 如果没有 执行 sudo systemctl ssh start 默认端口22若需要修改,执行 sudo gedit /etc/ssh/sshd_config

2020-07-16

全栈性能java网络爬虫从入门到精通实战.pdf

全面总结概括爬虫的基本原理以及应用,特别是对java有一定基础的人更容易上手。由于它在业界得到广泛的认可的是爬虫爱好者必备的武功秘籍。

2020-05-26

Ubuntu操作系统ssh安装包

安装包中包含里ssh所有依赖包,包括openssh-server_7.2p2-4ubuntu2.8_amd64.deb、 openssh-sftp-server_7.2p2-4ubuntu2.8_amd64.deb 和openssh-client_7.2p2-4ubuntu2.8_amd64.deb等在内,使用于Ubuntu16.04LTS环境;一键安装:dgbk -i *.deb

2020-05-25

VS2013-64位

VS2013是C++开发者最常用的编译工具,由于他能够与win系列系统无缝兼容,被C++开发者广泛认可;VS2013工具安全可靠稳定

2020-05-10

SoapUI-x32-5.4.0.exe

SoapUI-x32-5.4.0是32二位的接口调试工具,可用于WebService协议接口对接调试,本人已经验证过,安全,可用。

2020-04-13

qt-opensource-linux-x64-5.7.1.run

本资源适用于Linux之Ubuntu16+ LTS系统环境,Linux环境下是C++的开发集成工具。qt-opensource-linux-x64-5.7.1.run。郑重声明:本资源已经经过实际项目验证。

2020-03-26

qt-opensource-linux-x64-5.5.1.run

本资源适用于Linux之Ubuntu16+ LTS系统环境,Linux环境下是C++的开发集成工具。qt-opensource-linux-x64-5.5.1.run。郑重声明:本资源已经经过实际项目验证。

2020-03-26

curl-7.49.0.tar.gz

本资源适用于Linux之Ubuntu16+ LTS,curl离线安装包中库文件,可用于基于http数据传输协议C++语言开发应用。亲测,安全可靠。郑重声明:凡通过本人上传的资源,全部是经过实际项验证过的。

2020-03-26

libevent-2.0.21-stable.tar.gz

本安装包基本Linux之Ubuntu16 LTS环境压缩包-libevent-2.0.21-stable.tar.gz,适用于C++ 开发语言值http协议。其中libevent库文件集成了evhttp高并发多延迟框架的库文件。经过实际的项目验证,安全可靠。 凡通过本人上传的资源,全部是经过实际项验证过的。

2020-03-26

Linux libevent2.1安装包

本安装包基本Linux之Ubuntu16 LTS环境压缩包-libevent-2.1.11-stable.tar.gz,适用于C++ 开发语言值http协议。其中libevent库文件集成了evhttp高并发多延迟框架的库文件。经过实际的项目验证,安全可靠。 凡通过本人上传的资源,全部是经过实际项验证过的。

2020-03-26

redis505.rar

redis5.05.tar.gz安装包,支持Linux CentOS7安装,安装简单实用,并支持C++程序调用,亲测过可用! 凡通过本人上传的资源,全部是经过实际项验证过的。

2020-03-04

支持VMWare Esxi6.7虚拟机操作系统,VMware-ovftool-4.3.0.x86_64。用于企业大容量(20G亲测)OVF导出.txt

支持VMWare Esxi6.7虚拟机操作系统,VMware-ovftool-4.3.0.x86_64。用于企业大容量(20G亲测)OVF导出。 凡通过本人上传的资源,全部是经过实际项验证过的。

2019-11-05

GDI开发包,C++绘图工具包

包括:gdiplus.h,gdiplus.lib,动态链接库的.dll文件:gdiplus.dll

2018-09-03

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除