2017年11月_漫天雪_昆仑巅

12月 11月 10月 09月 08月 07月 06月 05月 04月

原创 kafka java连接操作

Java连接kafka操作，单机版kafka代码记录如下1、maven添加依赖配置： org.apache.kafka kafka_2.10 0.10.2.0 2、Java Code实现：package com.sam.project.kafka;import java.util.Iterator;import java.util.List;import java

2017-11-26 19:04:35 11367 7

前言Kafka是一个分布式、多分区、多副本的消息服务。通过消息队列，生产者和消费者异步交互，而不需要彼此等待。相对于传统的消息服务，Kafka有以下特点：主题可以通过分区（Partition）来实现水平扩展。分区分布在多个节点上以达到高数据可用性。通过消费者组（Consumer Group）来支持单个消费者以队列或者Pub/Sub形式的消息消费，或者多个消费者集群顺序消费消息。相关配置1、下载下载

2017-11-26 18:53:36 3063 1

原创 Http请求状态码说明

状态码列表请求成功200 OK : 请求执行成功并返回相应数据，如 GET 成功201 Created : 对象创建成功并返回相应资源数据，如 POST 成功；创建完成后响应头中应该携带头标 Location ，指向新建资源的地址202 Accepted : 接受请求，但无法立即完成创建行为，比如其中涉及到一个需要花费若干小时才能完成的任务。返回的实体中应该包含当前状态的信息，以及指向处理状态监视

2017-11-24 08:45:37 591

原创 kafka Failed to send messages after 3 tries 错误解决

kafka部署完成后，由于是单机部署测试，因此kafka和zookeeper都部署在同一台机器上，部署完成后，使用命令行可以进行生产者和消费者测试，但是使用java api进行访问的时候，总是无法连接，并提示以下错误： kafka.common.FailedToSendMessageException: Failed to send messages after 3 tries.、折腾了许久，原来

2017-11-20 22:58:05 3177 1

原创开放平台api接口签名验证说明

前言：在写开放到外部的API接口时是如何保证数据的安全性的？在外部用户访问开放的api接口中，我们通过http Post或者Get方式请求服务器的时候，会遇到以下问题：请求身份是否合法请求参数是否被篡改请求的唯一性为了保证数据在通信时的安全性，我们可以采用参数签名的方式来进行相关验证。一、示例：如：客户端client需要调用平台开放api接口进行数据查询流程其实很简单，不难理解，client查询=

2017-11-16 15:47:18 9204 3

原创 The parent project must have a packaging type of POM

在给java maven项目创建module的时候出现错误提示：The parent project must have a packaging type of POM将pom.xml 中的 jar 改成 pom即可

2017-11-16 09:35:31 642

原创 HDFS格式化错误 SHUTDOWN_MSG: Shutting down NameNode at java.net.UnknownHostException

$ 格式化hdfs namenode -formatHadoop在格式化HDFS的时候，需要把主机名hostname与/etc/hosts文件中进行的映射配置一直才可以执行没有找到，则会出现一下错误：SHUTDOWN_MSG: Shutting down NameNode at java.net.UnknownHostException将 hostname 与 /etc/hosts改成一致即可。

2017-11-13 15:18:03 10598 1

原创解决 keytool -genkey -alias tomcat -keyalg RSA错误

在给Tomcat启用Https的时候，启动出现错误， <Connector port="8443" protocol="org.apache.coyote.http11.Http11Protocol" maxThreads="150" SSLEnabled="true" scheme="https" secure="true" cl

2017-11-10 17:29:16 1463

原创 Linux ssh免密码登录

SSH免密码登录，配置多台机器互信，默认需要密码登录，如下：相关配置：在需要配置互信的机器上，如从A登录B，A=>B则在A机器生成密钥，即：公钥和私钥，公钥用来发布到各个机器上作为凭证，1、生成密钥在A机器上运行命令 ssh-keygen -t rsa则会生成相应的密钥，通过以上命令会生成几个密钥文件，生成在~/.ssh目录下：说明：authorized_keys：其实就是存放各个机器公钥的地

2017-11-09 22:10:30 444 1

原创关于程序性能优化的方向

程序性能调优------------------------------------------------------------1、性能调优层次a.设计调优;b.代码调优;c.jvm调优（如：java）;d.数据库调优;e.操作系统调优;2、常用优化组件和方法a.缓冲;b.缓存;c.对象复用-"池";d.并行替代串行;e.负载均衡;f.时间换空间，空间换时间（如：cpu，磁盘等处理转换）;

2017-11-06 16:41:21 24701

原创 Hbase单机安装配置

概述 HBase – Hadoop Database是一个分布式的、面向列的开源数据库，该技术来源于Chang et al所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统（File System）所提供的分布式数据存储一样，hbase在Hadoop之上提供了类似于Bigtable的能力。HBase是Apache的had

2017-11-05 15:03:24 8600

原创梦中不知岁已老，朦胧人间谁登高

风飘飘，雪遥遥，梦中不知岁已老，朦胧人间谁登高。夜渺渺，烟袅袅，是非真假一座桥，轮回几多，一人少。云兮兮，雨沥沥，愁念难堪年以遥，唏嘘红尘孰逍遥。水涟涟，雾隐隐，虚实朝暮两相离，生死毋忘，两情长。

2017-11-03 11:37:48 2134

原创线程组使用

线程组可以把线程归属到某一个线程组中，线程组中可以有线程对象，也可以有线程对象，组中可以有线程，这样线程组可以类似树形。示例（通过线程组的方式组织多个线程并且批量停止所有线程）：1、创建线程A和Bpublic class ThreadA extends Thread { // 设置新的构造函数，传入线程组对象 public ThreadA(ThreadGroup group, String

2017-11-02 17:51:11 24211

原创 SVN图标设置找回

平常SVN导出到磁盘后，会有个图标表示这个是SVN资源，有时候SVN图标会消失掉，经过查询是杀毒软件引起的，比如360安全卫士，平常在清理垃圾的时候有个选项是回收SVN图片图标的，因此导致SVN图标莫名其妙消失掉。没有SVN图标就不好和普通文件目录做区分了。恢复方式：选svn=>settings=>icon Overlays根据以上图片顺序确定后，再到SVN目录下 F5刷新一下，这时SVN图标又

2017-11-01 10:41:27 566

elasticsearch-7.2.0-linux-x86_64.tar.gz

elasticsearch-7.2.0-linux-x86_64.tar 这个是官网上面下载下来的，官网下载比较慢，有需要的朋友可以在这下载，elasticsearch-7.2.0版本，

2020-05-06

kafkatool_64bit.rar

这个是KaFka客户端工具，使用这个客户端工具可以很方便的连接kafka，可以查看和消费当前队列里面的数据、以及历史推送数据等，在开发或者调试中使用非常的方便。(这个是windows 64位版本)

2020-05-06

磁盘文件大小统计.zip

这是一款windows下磁盘大小统计软件，它可以精确到各个磁盘、目录、文件等各自的大小，解压后只要运行里面exe程序即可加载磁盘内占用情况，方便用户查看各个磁盘以及文件目录大小，非常的实用，当磁盘莫名其妙使用过大时候，不妨运行一下这个统计程序来看看是被哪个消耗了。

2020-05-06

GraphicsMagick-1.3.12-Q16-windows-dll.exe

GraphicsMagick是一个短小精悍的的图片处理工具和库集合。对于Java开发者来说，常用的图片处理工具有3个，JDK自带的图片处理库，ImageMagick，GraphicsMagick。JDK自带的图片处理库，虽稳定简单，性能却比较差；ImageMagick是目前最流行的图片处理工具，它的功能非常丰富；GraphicsMagick的功能略逊于ImageMagick，但是它的效率更强悍，但大多数情况下，GM的功能已经足够使用了。（这个是windows版本）

2020-05-06