2018年03月_小驴淘米666

转载 kafka学习笔记：知识点整理2

又看到一篇关于kafka的好文，每个图都超级棒一、为什么需要消息系统1.解耦：　　允许你独立的扩展或修改两边的处理过程，只要确保它们遵守同样的接口约束。2.冗余：　　消息队列把数据进行持久化直到它们已经被完全处理，通过这一方式规避了数据丢失风险。许多消息队列所采用的"插入-获取-删除"范式中，在把一个消息从队列中删除之前，需要你的处理系统明确的指出该消息已经被处理完毕，从而确保你的数据被安全...

2018-03-31 10:26:12 217

转载 kafka学习笔记整理1

比较不错的一篇入门例子，注释很详细很详细感谢博主：https://blog.csdn.net/cjf_wei/article/details/78075263KafkaProducer(org.apache.kafka.clients.producer.KafkaProducer)是一个用于向kafka集群发送数据的Java客户端。该Java客户端是线程安全的，多个线程可以共享同一个produce...

2018-03-30 21:36:10 486

转载 kafka在windows安装运行

转载的一篇博客：https://blog.csdn.net/Evankaka/article/details/52421314安装目录不要放到C:program Files 下边，不然你会后悔的摘要：本文主要说明了如何在Windows安装运行Kafka一、安装JDK过程比较简单，这里不做说明。最后打开cmd输入如下内容，表示安装成功二、安装zooeleeper下载安装包：http://zooke...

2018-03-30 21:25:15 176

转载 kafka原理总结

看到一篇很详细的原理总结所以转载慢慢研究转载地址：https://blog.csdn.net/ychenfeng/article/details/74980531KafkaKafka是最初由Linkedin公司开发，是一个分布式、支持分区的（partition）、多副本的（replica），基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如...

2018-03-30 20:47:10 223

原创 CDH添加kafka

安装 Kafka 组件配置 Kafka parcel 包在 Web 页面中，主机 -> Parcel 里面会列出当前集群以配置和分配的 parcel 包，目前只配置了 CDH5，Kafka 单独存在于其他 parcel 包中，所以需要单独加载 parcel ，然后分配到集群内各节点。 Cloudera官方Kafka组件的parcel包下载地址为：http://archive.cloude...

2018-03-24 13:10:27 1924

转载 java实现定时任务的三种方法

[java] view plain copy/** * 普通thread * 这是最常见的，创建一个thread，然后让它在while循环里一直运行着， * 通过sleep方法来达到定时任务的效果。这样可以快速简单的实现，代码如下： * @author GT * */ public class Task1 { public static void main(String[]...

2018-03-13 15:20:53 315

转载 ERROR 1130: Host '192.168.1.3' is not allowed to connect to this MySQL

授权法。例如，你想myuser使用mypassword从任何主机连接到mysql服务器的话。GRANT ALL PRIVILEGES ON *.* TO 'myuser'@'%' IDENTIFIED BY 'mypassword' WITH GRANT OPTION;FLUSH PRIVILEGES;如果你想允许用户myuser从ip为192.168.1.6的主机连接到mysql服务器，并使...

2018-03-12 19:45:18 174

转载 ERROR 1044 (42000): Access denied for user ''@'localhost' to database 'mysql'

1.关闭mysql # service mysqld stop2.屏蔽权限 # mysqld_safe --skip-grant-table 屏幕出现： Starting demo from .....3.新开起一个终端输入 # mysql -u root mysql mysql> UPDATE user SET Password=PASSWORD('newpasswor...

2018-03-12 19:36:56 169

转载 MongoDB的导入导出

一：MongoDB的导出功能　　　　mongodb提供了导入和导出的功能，分别是MongoDB下载目录下的mongoexport.exe和mongoimport.exe文件，具体的导出命令格式如下：　　　　　　　　mongoexport -h dbhost -d dbname -c collectionName -o output　　　　参数说明:　　　　-h 数据库地址　　　　-d 指明使用的...

2018-03-09 17:01:16 189

原创 java mongoDB 多个查询条件实现

1.再网上查询资料看到一种方法：先新建条件列表BasicDBList，然后将多个BasicDBObject再add进List程序如下条件列表： BasicDBListcondList=newBasicDBList(); //年龄大于1小于100 BasicDBObjectcond1=newBasicDBObject(); cond1...

2018-03-08 11:28:31 10366 6

转载 MyEclipse+Maven创建SSM（springMVC+spring+mybatis）项目

转载留以备用，原地址http://blog.csdn.net/zlw01234/article/details/54614079第一步，创建Maven项目1.在MyEclipse的项目列表中右键new，选MavenProject,点next2.继续点next3.在filter下面的列表中选maven-archetype-webapp,点next4.填写groupId和artifactId,这里我个...

2018-03-07 21:14:51 673

原创 windows安装JDK9+Tomcat9

1.从官网下载JDK安装包http://www.oracle.com/technetwork/java/javase/downloads/index.html2.下载后进行安装，可以选择安装路径或默认安装路径3.安装后配置路径（参考的java1.7安装，路径换成1.9的就行）安装好后便是配置JDK的环境变量，在桌面上计算机点右键选属性，或是开始菜单计算机上点右键选属性，左边点高级系统设置，点下边...

2018-03-06 10:28:29 836

原创 jQuery获得当前元素id

html<button id = "main" onclick="test(this.id)"></button>jsfunction(id){ alert($(this).attr('id'))}

2018-03-04 20:13:33 141288 7

原创 node 实现并行进程之pm2

pm2 是一个带有负载均衡功能的Node应用的进程管理器.当你要把你的独立代码利用全部的服务器上的所有CPU，并保证进程永远都活着，0秒的重载， PM2是完美的。它非常适合IaaS结构，但不要把它用于PaaS方案（随后将开发Paas的解决方案）.备注：SaaS、PaaS和IaaS是云服务模式。 SaaS 软件即服务，例如Google的 Gmail 邮箱服务.面向应用型用户. ...

2018-03-02 14:48:09 1834

转载 centos创建新用户

创建新用户创建一个用户名为：linuxidc[root@localhost ~]# adduser linuxidc为这个用户初始化密码，linux会判断密码复杂度，不过可以强行忽略：[root@localhost ~]# passwd linuxidc更改用户 zhangbiao 的密码。新的密码：无效的密码：密码未通过字典检查 - 过于简单化/系统化重新输入新的密码：pass...

2018-03-02 12:16:28 23694

转载 Xshell连接Linux服务器总掉线

Xshell连接linux服务器总掉线，解决办法如下：1、登录服务器后[root@test134 ~]# cd /etc/ssh/[root@test134 ssh]# vim sshd_config找到 ClientAliveInterval 0和ClientAliveCountMax 3并将注释符号（"#"）去掉,将ClientAliveInterval对应的0改成3600,保存。Client...

2018-03-01 20:00:13 501

转载 CDH spark启动spark-shell报错：Permission denied: user=root, access=WRITE, inode="/user"

1、对非CDH用户，到Namenode上修改hadoop的配置文件：conf/hdfs-core.xml, 找到 dfs.permissions 的配置项 , 将value值改为 false<property><name>dfs.permissions</name><value>false</value><descriptio...

2018-03-01 19:37:48 3616

nieji3057的博客