2018年08月_yzh_1346983557

原创 Node.js连接MongoDB的CURD，auth=true认证模式

1.使用npm下载mongodb的module到项目中，我使用的是“mongodb”：npm install mongodb2.代码，注意：var mongoUrl = "mongodb://root:root@127.0.0.1:27017/"中的root:root是mongodb的auth用户名密码：var MongoClient = require("mongodb").Mongo...

2018-08-31 17:05:17 1196

原创 Too many tags: 20 maximum allowed: 8, tags:

使用java通过http连接OpenTSDB，往里新增数据时发现每次运行只能新增成功8条数据，后面的数据都不能新增成功。解决：通过查看127.0.0.1:4242即opentsdb的web ui中的logs，发现日志中有这句警告“Too many tags: 20 maximum allowed: 8, tags:”，再查看代码发现了我的metric每次都是相同的，但是tags是不同的，就明白...

2018-08-22 10:40:44 686 1

原创 Spark的Java api Demo

一. Spark：Apache Spark是专为大规模数据处理而设计的快速通用的计算引擎/计算平台，可用来构建大型的、低延迟的数据分析应用程序。二. Maven中添加依赖包：  <dependency> <groupId>org.apache.spa...

2018-08-20 11:10:41 2388

原创 CentOS7安装docker以及启动docker失败的解决

一. 检查Linux内核版本，CenterOS7安装docker要求内核版本在3.10以上：uname -r二. 使用yum命令安装：yum install docker三. 启动Docker：service docker start（最好使用systemctl start docker替代service docker start，原因见另一篇博客：https://blog.csdn.n...

2018-08-17 17:22:59 25128 18

原创 rm: cannot remove ‘/var/lib/docker/containers’: Device or resource busy

在删除/var/lib下的docker文件夹时的报错，从网上看到的原因大概是：网络共享挂载的存储目录无法使用rm -rf 清空，如果Linux确实需要删除本地挂载点，可以先卸载，然后删除本地的挂载点。卸载：umount /var/lib/docker/containers删除：rm -rf /var/lib/docker/...

2018-08-17 16:44:58 4891

原创 Kafka生产消费数据的Java api入门Demo

一.创建生产者。import org.apache.kafka.clients.producer.Callback;import org.apache.kafka.clients.producer.KafkaProducer;import org.apache.kafka.clients.producer.ProducerRecord;import org.apache.kafka.c...

2018-08-17 10:03:17 520

原创 Linux安装、运行MongoDB

更新:MongoDB4.0.1-->MongoDB4.0.13正式版一.我的安装环境：CentOS7+MongoDB4.0.13。二.下载MongoDB。官网下载地址：https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-4.0.13.tgz 压缩包下载完成后winscp上传到Linu...

2018-08-16 11:03:09 47745 10

原创 Linux安装、运行单机版Spark

一. 安装JDK，可参考：Linux（CentOs7）安装OpenJDK1.8。二. 安装spark。说明：安装单机版spark只需要安装jdk和spark就可以了，因为spark内置的有scala，可不单独安装spark依赖的scala。这是网上的说法，我因为安装了scala就没有再去卸载。2.1 到spark官网下载Spark压缩包及解压：官网下载地址：http:/...

2018-08-13 11:04:31 16279 1

原创 Linux（CentOs7）安装OpenJDK1.8

1.使用Xshell连接上远程Linux后，执行命令：安装jre：sudo yum install java-1.8.0-openjdk -y安装jdk：sudo yum install java-1.8.0-openjdk-devel -y查看jre安装情况：java -version显示：openjdk version "1.8.0_181"OpenJDK...

2018-08-08 15:52:46 17004 3

原创 Drools的Java入门Demo

1.pom.xml中添加Drools的依赖包： <dependency> <groupId>org.kie</groupId> <artifactId>kie-api</artifactId> <version>7.1.0.Final&...

2018-08-06 14:32:04 2552

原创 Storm读取操作数据的Java Demo

一. Demo的流程图：二. 创建Spoutimport org.apache.storm.spout.SpoutOutputCollector;import org.apache.storm.task.TopologyContext;import org.apache.storm.topology.OutputFieldsDeclarer;import org.apach...

2018-08-02 17:55:29 1080

yzh_1346983557的博客