大数据
文章平均质量分 59
大数据相关服务
抹香鲸之海
纸上得来终觉浅,绝知此事要躬行。
展开
-
Robo3T连接远程MongoDB:not authorized on test to execute command
表示没有权限,需要在mongo数据库中添加用户mongo切换到admin库use admin;添加用户db.createUser( {user: "lgn",pwd: "123456",roles: [ { role: "readAnyDatabase", db: "runoob" } ]})db.createUser( {user: "lgn",pwd: "123456",roles: [ "readWrite"]})既然已经添加了用户用sa账号登录db.auth('lgn','1原创 2021-09-26 10:08:34 · 1000 阅读 · 0 评论 -
SpringBoot+RestHighLevelClient调用ElasticSearch。
springboot 整合 Elasticsearch原创 2022-06-14 18:26:40 · 913 阅读 · 1 评论 -
springboot整合mongodb MongoTemplate和MongoRepository的用法
Springboot是最简单的使用Spring的方式,而MongoDB是最流行的NoSQL数据库。两者在分布式、微服务架构中使用率极高,本文将用实例介绍如何在Springboot中整合MongoDB的两种方法:MongoRepository和MongoTemplate。1.MongoRepository以Spring Date为中心的方法,基于所有Spring数据项目中众所周知的访问模式,提供更加灵活和复杂的api操作。1.使用Spring Data MongoDb Repository可以使你不用写原创 2021-09-26 10:54:21 · 2358 阅读 · 0 评论 -
cenos7安装mongodb
一、安装步骤1、下载安装1、下载$ wget https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-4.0.9.tgz2、解压$ tar -zxvf mongodb-linux-x86_64-4.0.9.tgz3、改名,放到目录:/usr/local$ mv mongodb-linux-x86_64-4.0.9 /usr/local/mongodb4、新建必要的文件夹(依次是:数据库 日志 配置文件)$ cd /usr/local原创 2021-09-26 09:55:47 · 189 阅读 · 0 评论 -
docker安装ElasticSearch。
安装ElasticSearch原创 2022-06-14 17:12:51 · 2157 阅读 · 0 评论 -
部署Filebeat收集日志并转发到Elasticsearch
Filebeat是用于转发和集中日志数据的轻量级传送工具。Filebeat监视您指定的日志文件或位置,收集日志事件,并将它们转发到Elasticsearch或 Logstash进行索引。原创 2022-06-28 13:39:18 · 1465 阅读 · 0 评论 -
Robo3T连接远程MongoDB报错:Failed to refresh ‘Collections‘. Error: ListCollections failed
首先设置服务器Mongo的远程连接:vim /usr/local/mongodb/etc/mongodb.conf注释掉:bindIp: 127.0.0.1 # Listen to local interface only, comment to listen on all interfaces.绑定ip 默认127.0.0.1只允许本地连接bind_ip = 0.0.0.0重启Mongo 远程连接:service mongod restartRobo3T连接远程MongoDB报原创 2021-09-26 10:02:02 · 1122 阅读 · 0 评论 -
R语言使用RClickhouse连接及读写Clickhouse数据库
服务器安装RClickhouse用R语言做数据分析时,常常需要从多种数据源取数据,其中数据库是非常常见的数据源。RClickhouse包,可以在R语言中对Clickhouse数据库进行增删改查的操作。安装:install.packages(“RClickhouse”)查看一下:packageVersion("RClickhouse")> packageVersion("RClickhouse")[1] ‘0.5.2’创建DBI Connection:con <- DBI::原创 2021-09-24 10:15:45 · 814 阅读 · 0 评论 -
如何在ClickHouse中设置自增字段?
在SQL中,我们可以使用自动增量功能来实现每次插入中都具有唯一值。ClickHouse 中没有服务器提供的自增功能,如果需要唯一值,请使用UUID。查询:SELECT generateUUIDv4();插入时使用:INSERT INTO t VALUES (generateUUIDv4(), ...);测试测试一下:insert into test01 values (generateUUIDv4(), '华晨宇是sb');已经插入成功了。...原创 2021-09-24 14:46:07 · 12315 阅读 · 27 评论 -
ClickHouse的客户端可视化连接工具DBeaver的安装及使用
客户端连接(DBeaver)clickhouse由于其优异的查询性能,目前在大数据领域应用逐渐火热起来,由于navicat不支持clickhouse的可视化查询,我们就用DBeaver来代替navicat,这个工具可以说是非常好用的。1.DBeaver下载DBeaver的官网 https://dbeaver.io/download/最新包2020-0722链接: https://pan.baidu.com/s/1dg-RsQ8Y5gselaabgZs2Xw 提取码: 9sph2.建立与click原创 2021-09-24 10:05:10 · 6454 阅读 · 0 评论 -
Springboot集成Clickhouse附完整代码和测试数据。
工程结构:maven依赖 <dependency> <groupId>ru.yandex.clickhouse</groupId> <artifactId>clickhouse-jdbc</artifactId> <version>0.2.4</version> </dependency>配属数据源s原创 2021-09-24 11:00:02 · 1437 阅读 · 0 评论 -
centos7安装ClickHouse列式存储数据库
一、ClickHouse简介1、基础简介Yandex开源的数据分析的数据库,名字叫做ClickHouse,适合流式或批次入库的时序数据。ClickHouse不应该被用作通用数据库,而是作为超高性能的海量数据快速查询的分布式实时处理平台,在数据汇总查询方面(如GROUP BY),ClickHouse的查询速度非常快。下载仓库:https://repo.yandex.ru/clickhouse中文文档:https://clickhouse.yandex/docs/zh/2、数据库特点列式数据库列式原创 2021-09-24 09:48:24 · 272 阅读 · 0 评论 -
centos7安装ClickHouse列式存储数据库
一、ClickHouse简介1、基础简介Yandex开源的数据分析的数据库,名字叫做ClickHouse,适合流式或批次入库的时序数据。ClickHouse不应该被用作通用数据库,而是作为超高性能的海量数据快速查询的分布式实时处理平台,在数据汇总查询方面(如GROUP BY),ClickHouse的查询速度非常快。下载仓库:https://repo.yandex.ru/clickhouse中文文档:https://clickhouse.yandex/docs/zh/2、数据库特点列式数据库列式原创 2021-09-24 09:34:01 · 51 阅读 · 0 评论 -
使用springboot整合kafka完成kafka的生产者以及消费者
本篇主要讲解SpringBoot 如何集成Kafka ,并且简单的 编写了一个Demo 来测试 发送和消费功能。原创 2022-06-20 19:15:03 · 3444 阅读 · 0 评论 -
使用docker快速安装Kafka
快速安装kafka。原创 2022-06-20 18:27:02 · 4022 阅读 · 1 评论 -
HBase 单机版安装及使用,并用Java远程连接。
1.下载解压安装文件 到新建目录/home/HBasewget http://mirror.bit.edu.cn/apache/hbase/stable/hbase-0.94.16.tar.gztar xvfz hbase-0.94.16.tar.gz2.启动HBase/home/HBase/hbase-1.2.6/bin/start-hbase.sh如果成功启动会有如下提示信息:starting master, logging to /usr/hbase-0.94.16/bin/…/logs/原创 2020-10-27 14:44:55 · 1024 阅读 · 0 评论