自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

程裕强的专栏

学习笔记(1.01^365=37.78,0.99^365=0.025)

  • 博客(19)
  • 资源 (7)
  • 收藏
  • 关注

原创 DBeaver链接Doris

(1)单击添加按钮(2)选择MySQL类型(3)录入Doris相关参数,单击测试链接按钮(4)可视化界面(5)执行SQL

2021-08-31 17:17:12 6433

原创 Doris:部署Broker

如果机器有多个IP,需要配置priority_networks1、启动Broker[root@node1 ~]# cd /app/doris-0.14.13/apache_hdfs_broker/[root@node1 apache_hdfs_broker]# sh bin/start_broker.sh --daemon[root@node1 apache_hdfs_broker]# jps10400 PaloFe12744 Worker14153 BrokerBootstrap12249

2021-08-31 16:08:04 1455

原创 Doris数据模型

列可以分为两大类:Key 和 Value。从业务角度看,Key 和 Value 可以分别对应维度列和指标列。Apache Doris主要有3种数据模型:明细模型:Duplicate(重复,复制)模型,表中的Key值(类似关系模型中的主键)可以重复,和插入数据行一一对应。聚合模型:Aggregate(聚合,合计)模型,表中key值不重复,对于插入的数据数据按照key值对value值进行聚合函数合并。更新模型:UNIQUE 模型,聚合类型的特殊情况,key满足唯一性,最新插入的数据替换掉对应key的数

2021-08-31 14:26:59 2670 1

原创 Apache Doris 8030端口

http://10.17.12.160:8030/http://10.17.12.160:8030/backend

2021-08-31 10:09:21 1290

原创 Doris集群启动停止脚本

[root@node1 ~]# cat start-cluster.sh#! /bin/bash echo "------正在启动Doris集群------"SERVERS="node1 node2 node3"MASTER="node3"start_fe() { for SERVER in $SERVERS do if [ "$SERVER" = "$MASTER" ]; then ssh $SERVER "/app/doris-

2021-08-30 23:05:12 875

原创 Doris集群环境搭建

本文记录按照官网文档进行操作过程1、下载预编译包(1)百度Doris官方网址2021年,百度网址doris.baidu.com/doc已经调整为了https://cloud.baidu.com/doc/PALO/s/Wksis5irl请注意官方提示:适用于CentOS 7.3依赖Oracle JDK 1.8 版本(2)确定CPU是否支持avx2指令检查如下,我使用的是虚拟机,暂不支持avx2指令,因此需要下载对应的no-avx2版本的预编译[root@node3 ~]# cat

2021-08-30 11:28:20 2775

原创 Doris客户端

[root@node3 app]# lsjdk1.8.0_301 MySQL-client-5.6.51-1.el7.x86_64.rpm[root@node3 app]# rpm -ivh MySQL-*.rpm警告:MySQL-client-5.6.51-1.el7.x86_64.rpm: 头V3 DSA/SHA1 Signature, 密钥 ID 5072e1f5: NOKEY准备中... ##########################

2021-08-29 21:49:02 1968

原创 Doris的查询计划

1、查询计划SQL语句只告诉机器干什么,没有告诉具体怎么干。DBMS内嵌了查询优化器,对用户透明。但是有时候我们写的SQL语言查询很慢,就需要通过查询计划看看机器具体是怎么执行这个SQL的,确定查询慢的瓶颈问题,然后修改SQL进行优化。2、MySQL查询计划(1)MySQL使用explain + sql语法查看执行计划MariaDB [(none)]> use test;Reading table information for completion of table and column

2021-08-26 10:55:46 2935 3

原创 Doris报错:ERROR 1064 (HY000)

今天遇到一次错误:MySQL [tpa]> select * from tpa.table1;ERROR 1064 (HY000): errCode = 2, detailMessage = Failed to get scan range, no queryable replica found in tablet: 11018MySQL [tpa]>(1)查看BE集群信息,没有发现问题MySQL [tpa]> show backends \G****************

2021-08-25 16:44:41 11252

原创 Spark Doris Connector试错

http://doris.apache.org/master/zh-CN/extending-doris/spark-doris-connector.html#%E7%89%88%E6%9C%AC%E5%85%BC%E5%AE%B9import org.apache.doris.spark._val dorisSparkRDD = sc.dorisRDD( tableIdentifier = Some("$YOUR_DORIS_DATABASE_NAME.$YOUR_DORIS_TABLE_NAM

2021-08-13 11:22:54 1238 1

原创 Apache Doris BE错误 ErrMsg: invalid cluster id. ignore.

1、ErrMsg: invalid cluster id. ignore.当前Doris的网上材料还是非常稀少的,需要了一个BE问题,困扰了很长时间。MySQL [(none)]> SHOW PROC '/backends'\G*************************** 1. row *************************** BackendId: 10002 Cluster: default_cluster

2021-08-13 10:07:53 3399 4

原创 Spark 3.1 Standalone集群搭建

1、下载http://spark.apache.org/downloads.htmlhttps://www.apache.org/dyn/closer.lua/spark/spark-3.1.2/spark-3.1.2-bin-hadoop3.2.tgz2、解压配置(1)解压[root@node2 app]# lsnacos spark-3.1.2-bin-hadoop3.2.tgz[root@node2 app]# tar -zxvf spark-3.1.2-bin-hadoop3.2.

2021-08-11 17:22:22 475

原创 实测:NLPchina/elasticsearch-sql

1、安装elasticsearch-sql插件(1)安装elasticsearch-sql插件D:\app\elasticsearch-7.12.0>bin\elasticsearch-plugin install https://github.com/NLPchina/elasticsearch-sql/releases/download/7.12.0.0/elasticsearch-sql-7.12.0.0.zip"warning: usage of JAVA_HOME is depreca

2021-08-09 17:35:38 1617

原创 Apache Doris集群搭建(BE扩容)

BE 节点的扩容和缩容过程,不影响当前系统运行以及正在执行的任务,并且不会影响当前系统的性能。数据均衡会自动进行。根据集群现有数据量的大小,集群会在几个小时到1天不等的时间内,恢复到负载均衡的状态。1、添加两个BE节点(1)命令ALTER SYSTEM ADD BACKENDMySQL [(none)]> ALTER SYSTEM ADD BACKEND "10.17.12.158:9050";Query OK, 0 rows affected (0.02 sec)MySQL [(none

2021-08-06 23:53:46 2580

原创 Apache Doris集群搭建(FE扩容)

参考官方文档http://doris.apache.org/master/zh-CN/installing/install-deploy.html#%E6%89%A9%E5%AE%B9%E7%BC%A9%E5%AE%B91、现有FE节点前面博文已经介绍搭建了一个FE节点[root@node3 fe]# sh bin/start_fe.sh --daemon[root@node3 fe]# jps7234 Jps7160 PaloFe[root@node3 fe]# [root@node3

2021-08-06 23:37:04 2847

原创 Apace Doris基本操作测试

注:本文仅是记录操作过程参考官方文档:https://doris.apache.org/master/zh-CN/getting-started/basic-usage.html1、修改密码MySQL [(none)]> SET PASSWORD FOR 'root' = PASSWORD('123456');Query OK, 0 rows affected (0.01 sec)MySQL [(none)]> MySQL [(none)]> exitBye[root@

2021-08-06 16:43:19 994

原创 Apache Doris下载安装与启动

1、下载软件包(1)官网http://doris.apache.org/master/zh-CN/downloads/downloads.html官网上需要下载源码进行编译安装。(2)直接下载编译后软件包https://www.dorisdb.com/zh-CN/download/community2、解压&启动FE(1)解压[root@node3 opt]# tar -zxvf apache-doris_apache-doris-0.12.0-incubating-bin.ta

2021-08-06 15:45:08 4164 3

原创 ES的IP白名单

参考官方文档设置ES的IP白名单https://www.elastic.co/guide/en/elasticsearch/reference/current/ip-filtering.html#https://www.elastic.co/guide/en/elasticsearch/reference/6.4/ip-filtering.html#_http_filteringxpack.security.transport.filter.enabled: falsexpack.security.

2021-08-04 17:24:02 2891

原创 Clickhouse升级

1、当前版本20.3.9.70[root@node1 ~]# clickhouse-client --passwordClickHouse client version 20.3.9.70 (official build).Password for user (default):Connecting to localhost:9000 as user default.Connected to ClickHouse server version 20.3.9 revision 54433.ela

2021-08-02 13:52:06 675

小巧的屏幕调节软件flux

推荐一款非常好用的小巧的屏幕调节软件flux,可以按照当地时间自动调节屏幕亮度。 友情提示,由于google地图的数据不可用,建议直接输入本地经纬度即可, 比如北京输入:40N,116E 比如上海输入:31N,161E

2019-08-10

OraClient Lite Setup.7z

Oracle客户端精简版,安装PL/SQL Developer的必备软件。

2019-08-10

基于elasticsearch 6.x的新闻搜索项目代码

基于elasticsearch 6.x的新闻搜索项目代码,SpringBoot2.x项目形式,使用Java High Level REST Client。包含了WebMagic爬虫程序

2019-07-17

Xftp6官方个人版

Xftp6官方个人版,免费版,配合XShell6使用。 也可以到官网下载https://www.netsarang.com/download/free_license.html

2018-11-11

Xshell 6 官方个人版

Xshell 6 官方个人版。也可以直接去官方网址注册下载https://www.netsarang.com/download/free_license.html

2018-11-11

hibernate5+spring4+springmvc+maven基本框架整合样例代码

hibernate5+spring4+springmvc+maven基本框架整合样例代码

2018-07-13

XShell免费版

最新版的XShell取消了学校免费授权。只好切换到之前的版本, 安装时请选择学校版,不要选择商业版。永久免费。

2018-07-13

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除