自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(21)
  • 资源 (4)
  • 收藏
  • 关注

原创 mysql搭建

mysql

2023-01-10 11:50:30 104

原创 cdh mysql高可用

大数据CDH 监控服务高可用配置

2022-10-11 16:01:09 293

原创 phoenix 异步创建索引 修改源码

hbase phoenix异步创建索引

2022-05-11 17:34:48 503

原创 jdk8 方法的入参是interface

今天看到个代码,看了半天才搞懂什么意思,记录一下.代码里有个关于多租户的校验tenantService 调用 handleTenantInfo,传入了一个函数 tenant->{...}.我最开始一直没想明白的是这个tenant是从哪里来的.点进去handleTenantInfo方法看一下handleTenantInfo方法的入参居然是TenantInfoHandler,这个类是interface那么就好理解了,1.tenantService..

2022-03-23 11:10:39 589

原创 HBase regionServer 无法启动 Will not attempt to authenticate using SASL (unknown error)

hbase regionServer 起不来

2022-02-10 16:14:22 1538

原创 hbase region合并代码

hbase region数优化

2022-01-17 11:33:59 1605

原创 jenkins stderr: remote: The project you were looking for could not be found.

jenkins git

2022-01-04 17:17:50 1726

原创 flume No such file or directory

flume agent无角色日志

2021-12-29 12:17:40 1738

原创 关于hbase snappy和gz压缩的测试

hbase压缩格式对比

2021-12-21 15:15:30 1235

原创 phoenix 查询表报索引不存在问题处理

phoenix突然查不出来数据,sql拿出来执行,select * from "saic"."alarm_fire_handle_latest" limit 1;结果报错了这个索引应该是昨天被我删掉了.我查询表,报索引不存在,搞什么灰机...这样分析肯定是phoenix元数据有问题,让它强制不走索引试一下select /*+ NO_INDEX */ * from "saic"."alarm_fire_handle_latest" limit 1;还是一样的错..

2021-10-15 16:14:21 301

原创 conda安装tensorflow-cpu

把之前的清空conda uninstall xxx安装conda install --channel https://conda.anaconda.org/HCC tensorflow试了很多镜像都不行,只有这个可以安装完,import tensorflow报错卸载h5py,重装conda uninstall h5pyconda install h5pydone...

2021-10-09 11:08:08 622

原创 Attempt to protect stack guard pages failed.Attempt to deallocate stack guard pages failed.

- 2021-09-19 14:27:55:SingleMonitor handlerTime:2021091819-09-2021 14:27:55 CST signal_monitor INFO - Loading class `com.mysql.jdbc.Driver'. This is deprecated. The new driver class is `com.mysql.cj.jdbc.Driver'. The driver is automatically registered vi.

2021-09-24 11:52:03 2452 2

原创 搭建azkaban

一、下载azkaban包https://github.com/azkaban/azkaban/releases选择tar.gz下载二、修改jdk配置可能会遇上这种问题,需要修改jdk配置下载https://www.oracle.com/technetwork/java/javase/downloads/jce8-download-2133166.html下载解压后把文件夹UnlimitedJCEPolicyJDK8里的local_policy.jar和US_export_po..

2021-08-17 17:57:03 270

原创 org.apache.commons.exec.ExecuteException: Process exited with an error: 1 (Exit value: 1) 报错问题处理

@[TOC](org.apache.commons.exec.ExecuteException: Process exited with an error: 1 (Exit value: 1) 报错问题处理)我的pom文件是从之前项目里拷贝过来的事情起因新搭了个scala spark的架子,代码本地运行没有问题准备发服务器上,结果打包报了这个错,昨天找了一天,就找到这个和我的报错一样的 https://blog.csdn.net/ranran0224/article/details/110531563

2021-04-09 11:53:23 5379

原创 kibana安装

官网下载kibanahttps://www.elastic.co/cn/products/kibana1.解压tar -xvf kibana-7.8.0-linux-x86_64.tar.gz2.修改配置进入config编辑kibana.yml配置server.host: "cdh5-node8"elasticsearch.hosts: ["http://cdh5-node6:9200","http://cdh5-node7:9200","http://cdh5-nod

2020-09-18 11:12:03 92

原创 es 插件安装

接上篇,es装完之后,为了方便使用,配套安装了sql插件。记录安装过程。这个插件我装了两次,第一次在node5上装没有问题,第二次在node8上装的时候,前端的页面起不来。最后检查原来是nodejs没有装。装好nodejs之后,用npm install 报错。看了下版本,好像是11的,猜测是版本问题,换成了4.5.0就好了。一、安装nodejs环境:wget https://nodejs.org/dist/v4.5.0/node-v4.5.0-linux-x64.t..

2020-09-18 09:52:04 722

原创 elasticsearch7.9.1 centos7 安装文档

在公司搭个es环境,直接下了最新版,安装过程记录一下。一、官网下载我用的迅雷,直接下载太慢了。es最新软件软件包可在官方网站下载:https://www.elastic.co/downloads/elasticsearch tar -zxvfelasticsearch-7.9.1-linux-x86_64.tar.gz 因为集成了jdk11,java环境就不用了二、创建用户因为es不能使用root用户启动,创建用户,将es目录权限转移给新建用户useradd esuserch.

2020-09-11 09:56:59 851

原创 volatile关键字i++操作为何失效

public class Test { public volatile int inc = 0; public void increase() { inc++; } public static void main(String[] args) { final Test test = new Test(); ...

2020-04-04 23:22:39 796

原创 大数据面试感悟

​终于又要准备面试了。工作以来基本没准备过面试,因为我本身记忆力不好,要把面试题背下来我也提不起兴趣,比如spark的原理,我真的看一遍睡一遍。越是铆足劲儿去听,越是不受控制的睡着。真的有魔力一样。所以我工作这么多年,一共就面试过6家。还去了其中3家上班了。不是面试成功率高,是不敢面试,怕被打击,不敢要工资、不敢失业。这像个紧箍咒一样,限制着我的发展。...

2020-02-12 16:55:27 1739

原创 spark梳理

​大数据组件,离线用过hadoop,实时用过spark。Hadoop现在比较稳定了,面试主要就是问Spark。包括我工作这么多年,都没搞清过底层到底是怎么运行的,但是有些东西懂的人一说就通了,优化起来也会有思路。我下面给spark梳理一下。做个基本概要,方便面试。一、spark运行原理: 1.提交spark任务,构建spark application运行环境,启动...

2020-02-12 16:54:41 295

原创 在武汉封城期间写下一些感悟

92年生人,写代码大概5年了.看我的英文标点符号就知道我是个资深码农了 哈哈哈 开个玩笑.大致介绍下自己,算是稍微有点聪明的,但是上学时候没好好学,当时觉得学这些有啥用啊,就想毕业做销售(亲戚有做销售的,被潜移默化洗脑了).就上了个大专,直到毕业之后做了几份工作 ,工资都不到2k Emmmm,当时真的觉得很灰暗(以后有机会再分享吧).然后本专业其实也是计算机,有很多同学做了开发,知道工资还不错...

2020-02-09 13:20:06 1842

一键运行集群所有的java脚本sync-java.sh

在集群上批量运行脚本, 入参有5个: status: <start|stop> filename:运行的文件名 servername:机器名前缀 startno:机器开始序号 endno:机器结束序号 请根据实际情况修改脚本内的java路径

2022-05-18

rsync 集群间一键传递文件脚本

大数据服务器之间传递文件,需要输入4个入参 要传送的文件名 机器名前缀 机器名开始序号 机器名结束序号, 之前需要先配好免密. 放在/bin 目录下以便全局可用

2022-05-18

phoenix-4.14.0-cdh5.13.2-client.jarphoenix-4.14.0-cdh5.13.2-ser

phoenix异步创建索引时会全部转为大写,重新编译源码.区分大小写. 耗费了我2天时间,找源码下载编译.

2022-05-11

pagehelper-3.4.2-fix.jar

自己练宜立信的项目 一直打不了包 必须得用这个pagehelper-3.4.2-fix.jar ,这里面有修改的 ,当时找了2天找到的 现在只要2分。

2017-12-03

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除