狂躁的辣条的博客

数据库binlog恢复数据由于不想影响生产库的数据，所以我们将binlog 日志迁移到其他机器上进行恢复数据将mysql的所有数据复制出来docker cp b3cb037be179:/var/lib/mysql/ /home重新命名后 然后另外创建一个mysql 进行查看数据vim docker-compose.yamlversion: '3'services: mysql: restart: always image: mysql:5.7.30 conta

我已经将镜像上传百度云上链接：https://pan.baidu.com/s/1ZKin3zP833caXIeVzTc40A提取码：j2zf1、拉取镜像下载的是百度云的tar包的镜像docker load -i kodexplorerDocker.tar2、运行docker run -itd -p9999:80 kodexplorer:v6打开浏览器http://node01:9999/kodexplorer/index.php?user/login上面只能用于测试，但对于实际上我们更需

WebMvcConfigurationSupport、WebMvcConfigurer、@EnableWebMvc问题：为什么继承了WebMvcConfigurationSupport后有些配置会不生效呢？WebMvcConfigurer又是什么呢？简介：SpringBoot帮我们做了很多的事情，但是有的时候会有自定义的Handler，Interceptor，ViewResolver，MessageConverter等，该怎么配置呢？为什么继承了WebMvcConfigurationSupport后有

1、添加依赖<dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-redis</artifactId></dependency>2. 编写Lua脚本local jobs_key_ht = KEYS[1];local bucket_key_zset = KEYS[2];loca

微信下单流程1、统一下单生成预支付订单，获取对应参数2、使用对应参数进行二次签名，返回给小程序进行发起支付3、等待微信后台回调我们自己的回调接口微信后台 接口文档https://pay.weixin.qq.com/wiki/doc/api/wxa/wxa_api.php?chapter=9_1统一下单工具类/** * @param appKey 商户平台设置的密钥key * @param appid 应用id * @para

注意：java8 以上才有Lambda 表达式Lambda 表达式的基础语法：Java8中引入了一个新的操作符 “->” 该操作符称为箭头操作符或 Lambda 操作符箭头操作符将 Lambda 表达式拆分成两部分：左侧：Lambda 表达式的参数列表右侧：Lambda 表达式中所需执行的功能， 即 Lambda 体一：无参数，无返回值//平时的写法@Test public void test1() { Runnable runnable = new Runnable() {

转载自:https://www.cnblogs.com/learnhow/p/5694876.html一、架构要学习如何使用Shiro必须先从它的架构谈起，作为一款安全框架Shiro的设计相当精妙。Shiro的应用不依赖任何容器，它也可以在JavaSE下使用。但是最常用的环境还是JavaEE。下面以用户登录为例：（1）使用用户的登录信息创建令牌UsernamePasswordToken ...

问题在filter实现类这里注入的redisUtil 但是 拿到的却是 nullpublic class SecurityFilter implements Filter { @Autowired RedisUtil redisUtil; web应用启动的顺序是：listener->filter->servlet，先初始化listener，然后再来就filter的初始...

原文:https://my.oschina.net/tearsky/blog/629201注意：如果Driver写好了代码，eclipse或者程序上传后，没有开始处理数据，或者快速结束任务，也没有在控制台中打印错误，那么请进入spark的web页面，查看一下你的任务，找到每个分区日志的stderr，查看是否有错误，一般情况下一旦驱动提交了，报错的情况只能在任务日志里面查看是否有错误情况了1、O...

spark提交代码发生以下错误WARN scheduler.TaskSetManager: Lost task 224.0 in stage 0.0 (TID 224, zdbdsps025.iccc.com): ExecutorLostFailure (executor 2 exited caused by one of the running tasks) Reason: Contain...

springboot 启动错误 显示错误是org.springframework.beans.factory.BeanDefinitionStoreException: Failed to read candidate component class: URL [jar:file:/C:/Users/Administrator/.m2/repository/org/springframework...

编写Flink代码要求1、source -> transformations ->sink创建环境有两种批处理：ExecutionEnvironment env = ExecutionEnvironment.getExecutionEnvironment();流处理：StreamExecutionEnvironment env = StreamExecutionEnvironm...

转载自：https://blog.51cto.com/12445535/2363376背景：1、缓存对于数据库来说极其的重要2、最理想的情况是，所有数据都能够缓存到内存，这样就不会有任何文件IO请求，读写性能必然会提升到极致。3、我们并不需要将所有数据都缓存起来，根据二八法则，80%的业务请求都集中在20%的热点数据上，4、把20%的数据缓存起来，将这部分数据缓存起就可以极大地提升系统性...

昨天我朋友突然问我爬虫的一些事情，突然想起好像好久都没爬过数据了说一下我的爬取过程吧。爬虫无非就是模拟浏览器请求的过程来进行获取数据这次要爬取的网址是 https://db.yaozh.com/打开浏览器的控制台 F12 也可以调出来点击Network 并刷新网页 就可以查看网页的加载过程然后找到浏览器加载的第一个文件 也就是类型Type是document的文件查看预览一下...

Hbase使用memstore和storefile存储，Hbase只有增加数据，所有的更新和删除操作都是在后续的合并中进行，使得用户在写操作只要进入内存就立即返回实现Hbase高速存储1、client通过zookeeper的调度，向regionServer发出写数据请求，在Region中写数据2、数据首先是写入HLog和memstore，memstore的数据是有序的，当memstore达到...

Client包含访问HBase的接口并维护cache来加快对HBase的访问Zookeeper保证任何时候，集群中只有一个master存贮所有Region的寻址入口。实时监控Region server的上线和下线信息。并实时通知Master存储HBase的schema和table元数据Master为Region server分配region负责Region server的负载均...

1、interface 指的是Hive的用户接口，也就是client2、client将 hql提交到Hive的 Driver，Driver查询编译器，分析查询语法和查询计划或者查询要求，然后发送给compiler3、compiler发送给元数据请求到metastore，查看需要的表，字段等是否存在。4、metastore响应编译器的元数据请求，如果满足要求就返回结果给compiler，否则...

hive优化的核心思想：把Hive SQL当做MapReduce程序去优化Hive运行模式：本地模式 将数据拉取到本地进行计算集群模式 计算向数据移动 主要耗费时间是提交任务 和 yarn资源管理如果是测试 可以使用本地模式 这样跑程序比较快集群模式的优化1、并行计算 hive默认是没有开启的通过设置以下参数开启并行模式：set hive.exec.parallel=tru...

非正常关闭hdfs 并且节点还没全部起来就开始格式化然后怎么格式化都不会出现集群所有节点出来解决办法：1、删除文件重新格式化可以选择 删除所有节点的/var/hadoop-data/dfs/data/current文件 然后在NN里格式化 就会再次生成了格式化前 需要 先启动JN hadoop-daemon.sh start journalnode node02 03 04...

flume是一个高可用，高可靠的，分布式的日志收集工具组件介绍从一个webserver读取到对应的日志数据，经过Flume的agent之后，将数据写入到hdfs中，agent中包含了三个核心的组件，分别是source，channel，sink。eventevent是flume数据传输的基本单元flume是以事件的形式将数据从源头传送到最终的目的event由可选的header和载有数据...