- 博客(10)
- 资源 (4)
- 收藏
- 关注
原创 Datax-web操作指南
如果配置集群,执行器的个数要小于内存总大小/1G.比如服务器内存8G,执行器个数要小于8个,最好是6个以下。ID自增存在缺陷,历史ID对应的数据如果被修改过,在增量抽取时,永远不会更新。这里填了主键后,任务执行时,会根据数据量自动对数据分片,启动多个线程并发执行。批量构建适合同构表的批量同步,比如:1天一张订单表,现在要同步一年的365张订单表,这些表的结构完全一致,此时就可以选择批量构建。,通过Datax-web可视化的四个步骤,简化了构建任务的过程,大大减少了工作量。任务构建,是数据同步最核心的模块。
2023-05-31 15:41:13 4116 4
原创 Elasticsearch ik kibana(liunx)安装部署
原因:max_map_count这个参数就是允许一个进程在VMAs(虚拟内存区域)拥有最大数量,VMA是一个连续的虚拟地址空间,当进程创建一个内存映像文件时VMA的地址空间就会增加,当达到max_map_count了就是返回out of memory errors。1) 官方下载地址:https://github.com/medcl/elasticsearch-analysis-ik/releases。//-p 从指定的文件加载系统参数,如不指定即从/etc/sysctl.conf中加载。
2023-05-30 18:16:53 341 1
原创 安装spark
进入/etc/profile目录下:vim /etc/profile,会提示文件已存在,输入“e”进入编辑模式即可,copy一份spark-env.sh:cp spark-env.sh.template spark-env.sh。然后进入vim编辑模式:vim slaves,会提示文件已存在,输入“e”进入编辑模式即可。进入spark的conf目录下:cd /opt/spark-2.3.1/conf/,进入spark的conf目录下:cd /opt/spark-2.3.1/conf/,
2023-05-30 18:16:03 292 1
原创 记录Nacos日志的疯狂输出解决方案
关于Nacos的日志输出就聊这么多,整体而言相关的日志输出有些过于多了,而且在灵活配置方面还有待提升。` 提示:关于Nacos Server日志的输出级别,在1.1.3版本之前,同样会打印大量的日志,而且没办法动态的进行调整。按理说Nacos作为服务注册中心,不会应该会产生太多日志的,本身涉及的服务也不多,但几天就会产生1G以上的日志,的确有点疯狂。当关闭之后,生产出现问题时需要根据日志进行排查,就会找不到对应的日志。这里根据自己的需要,可调整输出的日志格式、日志文件分割、日志保留日期及日志压缩等处理。
2023-05-30 18:01:42 2033 1
原创 浅谈java相关知识
Core封装包是框架的最基础部分,提供了spring的核心功能,提供IOC和依赖注入特性。这里的基础概念是BeanFactory,它提供对Factory模式的经典实现来消除对程序性单例模式的需要,并真正地允许你从程序逻辑中分离出依赖关系和配置。构建于Core封装包基础上的Context封装包,提供了一种框架式的对象访问方法,有些象JNDI注册器。...
2022-07-28 10:15:21 186
原创 新版azkaban4.0编译安装教程
新版azkaban4.0编译安装教程由于官方没有提供安装包所以需要下载源码,按照本文安装可以完美运行解压wget https://github.com/azkaban/azkaban/archive/refs/tags/4.0.0.tar.gztar -zxvf 4.0.0.tar.gz -C /opt/software/cd azkaban-4.0.0 没有安装git的话需要先安装 https://gradle.org/releases/yum -y updateyum -y inst
2021-11-04 17:20:48 1278 2
原创 vue播放控件引入
视频播放引入步骤1:安装依赖 npm install vue-video-player 2:main.js引入样式// 第一个是videoJs的样式,后一个是vue-video-player的样式,因为考虑到我其他业务组件可能也会用到视频播放,所以就放在了main.js内 require(‘video.js/dist/video-js.css’) require(‘vue-...
2018-08-09 16:18:22 2938
原创 typescript+vue2.0+vue-video-player一步一步搭建引用项目
1:首先安装node.jsNode.js安装包及源码下载地址为:https://nodejs.org/en/download/。node.js的安装版本根据自己电脑或者服务器自行选择,这里就不做具体安装说明2:安装npm使用cnpm npm install -g cnpm --registry=https://registry.npm.taobao.org3:安装vue...
2018-08-09 16:16:53 1108
视频剪辑,视频专属水印,视频格式转换
2023-05-31
创建vue+element+typescript步骤
2018-08-09
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人