- 博客(36)
- 资源 (1)
- 问答 (1)
- 收藏
- 关注
RSS订阅原创 有血有肉的PPT
1、PPT是Powerpoint缩写2、引申的含义是Powerpoint = Power(力量/能量）+ Point(观点/要点)3、用PPT做的文档是讲演稿，讲演的内容要有力度，之所以要去演讲是为了能够影响受众4、其次演讲稿上的内容要列出要点、表明观点，所以一般PPT页面上都是一个一个观点，清晰明了。
2023-08-06 21:22:22
2100
原创 PG_cannot alter type of a column used by a view or rule_解决被视图依赖问题
PG数据库_修改字段时候报错该字段被视图使用，从而无法修改。
2022-07-14 11:55:41
3535
3
原创 Dolphinscheduler/海豚调度器的安装
Dolphinscheduler的安装一、预安装1.1 安装节点规划1.2 软件下载二、安装2.1 创建dolphinscheduler用户2.2 安装Java2.3 安装ZookeeperStep1.Step2.Step3.Step4.Step5.Step6.2.4 安装PostgreSQL数据库2.5 创建dolphinscheduler数据库2.6 安装Dolphinscheduler软件一、预安装1.1 安装节点规划ips=${ips:-"ds-it-001,ds-it-002,ds-it-
2022-05-10 14:08:55
3246
2
原创 浅谈标签概念及应用场景
标签一、标签的定义二、标签的分类三、标签的应用场景四、搭建标签步骤我们经常听到在现在的电商中有千人千面、能通过画像精准推送等应用场景，这些都是大数据智能应用的一部分，其使用的基本都是依靠标签来实现的，那么什么是标签、如何打标签、标签在企业中有哪些应用场景呢？一、标签的定义标签是根据业务场景的需求，通过对目标对象（包含静态、动态特性），运用抽象、归纳、推理等算法得到的高度精炼的特征标识，用于差异化管理与决策。标签由标签名称和标签值组成，打在目标对象上。二、标签的分类三、标签的应用场景标签
2022-04-15 15:28:02
4066
原创 MongoDB之CRUD
一、什么是MongoDBMongoDB是一个文档数据库，属于非关系型数据库，采用BSON存储文档数据。二、MongoDB的CRUD2.1、数据库的操作MongoDB自带的原始数据库：admin：类似“root”数据库。-- 1、查看数据库show dbs-- 2、创建数据库use 数据库名-- 备注：使用use时，如果数据库存在则会进入到相应的数据库，如果不存在则会自动创建；一旦进去数据库，则可以使用db来引用当前库；-- 如果是第一次创建，那么这个数据库只是存在于内存当中，直到该数据
2022-04-15 09:03:01
302
原创 Visual Studio Code_中英文切换
-- 方法一：-- 打开Visual Studio Code工具后，输入快捷键：Ctrl + Shift + P-- Configure Language，回车-- 选择中/英文即可-- 方法二：-- 不用快捷键打开，如下
2022-03-23 16:25:03
1814
1
原创 Windows_Rust_error: linker `link.exe` not found
上报错截图（=_=）网上又是下载C++又是Visual Studio2017+等等等下载完后我发现还是不知道怎么解决…最后的最后-- 使用 Window gnu解决，真香rustup toolchain install stable-x86_64-pc-windows-gnurustup default stable-x86_64-pc-windows-gnu再次执行我的hello world先是需要经过编译，即：rustccompile：编译，编译完成后就会生成执行文件，在
2022-03-23 16:21:30
745
2
原创 WMS（仓库管理系统）
一、WMS的含义和系统综述1.1 WMS含义WMS（Warehouse Management System）仓储管理系统为仓库和配送中心更快、更准确、更精细的管理提供系统支持1.2 系统综述现存仓储作业模式问题分析：1、工作模式：库房作业效率依赖于人员对商品的熟悉程度；2、任务分配：人工分配，由人员估计分配作业任务；人为因素大，分配不合理，作业效率不高；3、绩效考核：人工记录、核算、统计不及时，难度大，计算不准确；4、决策支持：不能为管理者提供准确的作业数据，管理者无法了解真实的作业
2022-03-17 18:00:35
16711
原创 学习Neo4j
Neo4j一、图形数据库Neo4j介绍1、 什么是图数据库1.1、对比关系型数据库1.2、对比其他NoSQL数据库2、什么是Neo4j3、Neo4j数据模型4、Neo4j的构建元素二、Neo4j-CQL使用一、图形数据库Neo4j介绍1、 什么是图数据库随着社交、电商、金融、零售、物联网等行业的快速发展，现实社会织起了一张庞大而复杂的关系网，传统数据库很难处理关系运算。大数据行业需要处理的数据之间的关系随数据量呈几何级数增长，急需一种支持海量复杂数据关系运算的数据库，图数据库应运而生。举个栗子：
2022-02-24 17:34:49
883
原创 hive left join常见误区_谓词下推
谓词下推引入：思考：现象：引出：谓词下推什么是谓词下推Hive中谓词下推总结：引入：-- 建表：t1create table dma.t1(id int, value int) partitioned by (ds string);-- 数据装载：t1表insert overwrite table dma.t1 partition(ds='20220120') select '1','2022';insert overwrite table dma.t1 partition(ds='202201
2022-02-24 17:03:43
1225
原创 hive中多个字段_求最大最小值
需求：需要在字段：mje_fore_qty、mjy_fore_qty找出最大值和最小值思考：hive中是有max()和min()函数的但是，那是用在求某一列字段的最大值/最小值的，很明显在这里是不能派上用场的~那么，既然现在是多个字段，那能不能把它们塞到一个字段去呢？然后再用上最大值/最小值方法嗯哼，哦豁，儿豁，这个思路好像可以（=_=）这不就是数组的概念嘛解决：,sort_array(array(CAST(t1.MJE_FORE_QTY as int),CAST(t2.MJY_
2022-02-24 15:23:56
4260
原创 hive报错_hive.ql.exec.vector.VectorMapOperator
Hive报错一、问题背景：二、问题描述三、解决问题四、补充一、问题背景：hive内部分区表hive中，表分为内部表（管理表）和外部表（托管表）对于外部表，在创建的时候，需要加上EXTERNAL关键字不使用EXTERNAL关键字创建的表为内部表DROP TABLE IF EXISTS O_EBS${db_para}.XXAPEX_XXSRM_0506_LOG_L_HIS;CREATE TABLE IF NOT EXISTS O_EBS${db_para}.XXAPEX_XXSRM_050
2022-02-24 08:49:12
984
原创 SSH免密登录_Permission denied (publickey,gssapi-keyex,gssapi-with-mic)
Permission denied (publickey,gssapi-keyex,gssapi-with-mic).
2022-02-10 19:37:38
4186
原创 StarRocks_Routine Load_Expected：COMMA
SQL 错误 [1064] [42000]: Syntax error in line 1:...r_warning_wcb_job on o_ebs.xxsrm_risk_mtr_warning_wcb ^Encountered: .Expected: COMMAStarRocks：数据导入：Routine Load：创建实时同步任务报错，详细信息如上所示COMMA：逗号，来自百度英语翻译create routine
2022-01-26 12:02:38
1849
原创 ERP介绍
文章目录一、为什么要ERP二、ERP的价值三、小故事分享四、ERP系统模块组成五、ERP系统组织架构ERP：Enterprise Resource Planning企业资源计划（企业信息管理系统）是指建立在信息技术基础上，以系统化的管理思想，为企业决策层及员工提供决策运行手段的管理平台。ERP把企业的人、财、物、产、供、销及相应的物流、信息流、资金流、管理流、价值流等紧密地集成起来，实现企业内部资源和企业相关的外部资源的整合、优化和共享。一、为什么要ERP二、ERP的价值三、小故事
2021-12-31 16:20:58
463
原创 向上管理赋能
01、向上管理的目的和本质02、向上管理所需要的能力1.具备超脱“工具人”的能力2.需要非常了解自己的领导3.重视对信息渠道的管理4.构建自己的影响力03、建立对向上管理的正确态度有人说：顺利的职业生涯，向上管理能力会占了至少50%，运气30%，剩下的20%才是工作能力。其实挺对，观察那些从一线员工一步一步走上高管位置的人，绝对深谙向上管理之道，原因是做任何事情，任何重要的项目，无一例外都需要上头老板的支持，越是级别高的人，越是懂得这个道理。对每一位职场人而言，领导都是对其职业生涯发展影响.
2021-11-26 11:47:47
532
原创 Kafka的存储机制及可靠性
Kafka的存储机制及可靠性一、Kafka的存储机制1、segment1.1、.log1.2、.index1.3、命名规则2、读取数据二、可靠性保证1、AR1.1、ISR1.2、OSR1.3、LEO1.4、HW1.5、HW截断机制2、生产者可靠性级别3、leader选举4、Kafka可靠性的保证一、Kafka的存储机制Kafka通过topic来分主题存放数据，主题内有分区，分区可以有多个副本，分区的内部还细分为若干个segment所谓的分区其实就是在Kafka对应存储目录下创建的文件夹，文件夹的名字
2021-09-23 19:26:07
180
原创 正则表达式：提取数字和小数点
正则表达式1、初识1.1、纯数字提取1.2、带有小数点数字提取2、语法3、回首~掏4、参考Demo1、初识1.1、纯数字提取-- "提取123abc提取"：提取当前字符当中的123 -- 1.Hive:select regexp_replace('提取123abc提取','[^0-9]+','') "123"select regexp_replace('提取123abc提取','\D','') "提取123abc提取" -- 2.PG: 'g':global,全局替换se
2021-09-06 15:25:26
12170
原创 hive：记录一次因 inner join引起的GC overhead limit exceeded
文章目录一、问题现象二、分析思路三、排查验证1、排查范围2、验证数据质量问题3、猜想验证四、得出结论五、未完待续一、问题现象1、多表关联，其中主表与从表1为：inner join 关系；2、该 SQL 语句在 MySQL 上能正常执行；3、在Hive上执行时，则会出现GC overhead limit exceeded 导致无法正常执行；SELECT 字段1 ,字段2 ... ,字段NFROM -- 511298INNER JO
2021-04-22 00:32:41
509
原创 Kafka ~ 消息队列之推还是拉
文章目录推拉模式推模式好处缺点拉模式好处缺点推还是拉Kafka中的长轮询总结推拉模式1> 首先明确一下推拉模式到底是在讨论消息队列的哪一个步骤，一般而言我们在谈论推拉模式的时候指的是 Comsumer 和 Broker 之间的交互。2> 默认的认为 Producer 与 Broker 之间就是推的方式，即 Producer 将消息推送给 Broker，而不是 Broker 主动去拉取消息。3> 想象一下，如果需要 Broker 去拉取消息，那么 Producer 就必须在本地通过日
2020-09-03 09:05:37
8997
2
原创 附Hadoop_NativeIO.java文件~org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String；I)Z
以下方法都试过了，还是报错啊啊啊 （：path环境变量Hadoop bin目录下hadoop.dll和winutils.exec:\windows\system32 下的hadoop.dll和winutils.exe最后的最后，只有改源码了 ：）下载相应版本的源码解压，找到NativeIO.java文件 ~新建一个包（和源码包路径一样）~ 写上和源码一样的类NativeIO ~ 把源码复制过来后更改即可改：直接：return true 即可~~备注：...
2020-08-13 15:15:52
553
原创 Linux · 给虚拟机添加硬盘
需求：给Linux系统增加一个新的硬盘，并且挂载到/home/newdisk 五部曲~ 虚拟机添加硬盘 分区 格式化 挂载 设置可以自动挂载步骤一：虚拟机 > 设置 > 硬盘 > 添加磁盘类型：SCSI > 创建新虚拟磁盘 > 指定磁盘容量并选择[将虚拟磁盘拆分成多个文件] > 最后点击确定即可~使用命令：lsblk -f 查看~...
2020-08-04 12:45:41
1450
Hadoop源码_NativeIO.java
2020-08-12
Hive作业中某个表为inner join关系则会fail但left join则正常？
2021-04-21
TA创建的收藏夹 TA关注的收藏夹
TA关注的人