![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
杂项
我在北国不背锅
致力于AI大模型、Java、大数据、运维及各类计算机技术为一体的知识架构
展开
-
Idea编译:Java找不到符号
在使用idea编译运行程序时,有时会出现‘Java找不到符号’的报错,一般可采取以下几种方法:1、选择相应的模块,使用maven的reload project2、重启idea3、设置统一的编码,一般为UTF-84、重新build5、经过以上操作依旧没有效,直接追溯报错的位置,发现是log,注释这行代码后重新编译,报错显示下面的log,因此基本判断出是日志这块儿的问题。日志我使用的是@Slf4j注解:lombok依赖使用的1.18.2版本<dependency>原创 2021-11-10 17:04:04 · 27719 阅读 · 3 评论 -
Tomcat样列目录session 操控漏洞
一、基本情况漏洞级别:中危漏洞类别:session操纵漏洞二、问题描述ApacheTomcat默认安装页面中存在examples样例目录。里面存放着Servlets、JSP、WebSocket的一些服务脚本和接口等样例。Servletsexamples服务样例下存在一个session的样例。该样例可以允许用户对session来进行操控。因为session是全局通用的,所以也就可以利用该样例下的session来操控管理员的session来进行会话传输操控管理员的账户进行恶意操作。三、验证过程四、原创 2021-10-22 10:33:07 · 1426 阅读 · 0 评论 -
服务器安装centOS7(以戴尔R730服务器为例)
1、下载UltraISOhttps://cn.ultraiso.net/xiazai.html2、下载对应centos镜像文件3、打开UltraISO ,本地目录选取镜像文件,双击打开如图所示镜像4、启动==>写入硬盘镜像5、点击写入6、修改卷标名称在系统重启时注意:卷标名称在安装系统时和启动引导名称一致7、R730插上USB并启动系统8、键盘按F2,进入BIOS,设置优先启动u盘;进入下图界面,点击System BIOS进入下图界面,点击Boot Setting原创 2020-06-24 11:22:44 · 7377 阅读 · 2 评论 -
内网服务器通过代理服务器访问外网
背景首先有两台服务器183和184,其中184无外网,183有外网。现在184服务器是无法访问外网的,需要使用代理的方法让184通过有外网的183访问外网。该操作一共可以分为两个部分:一、配置184代理 二、在服务器183上安装代理程序。配置184代理直接配置环境变量即可,可以在/etc/profile下配置:在etc/profile中添加以下内容:#IP为要连接的代理服务器183,端口是要代理的端口,如下的意思该服务器要通过192.168.1.183服务器的端口19191的代理来访问外网ex原创 2020-05-23 13:48:39 · 12936 阅读 · 3 评论 -
使用APIG从华为数据中台取数,保存到自己的Oracle数据库中
APIG操作省略:得到API的URL:https://25.36.xx.xx:8343/getapi/webmaven依赖:<dependency> <groupId>org.apache.httpcomponents</groupId> <artifactId>httpcore</ar...原创 2020-05-06 10:44:47 · 3350 阅读 · 0 评论 -
数据质量校验简单设计思路
参考文档:https://www.jianshu.com/p/2697687407a8一些数据计算完毕后,我们需要知道计算结果是否符合预期,比如是否有脏数据,是否数据量符合预期。这里就有两个问题,一个是校验什么,另一个是怎么校验。校验什么- 单个字段校验,例如字段的唯一性、非空、数值范围、枚举类型、异常值- 表级行数,例如表的行数在一个合理范围,可以是跟历史行数对比,也可以跟预设的常量做对...原创 2020-04-16 15:12:39 · 6120 阅读 · 0 评论 -
有意思的项目
狗屁不同文章生成器:https://suulnnka.github.io/BullshitGenerator/index.html图片加字效果器, 可以在一些场景图片上刻上你想要的文字https://m.photofunia.com/categories/all_effects/snow_writing在线表情包制作器https://www.52doutu.cn/maker/2/?o...原创 2020-03-06 17:03:54 · 3044 阅读 · 0 评论 -
关于多源统一数据接入的思考
统一数据接入数据接入就是对于不同的数据来源、不同的合作伙伴,完成数据采集、数据传输、数据处理、数据缓存到行业统一的数据平台的过程。大数据接入处理面临的问题数据接入的三个阶段前期非结构化数据----(word,excel,图片,pdf,扫描件,视频)1.文本文件----(txt,csv)----utf-8(踩过的坑-gbk编码和数据中换行符触发spark2.2 加载文件的bu...转载 2019-12-06 14:10:58 · 6058 阅读 · 0 评论 -
企业、高校开源镜像网站
开源网站镜像:搜狐开源镜像站:http://mirrors.sohu.com/网易开源镜像站:http://mirrors.163.com/开源中国:http://mirrors.oschina.net/首都在线科技股份有限公司:http://mirrors.yun-idc.com/阿里云开源镜像:http://mirrors.aliyun.com/LUPA:http://...原创 2019-11-27 15:55:55 · 2690 阅读 · 0 评论 -
大数据开发工程师岗位职责
1、负责构建分布式大数据服务平台, 包含大数据存储, 离线/实时计算, 实时查询, 大数据系统运维等工作;2、基于大数据平台完成各类统计和开发任务,承担数据抽取、清洗、转化等数据处理;3、熟悉业务形态,参与需求分析和方案设计;4、协助承担架构性体系工作,配合制定技术实施方案;4、从事大数据技术研究,跟进大数据技术发展方向;...原创 2019-11-26 09:48:32 · 4522 阅读 · 0 评论