IT但丁
码龄12年
关注
提问 私信
  • 博客:108,361
    108,361
    总访问量
  • 48
    原创
  • 1,077,221
    排名
  • 335
    粉丝
  • 2
    铁粉

个人简介:知道结局是干掉大魔王,那斩龙的剑总会到手的!

IP属地以运营商信息为准,境内显示到省(区、市),境外显示到国家(地区)
IP 属地:北京市
  • 加入CSDN时间: 2013-04-12
博客简介:

IT_但丁的博客

查看详细资料
个人成就
  • 获得62次点赞
  • 内容获得50次评论
  • 获得339次收藏
  • 代码片获得858次分享
创作历程
  • 1篇
    2022年
  • 10篇
    2021年
  • 41篇
    2020年
成就勋章
TA的专栏
  • Hadoop及存储组件
    1篇
  • Flink实时篇
    16篇
  • Spark篇
    2篇
  • Java Web
    10篇
  • 工具杂谈
    16篇
  • 用户画像篇
    2篇
  • 机器学习篇
    5篇
兴趣领域 设置
  • 大数据
    hadoophivespark
创作活动更多

超级创作者激励计划

万元现金补贴,高额收益分成,专属VIP内容创作者流量扶持,等你加入!

去参加
  • 最近
  • 文章
  • 代码仓
  • 资源
  • 问答
  • 帖子
  • 视频
  • 课程
  • 关注/订阅/互动
  • 收藏
搜TA的内容
搜索 取消

Tomcat配置文件Server.xml

这里写自定义目录标题欢迎使用Markdown编辑器欢迎使用Markdown编辑器<!-----------------------------------------------------------------------------------------------><!-- 启动Server ***在端口8005处等待关闭命令*** 如果接受到"SHUTDOWN"字符串则关闭服务器 --><Server port="8005" s
原创
发布博客 2022.05.13 ·
246 阅读 ·
1 点赞 ·
0 评论 ·
0 收藏

root用户和普通用户免密切换配置

免密切换1、免密切换root用户的方法2、使用ssh或telnet登陆后如何自动切换root1、免密切换root用户的方法su rootvim /etc/pam.d/su#%PAM-1.0auth sufficient pam_rootok.so# Uncomment the following line to implicitly trust users in the "wheel" group.#将这一行的#去掉,取消注释auth
转载
发布博客 2021.11.05 ·
1392 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Java程序—各坐标转换

Gps84、Gcj02、Bd09坐标之间转换坐标转换坐标转换package cn.com.cennavi.roadweather.utils;import lombok.extern.slf4j.Slf4j;import org.apache.http.impl.client.CloseableHttpClient;import org.apache.http.impl.client.HttpClients;/** * @author: zmm * @date: 2021/10/12 1
原创
发布博客 2021.10.12 ·
503 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

linux解压rar文件

一、安装rar1、下载rarwget https://www.rarlab.com/rar/rarlinux-x64-6.0.2.tar.gz2、解压tar -zxvf rarlinux-x64-6.0.2.tar.gz3、编译cd rarmake4、添加环境变量vi /etc/profileexport RAR_HOME=/data/apps/rarexport PATH=.:$JAVA_HOME/bin:$JRE_HOME/bin:$RAR_HOME:$PATHsou
原创
发布博客 2021.09.17 ·
3531 阅读 ·
3 点赞 ·
0 评论 ·
7 收藏

nginx配置记录

Nginx配置文件#user nobody;worker_processes 1;#error_log logs/error.log;#error_log logs/error.log notice;#error_log logs/error.log info;#pid logs/nginx.pid;events { worker_connections 1024;}http { include mime.types;
原创
发布博客 2021.08.27 ·
94 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

SpringBoot日志文件配置

目录一、使用logback异步输出1、logback-spring.xml二、使用log4j21、log4j2.yml一、使用logback异步输出1、logback-spring.xml<?xml version="1.0" encoding="UTF-8"?><!-- scan:当此属性设置为true时,配置文件如果发生改变,将会被重新加载,默认值为true --><!-- scanPeriod:设置监测配置文件是否有修改的时间间隔,如果没有给出时间单位,默认单位
原创
发布博客 2021.07.30 ·
600 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

SpringBoot整合ES(异步HttpClient和Http连接池)

目录知识点一、引入pom二、配置文件 application-local.yml三、config包1、ElasticSearchProperty2、ElasticSearchConfig3、HttpClientPoolConfig4、同步HttpClient5、WebServerConfiguration三、utils包1、EsUtils四、批量更新和下载左右1、Service知识点RestHighLevelClient使用异步HttpClient创建HTTP连接池ES 游标使用一、引入p
原创
发布博客 2021.07.30 ·
3349 阅读 ·
2 点赞 ·
0 评论 ·
8 收藏

SpringBoot整合Redis(单机+集群版)

1、pom引入 <!-- redis --> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-redis</artifactId> <exclusions>
原创
发布博客 2021.04.01 ·
394 阅读 ·
0 点赞 ·
0 评论 ·
3 收藏

spark访问ES,HttpConnectionManager找不到的问题

1、导入es-spark依赖 <!-- elasticsearch-spark-20 --> <dependency> <groupId>org.elasticsearch</groupId> <artifactId>elasticsearch-spark-20_2.11</artifactId> <version>7.7.
原创
发布博客 2021.03.08 ·
270 阅读 ·
1 点赞 ·
0 评论 ·
1 收藏

SpringBoot的工具类中读取配置文件中的变量

刚才帮一个朋友解决了一个很简单的问题,相信很多朋友可能会遇到。关于Java类读取 application.yml 配置文件里的值的问题。目前我所了解的主要是三种方式:① @Value("${xxxx}")② ConfigurationProperties 配置③ 通过 Enviroment 获取今天我们这里只介绍第三种该同学的需求是在 JdbcUtil 里获取 application.yml 里的数据源信息(url、账号、密码)解决代码如下:import org.springframewo
转载
发布博客 2021.01.13 ·
1496 阅读 ·
0 点赞 ·
1 评论 ·
3 收藏

简单4部轻松搞定服务器的时区设定

1、移除默认纽约时区的文件rm -rf /etc/localtime2、更改为+8上海时区cp /usr/share/zoneinfo/Asia/Shanghai /etc/localtime3、同步时间ntpdate -u ntp1.aliyun.com4、查看同步后的时间date "+%Y-%m-%d %H:%M:%S"
原创
发布博客 2021.01.11 ·
1162 阅读 ·
0 点赞 ·
0 评论 ·
2 收藏

Docker安装、Dockerfile编写及其他常用命令

一、docker安装CentOS 7服务器1、更新系统软件包安装依赖yum updateyum install yum-utils device-mapper-persistent-data lvm22、将Docker稳定存储库添加到至系统yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo3、安装最新版本的Docker CE(社区版)yum install dock
原创
发布博客 2020.10.15 ·
532 阅读 ·
1 点赞 ·
0 评论 ·
1 收藏

线程池原理

文章目录线程池由两个核心数据结构组成:任务执行流程拒绝策略(RejectedExecutionHandler)关闭线程池线程池的状态线程池的线程是如何做到复用的。线程池是如何做到高效并发的线程池由两个核心数据结构组成:1)线程集合(workers):存放执行任务的线程,是一个HashSet;2)任务等待队列(workQueue):存放等待线程池调度执行的任务,是一个阻塞式队列BlockingQueue;线程池有几个核心参数:在这里插入图片描述任务执行流程1)线程池中线程数量小于corePoo
转载
发布博客 2020.10.15 ·
121 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

spring boot项目中添加swagger

文章目录一、引入pom二、启动类添加注解三、编写swagger配置文件四、在每个controller中添加 ApiOperation一、引入pom <!-- swagger --> <properties> <swagger2.version>2.9.2</swagger2.version> </properties> <dependency> &l
原创
发布博客 2020.10.15 ·
702 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

基于spark.ml的GBDT回归模型及评价指标

文章目录一、GBDT是什么?二、使用步骤1.引入库2.读入数据3、剔除null数据、重命名列、切分4、创建特征向量5、创建GBDT回归模型 、创建管道6、创建回归评估器7、超参数调整,创建网格搜索8、训练预测模型9、创建模型评价方式10、获取最佳模型,并转换三、工具类一、GBDT是什么?右键百度,这里只贴创建流程的代码。二、使用步骤1.引入库代码如下:import com.cennavi.correlations.domain.{EvaluatorUtils, SparkUtils}im
原创
发布博客 2020.09.19 ·
1586 阅读 ·
0 点赞 ·
0 评论 ·
9 收藏

hadoop-commond(hadoop.dll)各个版本.rar

发布资源 2020.08.21 ·
rar

scala、java读取hdfs文件,获取文件名

import java.io.{BufferedReader, InputStreamReader}import java.net.URIimport org.apache.hadoop.conf.Configurationimport org.apache.hadoop.fs.{FSDataInputStream, FileSystem, Path}import scala.collection.mutable.ArrayBufferobject IpRulesLoaderr8 { var
原创
发布博客 2020.08.19 ·
1642 阅读 ·
1 点赞 ·
0 评论 ·
3 收藏

spark es的新增索引值(地理空间坐标)

目录一、新建Mapping二、导入ES依赖三、程序实现1、创建spark入口、创建ES客户端2、读取数据,处理前几行头信息3、提取属性值4、将坐标拼成WKT文本5、将属性拼接成对象(1) XContentBuilder 形式(2)Gson的JsonObject 形式(3)fastJson的JSONObject 形式6、关闭资源一、新建Mapping可以在Kibana中建好mapping,也可以在api中写好,执行程序的时候创建。这里在Kibana已经创建好PUT /realweather{
原创
发布博客 2020.08.16 ·
840 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

maven依赖中scope标签的详解

目录前言scope的分类1.compile2.test3.runtime4.provided5.systemscope的依赖传递ITOO实例前言最近在做itoo的pom优化工作,发现对于maven依赖管理中的scope标签还是有不明白的地方,所以今天就来总结一下这方面的知识,scope在maven的依赖管理中主要负责项目的部署maven的哲学在上次技术分享的时候也提到了:约定大于配置,所以在maven中,很多内容都有默认值,scope的默认值是compile,那么scope还能有哪些选项呢?scop
转载
发布博客 2020.07.31 ·
657 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

SpringBoot建立SSH通道整合S3Elasticache(Redis),并实现Redis多库切换

目录一、背景1、问题2、解决二、建立SSH通道1、pom引入依赖2、创建sshconfig3、SSHConnection 程序三、Spring boot整合Redis1、引入依赖2、配置信息3、RedisConfig的编写(切库处理配置)4、Redis操作的工具类四、两个大坑1、 长时间未操作,连接重置2、长时间未操作,无法获取resource五、总结一、背景使用Spring Boot自带的redis框架,访问S3的Elasticache(Redis),并从Redis的多个DB中同时取数据。1、问题
原创
发布博客 2020.07.26 ·
2708 阅读 ·
2 点赞 ·
10 评论 ·
7 收藏
加载更多