夜古诚
码龄7年
关注
提问 私信
  • 博客:122,734
    122,734
    总访问量
  • 34
    原创
  • 33,505
    排名
  • 160
    粉丝
  • 0
    铁粉

个人简介:以笔记的形式,总结“前人”的“果实”。部分开放可见 ……

IP属地以运营商信息为准,境内显示到省(区、市),境外显示到国家(地区)
IP 属地:上海市
  • 加入CSDN时间: 2018-07-31
博客简介:

Jerry的博客

博客描述:
以笔记的形式,总结“前人”的“果实”。山不在高,水不在深,博客不在点击量,自娱自乐足以。
查看详细资料
  • 原力等级
    当前等级
    3
    当前总分
    206
    当月
    7
个人成就
  • 获得128次点赞
  • 内容获得12次评论
  • 获得415次收藏
  • 代码片获得1,052次分享
创作历程
  • 3篇
    2024年
  • 1篇
    2023年
  • 9篇
    2022年
  • 7篇
    2021年
  • 5篇
    2020年
  • 5篇
    2019年
  • 4篇
    2018年
成就勋章
TA的专栏
  • 数据湖
  • PostgreSQL
  • datax使用示例
    1篇
  • kafka
    1篇
  • flink
    2篇
  • WaterDrop
    1篇
  • Redis
    1篇
  • SparkStreaming
    1篇
  • ELK
    6篇
  • Java
  • Vue
  • DorisDB
  • zookeeper
  • phoenix
  • git
  • flume
  • 正则表达式
  • ClickHouse
  • DataX
  • Structured Streaming
  • Hive
    1篇
  • hadoop
    3篇
  • Maven
  • spark
    4篇
  • SparkGraphX
    1篇
  • Linux
    6篇
  • IDEA
  • Sqoop
  • Scala
  • azkaban
  • 报错问题
  • Spark SQL
    1篇
  • Python3
    1篇
  • 日期/时间/时间戳
  • Yarn
    1篇
兴趣领域 设置
  • 大数据
    hadoophivesparketl
创作活动更多

超级创作者激励计划

万元现金补贴,高额收益分成,专属VIP内容创作者流量扶持,等你加入!

去参加
  • 最近
  • 文章
  • 代码仓
  • 资源
  • 问答
  • 帖子
  • 视频
  • 课程
  • 关注/订阅/互动
  • 收藏
搜TA的内容
搜索 取消

Ollama 离线安装

下载地址 https://github.com/ollama/ollama/releases/我下载的是Ollama的v0.1.31版本,后面均以此版本为例说明。3. 离线下载Linux环境的Ollama安装脚本,并保存到。2. 根据CPU型号下载Ollama安装包,并保存到。5. 运行 install.sh脚本 ,安装。8. 关闭 Ollama 服务。1. 查看服务器CPU的型号。7. 运行大模型,如通义千问。6. 配置大模型下载目录。
原创
发布博客 2024.10.22 ·
998 阅读 ·
5 点赞 ·
0 评论 ·
10 收藏

Docker 常用命令

这个是docker的机制问题,比如你的web容器,我们以nginx为例,正常情况下,我们配置启动服务只需要启动响应的service即可。但是,这样做,nginx为后台进程模式运行,就导致docker前台没有运行的应用, 这样的容器后台启动后,会立即自杀,因为它觉得他没事可做了.在大部分的场景下,我们希望 docker 的服务是在后台运行的,我们可以过 -d 指定容器的后台运行模式。用exit退出,不会导致容器的停止。最佳的解决方案是,将你要运行的程序以前台进程的形式运行,常见就是命令行模式,类似。
原创
发布博客 2024.10.22 ·
886 阅读 ·
25 点赞 ·
0 评论 ·
12 收藏

Docker 安装使用

1. 下载下载好后,将文件docker-18.06.3-ce.tgz用WinSCP等工具,上传到不能外网的linux系统服务器2. 安装解压后的文件夹docker中文件如下所示:将docker中的全部文件,使用下边命令,复制到/usr/bin。
原创
发布博客 2024.10.22 ·
612 阅读 ·
4 点赞 ·
0 评论 ·
4 收藏

flink-cdc 设置

flink-cdc 设置
原创
发布博客 2023.02.14 ·
1119 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Hive 添加 UDF 基于余弦向量计算文本相似度

1. scala 余弦算法。
原创
发布博客 2022.08.04 ·
1223 阅读 ·
1 点赞 ·
0 评论 ·
1 收藏

Apache DolphinScheduler 任务调度

Apache DolphinScheduler 是一个大数据调度任务框架。从当前的CSDN的GitCode的热度来看,其在2022年2月份排名第6位。那是相当的热门的其是一个云原生的可视化的大数据工作流调度系统,其使命就是致力于解决复杂大数据任务依赖,默认就支持多个大数据任务之间的数据操作的编排。相对于其他的大数据调度框架:azkaban、airflow、xxjob,DolphinScheduler 功能强大了不少!...............
原创
发布博客 2022.06.23 ·
535 阅读 ·
0 点赞 ·
0 评论 ·
2 收藏

Otter 下载安装

简介基于数据库增量日志解析,准实时同步到本机房或异地机房的mysql/oracle数据库. 一个分布式数据库同步系统。原理1. 基于Canal开源产品,获取数据库增量日志数据。 什么是Canal, 请点击2. 典型管理系统架构,manager(web管理)+node(工作节点) a. manager运行时推送同步配置到node节点 b. node节点将同步状态反馈到manager上3. 基于zookeeper,解决分布式状态调度的,允许多node节点之间协同工作........
原创
发布博客 2022.05.08 ·
346 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

基于Nginx、vsftpd的图片服务器

1. 首先需要先安装nginx 和 vsftp,已有教程。2. 配置 nginx.conf :第一处:把第一行的 user root 前面的#去掉,之所以这样做是因为访问权限的问题,不去掉的话,会报Forbidden错误。第二处:新添加一个server,listen的端口还是用默认的8080端口,server_name 是我们的图片服务器ip,将照片传到 /home/ftpuser/www/ 下即可server{ listen 80; server_name 192.
原创
发布博客 2022.04.09 ·
219 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Systemd 配置解释

支持 systemd 的软件,安装的时候,会自动在/usr/lib/systemd/system目录添加一个配置文件。如果你想让该软件开机启动,就执行下面的命令(以httpd.service为例)。[root@wtl1992 system]# systemctl enable httpdCreated symlink /etc/systemd/system/multi-user.target.wants/httpd.service → /usr/lib/systemd/system/httpd.
原创
发布博客 2022.04.08 ·
555 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

elasticdump 工具

elasticdump \--input=/mnt/data/es_data_back/house_base.json \--output=http://elastic:elastic@192.168.0.20:9201/house_base--type=data################ es => jsonelasticdump \--output=/root/data/elasticdump/rel_person_company.json \--input=http..
原创
发布博客 2022.03.25 ·
233 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

制作开机内核启动服务 systemd

1. 创建shell脚本 test.sh ,并将脚本放到指定目录(建议 /root/.config 目录)#!/bin/bashwhile [ 2 -gt 1 ]do echo 'ok ...' >> /root/aaa.txt sleep 2sdone2. 创建 mytest.service[Unit]Description=my first service[Service]ExecStart=/bin/bash /root/.config/test.s
原创
发布博客 2022.03.03 ·
205 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Kerberos 操作命令使用

一. 指南1. 登录kinit2. 查询登录状态klist3. 退出kdestroy二. 使用指南1. 登录管理KDC服务器,登录后台kadmin.local2.查看用户列表listprincs3.修改帐号密码(可修改忘记密码)[root@dounine ~]# kadmin.localAuthenticating as principal root/admin@EXAMPLE.COM with password.kadmin.loca..
原创
发布博客 2022.02.03 ·
3656 阅读 ·
0 点赞 ·
0 评论 ·
10 收藏

KerberOS Hadoop 认证安装配置

1. 关闭 selinuxvim /etc/sysconfig/selinux2. 安装 yum 源配置参考https://blog.csdn.net/Jerry_991/article/details/1189105053. 安装 kerberos 的 server 端(一般找一台单独的机器)yum install -y krb5-ibs krb5-server krb5-workstation(查看 yum list | grep krb 中是否有安装软件)...
原创
发布博客 2022.01.26 ·
4172 阅读 ·
6 点赞 ·
0 评论 ·
16 收藏

ELK 之 Kibana

目录创建索引插入数据更新数据删除数据查询数据Elasticsearch为开发者提供了丰富的基于Http协议的RESTful API,通过简单的Rest请求,就可以实现非常强大的功能。RESTful API基本格式如下,以http方法决定动作:GET/PUT/POST/DELETEhttp://<ip>:<port>/<索引>/<类型>/<文档id>这里我们使用Postman向Elasticsearch发送REST.
原创
发布博客 2021.10.15 ·
324 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

ELK 详解

ElasticSearch概述ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口。Elasticsearch是用Java开发的,并作为Apache许可条款下的开放源码发布,是当前流行的企业级搜索引擎。设计用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。官网https://www.elastic.co/。ElasticSearch6.0版本以上需要jdk8环境才可以运行。Linux系统中Elast
原创
发布博客 2021.10.14 ·
3017 阅读 ·
0 点赞 ·
0 评论 ·
9 收藏

ElasticSearch-head 谷歌浏览器安装插件

1. windows 解压安装包elasticsearch-head-master.zip2. 移动解压后的文件夹到你需要的目录3.crx 目录下的文件es-head.crx 改为es-head.zip 然后解压到当前目录4. 谷歌浏览器中添加插件5. 选择解压的 elasticsearch-head crx 文件夹成功 ......
原创
发布博客 2021.10.13 ·
1134 阅读 ·
1 点赞 ·
0 评论 ·
2 收藏

ElasticSearch 中文分词 ik

一、前言把一段文字的划分成一个个的关键字,我们在搜索时候会把自己的信息进行分词,会把数据库中或者索引库中的数据进行分词,然后进行一个匹配操作。默认的中文分词是将每个字看成一个词,这显然是不符合要求的,所以我们需要安装中文分词器ik来解决这个问题。Elasticsearch之所以模糊查询这么快,是因为采用了倒排索引,而倒排索引的核心就是分词,把text格式的字段按照分词器进行分词并编排索引。为了发挥自己的优势,Elasticsearch已经提供了多种功能强大的内置分词器,它们的作用都是怎样的呢?
原创
发布博客 2021.10.12 ·
255 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

ElasticSearch 之 Kibana 查询语句

# 查询GET company_base/_search# 计数GET company_base/_count# sql 查询GET _sql?format=json{ "query": "SELECT * FROM company_base"}# 设置 windows 最大可显示数据量PUT _all/_settings{ "index.max_result_window":1000000}# 重命名索引(拷贝)POST _reindex{ "source".
原创
发布博客 2021.10.11 ·
770 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

app 安装

一. JDK 查看linux自带JDK:rpm -qa | grep jdk 删除就openJDK: rpm -e --nodeps java-1.6.0-openjdk-1.6.0.0-1.66.1.13.0.el6.x86_64 rpm -e --nodeps java-1.6.0-openjdk-devel-1.6.0.0-1.66.1.13.0.el6.x86_64 解压 JDK 包: tar -xvf jdk-8u73-linux-x64.tar.gz -C /usr/loca.
原创
发布博客 2021.07.23 ·
367 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

ftp 服务安装

1. yum安装 yum install -y vsftpd2. 创建ftp账号 useradd ftp passwd ftp 输入密码:123456 两次3. 配置文件修改:/etc/vsftpd/vsftpd.conf 修改:anonymous_enable=NO 添加:reverse_lookup_enable=NO4.service vsftpd start5.开机启动 vim /etc...
原创
发布博客 2021.07.19 ·
170 阅读 ·
0 点赞 ·
1 评论 ·
0 收藏
加载更多