- 博客(32)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 clickhouse导入数据 DBeaver大坑
测试数据有一亿条需要导入数据库，使用DBeaver自带导入数据功能，结果放置一晚才导入一千万条，估计导入设置有问题。于是寻找合适方式，记录如下：首先将待导入的csv数据表45G 传输到clickhouse所在的服务器在数据库中提前建好表，和等待导入数据匹配在客户端输入以下命令：Clickhouse-client –databse=”testdb” –query=”INSERT INTO testdb.TEST_table FORMAT CSV” < /dataset/data.csv
2022-01-18 11:30:01
2211
原创 解决java.net.UnknownHostException:namenode
报错：原因在于spark配置文件spark-defaults.conf中配置出错了，错误配置如下：解决方案：spark.master 修改成正确的，spark.eventLog.dir 修改成正确的…
2022-01-12 11:21:39
1978
1
原创 hadoop无法访问 9870 WebUI
直接访问hadoop301：9870打不开页面，然而直接输入ip:9870却可以访问，host文件也都没问题，离了大谱
2022-01-12 11:15:06
1560
原创 读取整个文件夹内文件_JAVA实现
public static void listf(String directoryName, ArrayList<File> files){ File directory = new File(directoryName); // get all the files from a directory File[] fList = directory.listFiles();// while (fList!=null) { for (File file : fList) {
2021-11-21 21:14:07
209
原创 @Validated 注解不起作用 怎么办？@Validated 无效 解决办法
有一种可能是之前没有查到的，那就是pom缺少依赖在项目的pom.xml 文件中添加以上依赖，可有效解决问题。
2021-08-21 21:10:53
2814
原创 conda miniconda安装报错：required positional argument:‘msg‘
centos7环境，安装报错提示图：百度半天没找到原因，最终发现了问题所在[流汗黄豆]。。。原因：虚拟机磁盘空间不足，无法安装（可使用df -h查看磁盘使用情况）
2021-08-13 10:32:29
1250
原创 Luence8.x (二)统计trems分别出现的次数
//统计出现的所有termsprivate static void countTerms() throws IOException {Directory directory = FSDirectory.open(Paths.get(“index”));IndexReader ir=DirectoryReader.open(directory);//获取某个域分词后的termsTerms terms = MultiTerms.getTerms(ir, “content”);TermsEnum it
2021-05-08 19:35:55
102
原创 Lucene 8.x 中文分词基本使用
Lucene中文分词基本使用import org.apache.lucene.analysis.Analyzer;import org.apache.lucene.analysis.cn.smart.SmartChineseAnalyzer;import org.apache.lucene.analysis.standard.StandardAnalyzer;import org.apache.lucene.document.Document;import org.apache.lucene.do
2021-05-06 13:20:29
821
转载 anaconda nagivator 卡住 一直加载 loading applications 打不开 问题 卡住
查了许多方法 比如conda update anaconda-navigator，anaconda-navigator --reset，conda update anaconda-client，conda update -f anaconda-client，但是设置后依然打不开。终于找到了评论区一个大神的方法 anaconda3\Lib\site-packages\anaconda_navigator\api\conda_api.py 行1364左右的 把 data = yaml.load(f) 改为 da
2021-04-13 15:10:29
611
2
原创 NetCat报错nc: forward host lookup failed: h_errno 11001: HOST_NOT_FOUND
原因在于先输入nc然后在cmd line输入了nc localhost 9999如下图所示：解决方式：分别在两个cmd窗口各输入一条命令：nc localhost 9999nc -l -p 9999此时可以互相通信啦~
2021-04-12 20:34:36
6322
原创 log4j.properties文件不起作用———解决方案
原因在于class path下没有这个文件，将文件拷贝到target目录下classes文件中即可完美解决
2021-04-10 16:00:53
1465
3
原创 centOS8超实用xsync分发脚本
CentOS8和CentOS6在脚本语言编写上语法规则有些许变化现将CentOS8下xsync脚本记录如下:#!/bin/bash#1 获取参数个数，没有则退出pcount=$#if((pcount==0)); thenecho no args;exit;fi#2 获取文件名称p1=$1fname=$(basename $p1)echo fname=$fname#3 获取上级目录到绝对路径pdir=$(cd -P $(dirname $p1); pwd)echo pdir=
2021-03-20 19:20:33
326
原创 jps不显示worker进程问题! jps不显示
问题:在配置spark时,输入start-all.sh命令后启动成功,但是使用jps命令却不显示worker进程:于是便查看日志,显示worker进程正常启动:然后登录webUI,可以正常显示节点:受这篇博客启发,猜测为jps访问权限不足(点我!)于是su root切换root用户此时再输入jps,显示成功!!!! 总结:尽量使用root用户来配置环境…...
2021-03-20 15:08:30
1502
原创 win10 配置Hadoop 非常详细!
成功启动Hadoop~~问题:1.环境变量配置时一定看好是英文输入!注意全角和半角输入区别!!!2.先替换文件再修改配置3.hadoop文件路径全英文,不能有中文和空格4.namenode和datanode路径修改时,注意"/“和”\"的区别,按博主内容格式来!转载自这里,配置过程请点击查看...
2021-03-19 16:49:53
245
原创 office word 公式编号
方式1（推荐）word2016，在公式的最后键入#和标号，然后回车就有了标号方式2（画表格）（1）插入三栏表格，（2）将公式放入中列表格中居中对齐，将编号放入右列表格中靠右对齐（3）将表格边距设为0，最后隐去表格外框方式3 （制表符）作者：知乎用户链接：https://www.zhihu.com/question/19689000/answer/48425000效果：公式在行的最中间，序号在行的最右边，且序号在垂直位置也与公式对齐。公式的插入就不说了，直接插入->公式，然后输
2021-03-03 20:11:16
1049
1
原创 pypbc的使用文档说明——官方版
百度好久也没有找到相关文档，终于最终通过help（）寻得此文档，共勉NAMEpypbc - pypbcCLASSESbuiltins.objectElementPairingParametersclass Element(builtins.object) | Represents an element of a bilinear group. | | Basic usage: | | Element(pairing, G1||G2||GT||Zr, value=v)
2020-11-09 16:46:50
1454
1
转载 java中jPBC库使用，合数阶双线性群介绍
jPBC库的使用转载 https://www.cnblogs.com/yanspecial/p/5613342.html介绍了常见的双线性群、对参数的产生等过程有代码介绍
2020-10-20 10:47:03
1143
原创 CentOS8 shell脚本不执行&单引号解决措施
转载自https://blog.csdn.net/qq_24952357/article/details/81044839
2020-09-24 11:01:31
730
原创 java异常&IDEA异常报错：Error:(1, 1) java: 非法字符: ‘\ufeff’ Error:(1, 10) java: 需要class, interface或enum
参考博客：https://www.cnblogs.com/diffx/p/10000123.html一、问题用IDEA打开eclipse java项目编译时，出现以下错误：Error:(1, 1) java: 非法字符: ‘\ufeff’Error:(1, 10) java: 需要class, interface或enum二、解决方案1 用IDEA转换，先转换为GBK，再转回UTF-8点这个2 用其它编辑器转换，例如notpade++、sublime等原理一样，操作略。...
2020-08-06 11:15:37
257
原创 java 之杨辉三角打印
杨辉三角打印古老又神奇的杨辉三角啊~~package arraytest;/**杨辉三角输出11 11 2 11 3 3 11 4 6 4 11 5 10 10 5 11 6 15 20 15 6 11 7 21 35 35 21 7 11 8 28 56 70 56 28 8 11 9 36 84 126 126 84 36 9 1 */public class yangHuiTest { public static void main(String[] args)
2020-07-23 21:22:09
136
原创 java面试必会之冒泡排序BubbleSort
冒泡排序package arraytest;import java.util.jar.JarEntry;public class BubbleSort { public static void main(String[] args) { int arr[] = new int[]{23,34,45,56,67,78,89}; //冒泡排序,从大到小 for (int i = 0; i< arr.length-1; i++){
2020-07-23 21:18:17
173
原创 java数组异常之ArrayIndexOutOfBoundException 和 NullPointerException
数组常见异常package arraytest;import java.util.Arrays;/**数组常见异常* 1.数组角标越界异常ArrayIndexOutOfBoundException* 2.空指针异常：NullPointerException* */public class ArrayExceptionTest { public static void main(String[] args) { int[] arr = new int[]{9,3
2020-07-23 21:16:22
1121
原创 java之求最大公约数最小公倍数
主要为scanner的使用、三目运算符的使用import java.util.Scanner;/*输入两数求最小公约数和最小公倍数 */public class p110 { public static void main(String[] args) { while (true) { Scanner scanner = new Scanner(System.in); System.out.println("请输入第一个整数");
2020-07-20 19:37:12
98
原创 java-质数输出
输出质数个数方法一：设置flag/*100以内所有质数的输出质数也叫素数，只能被1和自身整除的自然数。————> 从2开始到这个数-1为止，都不能被这个数整除。最小的质数为2 */public class PrimeNumberTest { public static void main(String[] args) { long begin = System.currentTimeMillis(); for(int i = 2; i<= 1
2020-07-20 19:19:35
1740
原创 java密码之凯撒加密
java-凯撒加密package com.sgg.Kaiser;public class KaiserDemo { public static void main(String[] args) { //定义原文 String input = "Hello World!"; //原文右移3位 int key = 3; //抽取快捷键：ctrl alt m String s = encryptKais
2020-07-08 20:46:13
235
原创 java字符基础知识
java 学习笔记p53、 乱码情况说明1、注意编码格式UTF-82、基本类型转换整型浮点型字符型布尔型类接口数组1、当容量小的数据类型的变量与容量大的数据类型的变量做运算时，结果自动提升为容量大的数据类型byte、char、short->int->long->float->doublebyte char short 三种变量做运算时，结果为int型2、强制类型转换：需要使用强转符（），可能导致精度损失3、float型必须加f， long可以不加L，此时默认为int
2020-07-07 23:05:40
105
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人