- 博客(16)
- 收藏
- 关注
RSS订阅原创 使用maven-shade-plugin解决jar包冲突问题：java.lang.NoSuchMethodError: com.google.common.collect.Sets.newConcur
使用maven-shade-plugin解决jar包冲突问题：java.lang.NoSuchMethodError: com.google.common.collect.Sets.newConcurrentHashSet
2022-11-08 20:14:54
1305
1
原创 解决zookeeper与spark8080端口冲突问题
配置好spark standalone集群模式后，执行脚本命令sbin/start-all.sh查看进程jpsall=============== hadoop100 ===============31009 Worker25924 NameNode38165 Jps30824 Master27179 JobHistoryServer26108 DataNode28092 QuorumPeerMain26829 NodeManager=============== hadoop1
2022-04-22 13:29:45
2251
原创 hadoop Shuffle$ShuffleError解决
在windows客户端运行hadoop程序遇到问题：DEBUG - LocalFetcher 1 going to fetch: attempt_local938878567_0001_m_000000_0 WARN - job_local938878567_0001java.lang.Exception: org.apache.hadoop.mapreduce.task.reduce.Shuffle$ShuffleError: error in shuffle in localfetcher#1
2022-03-09 11:30:04
2050
原创 解决windows客户端运行hadoop程序连接错误问题
在windows本地客户端执行hadoop程序时，报了如下错误：Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z但是我已经配置过了HADOOP_HOME环境变量。问题解决方法如下：将HADOOP_HOME\bin目录下的hadoop.dll文件复制到C:\Windows\Sys
2022-03-08 17:22:29
2381
原创 踩坑——python numpy shape为(m,1)和(m,)的运算
numpy库中ndarray的shape为(m,1)和(m,)是不同的例如：import numpy as npa = np.array([1,2,3])b = np.array([[1],[2],[3])print(a.shape, b.shape)#输出为((3,),(3,1))c = a - b#c为[[ 0 1 2]# [-1 0 1]# [-2 -1 0]]在a-b的运算中，numpy运算是根据最里层进行的，而b最里层是一个元素，a最里层是3个元素，所以b会被
2021-10-18 21:35:35
854
1
原创 Centos7以太坊客户端Geth安装教程
Centos7以太坊客户端Geth安装教程一、环境配置Geth是基于Golang语言写的以太坊客户端，因此需要先安装Golang环境。下载golang语言压缩包wget https://dl.google.com/go/go1.16.linux-amd64.tar.gz可以根据不同版本更改url``解压压缩包sudo tar -C /usr/local -xzf go1.16.linux-amd64.tar.gz添加全局变量vim /etc/profile#在文件中添加
2021-05-13 17:40:47
1006
1
原创 python借用元组快速替换变量名
在python中，可以通过以下语法替换多个变量：a,b = b,apython解释器会将a,b替换为元组(a,b),等号右边同理。再应用元组的逐元素赋值。
2020-02-20 21:03:26
757
原创 目标检测20年——学习笔记
Object Detection in 20 years目标检测20年——学习笔记摘要——本文集中回顾了1990s到2019年的400+篇论文，覆盖了目标检测领域的主要话题。并且回顾了一些重要的目标检测应用，如行人检测、人脸识别、文本检测等。并对这些年的挑战和进步进行了深度分析。1.引言目标检测处理识别数字图片中的特定类别的视觉实体（例如人、动物、汽车），是计算机视觉领域的重要任务。目标检...
2020-01-09 15:54:37
726
原创 JAVA转Arraylist<Character>数组为String
思想：通过StringBuilder类构造器来遍历字符List，构造StringStringBuilder sb = new StringBuilder();for (Character ch :ChracterList){ sb.append(ch);}String str = sb.toString();...
2019-11-28 15:01:12
1701
原创 JAVA初始化自定义类的数组
先摆结论：ClassName[] classes=new ClassName[]{ new ClassName(/*参数列表*/), //其余的初始化操作}今天我想初始化一个自定义的JAVA类数组，结果发现不能像初始化C++的结构体，或者JAVA中初始化一个基本类型，如int那样：int[] a=new int[]{1,2,3};直接在中括号后的大括号里写参数列表会被编译器认为是...
2019-11-27 18:55:38
449
原创 计算机科学导论学习笔记（五）
第五章 计算机组成 引言：计算机的组成部件可以氛围三大类（或三个子系统）：中央处理单元(CPU)，主存储器和输入输出子系统。接下来的部分将讨论这些子系统以及如何将这些子系统组成一个计算机。5.1 中央处理单元中央处理器（CPU）用于数据的运算。在大多数体系中，它有三个组成部分：算术逻辑单元（ALU），控制单元，寄存器组（快速存储单元）。5.1.1 算术逻辑单元算术逻辑单元对数据...
2019-01-27 16:12:49
2335
原创 计算机科学导论学习笔记（四）
第四章 数据运算引言：第三章中，我们了解了计算机都可以存储哪些类型的数据。本章将讲述如何在这些存储在计算机的数据上进行运算。数据上的运算可以分为三大类：算术运算、位移运算和逻辑运算。4.1 逻辑运算 逻辑运算是指那些应用于位模式中的一个二进制位，或者两个模式中相应的两个二进制位的相同基本运算。这意味着我们可以在位层次和模式层次上定义逻辑运算。4.1.1 位层次上的逻辑运算一个位...
2019-01-26 11:37:03
772
原创 计算机科学导论学习笔记（三）
第三章 数据存储引言本章我们讨论不同的数据类型以及他们是如何存储在计算机当中3.1 数据类型数据={数字，文本，音频，图像，视频}计算机内部数据所有计算机外部的数据类型都采用统一的数据表示法转换后存入计算机中，在数据输出时再还原回来。这种格式叫做位模式。1.位位（bit)是计算机中的最小单位，它是0或1。位代表设备中的某一状态，这些设备只能处于0，1两种状态之一...
2019-01-22 11:55:26
1370
原创 计算机科学导论学习笔记（二）
第二章 数字系统2.1引言：本章是三、四章的先导。通过本章的学习，学生应能理解数字系统的概念，描述十、二、十六、八进制系统以及系统之间的互相转换。数字系统（数码系统）定义了如何用独特的符号来表示一个数字。2.2位置化数字系统在位置化数字系统中，在数字中符号所占据的位置决定了其表示的值。数字表示为：±（Sk-1······S2S1S0.S-1S-2······S-l)b它...
2019-01-21 11:13:29
435
1
原创 计算机科学导论学习笔记（一）
序言作为一名在读软件工程专业本科生，由于专业偏向原因在大一课业里并没有对计算机整体进行较为全面的学习和理解，导致在自学以及部分课程中设计计算机原理的部分不能甚解。因此，利用寒假对《计算机科学导论》（机械工业出版社第二版）进行自学，加深理解同时为下学期的计组做预习基础。本学习笔记将包括该书一下几个部分：第一章绪论、第二章数字系统、第三章数据存储、第四章数据运算、第五章计算机组成、第六章计...
2019-01-20 15:02:21
2192
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人