linux 常见命令 1.软连接 (ln)[root@hadoop000 ~]# ln -s /hadoop/app/apache-maven-3.6.2/conf/settings.xml setting.xml[root@hadoop000 ~]# lltotal 189612-rw-------. 1 root root 1894 Jan 6 04:05 anaconda-ks.cfg-rw...
Dbeaver 连接 phoenix 遇到问题一:ERROR 103 (08004): Unable to establish connection. java.lang.reflect.InvocationTargetException java.lang.reflect.InvocationTargetException java.lang.reflect.InvocationTargetExcepti...
kafka 创建topicsh bin/kafka-topics.sh --create --zookeeper hadoop000:2181/kafka --topic test --partitions 1 --replication-factor 1查看topicsh bin/kafka-topics.sh --describe --zookeeper hadoop000:2181/kafka ...
spark 源码编译 ./dev/make-distribution.sh --name 2.6.0-cdh5.16.1 --tgz -Pyarn -Phadoop-2.6 -Dhadoop.version=2.6.0-cdh5.16.1 -Phive -Phive-thriftserver -DskipTests -Pscala-2.11
Es中报错:Fielddata is disabled on text fields by default. Set fielddata=true on [revision]... PUT person_real_time_location_record/_mapping/data{"properties": { "person_type": { "type": "text", "fielddata": true } }}
mysql 常见命令 1. 查看binlog 模式show variables like ‘%binlog%’;| binlog_format | ROW |mysql> show variables like '%binlog%';+-----------------------------------------+-...
常用查看机器配置的命令 一、查看内存1.1 free[root@localhost mysql]# free -h total used free shared buff/cache availableMem: 3.7G 879M 732M 21M 2.1G ...
CDH 6.3.1安装 1 安装lrzsz[root@hadoop001 ~]# yum -y install lrzsz [root@hadoop002 ~]# yum -y install lrzsz[root@hadoop003 ~]# yum -y install lrzsz2 上传安装文件rz
scala知识点 二 一、 类和变量的访问权限 private[package_name]1) T1.scalapackage com.ds.testprivate[test] class T1{ def a1(): Unit ={ println("-----this is test 中 a1 method -------------------") }}private[test] obj...
数据结构 -- 图的广度优先遍历解决最短路径 最短路径用于计算一个节点到其他所有节点的最短路径。主要特点是以起始点为中心向外层层扩展,直到扩展到终点为止。广度优先遍历算法能得出最短路径的最优解,但由于它遍历计算的节点很多,所以效率低。scala 实现下面的代码:1 创建一个队列,遍历的起始点放入队列,新建一个 boolean 数组、新建距离数组,父亲顶点数组2 从队列中取出一个元素,收集它,将其标记为已访问,将父亲顶点和距离存到数...
数据结构 -- 图的广度优先遍历(BFS) 图的广度优先遍历(BFS)bfs总是先访问完同一层的结点,然后才继续访问下一层结点,如下图 从0 ->(1、2)-> (3、4、6) -> (5) 一层一层向距离起始点更远的顶点遍历。它最有用的性质是可以遍历一次就生成中心结点到所遍历结点的最短路径,这一点在求无权图的最短路径时非常有用。scala 实现下面的代码:1 创建一个队列,遍历的起始点放入队列2 从队列中...
数据结构 -- 图中二分图检测 二分图二分图又称作二部图,是图论中的一种特殊模型。 设G=(V,E)是一个无向图,如果顶点V可分割为两个互不相交的子集(A,B),并且图中的每条边(i,j)所关联的两个顶点i和j分别属于这两个不同的顶点集(i in A,j in B),则称图G为一个二分图。图1和图3属于二分区,图2不属于二分图。二分图检测染色法如上图,对图中顶点染色,从其中一个顶点开始染为红色,相邻顶点染为黑色,依次...
数据结构 -- 图中两点间的路径 无向图中的路径路径:在图中,两点间边构成的序列,比如图中0到6中一条路径0 -> 1 -> 3 -> 2 -> 6。一般图中两点之间的路径不止一条。这里的路径只要找到一条就返回。scala 实现import scala.collection.mutable.ArrayBufferclass Path { private var G: Graph = _ ...
数据结构 -- 无向图 环检测 环的定义在无向图中出现回路,环不包含自环和平行边图中环检测 scala 实现CycleDetection.scalaimport util.control.Breaks.{break, _}class CycleDetection { var G: Graph = _ var visited: Array[Boolean] = _ var hasCycle = fal...