- 博客(10)
- 收藏
- 关注
RSS订阅原创 双向链表demo
class PersonNode(val pno:Int,val pname:String){ val no:Int=pno var name: String = pname var next:PersonNode=null //下节点，默认null var pre:PersonNode=null //前一个节点,默认null}class DoubleLinkList...
2019-11-15 11:13:58
131
原创 单向链表demo
class StuNode(val pno:Int,val pname:String){ val no:Int=pno var name: String = pname var next:StuNode=null //下节点，默认null}/** * 说明:只是demo用于理解，有很多漏洞，具体根据应用场景解决 */class SingleLinkList{ //...
2019-11-14 14:44:14
162
原创 数组实现环形队列
主要是利用取模思想实现环形队列class CircleQueue(arraySize:Int){ //队列实际空闲一位 val maxSize=arraySize val arr=new Array[Int](maxSize) var front = 0//指向队列头部(包含数据) var rear = 0//指向队列尾部(包含数据) //队列是否满 def ...
2019-10-29 14:18:11
159
原创 org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException)
mapreduce自定义输出文件时报错如下2019-10-17 14:12:42,778 WARN [Thread-24] org.apache.hadoop.hdfs.DFSClient: DataStreamer Exceptionorg.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.L...
2019-10-17 14:24:28
1136
原创 spark-streaming的direct方式保存offset到checkpoint
啥也别说上代码object BIStreamingCK { val logger: Logger = Logger.getLogger("org.apache.spark") var checkPoitPath:String="" def main(args: Array[String]): Unit = { logger.setLevel(Level.WARN) ...
2019-10-09 10:12:39
407
原创 spark-streaming的direct方式保存offset到zookeeper
maven依赖 <dependency> <groupId>org.apache.spark</groupId> <artifactId>spark-core_2.11</artifactId> <scope>provided</s...
2019-10-09 10:02:41
215
1
原创 hive添加永久udf函数
maven依赖<dependency> <groupId>org.apache.hive</groupId> <artifactId>hive-exec</artifactId> <version>1.2.1</version> ...
2019-08-28 17:48:36
1060
原创 hive配置metastore连接mysql异常问题
在hive的conf目录下创建hive-site.xml文件并添加如下配置 <?xml version="1.0"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?><configuration> <property> <name&...
2019-08-09 15:59:46
1353
原创 java和scala混合编码，打包编译问题
修改打包插件需要首先编译scala代码scala编译插件需要添加如下：<executions> <execution> <id>scala-compile-first</id> <phase>process-resources</phase> <goals...
2019-08-02 14:46:46
672
原创 spark-streaming的direct方式保存offset到redis
package biimport kafka.common.TopicAndPartitionimport kafka.message.MessageAndMetadataimport kafka.serializer.StringDecoderimport org.apache.kafka.clients.consumer.{ConsumerConfig, ConsumerRecor...
2019-06-20 13:39:45
656
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人