- 博客(5)
- 收藏
- 关注
RSS订阅原创 java.lang.NoSuchMethodErro错误解决办法
java.lang.NoSuchMethodError: 这个错误可能是由于继承错误的类，可能是你的包下有一个和你继承的类的类名相同，而你继承的不是你需要的类，就会报着个错误，我遇到的就是这个问题。 所以在同一个包下面不要命名另个相同的类名。将类名修改了流可以运行了...
2020-09-18 21:06:56
1238
原创 kafka要知道的一些知识
1.概述了解1.1 定义Kafka是一个分布式的基于发布/订阅模式的消息队列（Message Queue），主要应用于大数据实时处理领域。1.2** 消息队列使用消息队列的好处1）解耦允许你独立的扩展或修改两边的处理过程，只要确保它们遵守同样的接口约束。2）可恢复性系统的一部分组件失效时，不会影响到整个系统。消息队列降低了进程间的耦合度，所以即使一个处理消息的进程挂掉，加入队列中的消息仍然可以在系统恢复后被处理。3）缓冲有助于控制和优化数据流经过系统的速度，解决生产消息和消费消息的处
2020-09-03 14:11:34
146
原创 简单明了搞懂HDFS读写数据流程
HDFS读写数据流程1.HDFS写数据流1.客户端通过DistributedFileSystem 向NameNode发送上传文件的请求，NameNode响应请求，然后客户端请求发送第一个Block(默认是128M)请求返回DataNode节点。2.NameNode接受请求后会返回三个DataNode节点，（返回三个节点是因为HdFS默认保存三个副本并不是只有三个节点）客户端会通过FSDataOutoutStream发送到最近的DateNode节点（就近原则），然后DataNode1会找到另外两个节点
2020-08-18 22:18:51
480
2
原创 Hadoop 压缩方式的选择
Hadoop 压缩方式的选择**1. **MR支持的压缩编码压缩格式hadoop自带？算法文件扩展名是否可切分换成压缩格式后，原来的程序是否需要修改DEFLATE是，直接使用DEFLATE.deflate否和文本处理一样，不需要修改Gzip是，直接使用DEFLATE.gz否和文本处理一样，不需要修改bzip2是，直接使用bzip2.bz2是和文本处理一样，不需要修改LZO否，需要安装LZO.lzo是需要建索引，还需要指
2020-08-17 22:13:29
205
1
原创 关于数据库的操作语句
关于数据库的操作语句 -----作者：ymkey 引用请标明出处SQL注意点 : SQL 语言大小写不敏感。 SQL 可以写在一行或者多行 关键字不能被缩写也不能分行 各子句一般要分行写。 使用缩进提高语句的可读性。create drop alter以上语句统称
2020-07-29 15:59:21
513
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人