- 博客(8)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 客户端从部署服务器或者hdfs的下载功能
最近遇到一个需求，通过系统配置的路径来完成一个下载功能，这个系统配置路径可能是hdfs路径也可能是部署服务器的路径，所以写了一个比较通用的方法，特此跟大家分享一下，也便于自己的记忆，主要是忘了还可以看一看，^_^直接上代码： /** *@Author huangzx *@Description: 文件下载到客户端 *@Date 5:04 PM 2/23/19 ...
2019-02-28 15:06:53
221
原创 hbase单机版安装
最近需要用到hbase做测试，想在本地搭建一个单机版的hbase，上网上找了很多例子，只能说坑很多，但还是爬出来了，在这儿给大家做个参考：1.安装jdk这个对于开发人员来说应该不是什么问题，安装完成之后在/etc/profile下配置一下环境变量export JAVA_HOME=/usr/local/java/jdk1.8.0_191export PATH=$JAVA_HOME/b...
2019-02-25 15:55:54
1594
转载 趣谈23种设计模式（帮助理解）
创建型模式1、ABSTRACT FACTORY—追MM少不了请吃饭了，麦当劳的套餐和肯德基的套餐都是MM爱吃的东西，虽然口味有所不同，但不管你带MM去麦当劳或肯德基，只管向服务员说“两个B套餐”就行了。麦当劳和肯德基就是B套餐的Abstract Factory, B套餐里含有汉堡, 鸡翅和饮料. 麦当劳或肯德基会根据B套餐的规格, 让汉堡Factory, 鸡翅Factory, 饮料Factor...
2019-02-21 17:38:46
172
原创 java实现对hdfs上文件的上传与下载
从hdfs上下载到本地/***src:hdfs路径 例：hdfs://192.168.0.168:9000/data/a.json*dst：本地路径*/ public static void Hdfs2Local(String src, String dst) { try { Configuration conf = new Con...
2019-02-21 15:08:24
4254
原创 java实现本地与服务器之间文件的上传与下载
从本地上传的到服务器 /** * 上传文件到指定目录 * @param filePath 服务器路径 * @param file 本地文件 * @return */ public static int uploadFile(String filePath,MultipartFile file){ File desFil...
2019-02-21 14:51:37
5466
转载 linux常用命令
1、cd命令这是一个非常基本，也是大家经常需要使用的命令，它用于切换当前目录，它的参数是要切换到的目录的路径，可以是绝对路径，也可以是相对路径。如：cd /root/Docements # 切换到目录/root/Docements cd ./path # 切换到当前目录下的path目录中，“.”表示当前目录 cd ../path # 切换到上层目录中的...
2019-02-13 16:04:14
282
原创 java操作hdfs上的文件及文件夹
Hadoop文件系统基本的文件系统命令操作, 通过hadoop fs -help可以获取所有的命令的详细帮助文件。Java抽象类org.apache.hadoop.fs.FileSystem定义了hadoop的一个文件系统接口。该类是一个抽象类，通过以下两种静态工厂方法可以过去FileSystem实例：public static FileSystem.get(Configuratio...
2019-02-13 15:38:26
1796
1
原创 hive汇总
hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。Metastore （hive元数据）Hive将元数据存储在数据库中，比如mysql ,derby.Hive中的元数据包括表的名称，表的列和分区及其属性，表的数据所在的目录Hive数据存储在HDFS，大部分的查询、计算由ma...
2019-02-11 19:30:26
546
spark-2.4.5-bin-hadoop2.7.tar.gz
2020-06-04
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人