自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(10)
  • 资源 (3)
  • 收藏
  • 关注

转载 hdfs shell的基本操作以及hdfsWeb查看文件

在安装好hadoop集群并成功的启动了hdfs之后,我们就可以利用hdfs对文件进行操作了,一下是对文件的一些基本操作hdfs基本操作查询命令  hadoop dfs -ls / 查询/目录下的所有文件和文件夹  hadoop dfs -ls -R / 以递归的方式查询/目录下的所有文件创建文件夹  hadoop dfs -mkdir /test 创建test文件夹创建新的空文件  hadoop dfs -touchz /aa.txt 在/目录下创建一个空文件aa

2020-10-19 09:44:35 24

转载 Generating /run/initramfs/rdsosreport.txt 问题

Generating “/run/initramfs/rdsosreport.txt”新手安装完虚拟机之后出现这个问题莫慌!!不需要重装虚拟机!!解决方法输入ls /dev/mapper此时会出现3个文件。其中rhel-root文件是我们下面所要用的文件。ls的目的就是为了让大家能知道自己带“-root”文件的前缀是什么,因为我之前在查这个错误的时候,别人使用“centos-root”输入命令,我学着他的样子,却被提示我没有“centos-root这个文件”,ls后才发现我的是“rhel-ro

2020-10-19 09:13:48 67

原创 hbase导入csv文件

先把文件上传到linux,然后传入hdfshadoop fs -put 1.csv /进入hbase 的shell命令,创建hbase表create 'amazon_key_word','MM'用命令导入数据hbase org.apache.hadoop.hbase.mapreduce.ImportTsv -Dimporttsv.separator="," -Dimporttsv.columns=HBASE_ROW_KEY,MM:dept,MM:search_word,MM:.

2020-09-29 09:01:33 16

原创 hbase插入数据,phoenix 二级索引数据不更新

hbase中插入数据,用phoenix 创建的二级索引查询不到新加的数据经查找相关资料,才知道,这种操作无法更新二级索引所以最后只能从phoenix中插入数据首先引入jar包<!-- https://mvnrepository.com/artifact/org.apache.phoenix/phoenix-core --><dependency> <groupId>org.apache.phoenix</groupId> <artifac

2020-09-21 19:25:02 55

转载 spark任务提交到yarn上,状态一直Accepted且不停止不报错

运行Spark集群时状态一直为Accepted且不停止不报错,如下面这样的情况:一般是由于有多个用户同时向集群提交任务或一个用户向集群同时提交了多个任务导致Yarn资源的分配错误。解决这个问题,只需要更改Hadoop的配置文件:/etc/hadoop/conf/capacity-scheduler.xml,把选项:yarn.scheduler.capacity.maximum-am-resource-percent从0.1改成0.5。顾名思义,这个选项是增加Yarn可调度的资源量,当然也可以视具体情况增

2020-09-08 17:27:07 190

原创 maven批量删除下载失败库文件

##批量删除下载失败的maven项:cd %userprofile%.m2\repositoryfor /r %i in (*.lastUpdated) do del %ifor /r %i in (javadoc.jar) do del %ifor /r %i in (sources.jar) do del %i手动导入jarmvn install:install-file -DgroupId=com.oracle -DartifactId=ojdbc6 -Dversion=11.2 -Dpa

2020-09-03 09:51:07 16

原创 浏览器禁止后退键

function banBackSpace(e){var ev = e || window.event;//获取event对象var obj = ev.target || ev.srcElement;//获取事件源var t = obj.type || obj.getAttribute(‘type’);//获取事件源类型//获取作为判断条件的事件类型var vReadOnly = obj.getAttribute(‘readonly’) ;//处理null值情况vReadOnly = (vRe

2020-09-03 09:49:00 15

原创 idea常用快捷键大全-自己收集整理的

使用前三名!1.智能补全:Ctrl+Shift+Space2.自我修复:Alt+Enter3.重构一切:Ctrl+Shift+Alt+Tctrl + alt +B 查看接口的实现类ctrl + alt + <- 回到上一步ctrl + alt + -> 回到下一步Ctrl + Alt + V 根据返回值生成对象Ctrl + Alt + S 打开设置选项Ctrl + / 注释 、 取消注释(单行注释)Ctrl + Shift + / 注释 、取消注释(多行注释)Ctrl +

2020-09-03 09:46:45 22

转载 maven打包普通java程序没有添加依赖问题

在pom.xml加入配置<build> <plugins> <plugin> <groupId>org.apache.maven.plugins</groupId> <artifactId>maven-assembly-plugin</artifactId> <configuration>

2020-08-22 11:15:44 53

原创 hbaseshell error:org.apache.hadoop.hbase.ipc.ServerNotRunningYetException: Server is not running yet

hbase shell执行任意命令都报错ERROR: org.apache.hadoop.hbase.ipc.ServerNotRunningYetException: Server is not running yet原因: hadoop启动进入安全模式解决方法进入hadoop目录执行:hadoop dfsadmin -safemode leave然后重启hbase,成功...

2020-08-20 17:23:58 80

hadoop集群搭建.xmind|hadoop集群搭建.xmind

hadoop集群的搭建部署、详细步骤、前置环境的安装、免密登入,zookeeper集群安装,没有比这个更详细了

2020-09-01

Hbase.xmind|Hbase.xmind

整理后的Hbase集群搭建,shell命令、高级shell命令,javaAPI入门程序编写,提供详细的Hbase入门手册

2020-09-01

postgresql-12.3.tar.gz|postgresql-12.3.tar.gz

linux postgresql-12.3.tar.gz 数据库,分布式数据库 Distributed database

2020-08-22

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人 TA的粉丝

提示
确定要删除当前文章?
取消 删除