![](https://img-blog.csdnimg.cn/20201014180756918.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Linux系统
Johnson8702
这个作者很懒,什么都没留下…
展开
-
Linux安装CentOS系统
1、安装虚拟机注:文档中没有提到的步骤默认下一步通过键盘:Ctrl+N 调出新建虚拟机的窗口化选择“自定义”一直下一步到完成:点击虚拟机中的“编辑虚拟机设置 ”在第2步这里,选择下载好的本地ISO映像文件 之后开启虚拟机等待一小段时间后,弹出的第一个窗口是检测光盘文件的完成性,选择“Skip”跳过即可(如果怀疑映像文件的完整性,可...原创 2018-07-06 14:49:23 · 3269 阅读 · 0 评论 -
设置Linux系统的开机画面和登录画面
首先,说明一下开机画面和登录画面的区别。开机画面是Linux开机后在虚拟机上显示的画面。登录画面是用远程连接工具,比如Xshell,连接Linux系统后,Xshell上显示的画面。 以上是本人虚拟机的开机和登录画面,在本文中将以以上画面为例演示如何设置自己的开机或登录画面。 一、设置Linux系统的开机画面编辑/etc/issue文件,添加开机画面内容[r...原创 2019-01-08 14:25:58 · 5589 阅读 · 0 评论 -
Kafka彻底删除topic详解
一、前言严格来讲,kafka删除topic并不是很难,但是步骤比较麻烦,稍有不慎就会失败。本文就kafka删除topic的步骤做出详细解析。 二、详细步骤①停止kafka服务停止kafka的所有的消费者和生产者,关闭kafka,防止在删除topic之后,程序发现topic不存在而自动创建topic②修改配置文件在kafka安装目录的conf目录下,修改server.pr...原创 2018-12-11 17:24:02 · 3634 阅读 · 0 评论 -
HBase的SQL驱动---Phoenix
一、Phoenix简介Apache Phoenix是HBase的SQL驱动,是构建在Apache HBase之上的一个SQL中间层。Phoenix完全使用Java编写,代码位于GitHub上,并且提供了一个客户端可嵌入JDBC驱动。Phoenix使得HBase支持通过JDBC的方式进行访问,并将你的SQL查询转成HBase的扫描和相应的动作。Phoenix并不是想HBase那样用于map-re...原创 2018-12-07 15:13:03 · 1211 阅读 · 0 评论 -
Hadoop2.0高可用集群搭建
0、集群节点分配Hadoop01:ZookeeperNameNode(active)DataNodeNodeManagerJournalNodeResourceManager(active)Hadoop02:ZookeeperDataNodeNodeManagerJournalNodeNameNode(standby)Hadoop03:Z...原创 2018-12-03 18:48:00 · 478 阅读 · 0 评论 -
Squirrel SQL客户端使用图解
一、Squirrel简介Squirrel是一个连接数据库的客户端工具,一般支持JDBC的数据库都可以用它来简介,如连接MySQL。 二、安装准备下载jar包:squirrel-sql-3.7.1-standard.jar 三、安装①进入squirrel-sql-3.7.1-standard.jar文件所在的目录,在地址栏输入:cmd,进入命令窗口②在命令窗口输入:j...原创 2018-12-07 18:06:16 · 6364 阅读 · 0 评论 -
HBASE完全分布式安装
0、集群节点分配Hadoop01:Zookeeper+Hadoop+HBaseHadoop02:Zookeeper+HBaseHadoop03:Zookeeper+HBase 关于Hadoop2.0高可用集群搭建,请移步:https://blog.csdn.net/Johnson8702/article/details/84765141 1、安装和配置01节...原创 2018-12-04 12:57:56 · 658 阅读 · 0 评论 -
Zookeeper集群安装配置
一、准备虚拟机,安装并配置jdk,jdk要求1.6以上版本关于虚拟机的安装配置,请移步:https://blog.csdn.net/Johnson8702/article/details/80924322关于虚拟机的克隆,并配置网络,请移步:https://blog.csdn.net/Johnson8702/article/details/80942334 二、上传zookeepe...原创 2018-11-29 13:48:49 · 203 阅读 · 0 评论 -
Kafka集群完全分布式安装
一、上传、解压kafka压缩包将kafka压缩包上传到Linux系统中,并进行解压[root@hadoop1 software]# pwd /home/software [root@hadoop1 software]# ll 总用量 48352 drwxr-xr-x 8 uucp 143 4096 10月 8 11:41 jdk1.8 drw...原创 2018-11-29 10:07:18 · 533 阅读 · 0 评论 -
flume中log4j.properties文件的简单解析
在使用flume获取日志并存储的过程中,日志文件的具体存储方案可在log4j.properties文件中配置,下面简单解析这个文件的配置# Define the root logger to the system property "flume.root.logger".log4j.rootLogger=${flume.root.logger}log4j.rootLogger决定使用哪一...原创 2018-08-31 16:53:10 · 1235 阅读 · 0 评论 -
Flume入门案例
一、安装flume将flume上传到指定位置,并解压。在这里,将flume解压到/home/software目录下 二、配置agent进入conf/目录,编辑.conf文件,比如template01.conf配置代码如下:#命名Agent a1的组件a1.sources = r1a1.sinks = k1a1.channels = c1#描述...原创 2018-08-31 16:39:06 · 254 阅读 · 0 评论 -
Linux操作相关问题总结
1、nohup和&的区别背景:假设有一个a.out文件需要执行&的意思是在后台运行,意思是说,当你执行./a.out & 的时候,即使你用Ctrl C退出,那么a.out照样正常运行(因为对SIGINT信号免疫)。但是,如果直接关闭shell后,那么a.out进程同样消失。可见,&的后台并没有那么强(对SIGHUP信号不免疫)。nohup的意思是忽略SI...原创 2018-08-23 14:57:41 · 154 阅读 · 0 评论 -
ps -ef | grep 命令详解
ps:将某个进程显示出来,是Linux中最常用的进程查看命令,功能强大-A:显示所有程序-e:此参数的效果和指定“A”参数相同-f:显示UID,PPID与STIMEgrep:查找,文本搜索工具,全称是Global Expression Print,表示全局正则表达式,把匹配的行打印出来|:管道命令,指ps和grep同时执行例如:ps -ef | grep java,检查ja...原创 2018-08-27 10:45:43 · 4135 阅读 · 0 评论 -
克隆虚拟机,并配置网络
克隆虚拟机由于我们使用VMWare创建的CentOS虚拟机,所以我们可以直接克隆虚拟机,就减少了安装的时间,提高效率。虚拟机安装及配置网络,请参考:https://blog.csdn.net/Johnson8702/article/details/80924322若你是在一台pc机上配置集群环境,就可以按照一下步骤连续克隆出两个虚拟机分别是slave01、slave02...原创 2018-07-06 16:20:56 · 1629 阅读 · 0 评论 -
SparkStreaming性能调优
一、数据接收并行度调优——创建更多的输入DStream和Receiver通过网络接收数据时(比如Kafka,Flume),会将数据反序列化,并存储在Spark的内存中。如果数据接收成为系统的瓶颈,可以考虑并行化数据接收。每个输入DStream都会在某个Worker的Executor上启动一个Receiver,该Receiver接收一个数据流。因此可以通过创建多个输入DStream,并配置它们接...原创 2019-04-25 19:37:55 · 1818 阅读 · 0 评论