智警杯初赛复现

最新推荐文章于 2024-06-15 09:59:21 发布
最新推荐文章于 2024-06-15 09:59:21 发布
阅读量871 收藏 2
点赞数
文章标签： 学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2202_75317918/article/details/131211803
版权

eee考核的时候搭建环境出了问题。。虽然有点久远，但还能看看

1.克隆centos

先查看第一台的ip

ifconfig

 编辑另外两台

进入根目录

cd/

编辑

vim /etc/sysconfig/network-scripts/ifcfg-ens33

更改项

IPADDR=192.168.181.4 # 设置为想要的固定IP地址

重启
 

2.mobax  ssh连接三台

 

3.改三台名字

hostnamectl set-hostname master

hostnamectl set-hostname slave1

hostnamectl set-hostname slave2

bash 查看改成功没有

4.编写network文件 master操作就可以

vi /etc/sysconfig/network
NETWORKING=yes

HOSTNAME=master

5.下载工具（三台）

yum install –y net-tools
 
 
bash

6.编辑host文件 （master）

vi /etc/hosts
 
这里改成自己的ip地址
192.168.181.3 master msater.root
192.168.181.4 slave1 slave1.root
192.168.181.5 slave2 slave2.root
 
 
scp /etc/hosts  root@slave1:/etc/
scp /etc/hosts  root@slave2:/etc/

 

7.关闭防火墙（三台）

关闭防火墙：systemctl stop firewalld
查看状态：systemctl status firewalld

看到dead

 

8.修改时区(三个）

    tzselect
     
    5
    9
    1
    1

9.设置定时服务

crontab -e

*/10 * * * * usr/sbin/ntpdata master

10.下载ntp服务

yum install –y ntp

 

11.配置ntp文件

master上执行

 vi /etc/ntp.conf
     
    server 127.127.1.0
    fudge 127.127.1.0 stratum 10
     
     
    scp /etc/ntp.conf   root@slave1:/etc/
    scp /etc/ntp.conf   root@slave2:/etc/
     
     
    /bin/systemctl restart ntpd.service

slave1 slave2 执行

ntpdate master

12.配置免密在.SSH下

三台机器

ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa

master操作

    cd .ssh/
     
    cat id_dsa.pub >> authorized_keys
     
    ssh master
     
    exit

slave1 slave2操作

    cd .ssh/
     
     
    scp master:~/.ssh/id_dsa.pub ./master_dsa.pub
     
    cat master_dsa.pub >> authorized_keys

最后通过master链接

    ssh slave1
    ssh slave2

最后退出   exit

13.安装软件

进入opt 新建文件soft

cd /opt/

mkdir soft

打开软件包 传入文件

 

14安装JDK

三个机器  

mkdir -p /usr/java
tar -zxvf /opt/soft/jdk-8u171-linux-x64.tar.gz -C/usr/java/

配置文件（master）

 vi /etc/profile
     
     
    export JAVA_HOME=/usr/java/jdk1.8.0_171
    export CLASSPATH=$JAVA_HOME/lib/
    export PATH=$PATH:$JAVA_HOME/bin
    export PATH JAVA_HOME CLASSPATH
     
     
    scp -r /etc/profile slave1:/etc/profile
    scp -r /etc/profile slave2:/etc/profile

 

生效环境变量

   source /etc/profile
     
    java -version

15 ZooKeeper

mkdir  /usr/zookeeper
 
tar -zxvf /opt/soft/zookeeper-3.4.10.tar.gz -C/usr/zookeeper/
 
cd /usr/zookeeper/zookeeper-3.4.10/conf
 
scp zoo_sample.cfg zoo.cfg
 
 
vi zoo.cfg
 
修改这两个
dataDir=/usr/zookeeper/zookeeper-3.4.10/zkdata
 
dataLogDir=/usr/zookeeper/zookeeper-3.4.10/zkdatalog
 
在最后加上下面的
 
server.1=master:2888:3888
server.2=slave1:2888:3888
server.3=slave2:2888:3888
 
cd ..
 
mkdir zkdata
mkdir zkdatalog
 
 
cd zkdata
vi myid
1
scp -r /usr/zookeeper root@slave1:/usr/
scp -r /usr/zookeeper root@slave2:/usr/
 
slave1  slave2里面操作
 
cd /usr/zookeeper/zookeeper-3.4.10/zkdata
vi myid
 
slave1改为2
slave2改为3
 
/usr/zookeeper/zookeeper-3.4.10/bin/zkServer.sh start   
/usr/zookeeper/zookeeper-3.4.10/bin/zkServer.sh status

16 hadoop

mkdir –p /usr/hadoop
tar -zxvf /opt/soft/hadoop-2.7.3.tar.gz -C /usr/hadoop/
 
 
vi /etc/profile
 
 
#HADOOP
export HADOOP_HOME=/usr/hadoop/hadoop-2.7.3
export CLASSPATH=$CLASSPATH:$HADOOP_HOME/lib
export PATH=$PATH:$HADOOP_HOME/bin
 
 
scp -r /etc/profile slave1:/etc/profile
scp -r /etc/profile slave2:/etc/profile
 
 
source /etc/profile
cd /usr/hadoop/hadoop-2.7.3/etc/hadoop/
 
 vi hadoop-env.sh
 
 
export JAVA_HOME=/usr/java/jdk1.8.0_171

17  四个配置文件

vi core-site.xml
 
在两个
<configuration>
</configuration>
中间加入
<property>
<name>fs.defaultFS</name>
<value>hdfs://master:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>file:/usr/hadoop/hadoop-2.7.3/hdfs/tmp</value>
<description>Abase for other temporary directories.</description>
</property>
<property>
<name>io.file.buffer.size</name>
<value>131072</value>
</property>
<property>
<name>fs.checkpoint.period</name>
<value>60</value>
</property>
<property>
<name>fs.checkpoint.size</name>
<value>67108864</value>
</property>

 

vi yarn-site.xml
 
 
 
 
<property>
 
<name>yarn.resourcemanager.address</name>
 
<value>master:18040</value>
 
</property>
<property>
 
<name>yarn.resourcemanager.scheduler.address</name>
 
<value>master:18030</value>
 
</property>
<property>
 
<name>yarn.resourcemanager.webapp.address</name>
 
<value>master:18088</value>
 
</property>
<property>
 
<name>yarn.resourcemanager.resource-tracker.address</name>
 
<value>master:18025</value>
 
</property>
<property>
 
<name>yarn.resourcemanager.admin.address</name>
 
<value>master:18141</value>
 
</property>
<property>
 
<name>yarn.nodemanager.aux-services</name>
 
<value>mapreduce_shuffle</value>
 
</property>
 
<property>
 
<name>yarn.nodemanager.auxservices.mapreduce.shuffle.class</name>
 
<value>org.apache.hadoop.mapred.ShuffleHandler</value>
 
</property>
vi hdfs-site.xml
 
<property>
 
<name>dfs.replication</name>
 
<value>2</value>
 
</property>
<property>
 
<name>dfs.namenode.name.dir</name>
 
<value>file:/usr/hadoop/hadoop-2.7.3/hdfs/name</value>
 
<final>ture</final>
</property>
<property>
 
<name>dfs.datanode.data.dir</name>
 
<value>file:/usr/hadoop/hadoop-2.7.3/hdfs/data</value>
<final>ture</final>
</property>
<property>
<name>dfs.namenode.secondary.http-address</name>
 
<value>master:9001</value>
 
</property>
 
<property>
 
<name>dfs.webhdfs.enabled</name>
 
<value>true</value>
 
</property>
<property>
 
<name>dfs.permissions</name>
 
<value>false</value>
 
</property>
vi mapred-site.xml
 
<configuration>
 
<property>
		
<name>mapreduce.framework.name</name>
		
<value>yarn</value>
	
</property>
</configuration>

修改slave (上次就是这里出问题了。。

vi slaves
slave1
slave2
 
vi master
master
 
    
scp -r /usr/hadoop root@slave1:/usr/
scp -r /usr/hadoop root@slave2:/usr/
 
hadoop namenode -format
 
出现0 才正确
 
 
/usr/hadoop/hadoop-2.7.3/sbin/start-all.sh
 
访问 ip(master):50070
 
查看状态 
jps
 
出现5个

 

 

18 hbase

master

mkdir -p /usr/hbase
 
tar -zxvf /opt/soft/hbase-1.2.4-bin.tar.gz -C/usr/hbase/
 
cd /usr/hbase/hbase-1.2.4/conf/
 
 
vi /etc/profile
 
#hbase
export HBASE_HOME=/usr/hbase/hbase-1.2.4
export PATH=$PATH:$HBASE_HOME/bin
PATH=$PATH:$ZOOKEEPER_HOME/bin
 
scp -r /etc/profile slave1:/etc/profile
scp -r /etc/profile slave2:/etc/profile
 
 
source /etc/profile
vi hbase-site.xml
 
	<property>
		<name>hbase.cluster.distributed</name>
		<value>true</value>
	</property>
	<property>
		<name>hbase.rootdir</name>
		<value>hdfs://master:9000/hbase</value>
	</property>
	<property>
		<name>hbase.zookeeper.quorum</name>
		<value>master:2181,slave1:2181,slave2:2181</value>
	</property>
	<property>
		<name>hbase.coprocessor.master.classes</name>
		<value>org.apache.hadoop.hbase.security.access.AccessController</value>
	</property>
	<property>
		<name>hbase.coprocessor.region.classes</name>
		<value>org.apache.hadoop.hbase.security.token.TokenProvider,org.apache.hadoop.hbase.security.access.AccessController,org.apache.hadoop.hbase.security.access.SecureBulkLoadEndpoint</value>
	</property>
vi hbase-env.sh
 
export HBASE_MANAGES_ZK=false
export JAVA_HOME=/usr/java/jdk1.8.0_171
export HBASE_CLASSPATH=/usr/hadoop/hadoop-2.7.3/etc/hadoop
vi regionservers
 
master
slave1
slave2
scp -r /usr/hbase/hbase-1.2.4 slave1:/usr/hbase/
scp -r /usr/hbase/hbase-1.2.4 slave2:/usr/hbase/
start-hbase.sh

19 hive

mkdir –p /usr/hive
tar -zxvf /opt/soft/apache-hive-2.1.1-bin.tar.gz -C /usr/hive/
 
 
sudo vim /etc/profile
export  HIVE_HOME=/usr/hive
export  PATH=$HIVE_HOME/bin:$PATH
 
 
scp -r /etc/profile slave1:/etc/profile
scp -r /etc/profile slave2:/etc/profile
 
 
 
cd /usr/hive/apache-hive-2.1.1-bin/conf/
 
cp hive-env.sh.template hive-env.sh
 
vim hive-env.sh
 
HADOOP_HOME=/usr/hadoop/hadoop-2.7.3

木…
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
关于2022“智警杯”一道SQL题目的思考和探讨
m0_58875569的博客
11-04 1372
关于2022年“智警杯”公安系统大数据技能竞赛中一道考察SQL水平的题目的一些复盘和探讨，也算是留一个纪念，应当是我本科阶段最后一次参加智警杯的比赛了。欢迎大家探讨交流，批评指正。
2022.04.27智警杯CIPUC校内选拔赛-MySQL
m0_58875569的博客
04-27 4530
题目要求： 使用SQL进行数据分析 1、 SQL数据分析(28/30分) 考核条件如下： (1) 环境中已经安装mysql5.7，用户名root，密码123456，开启数据库服务 在Linux命令行中输入以下命令： service mysqld start 在做题之前，还需要做一些准备工作，即使用navicat连接竞赛方提供的mysql数据库，并按照题目要求导入数据表并对导入的表进行相关处理。 ①使用navicat连接mysql 配置“常规”： 配置“SSH”： 配置完成..
智警杯初赛——搭建环境
lulu001128的博客
05-08 601
环境配置过程
复盘2022智警杯py部分
m0_69676459的博客
05-12 1732
前段时间打比赛时py题没解出来，心有不甘。 题目是提取csv文件中的信息并输出文件中月份在每一个年份中出现的次数。 数据量非常庞大------>借助py中文件的打开与修改功能试试。 输出正确结果。又弄懂了一道不会的题目。o(*￣▽￣*)ブ ...
智警杯&大数据技能竞赛决赛多人环境搭建万能脚本
7ruth0hn的博客
06-15 2055
脚本执行步骤： A : master, B : salve1, C : slave2, D : slave3 master 第一步： mkdir /opt/soft 再传所有文件 0.sh >改yum的url cd /etc/yum.repos.d/ rm -rf * wget http://172.16.47.240/bigdata/repofile/bigdata.repo yum clean all yum makecache 1.sh >改3行 systemctl st
CISCN 2022 初赛 web 复现
shinygod的博客
11-17 1669
比赛复现
[2022CISCN]初赛 复现
qq_61768489的博客
08-03 1463
在“标准电码表”找“弼时安全到达了”所对应的7个电码，再跟“密码本”的前7*4个数字分别逐位进行“模十算法”（加不进位、减不借位），所得到的就是要发送的电码。键盘流量，搜索8个字节长度的数据包，这里也能发现版本有2.8.1和2.10.1两种，因此猜测需要分别导出。发送电码前先发送“s”启动，即按3个“.”，这个发送电报的过程可以使用抓包软件进行抓取，可方便输入电报。（如果您还需要进一步的提示，可在本公众号输入“豪密剖析”获取。仔细观察png数据块，通道隐藏的数据可以配合lsb隐写。发包示例：/send?..
2022蓝帽杯初赛wp
mumuzi的博客
07-10 5043
2022蓝帽初赛
2022网鼎杯初赛朱雀组赛题
10-18
2022网鼎杯初赛朱雀组赛题
2022网鼎杯初赛玄武组赛题
10-18
2022网鼎杯初赛玄武组赛题
2021年西门子杯运动控制方向圆盘初赛程序
06-04
TIA15.1及以上版本可使用，初赛赛区一等奖程序。
西门子杯逻辑赛项全国初赛规则
10-05
"西门子杯逻辑赛项全国初赛规则" 本文件主要介绍了“西门子杯”中国智能制造挑战赛的逻辑赛项全国初赛规则，包括总则、项目方案设计、项目方案实施、初赛竞赛细则、上机比赛等内容。 一、总则 * 公平、公正、公开...
第二届陇剑杯初赛题目汇总.zip
09-07
陇剑杯bf-ezweb-hacked-hardweb-smallsword-wireshark1-tcpdump
十大成长型思维：定位思维、商业思维、时间管理思维、学习成长思维、精力管理思维、逻辑表达思维、聚焦思维、金字塔原理、目标思维、反思思维
最新发布
limengshi138392的博客
06-15 1062
十大成长型思维：定位思维、商业思维、时间管理思维、学习成长思维、精力管理思维、逻辑表达思维、聚焦思维、金字塔原理、目标思维、反思思维
Qt---pro文件的学习
weixin_51883798的博客
06-11 489
【代码】Qt---pro文件的学习。
【电子信息工程专业课】学习记录
共同进步！
06-12 317
- # **数字信号处理** * ## 离散时间信号与系统 + ### 周期延拓 一个连续时间信号经过理想采样后，其频谱将沿着频率轴以采样频率Ωs = 2π / T 为间隔而重复。 + ### 混频 各周期的延拓分量产生频谱交替的现象 + ### 奈奎斯特采样定理 fs > 2fh
怎么学习汇川Codesys PLC教程？
NAV3055的博客
06-12 323
各位好，我在B站和抖音上都有发布视频的，搜索我的名称“阿凡工控分享”即可。在CSDN上发表文章也是想把我的一点见解和经验分享出来，进一步的方便大家进行学习。
Nginx学习笔记（十）如何配置HTTPS协议？（公网）
ACGkaka的博客
06-10 729
Nginx学习笔记（十）如何配置HTTPS协议？（公网）
2023蓝帽杯初赛misc下载
12-04
2023蓝帽杯初赛misc下载是指在2023年举办的蓝帽杯网络安全竞赛中的一项miscellaneous（杂项）类题目的下载。在初赛中，参赛选手需要下载与miscellaneous相关的题目文件或资源，并进行分析和解决。 首先，参赛选手需要前往蓝帽杯竞赛官方网站或相关论坛查找与初赛misc下载相关的公告或指引。这些网站通常会提供下载链接或资源分享的方式，以方便选手获取题目所需的文件或资源。 其次，根据所提供的下载链接，选手可以点击链接进行下载，也可以使用迅雷、qq旋风等下载工具进行高速下载，以确保下载的文件完整和无误。 在完成下载后，选手需要对下载的文件进行验证。可使用md5校验工具对下载后的文件进行校验，以确保文件的完整性和正确性，防止下载过程中出现错误导致文件损坏。 之后，选手可以开始进行miscellaneous题目的解析和答题。首先，解压下载的文件，查看所提供的题目资源、源代码或二进制文件等。根据题目要求和提示，选手可以使用各种工具和技术，如逆向工程、数据分析、密码学等，进行问题的分析和解决，并找出相应的答案或flag。 最后，选手需要将自己的解题过程、思路和答案记录下来，并按照比赛规则的要求提交答案。可以是一个文本文件或截图，或是将解决问题的代码或脚本提交到竞赛平台或指定的邮箱中。 总之，2023蓝帽杯初赛misc下载是参赛选手在参加蓝帽杯网络安全竞赛中所需进行的一项任务。选手需要在蓝帽杯官方网站或相关论坛上获取下载链接并下载题目相关的文件或资源，然后对其进行验证、解析和解决，最后提交答案以完成竞赛的要求。这项任务对选手的网络安全技术、解题思维和团队合作能力都提出了较高的要求。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值