工作常见问题记录

查看kafka信息

⭐查看kafka里面的topic清单

/usr/lib/*/SERVICE-KAFKA-*/bin/kafka-topics.sh --zookeeper localhost:2181 --list

⭐查看kafka里面topic信息

/usr/lib/LOCALCLUSTER/SERVICE-KAFKA-retro/bin/kafka-topics.sh --zookeeper localhost:2181 --describe
------------------------------------------------------------
/usr/lib/LOCALCLUSTER/SERVICE-KAFKA-retro/bin/kafka-topics.sh --zookeeper localhost:2181 --describe --topic HIK_SMART_METADATA

⭐创建kafka里面的topic

sh /usr/lib/*/SERVICE-KAFKA-*/bin/kafka-topics.sh --create --zookeeper localhost:2181  --replication-factor ${rNum} --partitions 10 –topic ${topic} rnum为topic备份数，单机为1，集群为3；

大数据服务后台启停

⭐查看&启停服务命令

以HADOOP为例：
查看：/etc/init.d/LOCALCLUSTER-SERVICE-HADOOP-retro-DATANODE status
重启：/etc/init.d/LOCALCLUSTER-SERVICE-HADOOP-retro-DATANODE start
停止：/etc/init.d/LOCALCLUSTER-SERVICE-HADOOP-retro-DATANODE stop

⭐进入后台命令

进入hbase后台：/usr/lib/LOCALCLUSTER/SERVICE-HBASE-132fafef41d54e89b04c771ccbf8cbd4/bin/hbase shell
进入hbm后台：/usr/lib/LOCALCLUSTER/SERVICE-HBP-8d5d7f6a86d4434f939262230f0fe864/bin/hbp shell
进zk后台：/usr/lib/LOCALCLUSTER/SERVICE-ZOOKEEPER-b32f5b0b09eb49d8ba0503b2f0df1ae7/bin/zkCli.sh

索引删除

⭐手动删除-部分

    curl -X DELETE node001:9200/具体的索引
    ------------------------------------------------------------
    curl -X DELETE node001:9200/xface.snap_image_info-202107-05~07

⭐手动删除-全部

    drop index on XFACE.SNAP_IMAGE_INFO

杀掉任务进程-流水

/usr/lib/*/SERVICE-HADOOP-*/bin/yarn application -kill {进程ID：18088界面显示的任务号}
------------------------------------------------------------
kill -9 {进程号}

修改文件名

sudo mv test.txt new.txt
------------------------------------------------------------
sudo mv {源文件} {目标文件}

抓包常用命令：

root用户下执行
------------------------------------------------------------
确认接口
tcpdump -D
 ------------------------------------------------------------
监听
tcpdump -i any -c5 -nn host 10.142.59.21
tcpdump -i any -c5 -nn port 2343
------------------------------------------------------------
监听&保存
tcpdump -i eth0 host 10.142.59.21 -w /opt/test010601.pcap -s 0 -v

格式化

格式化
mkfs.xfs /dev/sdb
------------------------------------------------------------
强制格式化
mkfs.xfs -f /dev/sdb
------------------------------------------------------------
删除分区
fdisk /dev/sdc

复制命令

scp -P 2343 hbp-3.0_20210207R.tar.gz root@10.19.174.215:/opt/
------------------------------------------------------------
cp hbp-3.0_20210207R.tar.gz /opt/softs
------------------------------------------------------------
cp hbp-3.0_20210207R -r /opt/softs

dd镜像

类似于通过复制镜像的方式给SSD硬盘装系统，文件一般存放在/opt/TX1文件下

cd /opt/TX1
------------------------------------------------------------
dd if=DC_DEEPMIND_AICloud_CN_STD_v3.3.7_20200812.iso of=/dev/sdb bs=1M
------------------------------------------------------------
DC_DEEPMIND_AICloud_CN_STD_v3.3.7_20200812.iso是镜像，镜像的后缀可能是img，bs=1M  这里的数字随便填，只是一个网速的限制，没什么用。

linux下给目录下所有子目录和文件赋权

chmod -R 777 *

开启远程连接服务-BMC

service sshd start

查看smart信息

查看盘符：lsscsi  -g 
------------------------------------------------------------
确认需要检测的盘：HGST那6行应该就是（研发清楚）
------------------------------------------------------------
收集smart信息，例：smartctl -a /dev/sg8