weixin_39574374的博客

原创 Hadoop安装与配置

Hadoop 安装，持续更新命令被挂起时的解决方案使用yum安装计划任务功能，结果提示：# yum -y install vixie-cronLoaded plugins: fastestmirror, refresh-packagekit, securityExisting lock /var/run/yum.pid: another copy is running as pid 25960.Another app is currently holding the yum lock; wait

原创 记一次阿里云服务器被黑的经历，以及解决方案

阿里云服务器因为开docker端口被黑如上图，被一个叫“sshd -D”的脚本命令CPU拉到100%，其伪装成sshd，其实是一个恶意程序。通过top -H -p 【pid】 等命令，如下图再用gdb -p【pid】跟进，发现是位于 /usr/bin/sshd -D然后尝试删除，发现root也没有权限删掉。用 lsattr查看隐藏属性，发现加了 e 和i 不允许更改。所以尝试用chattr给他把这个属性干掉，发现chattr这个命令也被修改了，不能正常使用。可以通过下面两张图对比发现，恶意

原创 Docker-Compose基础

1、Docker基础一、安装docker for centos官网1.卸载旧的dockersudo yum -y remove docker-ce docker-ce-cli containerd.iosudo rm -rf /var/lib/docker官网：sudo yum remove docker \ docker-client \ docker-client-latest \

原创 关于Hyper-v虚拟机的网络配置（CentOS7）

关于Hyper-v虚拟机的网络配置（CentOS7）——宿主机，虚拟机互通，虚拟机通外网详解Hyper-v虚拟机的网络配置上面的文章提到：External（外部虚拟网络）： 虚拟机和物理网络、本地主机都能通信在希望允许子分区（虚拟机或guest）与外部服务器和父分区（管理操作系统或host）进行通信时，可以使用此类型的虚拟网络。此类型的虚拟网络还允许位于同一物理服务器上的虚拟机...

原创 后端埋点

后端埋点背景：客户端埋点 or 服务端埋点埋点方式选择埋点方式分为客户端埋点和服务端埋点两种。如何选取最合适的埋点方式，确保数据完整、准确、高效上报？一、客户端埋点与服务端埋点结合发挥各自优势客户端埋点适用于用户界面行为的上报，服务端埋点适用于业务操作的上报。以经典的「电商购买」业务流程为例：当选择上述 4 个事件的埋点方式时，「打开商品详情页」、「加入购物车」、「提交订单」这 3 个事件均为客户端的用户行为，一般建议使用客户端埋点，因为：客户端可采集的字段更丰富；有利于关联用户设备标识

原创 Kafka Zookeeper

Zookeeper1.1概述Zookeeper 是一个开源的分布式的，为分布式应用提供协调服务的Apache项目。1.2特点一个Leader，多个Follower组成的集群集群中只要有半数以上的节点存活，Zookeeper集群就能正常服务全局数据一致，每个server保存一份相同的数据副本，Client无论连接到哪个Server，数据都是一致的。更新请求顺序执行，来自同一个Client的更新请求按其发送的顺序依次执行。数据更新原子性，一次数据跟新要么成功，要么失败实时性1.3下载以及

原创 Hadoop大数据平台架构与实践

Hadoop大数据平台架构与实践1.1 数据收集大数据处理的第一步是数据的收集。现在的中大型项目通常采用微服务架构进行分布式部署，所以数据的采集需要在多台服务器上进行，且采集过程不能影响正常业务的开展。基于这种需求，就衍生了多种日志收集工具，如 Flume 、Logstash、Kibana 等，它们都能通过简单的配置完成复杂的数据收集和数据聚合。1.2 数据存储收集到数据后，下一个问题就是：数据该如何进行存储？通常大家最为熟知是 MySQL、Oracle 等传统的关系型数据库，它们的优点是能够快速存

原创 Windows环境启动Tomcat,控制台乱码问题

原因：CMD控制台输出编码与Tomcat日志输出编码不一致解决：找到tomcat/conf/logging.properties；改为与控制台一致即可。java.util.logging.ConsoleHandler.encoding = GBK...

转载 史上最全java技术图谱