![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
青瓜先生
极简、授之以渔的解决方案
展开
-
mysql5.7 安装
下载&安装wget http://repo.mysql.com/mysql57-community-release-el7-10.noarch.rpmrpm -Uvh mysql57-community-release-el7-10.noarch.rpmyum install -y mysql-community-server启动systemctl start mysqld.servicesystemctl status mysqld.service # 检查是否启动成功sy.原创 2022-02-21 17:35:51 · 577 阅读 · 0 评论 -
kafka简单安装
下载https://archive.apache.org/dist/kafka/2.4.1/kafka_2.11-2.4.1.tgz解压改配置(kafka_2.11-2.4.0\config\server.properties)启动&测试在bin/window目录,命令执行bat脚本# 启动zookeeper: .\zookeeper-server-start.bat ..\..\config\zookeeper.properties# 启动kafka: .\kafka-s.原创 2022-02-18 17:11:11 · 310 阅读 · 0 评论 -
亲测大数据开发好用镜像
大数据开发各种(系统、软件、IDE、下载源、客户端工具)镜像收集,陆续更新!CentOS7系统镜像:http://mirrors.aliyun.com/centos/7/isos/x86_64/亲测:http://mirrors.aliyun.com/centos/7/isos/x86_64/CentOS-7-x86_64-DVD-2009.isoJDK8镜像镜像:https://mirrors.tuna.tsinghua.edu.cn/AdoptOpenJDK/亲测:https://mirr原创 2020-11-22 11:20:54 · 440 阅读 · 0 评论 -
Python 日志服务器极简教程
解决日志服务器按每天收集日志问题,可以用作前端埋点和服务器埋点日志收集解决日志服务器大文件查看问题自动插入服务器时间日志格式为Json格式# -*- coding: utf-8 -*-from flask import Flask, requestimport timeimport osapp = Flask(__name__)if not os.path.exists('./logs'): os.makedirs('./logs')@app.route('/', m.原创 2020-11-07 10:51:26 · 593 阅读 · 0 评论 -
hadoop集群启动和关闭脚本
· 解决通过命令启动和关闭hadoop集群问题启动顺序:hdfs->yarn->jobhistory关闭顺序:jobhistory->yarn->hdfs使用方法:hd 【start,stop】# 在xxx家目录下创建bin文件夹[xxx@hadoop201 ~]$ mkdir bin[xxx@hadoop201 ~]$ cd bin# 创建脚本[xxx@hadoop201 bin]$ vim hd #! /bin/bash case $1 in "sta原创 2020-11-06 17:36:43 · 703 阅读 · 0 评论 -
ssh免密 linux 极简教程
解决hadoop集群ssh免密登录通信问题1、 家目录/home/xxx/.ssh文件夹下[xxx@hadoop201 ~]$ cd /home/xxx/.ssh2、生成公钥和私钥:[xxx@hadoop201 .ssh]$ ssh-keygen -t rsa#然后敲(三个回车),就会生成两个文件id_rsa(私钥)、id_rsa.pub(公钥)3、将公钥拷贝到要免密登录的目标机器上[xxx@hadoop201 .ssh]$ ssh-copy-id hadoop201[xxx@had.原创 2020-11-06 15:23:14 · 132 阅读 · 0 评论 -
zookeeper集群启动、停止、状态查询
解决Shell zookeeper集群启动、停止、状态查询问题需要修改(hadoop201 hadoop202 hadoop203)为自己集群的ip或者hostname需要修改(/opt/module/zookeeper-3.4.14/bin/zkServer.sh)为自己安装zookeeper的路径需要给脚本赋予可执行权限如(chmod 777 zk)使用:zk 【star,stop,status】既能实现启动、停止、状态查询#! /bin/bashcase $1 in"start").原创 2020-11-06 15:08:12 · 2155 阅读 · 0 评论