打卤的博客

原创 centos7 安装php扩展php-wkhtmltox

1、下载安装wkhtmltox系统环境https://wkhtmltopdf.org/downloads.html 根据系统类型选择下载wkhtmltox:这里我的系统环境是CentOS 7-64bit 所以选择：Linux CentOS 7 - x86_64安装wkhtmltox:>rpm -ivh wkhtmltox-0.12.5-1.centos7.x86_64.rpm...

原创 hadoop 遇到的DataNode无法启动问题

删除DataNode的所有资料及将集群中每个datanode节点的core-site.xml <name>hadoop.tmp.dir</name><value>/data/hadoop/hddata/</value>/data/hadoop/hddata/VERSION 删除，然后重新执行hadoop namenode -format...

原创 Hadoop环境搭建----（利用ZooKeeper搭建Hadoop的HA集群）

1、安装 Zookeeper 集群具体安装步骤参考之前的文档 https://blog.csdn.net/liyyzz33/article/details/886895942、安装 hadoop 集群具体安装步骤参考之前的文档 https://blog.csdn.net/liyyzz33/article/details/88397249这只需要根据以上安装好的集群进行修改配置3、修改ha...

原创 zookeepe群集搭建

对本节配置目录不了解的，请先看我之前文章下载官网自行下载。我这里用的zookeeper-3.4.13.tar.gztar zxvf zookeeper-3.4.13.tar.gzcd zookeeper-3.4.13/conf/cp zoo_sample.cfg zoo.cfgvim zoo.cfg #修改数据存储目录dataDir=/data/hadoop/zkdata#添加...

原创 flask-文件上传分发工具

发布需要用flask写了一个简陋的文件上传分发工具功能手动上传文件，发送到指定服务器的目标目录环境 python2+flask目录结构Sample.py# coding:utf-8from flask import Flask, render_template,request,redirect,url_forfrom werkzeug.utils import secure_fi...

原创 使用pyhive:连接hive(python3+)

1.安装相关依赖sudo yum install cyrus-sasl-devel -ysudo yum install gcc-c++ -ypip3 install saslpip3 install thriftpip3 install thrift-saslpip3 install PyHive2.连接hive查询数据# -*- coding: utf-8 -*-fro...

原创 Hadoop环境搭建----（Hive安装与配置）

下载地址http://mirror.bit.edu.cn/apache/hive/hive-2.3.4/apache-hive-2.3.4-bin.tar.gz解压到/data/hadoop/apache-hive/修改配置文件cd /data/hadoop/apache-hive/conf/cp hive-env.sh.templatevim hive-env.sh#添加ha...

原创 修改kibana显示信息的高度

truncate:maxHeight改成0显示所有

转载 Git-branching-model-使用规范流程

原创 新手初次安装git并通过SourceTree管理

安装好Git和SourceTree，先开打git 配置公钥上传到服务器和备注自己的姓名和邮箱配置邮箱直接打开git输入：$ git config --global user.name “superGG1990” #你的姓名$ git config --global user.email "superGG1990@163.com” #你的邮箱创建ssh秘钥继续在命令行输入cd...

原创 Hadoop环境搭建----（二、初始化与启动）

对本节配置目录不了解的，请先看上一篇文章初始化首次启动需要进行初始化，初始化成功不再初始化。初始化的操作在hdfs的主节点-node1直接执行命令hdfs namenode -format启动使用官方自带启动脚本存放目录为 /data/hadoop/hadoop-3.1.2/sbin/启动所有 start-all.sh停止所有 stop-all.sh通过jps查看已启动了那...

原创 nginx——根据子文件夹url重写（重定向）

server { listen 80; root /data/php/ ; server_name api.dalu.com; #URL重写设置 location ^~ /test1api/ { proxy_set_header Host test1api.dalu.com ; proxy_se...

原创 Hadoop环境搭建----(一、安装与配置)

一、服务器&amp;amp;amp;amp;amp;amp;amp;amp;amp;amp;amp;amp;软件环境说明服务器一共准备3台CentOS7 Server192.168.1.70 node1192.168.1.71 node2192.168.1.72 node3以下操作为三台机器同时配置二、保障3个台机器时间保持一致。可参考 时间同步方法：https://blog.csdn.net/liyyzz33/article/details/86476245三、...

原创 【CentOS环境部署】Centos 7.x yum安装php5.6.X

1.检查当前安装的PHP包yum remove配置yum源CentOS 7.0的源yum install epel-releaserpm -ivh http://rpms.famillecollet.com/enterprise/remi-release-7.rpm安装PHP5.6.xyum源配置好了，下一步就安装yum install --enablerepo=remi -...

原创 使用nginx转发tcp请求（解决访问内网的腾讯云redis)

要求nginx版本大于1.9，在nginx.conf添加以下，要求和http{}同级stream { upstream redis { server *redis-addres*:6379 max_fails=3 fail_timeout=30s; #*redis-addres*替换为真是地址 } server { listen 6379...

原创 Nginx做非80端口转发

server { server_name git.test.com listen 80; error_log /data/logs/nginx/git.error.log; access_log /data/logs/nginx/git.access.log; location / { proxy_pass http://127.0.0...

原创 rundeck权限设置

本文环境centos7,Rundeck 3.0.7目标设置权限，使用户（开发人员）只读权限可以浏览服务上的文件直接贴配置文件cd /etc/rundeck/vim realm.properties #用户文件admin:*****,user,admin,architect,deploy,build #默认的admin用户hz_read:123456,user,architect,dep...