- 博客(11)
- 收藏
- 关注
RSS订阅原创 服务器负载均衡软件使用总结(httpd+nginx+haproxy+lvs+keepalive)
工作中使用过各种代理软件,有基于4层代理的,有基于7层代理的,现在大多的企业都上云了,云上有成熟的产品供我们使用,如阿里云SLB、华为云的ELB,腾讯云的CLB等都可以实现4层、7层的代理,由于云厂商成本的考虑,我们没法在云上使用4层代理软件,因此我们使用7层代理的产品比较多。软件比较多,配置繁杂,在这里做个总结备忘。
2023-10-27 19:01:18
138
原创 centos8搭建内网私有repo源
centos7/8 在2024年就要停止维护了,搭建私有仓库非常有必要,在此总结一下以前在公司搭建私服的步骤备忘。
2023-10-27 16:12:49
643
原创 MySQL,Redis,Kafka,Rabbit监控
zabbix数据存储类应用监控MySQL监控MySQL监控采用更加成熟的percona模板进行监控，其中有200多个监控项，在业内广泛使用。本次采用最新版的rpm包。 示意图：安装步骤：zabbix-agent 端yum install -y php php-mysql rpm -ivh percona-zabbix-templates-1.1.8-1.no...
2023-10-24 23:44:02
75
1
原创 Ansible自动化部署ELK日志收集系统
Ansible自动化部署ELK日志收集系统实现步骤：检测系统是否有filebeat进程在运行，如果有，就先停止该进程，进而调用系统命令卸载；scp filebeat，安装包到各个服务器节点，scp logstash安装包至指定节点；调用系统命令实现安装filebeat，logstash程序；根据IP不同scp不同的filebeat配置文件到各个不同节点，scp不同节点的logstash...
2023-10-24 23:00:29
171
1
原创 学习Hadoop+spark集群错误笔记备忘
Hadoop+Spark错误i笔记： 环境：Hadoop2.9.1+Spark2.3.1+JKD1.8+centos6.9 32bitHadoop1.Java HotSpot(TM) Client VM warning: You have loaded library /usr/local/bigdata/hadoop/lib/native/libhadoop.so.1.0.0 ...
2018-08-06 21:29:02
374
原创 京东手机爬虫（仅供学习交流）
京东手机爬虫，仅供交流学习使用，不得用作商业用途。 如有违规侵权，请联系删除。效果如下： import requestsfrom lxml import etreefrom concurrent.futures import ThreadPoolExecutor, as_completedimport jsonfrom urllib.parse import quotefro...
2018-05-20 11:09:01
2336
原创 淘宝天猫多线程爬虫
# -*- coding:utf-8 -*-import requestsfrom queue import Queueimport threadingimport reimport pandas as pdclass Thread_crawl(threading.Thread): ''' 抓取线程类 ''' def __init__(self, ...
2018-05-16 16:46:17
856
原创 scrapy入门小案例--爬取电影天堂最新电影下载地址
本文开发环境：ubuntu16.04 + scrapy1.5 + python3.5 + pycharm2017.03 scrapy学习也有段时间了，刚开始也是跟着视屏一点点学习，看着挺简单的，到了动手的时候就不知道如何下手。现在通过一个小案例来总结下如何使用，如果能帮到你那我就很欣慰了。 必备技能：python基础 推荐廖雪峰python教程网页基础 W3C...
2018-03-27 23:38:52
4742
1
原创 华硕G60 VW6700安装win10 & ubuntu 16.04双系统踩坑记录
首先题主的笔电是华硕 G60 VW6700, 具体配置[这里可查]，网上找了好多的教程，最后发现有篇文章说咱大华硕的笔电跟其他的笔电不一样。经过一次次的强制重启电脑后（听到硬盘咔嚓那种声音心里那个痛，这可是题主捡了好几年的破烂才买的电脑），最后还是安装成功了，特此记录，希望能给后来人点帮助，我就很欣慰了。首先声明，这里不是详细安装过程，这是把一些坑记录下，还有些图片是网上找的，如有侵权，立即删...
2018-03-27 13:55:42
741
原创 VIM常用命令总结
i 前 a 后 o下一行开头 A行末 O上一行 yy&p 复制粘贴 dd 删除一行 4yy / 4dd 复制四行/删除四行键盘 H J K L 左下上右 m 中间 L末尾 H当前屏幕顶端 CTRL + F/B 翻下页/上页 CTRL ...
2018-03-27 10:30:14
110
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人