安全运维
Libra_kk
慢慢来就是快。
快就是慢慢来
展开
-
Windows客户端使用frp访问Linux服务器端
frp 是一个可用于内网穿透的高性能的反向代理应用,支持 tcp, udp 协议,为 http 和 https 应用协议提供了额外的能力,且尝试性支持了点对点穿透。1、frp下载(Windows&Linux)地址:https://github.com/fatedier/frp/releases/2、根据对应的操作系统及架构,从 Release 页面下载最新版本的程序。将 frps 及...原创 2019-12-10 10:46:21 · 1623 阅读 · 1 评论 -
过程性记录2019/12
1、回顾OSI七层参考模型:https://blog.csdn.net/yaopeng_2005/article/details/70648692、隧道连接内网数据库:https://github.com/fatedier/frp3、Elasticsearch安装配置:https://blog.csdn.net/mottohlm/article/details/808752074、El...原创 2019-12-03 09:13:45 · 602 阅读 · 1 评论 -
认识ElasticSearch分布式架构(五)
1、解析ES的分布式架构1.1 分布式架构的透明隐藏特性ElasticSearch是一个分布式系统,隐藏了复杂的处理机制。(1)集群发现机制(cluster discovery):比如当前我们启动了一个es进程,当启动了第二个es进程时,这个进程作为一个node自动就发现了集群,并且加入了进去(2)shard负载均衡:比如现在有10shard,集群中有3个节点,es会进行均衡的进行分配...原创 2019-11-19 09:46:53 · 470 阅读 · 0 评论 -
爬虫之代理池学习(二)
接上一篇:爬虫之代理池学习(一)7、实现数据库模块在这里插入代码片8、实现代理IP爬虫模块在这里插入代码片9、实现代理IP检测模块在这里插入代码片10、实现代理IP检测模块在这里插入代码片11、实现代理IP池启动入口在这里插入代码片...原创 2019-11-07 14:47:11 · 432 阅读 · 0 评论 -
爬虫之代理池学习(一)
1、代理池概述2、代理池的设计3、实现代理的思路4、实现代理IP模型类5、代理IP的工具模块6、实现代理IP的校验模块原创 2019-11-06 21:44:58 · 612 阅读 · 2 评论 -
PyCharm使用lxml库报错(ModuleNotFoundError: No module named 'lxml')解决办法
1、在学习爬虫时遇到ModuleNotFoundError: No module named 'lxml’错误2、起初考虑是自己的lxml库有问题,卸载以后重新安装pip install lxml -i http://pypi.douban.com/simple/ --trusted-host pypi.douban.com3、重新安装lxml库时,错误没有解决,百度各种方式后无果,经...原创 2019-11-06 10:24:36 · 26277 阅读 · 26 评论 -
Elastic Search操作之Filter查询&聚合查询&复合查询(四)
1、Filter查询filter是不计算相关性的,同时可以cache。因此,filter速度要快于query。POST /lib4/items/_bulk{"index":{"_id":1}}{"price":40,"itemID":"ID100123"}{"index":{"_id":2}}{"price":50,"itemID":"ID100124"}{"index":{"_id...原创 2019-10-30 17:38:14 · 1827 阅读 · 0 评论 -
Elastic Search操作之基本查询(Query查询)(三)
1、基本查询(Query查询)(1)数据准备PUT /lib3{ "settings":{ "number_of_shards" : 3, "number_of_replicas" : 0 }, "mappings":{ "user":{ "properties":{ "name": {"type"...原创 2019-10-30 11:06:26 · 1505 阅读 · 0 评论 -
Elastic Search基础操作学习(二)
1、使用ElasticSearch API 实现CRUD(1)添加索引:PUT /lib/{ "settings":{ "index":{ "number_of_shards": 5, "number_of_replicas": 1 } }}查看索引信息:GET /lib/_settingsGET _all...原创 2019-10-29 17:48:19 · 336 阅读 · 0 评论 -
ELK简介,ES及相关组件安装(一)
一、ELK简介1、环境的困境开发人员不能登录线上服务器查看详细日志各个系统都有日志,日志数据分散难以查找日志数据量大,查询速度慢,数据不够实时2、ELK Stack解决方案ElasticSearch+LogStash+Kibana=ELK Stack官方文档地址:elastic.coElasticSearchLogStashKibana3、认识ElasticSe...原创 2019-10-29 11:51:51 · 1663 阅读 · 0 评论