- 博客(30)
- 收藏
- 关注
原创 zabbix从入门到精通
文章目录1. zabbix概念1.1 zabbix概况1.2 zabbix采集方式1.3 架构1.4 数据流1.5 监控总结2. zabbix安装2.1 环境检查2.2 安装zabbix2.2.1 安装yum源2.2.2 安装zabbix2.2.3 修改配置2.2.4 启动zabbix2.2.5 浏览器web界面安装2.2.6 修改默认语言2.2.7 用户管理3. zabbix使用3.1 添加监控主机3.1.1 安装zabbix-agent3.1.2 zabbix-server测试3.1.3 web端添加被
2021-01-22 09:48:59
1919
1
原创 爬取北大bbs论坛——鹊桥板块列表(二)
文章目录前言一、分析页面帖子列表单个帖子下一页处理二、代码实现三、结果前言继上一篇模拟用户登录成功后,那么我们能够以内部成员访问一些游客不能访问的内容了,其中便有此次项目中想要爬取的版块——鹊桥板块。鹊桥(PieBridge)版旨在为北大在校学生、校友及亲人朋友提供一个包容、和谐、自由的寻找伴侣的平台。板块中发布了许多交友贴(列表格式),那么把这些列表信息爬取下来,保存在MongoDB中...
2018-11-19 16:37:48
3289
1
原创 爬取北大bbs论坛——模拟登陆(一)
文章目录一、分析页面二、Postman模拟登陆请求三、Python代码实现一、分析页面首次登录到北大bbs首页,会发现是以游客身份登录的,只能访问部分内容;页面左侧有登录模块,找个账号登录进去,就能看到个人登录信息以及内部人员能够访问的模块了。我们需要分析点击“登录”按钮,触发什么操作?点开js,代码如下function() { var t = ($(".have-log...
2018-11-16 16:38:24
3488
原创 Python3 图片文字识别翻译——调用百度AI、百度翻译和有道翻译的API
文章目录图片文字识别翻译——Python+百度AI+百度翻译+有道翻译一、演示二、 API准备三、 图片文字识别——调用百度AI文字识别API四、 文字翻译1. 百度翻译请求解析返回数据2. 有道翻译(与百度翻译类似)请求解析返回数据五、 获取剪贴板的图片六、程序界面设计七、功能实现1. 按照设计图填充控件(1)窗体初始化(2)主体框架(3)左边Frame填充(4)中间Frame填充(5)右边F...
2018-10-25 15:48:40
6863
4
原创 Python定时爬取某网页内容
前言昨天小伙伴说他最近在投资一个类似比特币的叫ETH币(以太币),他想定时获取某网站以太币的“购买价格最低”和“出售价格最低”,他自己没学过Python,也找到一个定时获取股票的例子(没看懂),看我平时有在玩Python,就问我能不能做到;平时我对Python挺感兴趣的,就想试试看。思路定时任务主程序 爬取网页解析网页 获取所要内容存入表格绘图异常处理如何实
2017-12-13 17:08:12
20284
原创 CentOS 7.0安装spark2.2
环境CentOS 7.0hadoop 2.7.3 CentOS 7.0+hadoop 2.7搭建集群scala 2.12.4spark 2.2.0下载并安装scala下载地址:http://www.scala-lang.org/download/ 百度云地址:https://pan.baidu.com/s/1kVFyb3p 密码:nffb下载完上传的到集群,目录/data/software ,安装:
2017-12-11 15:42:14
610
原创 CentOS 7.0+flume+kafka类似日志输出存储
环境CentOS 7.0 hadoop 2.7.3 CentOS 7.0+hadoop 2.7搭建集群zookeeper 3.4.11 CentOS 7.0安装zookeeper3.4.11flume 1.8.0 CentOS 7.0安装flumekafka 1.0.0 CentOS 7.0安装kafka下载安装见前几篇文章配置修改配置文件cp flume-conf.prop
2017-12-08 10:58:09
450
原创 CentOS 7.0安装kafka
环境CentOS 7.0 hadoop 2.7.3 CentOS 7.0+hadoop 2.7搭建集群zookeeper 3.4.11 CentOS 7.0安装zookeeper3.4.11kafka 1.0.0 下载安装下载官网:http://kafka.apache.org 可选择左侧的download 或者 quickstart ,下载kafka百度云地址:https://p
2017-12-07 11:22:50
1917
2
原创 CentOS 7.0+flume类似日志输出到HDFS
环境CentOS 7.0hadoop 2.7.3flume 1.8.0下载并安装见上一篇博客: CentOS 7.0安装flume配置添加hadoop目录hadoop fs -mkdir -p /test/flume/output添加本地日志文件cd /tmptouch flume_test.logecho 'hello world' >> flume_test.log修改flume-confc
2017-12-05 17:13:40
400
原创 CentOS 7.0安装flume
环境CentOS 7.0hadoop 2.7.3flume 1.8.0下载并安装下载下载地址:http://flume.apache.org/download.html百度网盘:https://pan.baidu.com/s/1dFCSh3N 密码:wnko也可以通过wget直接下载:wget http://mirrors.hust.edu.cn/apache/flume/1.8.0/apache-
2017-12-05 16:49:54
1919
原创 为wget添加代理
前言脑袋抽了,前两天说wget用不了,所以软件包都是直接从本地下载,然后传到集群机器上的。今天才想起来,忘记给wget设置代理了, ̄□ ̄||方法这只是添加代理的其中一种方法vi /etc/wgetrc观察到# You can set the default proxies for Wget to use for http, https, and ftp.# They will override t
2017-12-05 10:20:12
1873
原创 linux安装Tomcat(CentOS 7)
下载tomcat下载地址:http://tomcat.apache.org/百度网盘:https://pan.baidu.com/s/1pLmPtiz 密码:lqnm解压安装本人是通过CentOS的Firefox浏览器直接下载的,文件保存在/home/iccool/下载 目录下,将文件移动到/data/software目录下cd /home/iccool/下载mv apache-tomcat-8.
2017-12-04 16:11:35
210
原创 linux安装idea(CentOS 7)
下载idea(linux 社区版)下载地址:https://www.jetbrains.com/idea百度网盘: https://pan.baidu.com/s/1qXNeNec 密码:xpzh解压安装找到idea的文件目录本人是通过CentOS的Firefox浏览器直接下载的,文件保存在/home/iccool/下载 目录下,将文件移动到/data/software目录下cd /home/icc
2017-12-04 15:54:30
7752
原创 CentOS 7.0安装HBase1.3.1
环境CentOS 7hadoop 2.7.3hbase 1.3.1zookeeper 3.4.11下载HBase并上传解压下载链接:https://mirrors.tuna.tsinghua.edu.cn/apache/hbase/百度云链接:https://pan.baidu.com/s/1i4HTwVz 密码:p7k3上传已下载的hbase压缩包到/data/software 目录mkdir -
2017-12-04 14:57:33
904
原创 CentOS 7.0安装zookeeper3.4.11
环境CentOS 7hadoop 2.7.3zookeeper 3.4.11下载zookeeper下载链接:https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/百度云下载链接:https://pan.baidu.com/s/1nuDb1R7 密码:ekj2配置上传的到集群机器上本例中我放在了 /data/software 目录下新建目录 解压m
2017-12-04 10:49:17
757
原创 CentOS 7.0安装hive2.1.1
环境CentOS 7hadoop 2.7.3hive 2.1.1准备下载hivehive官方下载地址: http://www.apache.org/dyn/closer.cgi/hive/然后上传到namenode机器上说明: 由于我用不了wget,能用wget的可以选择以下方法下载hive-2.1.1wget http://mirrors.ustc.edu.cn/apache/hive/hive-
2017-12-01 16:25:03
401
原创 CentOS 7.0安装mysql5.7.20
环境CentOS 7mysql 5.7.20卸载自带的mariadb检查rpm -qa|grep mariadb如果有mariadb,卸载rpm -e mariadb-libs-5.5.44-2.el7.centos.x86_64 --nodepsrpm -qa|grep mariadb下载安装mysql1. 获取mysql的yum源在mysql官网获取rpm:https://dev.mysq
2017-11-30 17:06:58
295
原创 CentOS 7.0+hadoop 2.7搭建集群
准备工作准备环境下载链接:VM12 : https://pan.baidu.com/s/1hsvkHe8 密码:ycanCentOS 7.0:https://pan.baidu.com/s/1nvUmu05 密码:ktqhjdk1.8: https://pan.baidu.com/s/1bo69W67 密码:3volhadoop2.7.3: https://pan.baidu.com/s
2017-11-29 16:25:14
805
原创 【Scrapy】Scrapy在Python3下报错:“cannot import name '_win32stdio'”解决办法
由于之前都是在Python2的环境下用的Scrapy,然后最近在用Python3的环境,今天试着用Scrapy启动一个爬虫的时候居然报错。操作scrapy crawl demo报错Traceback (most recent call last): File "c:\python34\lib\site-packages\scrapy\commands\crawl.py", line 57
2017-10-19 10:24:05
3372
原创 【Python】将数字转成英文
还是核心编程里的一道题第一次想到的方法(复杂):#encoding=utf-8#输入的数num=input('Input number:')#列表lists=[ 'zero', 'one', 'two', 'three', 'four', 'five', 'six', 'seven', 'eight
2017-04-12 10:09:07
14308
1
原创 Python的浅拷贝和深拷贝
学习《Python核心编程(第二版)》ing,正好学习到这一块,顺便写一篇文章加深理解。直接贴学习笔记:在python中,对象赋值实际上是对象的引用。也就是说,当你创建一个对象,然后把它赋给另一个变量的时候,python并没有拷贝这个对象,而只是拷贝了这个对象的引用。1.浅拷贝假设创建一个person对象,拷贝两个对象:假设是一对夫妻,hubby和wifey
2017-04-11 16:14:28
284
原创 【学习python兴趣起源】计算字符串中字母出现的次数
偶然间看到一个非常简短的小题目——计算字符串中各个字符出现的次数有贴出来的代码:s = 'here is a sample of english text' d = {} for c in s: d[c] = (d[c] + 1) if (c in d) else (1) print d还有:dict((x, len(list(l))) for x,l in itertools
2017-04-01 09:30:46
9719
1
原创 【mysql】第一次启动mysql提示错误 NET HELPMSG 3534
mysql版本:mysql-5.7.15过程:安装和配置完成后,启动mysql时出现错误错误信息:请键入 NET HELPMSG 3534 以获得更多的帮助。解决方案:如果你已经安装了服务(Service successfully installed.),请先将服务移除, mysqld -remove 然后按以下步骤操作:1. 在管理员权限的cmd窗口中同时
2017-03-06 16:40:44
13255
1
原创 在使用Telnet连接localhost时所遇到的问题及解决方案
在通过dos窗口使用命令行连接服务器:telnet localhost 8080 时;1、出现 ‘telnet’ 不是内部或外部命令,也不是可运行的程序或批处理文件。 原因:因为本机的Telnet客户端默认是关闭的,所以我们要手动打开 解决方案:打开控制面板–>程序–>打开或关闭Windows功能–>勾选“Telnet客户端”–>确定2、启用Telnet客户端后,发现输入字符串无法显示,只显示
2017-02-06 23:27:54
16338
原创 【HttpUrlConnection】自定义StreamToString--流转换成字符串(1.1)
public class StringUtils { public static String StreamToString(InputStream in) throws IOException{ //定义一个内存输出流 ByteArrayOutputStream baos=new ByteArrayOutputStream(); //读取流 byte[] buf = new byte[1
2016-09-14 10:21:33
501
原创 【HttpUrlConnection】图片缓存+缓存加密(3)
类似【网页图片查看器】,增加了缓存机制如果是初次加载图片,会缓存到data/data/包/cache/目录下;如果是加载以前的图片,会直接从缓存文件夹中加载图片。注:【1】需要访问网络操作需要:【1.1】加载权限【1.2】使用子线程【2】不能在子线程更新UI 需要使用handler思路:【1】新建一个缓存文件夹并使用B
2016-09-14 10:21:11
494
原创 【HttpUrlConnection】网页图片查看器(2)
类似于 网址源码查看器 这里更新的内容是:如何将位图显示出来可以将流转换成bitmapInputStream in=conn.getInputStream();//将流转换成bitmap格式Bitmap bitmap=BitmapFactory.decodeStream(in);//设置msg对象Message msg=Message.obt
2016-09-14 10:20:52
276
原创 【HttpUrlConnection】网址源码查看器(1)
【1】获取布局id【2】设置点击事件【3】由于在主线程中不允许访问网络 则需要新建一个子线程new Thread(){public void run(){}}.start();【4】在子线程中操作【4.1】从EditText中获取网址路径【4.2】新建一个URL对象【4.3】拿到httpurlconnectio
2016-09-14 10:19:12
641
原创 初始加载时edittext不自动获取焦点的方法
在做一个搜索功能时,刚进入界面,edittext直接自动获取焦点,这显然不是我想要的。那么问题来了:如何关闭EditText自动获取焦点的?尝试了好几个方法,在Java代码添加focus控制,在xml文件中的EditText控件中添加focusable约束等,都不适用于我的这个问题。解决办法:在xml文件中EditText外框架里添加上android:focusable="true"
2016-07-04 21:50:06
17087
5
原创 virtual box安装出现弹出系统找不到指定的路径解决办法
今天在安装virtual box时,直接点击安装文件VirtualBox-4.1.20-80170-Win弹出系统找不到指定的路径的错误。这就很郁闷了,直接贴出解决办法:1.打开运行,输入cmd,弹出命令提示符窗口;2.直接将virtual box文件拖动到cmd窗口中,窗口中会显示该文件的路径,(注:此时不要急着摁回车)在命令后添加“ -extract -path c:\vbox”;(-
2016-07-02 11:16:17
11971
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人