iccool-cc-CSDN博客

原创 zabbix从入门到精通

文章目录1. zabbix概念1.1 zabbix概况1.2 zabbix采集方式1.3 架构1.4 数据流1.5 监控总结2. zabbix安装2.1 环境检查2.2 安装zabbix2.2.1 安装yum源2.2.2 安装zabbix2.2.3 修改配置2.2.4 启动zabbix2.2.5 浏览器web界面安装2.2.6 修改默认语言2.2.7 用户管理3. zabbix使用3.1 添加监控主机3.1.1 安装zabbix-agent3.1.2 zabbix-server测试3.1.3 web端添加被

2021-01-22 09:48:59 1919 1

原创爬取北大bbs论坛——鹊桥板块列表（二）

文章目录前言一、分析页面帖子列表单个帖子下一页处理二、代码实现三、结果前言继上一篇模拟用户登录成功后，那么我们能够以内部成员访问一些游客不能访问的内容了，其中便有此次项目中想要爬取的版块——鹊桥板块。鹊桥(PieBridge)版旨在为北大在校学生、校友及亲人朋友提供一个包容、和谐、自由的寻找伴侣的平台。板块中发布了许多交友贴(列表格式)，那么把这些列表信息爬取下来，保存在MongoDB中...

2018-11-19 16:37:48 3289 1

原创爬取北大bbs论坛——模拟登陆（一）

文章目录一、分析页面二、Postman模拟登陆请求三、Python代码实现一、分析页面首次登录到北大bbs首页，会发现是以游客身份登录的，只能访问部分内容；页面左侧有登录模块，找个账号登录进去，就能看到个人登录信息以及内部人员能够访问的模块了。我们需要分析点击“登录”按钮，触发什么操作？点开js，代码如下function() { var t = ($(".have-log...

2018-11-16 16:38:24 3488

原创 Python3 图片文字识别翻译——调用百度AI、百度翻译和有道翻译的API

文章目录图片文字识别翻译——Python+百度AI+百度翻译+有道翻译一、演示二、 API准备三、图片文字识别——调用百度AI文字识别API四、文字翻译1. 百度翻译请求解析返回数据2. 有道翻译(与百度翻译类似)请求解析返回数据五、获取剪贴板的图片六、程序界面设计七、功能实现1. 按照设计图填充控件（1）窗体初始化（2）主体框架（3）左边Frame填充（4）中间Frame填充（5）右边F...

2018-10-25 15:48:40 6863 4

原创 Python定时爬取某网页内容

前言昨天小伙伴说他最近在投资一个类似比特币的叫ETH币(以太币)，他想定时获取某网站以太币的“购买价格最低”和“出售价格最低”，他自己没学过Python，也找到一个定时获取股票的例子(没看懂)，看我平时有在玩Python，就问我能不能做到；平时我对Python挺感兴趣的，就想试试看。思路定时任务主程序爬取网页解析网页获取所要内容存入表格绘图异常处理如何实

2017-12-13 17:08:12 20284

原创 CentOS 7.0安装spark2.2

环境CentOS 7.0hadoop 2.7.3 CentOS 7.0+hadoop 2.7搭建集群scala 2.12.4spark 2.2.0下载并安装scala下载地址：http://www.scala-lang.org/download/ 百度云地址：https://pan.baidu.com/s/1kVFyb3p 密码：nffb下载完上传的到集群，目录/data/software ，安装：

2017-12-11 15:42:14 610

原创 CentOS 7.0+flume+kafka类似日志输出存储

环境CentOS 7.0 hadoop 2.7.3 CentOS 7.0+hadoop 2.7搭建集群zookeeper 3.4.11 CentOS 7.0安装zookeeper3.4.11flume 1.8.0 CentOS 7.0安装flumekafka 1.0.0 CentOS 7.0安装kafka下载安装见前几篇文章配置修改配置文件cp flume-conf.prop

2017-12-08 10:58:09 450

原创 CentOS 7.0安装kafka

环境CentOS 7.0 hadoop 2.7.3 CentOS 7.0+hadoop 2.7搭建集群zookeeper 3.4.11 CentOS 7.0安装zookeeper3.4.11kafka 1.0.0 下载安装下载官网：http://kafka.apache.org 可选择左侧的download 或者 quickstart ，下载kafka百度云地址：https://p

2017-12-07 11:22:50 1917 2

原创 CentOS 7.0+flume类似日志输出到HDFS

环境CentOS 7.0hadoop 2.7.3flume 1.8.0下载并安装见上一篇博客: CentOS 7.0安装flume配置添加hadoop目录hadoop fs -mkdir -p /test/flume/output添加本地日志文件cd /tmptouch flume_test.logecho 'hello world' >> flume_test.log修改flume-confc

2017-12-05 17:13:40 400

原创 CentOS 7.0安装flume

环境CentOS 7.0hadoop 2.7.3flume 1.8.0下载并安装下载下载地址：http://flume.apache.org/download.html百度网盘：https://pan.baidu.com/s/1dFCSh3N 密码：wnko也可以通过wget直接下载:wget http://mirrors.hust.edu.cn/apache/flume/1.8.0/apache-

2017-12-05 16:49:54 1919

原创为wget添加代理

前言脑袋抽了，前两天说wget用不了，所以软件包都是直接从本地下载，然后传到集群机器上的。今天才想起来，忘记给wget设置代理了，￣□￣｜｜方法这只是添加代理的其中一种方法vi /etc/wgetrc观察到# You can set the default proxies for Wget to use for http, https, and ftp.# They will override t

2017-12-05 10:20:12 1873

原创 linux安装Tomcat(CentOS 7)

下载tomcat下载地址：http://tomcat.apache.org/百度网盘：https://pan.baidu.com/s/1pLmPtiz 密码：lqnm解压安装本人是通过CentOS的Firefox浏览器直接下载的，文件保存在/home/iccool/下载目录下，将文件移动到/data/software目录下cd /home/iccool/下载mv apache-tomcat-8.

2017-12-04 16:11:35 210

原创 linux安装idea(CentOS 7)

下载idea(linux 社区版)下载地址：https://www.jetbrains.com/idea百度网盘: https://pan.baidu.com/s/1qXNeNec 密码：xpzh解压安装找到idea的文件目录本人是通过CentOS的Firefox浏览器直接下载的，文件保存在/home/iccool/下载目录下，将文件移动到/data/software目录下cd /home/icc

2017-12-04 15:54:30 7752

原创 CentOS 7.0安装HBase1.3.1

环境CentOS 7hadoop 2.7.3hbase 1.3.1zookeeper 3.4.11下载HBase并上传解压下载链接：https://mirrors.tuna.tsinghua.edu.cn/apache/hbase/百度云链接：https://pan.baidu.com/s/1i4HTwVz 密码：p7k3上传已下载的hbase压缩包到/data/software 目录mkdir -

2017-12-04 14:57:33 904

原创 CentOS 7.0安装zookeeper3.4.11

环境CentOS 7hadoop 2.7.3zookeeper 3.4.11下载zookeeper下载链接：https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/百度云下载链接：https://pan.baidu.com/s/1nuDb1R7 密码：ekj2配置上传的到集群机器上本例中我放在了 /data/software 目录下新建目录解压m

2017-12-04 10:49:17 757

原创 CentOS 7.0安装hive2.1.1

环境CentOS 7hadoop 2.7.3hive 2.1.1准备下载hivehive官方下载地址： http://www.apache.org/dyn/closer.cgi/hive/然后上传到namenode机器上说明：由于我用不了wget，能用wget的可以选择以下方法下载hive-2.1.1wget http://mirrors.ustc.edu.cn/apache/hive/hive-

2017-12-01 16:25:03 401

原创 CentOS 7.0安装mysql5.7.20

环境CentOS 7mysql 5.7.20卸载自带的mariadb检查rpm -qa|grep mariadb如果有mariadb，卸载rpm -e mariadb-libs-5.5.44-2.el7.centos.x86_64 --nodepsrpm -qa|grep mariadb下载安装mysql1. 获取mysql的yum源在mysql官网获取rpm：https://dev.mysq

2017-11-30 17:06:58 295

原创 CentOS 7.0+hadoop 2.7搭建集群

准备工作准备环境下载链接：VM12 : https://pan.baidu.com/s/1hsvkHe8 密码：ycanCentOS 7.0：https://pan.baidu.com/s/1nvUmu05 密码：ktqhjdk1.8: https://pan.baidu.com/s/1bo69W67 密码：3volhadoop2.7.3: https://pan.baidu.com/s

2017-11-29 16:25:14 805

原创【Scrapy】Scrapy在Python3下报错：“cannot import name '_win32stdio'”解决办法

由于之前都是在Python2的环境下用的Scrapy，然后最近在用Python3的环境，今天试着用Scrapy启动一个爬虫的时候居然报错。操作scrapy crawl demo报错Traceback (most recent call last): File "c:\python34\lib\site-packages\scrapy\commands\crawl.py", line 57

2017-10-19 10:24:05 3372

原创【Python】将数字转成英文

还是核心编程里的一道题第一次想到的方法（复杂）：#encoding=utf-8#输入的数num=input('Input number:')#列表lists=[ 'zero', 'one', 'two', 'three', 'four', 'five', 'six', 'seven', 'eight

2017-04-12 10:09:07 14308 1

原创 Python的浅拷贝和深拷贝

学习《Python核心编程（第二版）》ing，正好学习到这一块，顺便写一篇文章加深理解。直接贴学习笔记：在python中，对象赋值实际上是对象的引用。也就是说，当你创建一个对象，然后把它赋给另一个变量的时候，python并没有拷贝这个对象，而只是拷贝了这个对象的引用。1.浅拷贝假设创建一个person对象，拷贝两个对象：假设是一对夫妻，hubby和wifey

2017-04-11 16:14:28 284

原创【学习python兴趣起源】计算字符串中字母出现的次数

偶然间看到一个非常简短的小题目——计算字符串中各个字符出现的次数有贴出来的代码：s = 'here is a sample of english text' d = {} for c in s: d[c] = (d[c] + 1) if (c in d) else (1) print d还有：dict((x, len(list(l))) for x,l in itertools

2017-04-01 09:30:46 9719 1

原创【mysql】第一次启动mysql提示错误 NET HELPMSG 3534

mysql版本：mysql-5.7.15过程：安装和配置完成后，启动mysql时出现错误错误信息：请键入 NET HELPMSG 3534 以获得更多的帮助。解决方案：如果你已经安装了服务（Service successfully installed.），请先将服务移除， mysqld -remove 然后按以下步骤操作：1. 在管理员权限的cmd窗口中同时

2017-03-06 16:40:44 13255 1

原创在使用Telnet连接localhost时所遇到的问题及解决方案

在通过dos窗口使用命令行连接服务器：telnet localhost 8080 时；1、出现 ‘telnet’ 不是内部或外部命令，也不是可运行的程序或批处理文件。原因：因为本机的Telnet客户端默认是关闭的，所以我们要手动打开解决方案：打开控制面板–>程序–>打开或关闭Windows功能–>勾选“Telnet客户端”–>确定2、启用Telnet客户端后，发现输入字符串无法显示，只显示

2017-02-06 23:27:54 16338

原创【HttpUrlConnection】自定义StreamToString--流转换成字符串（1.1）

public class StringUtils { public static String StreamToString(InputStream in) throws IOException{ //定义一个内存输出流 ByteArrayOutputStream baos=new ByteArrayOutputStream(); //读取流 byte[] buf = new byte[1

2016-09-14 10:21:33 501

原创【HttpUrlConnection】图片缓存+缓存加密（3）

类似【网页图片查看器】，增加了缓存机制如果是初次加载图片，会缓存到data/data/包/cache/目录下；如果是加载以前的图片，会直接从缓存文件夹中加载图片。注：【1】需要访问网络操作需要：【1.1】加载权限【1.2】使用子线程【2】不能在子线程更新UI 需要使用handler思路：【1】新建一个缓存文件夹并使用B

2016-09-14 10:21:11 494

原创【HttpUrlConnection】网页图片查看器（2）

类似于网址源码查看器这里更新的内容是：如何将位图显示出来可以将流转换成bitmapInputStream in=conn.getInputStream();//将流转换成bitmap格式Bitmap bitmap=BitmapFactory.decodeStream(in);//设置msg对象Message msg=Message.obt

2016-09-14 10:20:52 276

原创【HttpUrlConnection】网址源码查看器（1）

【1】获取布局id【2】设置点击事件【3】由于在主线程中不允许访问网络则需要新建一个子线程new Thread(){public void run(){}}.start();【4】在子线程中操作【4.1】从EditText中获取网址路径【4.2】新建一个URL对象【4.3】拿到httpurlconnectio

2016-09-14 10:19:12 641

原创初始加载时edittext不自动获取焦点的方法

在做一个搜索功能时，刚进入界面，edittext直接自动获取焦点，这显然不是我想要的。那么问题来了：如何关闭EditText自动获取焦点的？尝试了好几个方法，在Java代码添加focus控制，在xml文件中的EditText控件中添加focusable约束等，都不适用于我的这个问题。解决办法：在xml文件中EditText外框架里添加上android:focusable="true"

2016-07-04 21:50:06 17087 5

原创 virtual box安装出现弹出系统找不到指定的路径解决办法

今天在安装virtual box时，直接点击安装文件VirtualBox-4.1.20-80170-Win弹出系统找不到指定的路径的错误。这就很郁闷了，直接贴出解决办法：1.打开运行，输入cmd，弹出命令提示符窗口；2.直接将virtual box文件拖动到cmd窗口中，窗口中会显示该文件的路径，(注：此时不要急着摁回车)在命令后添加“ -extract -path c:\vbox”;(-

2016-07-02 11:16:17 11971

小小时光