- 博客(34)
- 收藏
- 关注
RSS订阅原创 IP地址ABC类
以下表列出留用的内部寻址地址A类 10.0.0.0 --10.255.255.255B类 172.16.0.0--172.31.255.255C类 192.168.0.0--192.168.255.2551. A类地址⑴ A类地址第1字节为网络地址，其它3个字节为主机地址。另外第1个字节的最高位固定为0。⑵ A类地址范围：1.0.0.1到126.255.255.254。⑶ A类地址中的私有地址和保留地址：①10.0.0.0到10.255.255.255是私有地址（所谓的私有地址就是在互联网上
2020-07-27 18:14:59
24028
原创 C# HomeWork
using System;using System.Collections.Generic;using System.Text;namespace AVG{class Program{static void Main(string[] args){double [] myArray = new double[10];double sum = 0;double avg ...
2019-10-13 00:23:58
219
原创 python中的相关问题与解决
1.pip 安装出现ERROR: Command errored out with exit status 1，如下一连串红色，可观察最后一段ERROR: Command errored out with exit status 1: 'f:\python3.5.2\python.exe' -u -c 'import sys, setuptools, tokenize; sys.a...
2019-10-08 09:29:51
655
原创 mysql的相关问题与解决
1.查看Windows下MySQL的文件路径，进入数据库，使用如下方法：select @@basedir表示的是查看MySQL在本地的安装路径select @@datadir表示的是MySQL数据库文件存放的路径2.在创建账号时遇到了“ERROR 1044 (42000): Access denied for user 'root'@'localhost' to data...
2019-10-08 09:29:28
271
原创 宝塔部署django项目的过程
一. 安装python（这里安装的版本为python3.5.2）1.安装相关包yum install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gcc make2.编译安装python3安装方式：可以去官网下载编译安装包或者是直接执行以下命令...
2019-08-22 23:04:21
4676
3
原创 数据存储
用解析器解析出数据之后，接下来就是数据存储。保存的形式可以多种多样，最简单的形式是直接保存为本地文件，如TXT，JSON，CSV等。另外，还可以保存到数据库中，如关系型数据库Mysql，非关系型数据库MongoDB，Redis等TXT文本存储这里是用requests提取知乎的“发现”页面，然后将热门话题的问题，回答者，答案全文提取出来，然后利用python提供的open()方法打开一个...
2019-08-22 21:40:34
3561
原创 requests
requests属于第三方库，也是python默认不会自带的库，需要手动安装pip安装：pip3 install requests实例引入：requests中可以使用get请求页面requests其他的请求类型仍然可以使用一句话来完成r = requests. post(' http://httpbin.org/post ’)r = requests.put...
2019-08-15 11:10:57
313
原创 MyISAM和Inondb
MyISAM和Innodb的区别：Innodb支持事务，MyISAM不支持事务。如果在一些列增删改的时候只要哪个出错还可以回滚还原，而MyISAM就不可以。 Innodb适合频繁修改以及涉及安全性较高的应用，MyISAM适合查询和插入为主的应用。 Innodb支持外键，MyISAM不支持外键 Innodb需要指定，MyISAM是默认的引擎 Innodb不支持FULLTEXT类型的索引...
2019-08-14 11:01:08
891
原创 数据结构和算法（一）
推荐博客：https://www.cnblogs.com/fwl8888/p/9315730.html二分查找选择排序第一次从待排序的数据元素中选出最小的一个元素，存放在序列的起始位置，然后再从剩余的未排序元素中寻找到最小元素，然后放到已排序的序列的末尾。以此类推，直到全部待排序的数据元素的个数为零。冒泡排序1.比较相邻的元素。如果第一个比第二个...
2019-08-14 10:59:04
1774
原创 Beautiful Soup
Beautiful Soup是python的一个HTML或XML的解析库，可以用它来方便地从网页中提取数据Beautiful Soup提供一些简单的，python式的函数来处理导航，搜索，修改分析数等功能。它是一个工具箱，通过解析文档为用户提供需要抓取的数据，不需要多少代码就可以写出一个完整的应用程序Beautiful Soup自动将输入文档转换为unicode编码，输出文档转换为UTF-...
2019-07-22 17:26:50
339
原创 XPath
XPath，全称XML Path Language ，即XML路径语言，它是一门在XML文档中查找信息的语言，。它最初是用来搜寻XML文档的，但是它同样适用于HTML文档的搜索XPath常用规则表达式 描述 nodename 选取此节点的所有子节点 / 从当前节点选取直接子节点 // 从当前节点选取子孙节点 . 选取当前节点...
2019-07-18 16:01:39
3412
原创 requests抓取猫眼电影
1.安装requests库 pip install requests2.抓取的页面url ：https://maoyan.com/board/43. 页面分页显示可以发现页面的 URL 变成 ：https://maoyan.com/board/4?offset=10，比之前的 URL 多了一个参数，那 就是 offset=10 ，而目前显示的结果是排行 II 名的电影，初...
2019-07-17 17:20:43
972
原创 urllib
urllib2在python3中使用urllib.request替代python2中的格式python3中的书写：from urllib import requestresponse = request.urlopen("http://www.baidu.com") #实现目标对url的访问，并获取响应response.getcode() #获取相应的状态码r...
2019-07-13 15:29:30
420
原创 python中的random模块
random()方法返回随机生成的一个实数random()是不能直接访问的，需要导入random模块，然后通过random静态对象调用该方法常见的函数如下：random.random() 产生[0,1)之间的随机浮点数 random.randint(a,b) [a,b]之间的整数 random.uniform(a,b) 随机生成下一个实数，在[a,b）范围内...
2019-07-07 21:05:33
271
原创 爬虫
请求网站并提取数据的自动化程序基本流程：1.发起请求，通过HTTP库向目标站点发起请求，即发送一个request,请求可以包含额外的headers等信息，等待服务器响应2.获取响应内容，如果服务器能正常响应，会得到一个Response,Response的内容便是所要获取的页面内容，类型可能有HTML，Json字符串，二进制数据等类型3.解析内容，得到的内容可能是HTML，可以用正则...
2019-07-06 15:26:16
123
原创 类
类的三大特性：封装，继承，多态封装：就是把客观事物封装成抽象的类，并且类可以把自己的数据和方法只让可信的类或者对象操作，对不可信的进行信息隐藏。继承：可以让某个类型的对象获得另一个类型的对象的属性方法。多态：一个类实例的相同方法在不同情形有不同表现形式。五大基本原则单一职责原则：一个类的功能要单一，不能包罗万象。开放封闭原则：一个模块在扩展性方面应该是开放的而在更改性...
2019-06-27 18:13:35
279
原创 cookie和session
cookiecookie是临时文件的意思，保存你浏览页面的痕迹，使得再次访问上一次的页面的时候提高网速，判断你是否登陆过这个网站，有些可以帮助你自动登陆cookie就是服务器暂存在你的电脑里的资料，通过在HTTP传输中的状态,好让服务器来辨别你的计算机。当你浏览网站的时候，web服务器会先送一小小的资料放在你的计算机上，会帮你在网站上所打的文字或者一些选择记录下来。当下次访问同一个网站的时...
2019-06-26 20:00:02
147
原创 MySQL与Oracle
MySQLMySQL是最流行的关系型数据库管理系统之一。关系型数据库将数据保存在不同的表中，而不是将所有数据放在一个大仓库中，这样就增加了速度并提高了灵活性。体积小，速度快，总体拥有成本低，并且开放源码。附加：关系型数据库和非关系型数据库的区别：关系型数据库：最典型的数据结构是表，是二维表和其之间的联系所组成的数据组织（MySQL，Oracle，sqlite,SQL server...
2019-06-26 19:20:00
3247
1
原创 TCP/IP协议
推荐一篇博客链接:https://blog.csdn.net/qq_38950316/article/details/81087809TCP／IP协议计算机为了联网，就必须规定通信协议，早期的计算机网络，都是由各厂商自己规定一套协议，互不兼容，但是为了把全世界的所有不同类型的计算机都连接起来，就必须有一套全球通用的协议，为了实现互联网这个目标，互联网协议簇就是通用协议标准。Internet...
2019-06-23 20:58:39
524
原创 linux三剑客之sed
Linux sed 命令是利用脚本来处理文本文件。sed 可依照脚本的指令来处理、编辑文本文件。Sed 主要用来自动编辑一个或多个文件、简化对文件的反复操作、编写转换程序等。参数说明：-e<script>或--expression=<script> 以选项中指定的script来处理输入的文本文件。 -f<script文件>或--file=...
2019-06-09 15:42:50
581
原创 linux三剑客之grep
grep命令的介绍grep(Globally search a Regular Expression and Print)是一种强大的文本搜索工具，它能使用特定模式匹配（包括正则表达式）搜索文本，并默认输出匹配行。Unix的grep家族包括grep、egrep和fgrep。grep是一个全局查找正则表达式并且打印结果行的命令。它的输入是一个文件或者是一个标准输入，它的输出一般是打印在屏幕上。...
2019-06-09 12:00:29
135
原创 MySQL测试题
MySQL测试题与答案解析 1、自行创建测试数据2、查询“生物”课程比“物理”课程成绩高的所有学生的学号；3、查询平均成绩大于60分的同学的学号和平均成绩；4、查询所有同学的学号、姓名、选课数、总成绩；5、查询姓“李”的老师的个数；6、查询没学过“叶平”老师课的同学的学号、姓名；7、查询学过“001”并且也学过编号“002”课程的同学的学号、...
2019-06-04 11:33:20
1262
1
原创 django的相关问题解决
问题一：django在models生成数据库表的时候报错如下：原因：django2.0后，定义外键和一对一关系的时候需要加on_delete选项，此参数为了避免两个表里的数据不一致问题，不然会报错解决方案：在上边的错误中显示line 43,修改43行内容，添加内容on_delete=models.CASCADE问题二：django最新版的urls.py不支持正则表达式...
2019-06-02 15:16:38
165
原创 linux下安装spark
准备工作1.将需要的jdk和spark安装包下载，这里都放在了/root/tools目录下jdk的安装和设置1. 解压缩安装包 tar -xvfjdk-8u151-linux-x64.tar.gz2. 进入解压缩后的jdk文件中，使用pwd查看当前工作路径，然后修改文件vi ~/.bash_profile3. ~/.bash_profile 文件的末尾加上jd...
2019-05-29 11:24:01
4947
原创 wampserver图标呈现黄色
问题：在使用wampserver的时候，启动服务的时候，图标一直显示黄色，登录phpmyAdmin登录不成功原因：wampserver设置的端口号被占用，（默认是80端口）解决方法：修改端口号1.点击wampserver图标---> 找到Apache,点击 -->找到文件httpd.conf （使用记事本或者其他编译工具打开）找到对应的如下内容，修改端口号，最好写一个不常...
2019-05-28 16:37:15
1586
原创 ubuntu连接xshell出现的问题
使用Ubuntu连接xshell的时候出现以下问题：解决方法：在ubuntu的管理员用户下，安装openssh-server（不是管理员在命令前使用sudo）安装成功后，查看是否有启动ssh,使用ps -e | grep ssh查看，如果没有启动，使用下面的service命令启动使用ifconfig再次查看ip地址，或者结合grep文本工具查询然后，在xshel...
2019-05-24 15:31:10
246
原创 MySQL的使用
数据库的基本操作显示已有数据库：show databases;创建数据库：create database 数据库名称;示例：create database 数据库名称 default charset utf8 collate utf8_general_ci;（红色标记是字符集设置）使用数据库：use 数据库名称;删除数据库：drop database 数据库名称;数据...
2019-02-24 16:27:43
270
原创 zookeeper安装部署与使用
Zookeeper安装部署安装包下载地址：https://apache.org/dist/zookeeper/1.下载安装包然后上传到主节点rz，centos上可使用 wget 地址2.解压缩：tar xf 安装包3.移动到/opt目录下mv zookeeper-3.4.12 /opt4.修改目录权限命令：chown -R hadoop:hadoop zookeeper...
2018-12-17 20:07:55
194
原创 hive实验
利用Hive对某网站的用户数据进行分析。1.创建dblab数据库 命令：create database dblab;2. 在dblab数据库下创建bigdata_user表，该表中的各种属性如下： 字段名 类型 id int uid string ...
2018-12-17 19:54:03
1473
原创 Pig安装部署与实例
安装包地址：https://mirrors.tuna.tsinghua.edu.cn/apache/pig/前提：Hadoop安装成功pig安装部署：1.将准备好的安装包上传到虚拟机rz2.查看是否上传成功3.解压缩命令：tar xf pig-0.13.0.tar.gz4.将解压缩后的文件移动到/opt目录下（因为我的一些有关实验都在这个目录下，所以...
2018-12-14 14:52:23
4223
1
原创 hive内部表与外部表
知识梳理：创建表的时候没有external的是内部表，有external的是内部表内部表删除会删除元数据以及存储数据，外部表仅删除元数据内部表默认位置/user/hive/warehouse，外部表位置自己设定内部表：1.进入hive，查看存在的数据库，使用其中的一个数据库，在其中显示已经存在的表，然后创建一个新表（表名word）2.在本地创建一个文件，内容如...
2018-12-10 21:04:32
257
原创 MySQL安装部署
安装mysql数据库软件:地址一：MySQL官网：https://dev.mysql.com/downloads/mirrors/地址二：搜狐镜像：http://mirrors.sohu.com/mysql/（此文章使用版本mysql-5.6.34-linux-glibc2.5-x86_64.tar.gz）当使用地址一，进入该网站的时候，一直往下拉，会出现以下页面，点击就可以去找（...
2018-12-07 17:21:03
194
原创 hive安装部署
前情提要：Hadoop架构成功，MySQL部署成功，关闭防火墙，关闭SELINUXMySQL安装：https://blog.csdn.net/weixin_43854358/article/details/84869110准备工作：hive安装包：http://mirrors.hust.edu.cn/apache/hive/stable-2/apache-hive-2.3.4...
2018-12-06 14:40:04
163
原创 hbase数据导入导出
hbase数据导入将本地文件(test.csv)上传到hdfs的根目录下,然后导入数据到hbase1.本地写一个文件进行测试，文件名为test.csv,内容如下：2.将文件上传到Hadoop3.查看是否上传成功（文件存在，表示成功）4.进入hbase shell 创建表 hbase-tb1-001,列族为cf5.执行文件导入（Hadoop用户中执行）格式...
2018-12-05 17:53:23
6027
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人