- 博客(22)
- 收藏
- 关注
RSS订阅原创 python四种统计图—
线形图import matplotlib.pyplot as mplimport numpy as np#定义数据ypoints=np.array([1,3,9,25,12,32,5,1])#数据插入到图表# mpl.plot(ypoints,'o:g')# mpl.plot(ypoints,marker='o',linestyle=':',color='g')mpl.plot(ypoints,marker='o',ls=':',c='r')mpl.plot(..
2022-05-09 14:46:43
348
原创 数据库复习-
三个数据类型：字符串：varchar,char日期：data,time数值：int,float,double增删改查：增：insert into aaa(name,age)values("zhaojie",12);删：delete from aaa where name = "zhaojie";改：update aaa age = 19 where name = "zhaojie";查：select * from aaa;//查...
2022-05-09 14:45:25
61
原创 MapReduce-
Map类import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.io.LongWritable;import org.apache.hadoop.io.Text;import org.apache.hadoop.mapreduce.Mapper;import java.io.IOException;/**LongWritable 偏移量 long,表示改行在文件中的位置，而不是行号* ...
2022-05-09 14:43:40
152
原创 mysql-
CREATE TABLE t( id INT, num INT DEFAULT 0, NAME VARCHAR(20))DELIMITER $CREATE PROCEDURE t()BEGINDECLARE i INT DEFAULT 0;DECLARE f INT DEFAULT 1;WHILE(i<1000) DO BEGIN SELECT i; SELECT f; SET i=i+1; ...
2022-05-01 23:18:41
707
原创 爬虫---
1、from lxml import etree 下载架包将变量读取为html对象，自动添加......html=etree.HTML(wb_data)2、解析数据，/:根节点data1=(html.xpath('/html'))for i in data1:print(i)3、//:子孙节点，后面的节点可以在任意位置4、写具体路径（'/html/body/div/ul'）5、循环某个属性（'('/html/body/@class')'）6、代表当前节点...代表父节
2022-05-01 23:06:04
96
原创 hadoop
删除java安装包:rpm -e --nodeps 包名2.安装JDK 2.1 filezilla上传jdk到/opt 2.2 解压jdk cd /opt tar -zxvf jdk-7u76-linux-x64.tar.gz 2.3 将java添加到环境变量中 vim /etc/profile #在文件最后添加...
2022-05-01 23:02:44
51
原创 numpy函数-
import numpy as np#创建空数组e=np.empty([3,4],dtype=float,order='C')print(e)#创建0数组z=np.zeros([4,5],dtype=int,order="C")print(z)#创建1数组o=np.ones([4,2],dtype=[('x','i1'),('y','i2')],order="C")print(o)#从已有数组中创建数组x=[1,2,3]a=np.asa...
2022-04-24 22:45:15
50
原创 Java操作hdfs-
package cn.itcast.hadoop.hdfs;import java.io.FileInputStream;import java.io.FileNotFoundException;import java.io.FileOutputStream;import java.io.IOException;import java.io.InputStream;import java.io.OutputStream;import java.net.URI;impor.
2022-04-24 22:42:27
43
原创 sql查询优化-
#避免的情况 != , < > ,is null , in not null, in , not inSELECT COUNT(*) FROM emp WHERE age IN(SELECT age FROM emp WHERE id >100);SELECT COUNT(*) FROM emp WHERE EXISTS(SELECT age FROM emp WHERE id > 100);CREATE TABLE t1(c1 INT,c2 INT)CR...
2022-04-24 22:40:23
58
原创 hbase-
#第一范式：# 保存原子性#第二范式：# 完全依赖于主键，消除部分依赖# 某个属性既依赖于主键又依赖于其他属性，不能缺失一个#第三范式：# 消除传递依赖：# 某个属性既对应了主键又对应了其他属性，可以缺失其中一个#用户名，密码，注册日期，生日CREATE DATABASE IF NOT EXISTS test DEFAULT CHARSET utf8;USE test;CREATE TABLE IF NOT EXISTS test1( y_ying...
2022-04-10 23:21:28
1800
原创 hadoop-
删除java安装包:rpm -e --nodeps 包名2.安装JDK 2.1 filezilla上传jdk到/opt 2.2 解压jdk cd /opt tar -zxvf jdk-7u76-linux-x64.tar.gz 2.3 将java添加到环境变量中 vim /etc/profile #在文件最后添加 export JAVA_HOME=/op...
2022-04-10 23:20:18
45
原创 爬虫---
import parserfrom lxml import etreewb_data=""" <div> <ul> <li class="item-0"><a href="link1.html">first item</a></li> <li class="item-1"><a hre...
2022-04-10 23:19:02
52
原创 【无标题】mysql-
#创建视图CREATE VIEW s_t(编号,姓名,性别,出生日期)ASSELECT * FROM student WITH CHECK OPTION#查询视图SELECT * FROM s_t#部分视图创建数据CREATE VIEW s_t_2(编号,姓名,性别,出生日期)ASSELECT * FROM student WHERE NAME='卫庄' WITH CHECK OPTION#约束条件 name=‘卫庄’ 下面那条张三会报错...
2022-04-03 20:39:54
48
原创 Linux-
只读变量语法：readonly变量名接收用户输入语法：read-p删除变量 语法：unset变量名path条件判断句if condition --如果thencommand1command2...--执行else --否则command --执行关系运算符运算符说明举例-eq检测两个数是否相等，相等返回true。[$a-eq$b]返回false。-ne检测两个数是否相等，不相等返回...
2022-04-03 20:36:26
42
原创 爬虫---
命令行下载jar包pip install xxxxxx -i http://pypi.douban.com/simple --trusted-host pypi.douban.com使用上面的命令下载wheel、lxml、twisted、pywin32、scrapy五个jar包，xxxxxx内填包名命令行创建项目scrapy startproject yc yc是项目名创建py文件scrapy genspider baidu www.baidu.com baidu是文件名 文件.
2022-04-03 20:31:41
36
原创 shell-
一、Shell基础1、什么是shell？Shell（外壳）是一个用C语言编写的程序，它是用户使用Linux的桥梁。Shell既是一种命令语言，又是一种程序设计语言。Shell是指一种应用程序，这个应用程序提供了一个界面，用户通过这个界面访问操作系统内核的服务。2、创建文件vim 文件名.sh3、进入编辑模式#!/bin/bash 首行必要3、echo 'Hello World' 输出语句4、保存退出5、设置运行权限ch...
2022-03-20 23:29:34
71
原创 SQL---
1、单独创建索引create index 索引名 on 表名(要创建索引的列名);create index index_name on emp(emp_name);2、修改表结构创建索引alter table 表名 add index 索引名(要创建索引的列名);alter table emp add index index_salary(salary);3、删除索引drop index 索引名 on 表名;drop index index_name ...
2022-03-20 23:23:12
49
原创 爬虫---
from urllib import requestimport re#定义urlpage=100url='http://tieba.baidu.com/f?kw=%E6%AE%B5%E5%AD%90&ie=utf-8&pn='+str(page)try: #定义请求头 headers={'user-agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (K...
2022-03-20 23:09:22
47
原创 sql--
爬虫基础-龙运堂CREATE DATABASE IF NOT EXISTS test DEFAULT CHARSET utf8;USE test;CREATE TABLE IF NOT EXISTS websites2(id INT PRIMARY KEY AUTO_INCREMENT,NAME VARCHAR(50) NOT NULL,url VARCHAR(50) NOT NULL,alexa INT NOT NULL COMMENT '网站排名',country V...
2022-03-14 00:09:56
56
原创 linux--指令
1、ls指令含义：ls（list）用法1：#ls含义：列出当前工作目录下的所有文件/文件夹的名称用法2：#ls 路径含义：列出指定路径下的所有文件/文件夹的名称关于路径（重要）：路径可以分为两种：相对路径、绝对路径相对路径：相对首先得有一个参照物（一般就是当前的工作路径）；相对路径的写法：在相对路径中通常会用到2个符号“ ./”【表示当前目录下】、“../”【上一级目录下】。绝对路径：绝对路径不需要参照物，直...
2022-03-14 00:08:23
151
原创 sql--
CREATE DATABASE IF NOT EXISTS test DEFAULT CHARSET utf8;USE test;CREATE TABLE IF NOT EXISTS websites2(id INT PRIMARY KEY AUTO_INCREMENT,NAME VARCHAR(50) NOT NULL,url VARCHAR(50) NOT NULL,alexa INT NOT NULL COMMENT '网站排名',country VARCHAR(50)...
2022-03-14 00:06:09
35
原创 爬虫基础-龙运堂
#1from urllib import request#构造一个请求req=request.Request("http://www.baidu.com")#打开网页resp = request.urlopen(req)#读取网页的内容print(resp.read())#2#打开网页reponse=request.urlopen("http://www.baidu.com")#read方法读取网页内容print(reqonse.read())2、添加da
2022-03-13 23:50:58
53
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人