、Lu-CSDN博客

原创 Ubuntu18.04配置ssh服务以实现远程连接

1.连接环境虚拟机：Ubuntu18.04连接工具：SecureCRT2.配置虚拟机的SSH服务sudo apt-get updatesudo apt-get install openssh-clientsudo apt-get install openssh-serversudo service ssh start经过上面几步之后，SSH已经基本安装成功，现在查看是否安装成功：sudo ps -e | grep ssh如果能看到第二行sshd，则证明安装成功!

2021-04-07 09:38:33 3683 7

原创解决jupyter notebook无法找到虚拟环境的问题

我个人用的是anaconda3的一个python集成环境，自带jupyter notebook，但在我打开jupyter notebook界面后，却找不到对应的虚拟环境，原来是jupyter notebook只是通用于下载anaconda时自带的环境，其他环境要想使用必须手动下载一些库：1.首先进入到自己创建的虚拟环境(pytorch是虚拟环境的名字)activate pytorch2.在该环境下下载这个库conda install ipykernelconda install nb_

2020-08-16 18:00:13 13893 16

原创 scrapy手工识别验证码登录超星泛雅

我这两天一直都在学习scrapy如何保持会话状态，在网上找了好多的资料以及博主的文章，做了一点总结。这里，以超星网课登录系统作为例子讲解：1. 首先肯定是找到登录时需要提交的post表单数据，最快的办法就是查看页面源代码或者F12找出对应的form表单里面的action，如果查看的action是空值，也就是js加载的，我们则需要在网络中找出对应的提交链接请求。经过登录测试和分析，登录的url为“https://passport2.chaoxing.com/login”，并且请求方法为post，也

2020-07-13 00:19:30 1802

原创解决：elcipse启动tomcat时子容器启动失败问题

解决：七月 04, 2020 7:49:12 下午 org.apache.catalina.startup.VersionLoggerListener log信息: Server.服务器版本: Apache Tomcat/7.0.100七月 04, 2020 7:49:12 下午 org.apache.catalina.startup.VersionLoggerListener log信息: 服务器构建: Feb 11 2020 08:31:12 UTC七月 04,...

2020-07-04 19:55:24 10765

原创查看页面源代码和F12(检查)的区别

查看源代码：就是别人服务器发送到浏览器的原封不动的代码，也就是最原始的代码。(F12)检查元素：看到的就是最终的html代码。即：源代码 + 网页js渲染。【注】在源代码中找不到的代码，是在浏览器执行js动态生成的。当我们在爬虫时需要对js在加载的数据进行爬取时，就不能像普通爬虫一样进行获取了，这时通常有两种方法：1. 通过selenum自动化技术2. 通过在页面上进行抓包，获取js链接以及表单元素进行请求...

2020-07-04 17:19:47 10336

原创 xpath语法及其使用教程

一. XPATH1. 什么是xpath？xpath（XML Path Language）是一门在XML和HTML文档中查找信息的语言，可用来在XML和HTML文档中对元素和属性进行遍历。2. 常用的xpath开发工具(1)Chrome插件XPath Helper(推荐使用)。(2)Firefox插件Try XPath。3. xpath语法(核心)(1) 选取节点：XPath 使用路径表达式来选取 XML 文档中的节点或者节点集。这些路径表达式和我们在常规的电脑文件系统中看到的..

2020-07-02 11:41:14 10549

原创正则表达式的核心教程

1. 什么是正则表达式？正则表达式：按照一定的规则，从某个字符串中匹配出想要的数据，这个规则就是正则表达式。2. 正则表达式字符匹配规则(1) (字符串)匹配任意字符串text = 'hello'ret = re.match('he',text)print(ret.group())>> he(2) (.)匹配单个字符，但是不能匹配不到换行符。text = "ab"ret = re.match('.',text)print(ret.group())>&

2020-07-02 01:54:24 9042 1

原创利用requests库、beautifulsoup、pyecharts爬取中国天气网并且进行可视化

1.安装环境(1) requests库(负责数据爬取)：pip install requests(2) beautifulsoup(负责数据解析)：pip install bs4(3) pyecharts(负责数据可视化)： pip install pyecharts【补充】pyecharts在github上的仓库地址为：https://github.com/pyecharts/pyecharts ，需要的可以自行去学习，很容易上手。以安装以上环境的可忽略2.爬虫代码# .

2020-07-01 18:09:48 8563 1

原创在Ubuntu上部署Jar包

1.查看端口使用情况netstat -nlp|grep8888若显示进程，则杀死进程：kill 88882.利用传输工具将Jar传送到服务器上cd jar包所在目录# 核心语句，运行jar包nohup java -jar jar包 &不断输入端口查询命令 netstat -nlp|grep8888，若出现进程，则jar包部署成功：...

2021-05-11 09:37:44 1695

原创事务

1、事务的四大特性(ACID)1.原子性(atomicity)：事务中所有操作是不可再分割的原子单位。事务中所有操作要么全么执行成功，要么全部执行失败。2.一致性(consistency)：事务执行后，数据库状态与其他业务规则保持一致。例如转账业务，无论事务执行成功与否，参与转账的两个账号余额之和不变。3.隔离性(isolation)：隔离性是指在并发操作中，不同的事务应该隔离开来，是每个并发的事务之间不会相互干扰。4.持久性(durability)：一旦事务提交成功，事务的所有数据库操作

2021-04-20 11:07:03 312

原创 JDBC(java database connectivity)

一、代码展示(简洁版+规范版)import java.sql.Connection;import java.sql.DriverManager;import java.sql.ResultSet;import java.sql.Statement;/** * JDBC简洁写法 */public class Jdbc { // 四大参数 public static final String driverClassName = "com.mysql.jdbc.Driver";

2021-04-17 11:08:11 236

原创数据库约束

约束：约束是添加在列上的，用来约束列。一、主键约束 primary key(~)当表的某一列被指定为主键之后，该列就不能为空，不能有重复值出现，这样主键才能唯一标识一条记录。1.主键的三个特性：a.非空 b.唯一 c.被引用(被外键引用时)2.创建表时指定主键的两种方式：//方式一：create table 表名( id int(11) primary key,);//方式二：create table 表名( id int(11);

2021-04-13 09:10:28 1446

原创 MySQL备份与恢复数据库

备份：数据库----->sql语句恢复：sql语句----->数据库1.备份：数据库导出SQL脚本mysql -u用户名 -p密码数据库名>生成的.sql存储路径【例如】mysqldump -uroot -proot jianshu>D:\jianshu.sql【注】生成的.sql文件并不包含create database 语句2.备份：数据库执行SQL脚本mysql -uroot -proot -hlocalhostdrop database.

2021-04-12 21:19:12 163

原创 SQL语句大全(DDL+DML+DQL+DCL)

一.DDL(数据定义语言：用于定义和管理 SQL 数据库中的所有对象)1.DDL_数据库(1)查看所有数据库 show databases;(2)选择、切换数据库 use 数据库名;(3)创建数据库 create database (if not exists) 数据库名 (charset=utf8);(4)删除数据库 drop dabatase (if exists) 数据库名;(5)修改数据库编码 alter database 数据库名 char

2021-04-12 20:29:32 438

原创解决MySQL在命令行操作时的编码问题

1.查看MySQL数据库编码mysql -u用户名 -p密码show variables like 'char%';2.编码解释1.character_set_client：MySQL会使用该编码来解读客户端发送来的数据，如果该字段编码为utf8，那么如果客户端发送过来的数据不是utf8，就会出现乱码现象。2.character_set_results：MySQL会把数据转换成该编码后，再发送给客户端，例如该编码为utf8，那么如果客户端不使用utf8来解读，那么就会出现乱码现象。

2021-04-12 20:27:23 254

原创 SQL语言

一.DDL(数据定义语言：用于定义和管理 SQL 数据库中的所有对象)四.DQL(数据查询语言：对表中的数据进行查询)(数据操作语言：对表记录的操作（增删改）)：是一种可对数据访问权进行控制的指令)1.DQL_单表查询。2.DQL_多表查询。

2021-04-09 16:09:06 79

原创如何将爬虫爬下来的json文件格式化为标准json格式

1.首先我们先看一下爬下来的格式（当然有些方式爬下来的格式直接就是标准的，不需要修改）可以看到，一行就是一个json对象，但是可阅读性太差，当我们用json在线编辑器阅读时，发现会报错(json格式不对)，那是因为单纯地按一行来讲的话，每一行都是一个json对象是没什么问题的，但是我们整个文件有多个对象，当我们复制到json在线编辑器想整体查看时就会出问题了，那我们要做的就是将多个对象放到一个数组里面[{obj},{obj}, ... {obj}]，所以我们需要做的就是在每一个对象后添加,分隔符，并

2021-04-08 16:08:40 1060

原创 Ubuntu18.04安装MySQL5.7

1.环境安装，遇到需要输入"YES"的输入YES即可# 安装mysql服务端sudo apt-get install mysql-server# 安装mysql客户端sudo apt install mysql-client# 安装mysql相关依赖sudo apt install libmysqlclient-dev# 检查mysql当前状态sudo netstat -tap | grep mysql2.修改密码，我的账号密码都是root，按需更改// 命

2021-04-07 15:20:47 371 2

原创 Ubuntu18.04安装JDK1.8

1.去Oracle下载对应操作系统以及对应JDK版本的Jdkhttps://www.oracle.com/java/technologies/javase/javase-jdk8-downloads.html2.使用传输工具（我用的filezilla）将压缩包上传到服务器上，并且解压缩tar -zxvf jdk-8u281-linux-x64.tar.gz解压缩完成后，会出现jdk文件夹：3.更改文件名，方便使用sudo mv jdk1.8.0_281 /usr/mys

2021-04-06 20:19:07 223 3

原创 Java复习遗忘知识点

1.实例化对象的内存问题堆内存：保存的是对象的具体些信息，在程序之中堆内存空间的开辟是通过"new"完成的。栈内存：保存的是一块堆内存(对象)的地址，即通过地址找到堆内存，而后找到对象内容。...

2021-03-29 18:07:18 947 4

原创 nn.调用各种模型层详解

1.通俗讲解pytorch中nn.Embedding原理及使用：通俗讲解pytorch中nn.Embedding原理及使用 - 简书 (jianshu.com)

2020-11-22 19:47:02 416

转载 BILSTM-CRF

本文框架如下：介绍——在命名实体识别任务中，BiLSTM模型中CRF层的通用思想详细的实例——通过实例来一步步展示CRF的工作原理实现——CRF层的一步步实现过程谁可以读本文——本文适用与NLP初级入门者或者AI其他相关领域需要有的基础知识：你只需要知道什么是命名实体识别，如果你不懂神经网络，条件随机场（CRF）或者其它相关知识，不必担心，本文将向你展示CRF层是如何工作的。本文将尽可能的讲的通俗易懂。1.介绍基于神经网络的方法，在命名实体识别任务中非常流行和普遍...

2020-11-22 18:24:10 1185 1

转载深度学习解决过拟合的几种常用方法

什么是过拟合？我们都知道，在进行数据挖掘或者机器学习模型建立的时候，因为在统计学习中，假设数据满足独立同分布（i.i.d，independently and identically distributed），即当前已产生的数据可以对未来的数据进行推测与模拟，因此都是使用历史数据建立模型，即使用已经产生的数据去训练，然后使用该模型去拟合未来的数据。但是一般独立同分布的假设往往不成立，即数据的分布可能会发生变化（distribution drift），并且可能当前的数据量过少，不足以对整个数据集进行分布

2020-10-18 16:13:24 5890

Ubuntu WEB服务器环境搭建.docx

zgtqw_pyecharts.py

空空如也