- 博客(45)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 numpy 的基本使用
①创建行向量# 方法一a1 = np.array([[1, 2, 3, 4]])print(a1.shape)# >> (1, 4)# 方法二a2 = np.array([[1, 2, 3, 4]]).reshape(1, -1)print(a2.shape)# >> (1, 4)②创建列向量# 方法一b1 = np.array([[5], [6], [7], [8]])print(b1.shape)# >> (4, 1)# 方法
2022-02-26 13:30:41
770
原创 青龙面板安装
首先执行：wget -q https://raw.githubusercontents.com/Oreomeow/VIP/main/Scripts/sh/ql.sh -O ql.sh && bash ql.sh报错后执行：sudo chmod 666 /var/run/docker.sock再执行一遍：wget -q https://raw.githubusercontents.com/Oreomeow/VIP/main/Scripts/sh/ql.sh -O ql.sh &am
2022-02-22 19:06:07
416
原创 Python面向对象
1. __init__()函数：'''类A中的 __init__()函数相当于默认构造函数在实例化A的对象时一定会被调用，这里实例化的时候将str进行初始化赋值，这样类A中的其他函数就可以通过self进行调用参数str'''class A(object): def __init__(self, str): self.str = str print("类A中的初始化函数") def fun(self): print(f'.
2021-12-25 01:12:48
526
原创 Zotero 基本配置(详细）
需要路径添加的文件（1）translators_CN打包文件：可以解析知网等网页抓取PDF文档需要配置的插件：（1）jasminum-v0.1.1.xpi：可以自动抓取本地文献的PDF元数据（摘要等信息）（2）zotfile-5.0.16: 一键自定义规则重命名PDF文件名，并指定文件夹存放，不使用zotreo的存放规则教程：①安装zotreo：Zotero | Your personal research assistant②安装zotreo 浏览器插件（选择自己常用的
2021-11-06 11:47:01
3178
1
原创 PyTorch环境配置
1. 打开Anaconda中的base(root)环境，进入Terminal2.命令行中输入命令，根据自己python版本创建基于python的pytorchconda create -n pytorch python=3.83.查看创建的环境的位置conda info --envs4.进入创建的pytorch环境conda activate pytorch此时你的命令行是这样的：5.打开PyTorch官网，Start Locally | PyTorch...
2021-07-20 10:37:53
919
原创 Python + Selenium（知乎50条热榜以及热榜内答案信息存储）
import reimport timeimport pymysqlimport requestsfrom bs4 import BeautifulSoup# 获取热榜的HTMLdef GetContends(url): cookie = '这里填写你的cookie' headers = { 'User-Agent': 'Mozilla/5.0', 'Cookie': cookie } html = requests.get.
2021-07-18 21:49:53
204
原创 Python + selenium爬取B站用户信息(iP池+pymsql存储)
import bs4import jsonimport timeimport pymysqlimport requestsfrom bs4 import BeautifulSoupfrom selenium import webdriverfrom selenium.webdriver.chrome.options import Optionsdef getPage(mid, n, href): headers = { 'User-Agent': 'Mozil.
2021-07-18 21:45:17
2125
3
原创 Python + selenium 爬取淘宝网(销量，店铺名，价格等)
import timefrom selenium import webdriverfrom lxml import etreedef Run(keywords, numPage): # 构造无头的ChromeDriver option = webdriver.ChromeOptions() option.add_argument('headless') driver = webdriver.Chrome(executable_path='D:\\Project\\.
2021-07-18 21:31:31
1537
原创 Pyspark安装
①准备工作：spark-2.1.0-bin-hadoop2.7.tgz 链接：https://pan.baidu.com/s/17DvaJISJ3TFFR67xwGdqxw 提取码：mkfswinutils.exe 链接：https://pan.baidu.com/s/13pLTobO5r3SQTmVowrIWiA 提取码：pl3zhadoop-2.7.1.tar.gz 链接：https://pan.baidu.com/s/1VZteqilTSpcMOg0r0Bw2Fw ...
2021-04-19 18:17:01
726
原创 MySQL：RNAK(), DENSE_RANK(), ROW_NUMBER()
RNAK(), DENSE_RANK(), ROW_NUMBER() 需要和over搭配来使用，都是增加行号，只不过行号表示各有不同创建一个表格：create table t_student( sno int(10) primary key, sname varchar(20), score int(10));insert into t_student(sno, sname, score)values (101, 'zhang', 77), .
2021-01-05 15:13:58
190
原创 C语言:struct和typedef
1、没有设置结构体名，相当于一个匿名结构体，没有结构体名，后面就没法用该结构体定义新的变量。#include<stdlib.h>#include<stdio.h>struct{ int x; int y;}Test;int main(){ Test.x = 100; printf("%d",Test.x);} 2、设置了结构体名a，就可以利用struct a Test2, 来构造一个新的结构体变量Test2，相比上一个的优点是可以直接在main函数里继续
2020-07-12 17:20:30
1700
2
原创 Python爬取MZT网站：多进程处理
from multiprocessing import Processimport requestsfrom urllib import requestfrom bs4 import BeautifulSoupimport reimport osimport timedef run(name): print(">>>启动子进程：" + str(os.ge...
2020-07-12 15:58:11
2350
1
原创 一、TensorFlow2.0——简单多层感知器
以下代码均在jupyter notebook内实现（1）引包（2）导入数据（3）查看数据（4）构造散点图（5）取TV， radio， newspaper 3列值作为输入值x, 取sales列作为输出值y（6）使用顺序模型，定义多层感知器， 第一层：Dense完成初始化变量（自定义10个单元隐藏层）越大拟合能力越强 ...
2019-10-05 14:03:14
496
1
原创 一、TensorFlow2.0——简单线性回归
以下代码均在jupyter notebook内实现（1）引包import pandas as pdimport tensorflow as tffrom matplotlib import pyplot as plt%matplotlib inline # 魔法函数（2）使用pandas库导入数据data = pd.read_csv('F://Jupyter...
2019-10-05 13:31:45
2572
1
原创 pip豆瓣源安装方法
pip install requests re tensorflow -i https://pypi.doubanio.com/simple
2019-10-04 15:27:13
2073
原创 Linux或者Windows上如何安装TensorFlow？
Windows版：tensorflow-2.0.0-cp36-cp36m-win_amd64.whl 下载：百度网盘：https://pan.baidu.com/s/1TMfTsDbip2S_iV8ZqfBlQw 提取码：1wcmLinux版：tensorflow-2.0.0-cp36-cp36m-manylinux2010_x86_64.whl 下载：百度网盘：https://...
2019-10-04 12:18:36
481
原创 Pandas基本使用
#测试文本(Test.txt) City Time Local 北京 2017 海淀区 阜阳 2018 颍上区 宿州 2019 埇桥区#读取文本类型数据，构建DataFramepd.read_table("D:/Test.txt", sep=',', encoding = "UTF-8", ...
2019-09-29 13:46:54
304
原创 为什么要先commit，然后pull，最后再push？而不是commit然后直接push？
转载：https://blog.csdn.net/Sweet__Cat/article/details/79397629
2019-09-02 21:21:14
1820
转载 监督学习和无监督学习区别
转自：https://blog.csdn.net/u010947534/article/details/82025794
2019-08-02 18:13:38
228
原创 通过flume将IDEA控制台信息上传到hdfs中
① IDEA中resources的创建和resources的文件参考：https://blog.csdn.net/YiXiao1997/article/details/96479211②在main文件夹下创建java文件：代码如下package pers.zzp.Demo;import java.text.SimpleDateFormat;import java.util.Date...
2019-07-19 14:33:09
224
原创 使用IDEA通过flume上传本地文件到Hdfs
①如果IDEA创建maven文件时没有resources，需要新建一个resources在main文件夹中如果没有：File -> Project Structure -> Modules ->click your module -> Sources(Tab) -> 选择你的resource folder，点Resources②在resources中添加l...
2019-07-19 14:20:07
1112
1
原创 shell脚本写hive代码
①创建文件：vi hivesql.sh②写入文件：#!/bin/bashdatetime=$(date '+%Y%m%d%H')source /etc/profilehive -e 'select *from demo.movie limit 10'③调用这个脚本：sh hivesql.sh
2019-07-18 10:36:57
2651
原创 CentOS 6.5 minimal版本MySQL权限问题
报错：Caused by: javax.jdo.JDOFatalDataStoreException: Unable to open a test connection to the given database. JDBC url = jdbc:mysql://192.168.58.141:3306/hive?createDatabaseIfNotExist=true, username = r...
2019-07-18 10:27:41
222
原创 CentOS 6.5 minimal版本离线本地安装MySQL问题
①CentOS 6.5minimal版本没有安装perl，首先使用yum 安装Perl命令：sudo yum install perl②安装MySQL-server-5.1.73-1.glibc23.x86_64.rpm 和MySQL-client-5.1.73-1.glibc23.x86_64.rpm文件下载： https://pan.baidu.com/s/1nXW...
2019-07-18 10:24:21
208
原创 CentOS 7 版本安装JDK问题
①查看系统自带jdk：rpm -qa | grep java②使用删除命令：rpm -e --nodeps **********例如：rpm -e --nodeps java-1.8.0-openjdk-1.8.0.102-4.b14.el7.x86_64 rpm -e --nodeps java-1.8.0-openjdk-headless-1.8.0.102-4.b...
2019-07-18 10:10:58
209
原创 CentOS 6.5 minimal版本开启SSH服务
①使用yum安装必要服务：yum install openssh-server②输入重启命令：systemctl restart sshd③加入开机自启：systemctl enable sshd
2019-07-18 10:07:40
552
原创 CentOS 6.5 minimal版本安装问题
第一个CentOS安装后网络问题①vi /etc/sysconfig/network-scripts/ifcfg-eth0修改两个配置文件：（1）ONBOOT=yes（2）NM_CONTPROLLED=no②重启network：service network restart③查看IP，ifconfig...
2019-07-18 10:01:31
332
转载 HDFS Shell基本命令
转载自：http://hadoop.apache.org/docs/r1.0.4/cn/hdfs_shell.html
2019-07-18 09:48:00
650
转载 Python Numpy库教程
转载自：https://blog.csdn.net/xjl271314/article/details/80409034
2019-07-17 19:26:00
208
原创 搭建hadoop完全分布式
①我安装的是centos6.5，jdk使用的是jdk1.8.0_211在/usr/local/ 路径下建立java文件夹，将解压过的jdk1.8.0_211移动到java文件夹里面②配置java环境变量vi /etc/profile在最后一行添加export JAVA_HOME=/usr/local/java/jdk1.8.0_211export PATH=.:$JAVA...
2019-07-17 19:19:04
194
原创 Python版本3.7.3 pip安装scrapy1.6.0
①安装过python3.7.3后，并配置好pip的环境变量，以下需要使用pip进行安装②windows命令行中输入pip install scrapy，然后会报错：（错误很长）③不用管这个错误，继续安装 wheelpip install wheel④wheel安装好之后，在安装一个非常重要的文件！https://pan.baidu.com/s/1RwQcFxRDvwhF6E...
2019-07-17 19:15:35
3556
2
原创 python:简单的使用scrapy框架进行爬取和下载
我将使用scrapy框架进行爬取 http://www.imooc.com/course/list 这个网站的 第一页的封面图片 ①首先使用命令行生成一个scrapy模板，要提前cd到需要存放的路径 （我这里放的是E盘，sc...
2019-05-29 22:12:55
1048
原创 Python使用multiprocessing模块实现多进程（demo）
from multiprocessing import Processimport timedef run(str): for i in range(100): #os.getpid获取进程号 print("当前进程"+str(os.getpid())+time.ctime()) time.sleep(1)if __name__ ==...
2019-05-03 23:05:54
740
原创 Python：Pycharm如何使用scrapy框架做爬虫？
因为入门python以来一直使用pycharm，所以对着黑白的DOS不习惯，所以此次来实现使用pycharm进行实现使用scrapy框架①pip install scrapy(首先安装scrapy第三方包) 不会安装的：参考本人另一篇博文：https://blog.csdn.net/YiXiao1997/article/details/96345737②新建第一个scrapy项目，先cd到...
2019-02-21 00:35:39
10048
2
原创 如何通过pip安装第三方库？
①将D:\Python3.6.2\Scripts 路径添加到环境变量中，在命令行输入python，出现python的版本信息就可以了。②在命令行中执行Scripts下的easy_install.exe。直接输入D：就切换到D盘下了。然后执行命令“Python3.6.2\Scripts\easy_install.exe pip”，然后Scripts文件夹下会出现一系列和pip有关的文件。...
2019-02-15 13:27:27
20288
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人